• 请不要在回答技术问题时复制粘贴 AI 生成的内容
admin7s
V2EX  ›  程序员

不懂就问 - 关于淘宝反爬!

  •  
  •   admin7s · Dec 21, 2018 · 5813 views
    This topic created in 2880 days ago, the information mentioned may be changed or developed.
    抓取淘宝商品月销量,使用淘宝页面的[detailskip.taobao.com],进行抓取。

    1.有使用稳定的代理池,每隔一段时间更换。
    2.如果对爬虫请求来说,如果我请求的每次 ip 地址都不一样,还会被 ban。那这个原因是什么?是需要带 cookie 去访问,还是淘宝使用了行为分析一类的策略?
    3.帮忙一起分析下目前淘宝的反爬策略,谢谢!
    https://detailskip.taobao.com/service/getData/1/p1/item/detail/sib.htm?itemId=583209412844&sellerId=3309239053&modules=dynStock,qrcode,viewer,price,duty,xmpPromotion,delivery,activity,fqg,zjys,couponActivity,soldQuantity,originalPrice,tradeContract&callback=onSibRequestSuccess
    7 replies  •  2020-07-10 15:21:34 +08:00
    wsh1108
    wsh1108
    Dec 21, 2018
    1
    cookie, referer
    Asice
    Asice
    Dec 21, 2018
    2
    没什么吊用,你正常浏览次数多了都要验证码
    Asice
    Asice
    Dec 21, 2018
    3
    我用浏览器插件访问,访问 1688 还行,淘宝天猫量多了要验证码
    aspromiss
    aspromiss
    Dec 21, 2018❤️1
    4
    楼主头像是长歌门?
    Leigg
    Leigg
    Dec 21, 2018 via iPhone
    5
    selenium 可解。不要用有限的头发去东西破解它的 api,对待这种恶心的网站,掏出 selenium 就是一拳。
    Leigg
    Leigg
    Dec 21, 2018 via iPhone
    6
    东西->分析
    no13bus
    no13bus
    Jul 10, 2020
    7
    @wsh1108 现在这个 cookie 每次都会变
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2537 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 05:05 · PVG 13:05 · LAX 21:05 · JFK 00:05
    ♥ Do have faith in what you're doing.