• 请不要在回答技术问题时复制粘贴 AI 生成的内容
Dora112233
V2EX  ›  程序员

有无爬虫大佬

  •  
  •   Dora112233 · Mar 5, 2025 · 4251 views
    This topic created in 614 days ago, the information mentioned may be changed or developed.
    • 最近要做一个需求,输入 某 88 店铺地址 需要拿到店铺内所有商品详细信息
    • 现在使用的 playwright+camoufox 一直弹滑动验证还一直失败,虽然有时候能成功但效率非常低
    • 有无做过的大佬处理过这些吗
    26 replies  •  2025-03-07 08:09:37 +08:00
    ynkkdev
    ynkkdev
    Mar 5, 2025
    1
    输入 某 88 店铺地址 需要拿到店铺内所有商品详细信息

    这个需求的数据,已经国内头部难度了
    freewind
    freewind
    Mar 5, 2025
    2
    能做成的估计在吃公家饭
    Dora112233
    Dora112233
    OP
    Mar 5, 2025
    3
    @freewind 不会啊,好多第三方服务商 只不过太贵,不想花钱
    Dora112233
    Dora112233
    OP
    Mar 5, 2025
    4
    @youngce 据说 pdd 和某团才是最难的
    uibobo
    uibobo
    Mar 5, 2025
    5
    哪些第三方我想知道
    wangzi1993
    wangzi1993
    Mar 5, 2025
    6
    用 RPA 抓会不会好点
    daodao
    daodao
    Mar 5, 2025
    7
    某 88 网页 DOM 命名 经常会变化策略,如果只是满足一时需求还算容易,你出价 帮你实现。
    mumbler
    mumbler
    Mar 5, 2025
    8
    大模型时代,只要能显示出来,就抓得到,效率的问题
    Dora112233
    Dora112233
    OP
    Mar 5, 2025
    10
    @daodao 老板不想出钱😮‍💨
    danbai
    danbai
    PRO
    Mar 5, 2025
    11
    又不愿意花钱 又不愿意花时间 怎么搞
    eluotao
    eluotao
    Mar 5, 2025
    12
    能拿电商数据,这个价格不贵。让你老板花钱吧。
    ntdll
    ntdll
    Mar 5, 2025
    13
    不想出钱,讨论就结束了。

    总不会想着有爬虫大佬给你白嫖吧。

    而且你找到的大佬,报价,大概率会比这些服务商更贵,定制,需要额外的成本。

    这些服务商依靠销量已经摊平了很多研发成本。
    luckyc
    luckyc
    Mar 5, 2025
    14
    你不会想白嫖大佬吧?
    hubaq
    hubaq
    Mar 5, 2025
    15
    @mumbler 笑死,大模型做不了爬虫。
    hubaq
    hubaq
    Mar 5, 2025
    16
    输入 某 88 店铺地址 需要拿到店铺内所有商品详细信息

    未登录情况下一天拿到 1W 条数据阿里给奖金 2W
    单账号登录情况下一天拿到 3000 条数据阿里给奖金 3000
    YILSLIN
    YILSLIN
    Mar 5, 2025 via Android
    17
    @Dora112233 某团确实严格,我拿 BurpSuite 内嵌浏览器登了一下账号,直接给我封号了。。。
    manhere
    manhere
    Mar 5, 2025
    18
    怀念 V587 的提示。。。这事的难度在于没法一劳永逸,永远需要和反制斗智斗勇

    爬虫大舞台,号多你就来
    dbow
    dbow
    Mar 5, 2025
    19
    做大了淘宝会起诉你,现在没有肉身在国内的商家敢这么干
    zeusho871
    zeusho871
    Mar 6, 2025
    20
    不要用 playwright ,官方版本的 playwright 会被检测,用 Drissonpage 或者 undetected-playwright
    249239432
    249239432
    Mar 6, 2025
    21
    做这个全网采集店铺数据的一年几千万收入,会告诉你方法么?
    freemoon
    freemoon
    Mar 6, 2025
    22
    你这个问题前段有时间有人问过,后来找帖子,404 了,连账号都 404 了。小伙纸,不要随时想着白嫖。
    feiniu
    feiniu
    Mar 6, 2025
    23
    好多公司就靠这数据活下来,这是能随便告诉别人的么
    himly1
    himly1
    Mar 6, 2025 via Android
    24
    试试 bright data
    CC11001100
    CC11001100
    Mar 6, 2025
    25
    @Dora112233 #10 6
    pureGirl
    pureGirl
    Mar 7, 2025 via iPhone
    26
    不就是靠风控吗,胆子大多搞几个帐号
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   944 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 145ms · UTC 20:07 · PVG 04:07 · LAX 12:07 · JFK 15:07
    ♥ Do have faith in what you're doing.