dapengzhao
V2EX  ›  问与答

老大让爬取微信公众号的历史文章内容和点赞数以及评论,各位 v 友有什么建议吗?

  •  
  •   dapengzhao · Jun 13, 2018 · 2776 views
    This topic created in 3081 days ago, the information mentioned may be changed or developed.

    1 目前尝试了自己抓包,想通过自己拼接微信数据接口的方式取数据,无奈参数太多,有几个始终无法解析出来。 2 看到 git 上有大佬用中间人攻击的方法直接获取数据包,但是看不懂。

    9 replies  •  2018-06-13 17:38:39 +08:00
    ooooo
    ooooo
    Jun 13, 2018
    1
    关键词 huginn
    airyland
    airyland
    Jun 13, 2018
    2
    楼上说 huginn 是真的试过的么,如果是要爬搜狗,搜狗是没有点赞数,评论的,历史文章只有 10 条。历史文章页面是微信域的,有严格的 ip 限制。

    现在简单可行的就是用 Anyproxy 实现注入 js 脚本来实现爬取了,但是你要有足够多的账号设备,微信封不封你看心情。。
    golmic
    golmic
    Jun 13, 2018 via Android
    3
    赞同二楼。直接免费直播讲过微信公众号内容的抓取,录播视频在知识星球:数据
    golmic
    golmic
    Jun 13, 2018 via Android
    4
    anyporxy 或者 whistle
    golmic
    golmic
    Jun 13, 2018 via Android
    5
    @golmic anyproxy...
    dapengzhao
    dapengzhao
    OP
    Jun 13, 2018
    6
    @golmic 好的我去看看学习一下
    dapengzhao
    dapengzhao
    OP
    Jun 13, 2018
    7
    @golmic 去了知识星球上面有个搜索框输入了微信,视频,数据,微信视频,微信数据,都返回没有搜到。。。
    crab
    crab
    Jun 13, 2018
    8
    @dapengzhao 应该说的是公众号 pydatame 里的付费星球
    golmic
    golmic
    Jun 13, 2018
    9
    @dapengzhao #7
    @crab #8
    知识星球搜 数据 应该有的吧,星球名字叫数据,是付费的。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2522 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 30ms · UTC 11:58 · PVG 19:58 · LAX 03:58 · JFK 06:58
    ♥ Do have faith in what you're doing.