我有个微信号,加了很多有上百个微商,每天朋友圈会有很多产品图片刷屏,偶尔会让人有眼前一亮的产品,但是实在没功夫天天盯着朋友圈刷微商图片,重复率极高,看多了真的会吐。想着能不能用 python 写个爬虫,把图片采集下来,然后图片去重,然后这些图片也可以算是一笔资源。对 python 的掌握程度,基本上能实现网页的爬虫功能,但是不了解朋友圈怎么爬取。
|
1
模拟登录
|
|
3
抓包,分析接口,然后模拟请求
|
|
4
本帖的回复都是屁话,包括本回复
|
|
kwanhurOct 21, 2016
5
0 、用 replica 截取 APP 对外的请求
1 、导出 session log 2 、根据 log 的请求类型&&URL 爬取图片 |
|
6
你的朋友圈不是一个公开数据,不能直接爬取,必须模拟登陆.
有个其他的思路,用电脑做一个 wifi 热点,手机连上查看朋友圈,然后在电脑上抓包手机的请求日志,从中把图片地址都分析出来. |
|
7
模拟登陆不现实,微信没有给接口,网页版又没有朋友圈。在网络传输时截取数据是比较好的方法,但是全自动又有点难
|
|
scnaceOct 22, 2016 via Android
8
话说 我也想做个 feature 把自己朋友圈的内容导出 但是嫌太麻烦 已经搁置挺久的了😂
|
|
AsimovOct 22, 2016 via Android
9
试试手机上的按键精灵
|
|
congeecOct 22, 2016
10
不知道传输的时候有没有加密。加密的话,逆向 app , hook 获取朋友圈内容的函数
|
|
orange88Oct 22, 2016 via Android
11
itchat 应该行
|
|
kindjeffOct 22, 2016 via iPhone
12
我建议用按键精灵点安卓模拟器
|
|
NxnXgpuPSfsITOct 22, 2016 via Android
13
@orange88 非常感谢你的支持!但 itchat 实际不包含朋友圈的 api ,关于朋友圈的抓取还是建议阅读其他的回复。
|
|
14
所以我一直在想微信书( https://weixinshu.com/)是如何实现的
|
|
ctsedOct 22, 2016 via iPhone
15
告诉微商自己喜欢什么 帮你留意一下
|
|
ytmsdyOct 22, 2016
16
用 fiddler 伪造证书,抓微信客户端的通信数据。手机模拟器里面不停的刷新朋友圈, fiddler 监控数据流,如果是图片就保留下来。
|
|
estOct 22, 2016
17
根用什么语言没关系。
|
|
18
不用抓包, 用 Xposed 就可以搞定. 已有导出朋友圈的插件, 直接使用就可以.
|
|
xssingOct 22, 2016
19
抓妹子照片,又想去除微商。怎么搞
|
|
20
@1130335361 参考使用说明 https://xinshu.me/reading/books/e90846f49151/articles/b4f8a772519aad
估计用的是魔改的客户端,对接自己的服务器做的一个服务,类似 xposed 的那种。 |
|
21
@ctsed 多谢建议!这个办法不能批量留存,我不是想买东西,而是想整合朋友圈里的微商资源。目前和这些卖家就是点对点沟通,效率太低,人工沟通成本也太高了。
|
|
23
@xssing 话说我是十分建议朋友圈能出一个朋友圈分组折叠,或者关键词屏蔽的内容过滤插件功能,能做到部分内容精准屏蔽与过滤。
我的朋友圈基本上被业务合作伙伴发的产品宣传图片刷屏,虽然对这种东西十分厌恶,但是又不能完全屏蔽,因为有些信息对工作有帮助,每天十分苦恼。 |
|
evereverOct 23, 2016
26
朋友圈的数据是能够代码抓取的,你去参考同步圈 app http://tongbuquan.com/download
|
|
SenevanOct 23, 2016
27
先搞一套 py 圈的 api= =,如果有的话
|
|
kushao1267Oct 24, 2016
28
python 有微信接口的啊,看看它的文档,然后就当网页抓取
|
|
diylcyApr 2, 2019
29
商用朋友圈采集方案。QQ83474196
|