|
FightingXApr 28, 2019
1
我一般基于 httpclient 自己写下载器
|
|
xioxuApr 28, 2019
3
虽然平时我也写 java, 但爬虫我还是喜欢用 python 的 scrapy, 简单好用, 爬虫常用场景都有内在支持。
|
|
4
|
|
yestodayHadRainApr 28, 2019
5
Gecco 了解一下,我也是这几天刚接触的,感觉还是挺方便的
|
|
swuzjbApr 28, 2019
6
Jsoup
|
|
canbingztApr 28, 2019
7
这种框架如果没有遇到 bug 的话,更新不更新应该是无所谓的吧,能满足需求就行了啊
|
|
quadrapopApr 28, 2019
8
python 写爬虫就行,反正都是保存到数据库
java 一般我们用 Jsoup,还可以 |
|
uminokoeApr 28, 2019
9
歪个楼,遇到需要使用 selenium 的情况用什么框架好呢?
|
|
xyooyxApr 29, 2019
10
jdk11 开始内置 httpclient,可以配置 cookieMnager 自动管理 Cookie
|
|
zhangjinglongiApr 29, 2019
11
dongliu 的 reuqests 也挺好用的,模仿的 python 的
|
|
ala2008Apr 29, 2019
12
一般使用就可以了吧
|
|
xinQingApr 29, 2019
13
这个 webmagic 很成熟了啊,源码也比较简单,推荐使用~
|
|
wiixMay 5, 2019
15
手撸一个
|