有朋友想收集yande.re里的图片
于是现学撸了一个爬虫出来
大家来拍吧
https://github.com/wudaown/yandeDL
未满18岁慎用
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
This topic created in 4161 days ago, the information mentioned may be changed or developed.
Supplement 1 · Jun 20, 2015
刚才在看K站的结构.... 发现程序还能在简化...
浪费了很多很多时间
在重写
浪费了很多很多时间
在重写
 |
zonghuaJun 20, 2015 via iPhone
1
python做爬虫有什么加成
|
 |
ImyssedJun 20, 2015
2
其实我比较好奇Y站和K站是不是一个系统啊...好像的说
|
 |
3
貌似是的.. y站以前不叫Y站.. 换过名字了
|
1 |
yeah2109Jun 20, 2015
5
输入关键词以后没有进度提示吗？
|
|
yeah2109Jun 20, 2015
7
我输入了一定的页数，下载了一段时间后
Traceback (most recent call last): File "yandeDL.py", line 61, in <module> main() File "yandeDL.py", line 55, in main MultiPageDownload() File "yandeDL.py", line 27, in MultiPageDownload coreDL(crawler.getSource(next_page_url)) File "yandeDL.py", line 14, in coreDL crawler.getImg(dLink, filename_list) File "/root/yandedl/crawler.py", line 123, in getImg urllib.request.urlretrieve(x[2:-2], filename_list[count]) File "/usr/local/lib/python3.4/urllib/request.py", line 219, in urlretrieve % (read, size), result) urllib.error.ContentTooShortError: <urlopen error retrieval incomplete: got only 196325 out of 255091 bytes> 这么显示然后就停止了，是什么原因？ |
 |
hansnowJun 20, 2015
8
问个和主题不相关的问题哈，楼主帖子里的红色框框是怎么输入的呢？
|
 |
anthonyeefJun 20, 2015
9
@hansnow markdown自带的吧
|
|
11
|
 |
shuzhiqianJun 20, 2015
12
iOS开发技术分享群：429196500 欢迎加入！
|
 |
dlcJun 20, 2015
13
楼主， 为什么我安装完python3.4.0 后双击yandeDL.py打不开。
|
 |
moenayukiJun 20, 2015
14
|
|
dlcJun 21, 2015
18
@wudaown 双击yandeDL.py一闪而过，在cmd用 python yandeDL.py 也打不开。
|
 |
ghostxdyJun 21, 2015 via Android
19
我特的来回复一下，我收藏了
|
 |
djydeJun 21, 2015
22
yande 是 h漫版的 hackernews?
|
Select Language