很久前用 Selenium 写了个爬虫，随便写着玩的，一直正常运行，今天突然不行了。现象是用 Selenium 去爬，直接给我返回空白页面：
<html xmlns="http://www.w3.org/1999/xhtml"><head></head><body></body></html>
调用 FirefoxDriver 和 ChromeDriver 均是此现象
但是我如果直接用浏览器访问，使用 Firefox 和 Chrome 均可正常访问网站内容
刚上网查了下，说 Selenium 并不支持修改 request header。那么这种情况应该如何应对呢？
 |
1
colincat May 30, 2018
UA 头可以改吧，再说你用 chromeDriver 应该就是调用浏览器去渲染啊
|
 |
2
starvedcat OP @colincat #1 对，就是调用了浏览器，然后只出现空白页面；但是如果我自己用 Chrome 访问就正常
|
|
3
colincat Jun 7, 2018  1
@starvedcat https://www.zhihu.com/question/35547395 给你一个连接吧，参考
|
 |
4
eastrd Jun 13, 2018
也可以根据鼠标轨迹来判断是否是 Bot
|
|
5
starvedcat OP @eastrd #4 访问那个网址，直接就返回空白页面，所以跟鼠标轨迹没关系
|
Select Language