今天帮同学解决scrapy的时候发现的，就是在我这里能运行，在他那里不能运行。对比scrapy的版本发现，他的是最新的(2.6.3)，然后我的是2.5.0的。随后我将他的版本也换成跟我同样的，他的也能运行了。之后我去看了官方更新文档，发现在2.5.1的更新上说明了，http的验证需要在settings加上这个

http_auth_domain = None

之后我把我同学的版本换到最新的，设置这个，成功了。之前就是老是提示White IP Failed.但白名单里面又有，所以只能是scrapy的问题了。

出处：https://www.cnblogs.com/skypeng/p/16712375.html