推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 2899 天前的主题，其中的信息可能已经有所发展或是发生改变。
最近在用 scrapy 写一个爬虫，由于爬取对象在墙外，就给爬取网址添加了 ipv6 的 hosts。可以确定的是
- 该网站可以直接 ping url 成功
- 用 wget 可以直接下载网站 html
- 用 python 的 requests 包进行 get，可以获取到正确结果
但是！ 用 scrapy 爬取的时候报了 dns 查找错误
DNSLookupError: DNS lookup failed: no results for hostname lookup:
看了半天 scrapy 文档，关于 dns，好像只有 dns 缓存的设置。。。
不知道是什么问题，不知道有遇到同样问题的吗？
目前尚无回复
Select Language