推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 3116 天前的主题，其中的信息可能已经有所发展或是发生改变。
我用 scrapy 和代理池爬拉勾网，中间没有报错，但是每次运行代码都只是爬一两万条数据就结束，下次运行又有新的数据，为什么不会一次性爬完所有数据呢？
望大神们指点，谢谢！
 | 1 U7Q5tLAex2FI0o0g 2017-05-18 11:43:55 +08:00 是不是限制了深度了呢？ |
 | 3 dsg001 2017-05-18 14:35:19 +08:00 深层的模板有变化导致规则抓取不到，检查下最终页的模板是否匹配规则 |
Select Language