推荐学习书目 Learn Python the Hard Way Python Sites PyPI - Python Package Index http://diveintopython.org/toc/index.html Pocoo 值得关注的项目 PyPy Celery Jinja2 Read the Docs gevent pyenv virtualenv Stackless Python Beautiful Soup 结巴中文分词 Green Unicorn Sentry Shovel Pyflakes pytest Python 编程 pep8 Checker Styles PEP 8 Google Python Style Guide Code Style from The Hitchhiker's Guide
这是一个创建于 4312 天前的主题，其中的信息可能已经有所发展或是发生改变。
通过urllib2或是requests来get页面，只是抓取了html源码，css渲染效果和ajax调用都没有，所以，我在想是不是可以通过ie或chrome来抓取在浏览器上看到的效果呢
 | 1 OhmyCaptain 2014-02-13 00:15:04 +08:00 selenium? |
 | 2 iloahz 2014-02-13 00:20:27 +08:00 貌似现在能模拟浏览器渲染的就只有1L说这个吧 |
 | 3 txlty 2014-02-13 00:37:44 +08:00 phantomjs http://phantomjs.org/ |
 | 4 est 2014-02-13 01:08:17 +08:00 IE可以。win32com |
 | 5 otakustay 2014-02-13 01:36:02 +08:00 phantomjs和真chrome的差距还是有点的，真要抓就用selenium吧，除了效率低下外没啥缺点 |
 | 6 manhere 2014-02-13 02:10:03 +08:00 如果是win平台的话，有个命令行版网页截图工具，很好用 |
 | 7 zhouzm 2014-02-13 08:19:02 +08:00 cefpython |
 | 8 simapple 2014-02-13 08:45:24 +08:00 python Qt webkit |
 | 9 ksc010 2014-02-13 09:12:45 +08:00 phantomjs + casperjs |
 | 10 PurpleSun 2014-02-13 10:10:32 +08:00 *nix平台：whhtmltopdf + pdfkit |
 | 11 josephshen 2014-02-13 10:33:27 +08:00 http://cutycapt.sourceforge.net/ 然后自己再包装一个python接口就行 |
 | 12 gonjay 2014-02-13 12:59:39 +08:00 用Chrome插件直接用js来抓取，再通过ajax给自己的数据库存起来？ |
 | 14 keven 2014-03-26 00:20:15 +08:00 python应该有相关的库或者可以直接利用的东西吧，我也在抓数据，八爪鱼采集器就是内置了一个浏览器，然后通过浏览器来进行采集的。所以ajax这些肯定是支持的。 |
Select Language