V2EX 15874103329 的所有回复 第 1 页 / 共 1 页
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX    15874103329    全部回复第 1 页 / 共 1 页
回复总数  20
已解决,修改代码为 yield scrapy.http.Request(url, callback=self.parse, dont_filter=True)
@Leigg
2019-01-10 11:35:18 [scrapy.spidermiddlewares.offsite] DEBUG: Filtered offsite request to 'http': <GET http://http//quotes.toscrape.com/page/2>
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Closing spider (finished)
2019-01-10 11:35:18 [scrapy.statscollectors] INFO: Dumping Scrapy stats:
{'downloader/request_bytes': 446,
'downloader/request_count': 2,
'downloader/request_method_count/GET': 2,
'downloader/response_bytes': 2701,
'downloader/response_count': 2,
'downloader/response_status_count/200': 1,
'downloader/response_status_count/404': 1,
'finish_reason': 'finished',
'finish_time': datetime.datetime(2019, 1, 10, 3, 35, 18, 314550),
'item_scraped_count': 10,
'log_count/DEBUG': 14,
'log_count/INFO': 7,
'offsite/domains': 1,
'offsite/filtered': 9,
'request_depth_max': 1,
'response_received_count': 2,
'scheduler/dequeued': 1,
'scheduler/dequeued/memory': 1,
'scheduler/enqueued': 1,
'scheduler/enqueued/memory': 1,
'start_time': datetime.datetime(2019, 1, 10, 3, 35, 14, 371325)}
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Spider closed (finished)
@carry110
我这还是只打印了一页,不知啥况
@Leigg next 打印出来是 '/page/2/'
url 是'http://quotes.toscrape.com/page/2/'
求助啊
按照教程里写的,但是我这代码只爬取了一页就结束了,求大佬帮忙看看
2019-01-06 20:14:59 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
@weqopy
不行啊,其他的所有库、模块都可以,唯独这个 pyqurey
2019-01-06 19:39:04 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
求助啊
2019-01-04 21:26:02 +08:00
回复了 15874103329 创建的主题 问与答 [新人求助] 如何解决淘宝滑动验证的问题
大佬们帮帮忙啊,这里卡一天了
@careofzm 感谢大佬
求大佬帮忙看一下啊
2018-12-22 15:59:49 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 如何提取出网页标签内所有的属性值
@ClutchBear 哦哦,谢谢大佬
2018-12-22 12:29:43 +08:00
回复了 15874103329 创建的主题 问与答 [求助] 如何提取出网页标签内所有的属性值
打印 item 有很多图片,但是获取属性值只打印出了一个,如何将 item 中所有的图片打印出来啊
@V2tizen 老哥,可以了,感谢感谢
gallery: JSON.parse(),这些内容是不要的,只要括号里面的内容,搞了好久搞不出来,求大佬帮忙
2018-12-04 10:00:24 +08:00
回复了 15874103329 创建的主题 Python [小白求助] 爬取猫眼 top100,打印显示为空
额,网址之前是对的,后来换别的网址也是这样,不知道哪里出问题了
2018-11-24 16:02:26 +08:00
回复了 15874103329 创建的主题 Python [新人求教] 无法创建 pipenv 虚拟环境
pipenv==2018.11.14
pip 18.1 from c:\programdata\anaconda3\lib\site-packages\pip (python 3.7)
2018-11-11 15:44:05 +08:00
回复了 15874103329 创建的主题 Python [新人求助] 为何 pycharm 创建 Django 后无法运行
有没有老哥来解答一下,难受
2018-11-04 13:32:50 +08:00
回复了 15874103329 创建的主题 Python 如何解决 KeyError: 'name'
沃日,真的是单词错了,已经狠狠扇了自己两巴掌,感谢各位老哥了
2018-11-04 12:02:38 +08:00
回复了 15874103329 创建的主题 Python 如何解决 KeyError: 'name'
我刚刚学纯小白,老哥能加个 QQ 或者微信么,我截了图,这里还不能发图
关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     960 人在线   最高记录 6679       Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 22ms UTC 19:22 PVG 03:22 LAX 12:22 JFK 15:22
Do have faith in what you're doing.
ubao snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86