首页   注册   登录
 15874103329 最近的时间轴更新

15874103329

V2EX 第 360504 号会员,加入于 2018-11-02 18:31:40 +08:00
[求助] 为何 pycharm 中无法使用 pyQuery
问与答  •  15874103329  •  47 天前  •  最后回复来自 WhiteComplex
4
[新人求助] 如何解决淘宝滑动验证的问题
问与答  •  15874103329  •  49 天前  •  最后回复来自 diefishfish
2
[小白求助] 爬取猫眼 top100,打印显示为空
Python  •  15874103329  •  79 天前  •  最后回复来自 zh584728
6
[新人求教] 无法创建 pipenv 虚拟环境
Python  •  15874103329  •  90 天前  •  最后回复来自 Eds1995
7
15874103329 最近回复了
已解决,修改代码为 yield scrapy.http.Request(url, callback=self.parse, dont_filter=True)
@Leigg
2019-01-10 11:35:18 [scrapy.spidermiddlewares.offsite] DEBUG: Filtered offsite request to 'http': <GET http://http//quotes.toscrape.com/page/2>
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Closing spider (finished)
2019-01-10 11:35:18 [scrapy.statscollectors] INFO: Dumping Scrapy stats:
{'downloader/request_bytes': 446,
'downloader/request_count': 2,
'downloader/request_method_count/GET': 2,
'downloader/response_bytes': 2701,
'downloader/response_count': 2,
'downloader/response_status_count/200': 1,
'downloader/response_status_count/404': 1,
'finish_reason': 'finished',
'finish_time': datetime.datetime(2019, 1, 10, 3, 35, 18, 314550),
'item_scraped_count': 10,
'log_count/DEBUG': 14,
'log_count/INFO': 7,
'offsite/domains': 1,
'offsite/filtered': 9,
'request_depth_max': 1,
'response_received_count': 2,
'scheduler/dequeued': 1,
'scheduler/dequeued/memory': 1,
'scheduler/enqueued': 1,
'scheduler/enqueued/memory': 1,
'start_time': datetime.datetime(2019, 1, 10, 3, 35, 14, 371325)}
2019-01-10 11:35:18 [scrapy.core.engine] INFO: Spider closed (finished)
@carry110
我这还是只打印了一页,不知啥情况
@Leigg next 打印出来是 '/page/2/'
url 是'http://quotes.toscrape.com/page/2/'
求助啊
按照教程里写的,但是我这代码只爬取了一页就结束了,求大佬帮忙看看
48 天前
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
@weqopy
不行啊,其他的所有库、模块都可以,唯独这个 pyqurey
48 天前
回复了 15874103329 创建的主题 问与答 [求助] 为何 pycharm 中无法使用 pyQuery
求助啊
大佬们帮帮忙啊,这里卡一天了
@careofzm 感谢大佬
关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   841 人在线   最高记录 4385   ·  
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.3 · 13ms · UTC 19:29 · PVG 03:29 · LAX 11:29 · JFK 14:29
♥ Do have faith in what you're doing.
沪ICP备16043287号-1