为了账号安全,请及时绑定邮箱和手机立即绑定

python3爬虫正则表达式卡顿

python3爬虫正则表达式卡顿

慕运维8079593 2018-10-10 08:16:52
python3初学者,练习使用爬虫抓取网页,随机找了个小说网站抓取,抓取html源代码没有问题,但是使用正则表达式,出现抓取数据后直接卡死,请问如何调试?import urllib.requestimport reurl = 'http://book.669977.net/xiuxiankuangtu/chapter.html'response = urllib.request.urlopen(url)html = response.read().decode('gbk')url_number = re.findall('href="(/\w{5,20}/\d{3,8})',html)print(url_number)
查看完整描述

2 回答

?
守着一只汪

TA贡献1872条经验 获得超3个赞

你print的数据太大,你把你print去掉试试。
任何一门的语言输出都是一样的,输出的数据量太大都会有可能造成卡顿。

查看完整回答
反对 回复 2018-10-14
?
梦里花落0921

TA贡献1772条经验 获得超5个赞

print(url_number[:10]) 
改成这样,只显示前10个数据。

这是 idle 的bug,要显示太多字符时,会卡死。 
它似乎将所有的字符都当成python代码,试图格式化显示它们。


查看完整回答
反对 回复 2018-10-14
  • 2 回答
  • 0 关注
  • 1026 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信