为了账号安全,请及时绑定邮箱和手机立即绑定

求助,爬虫运行失败,错误提示如下

C:\Python27\python.exe C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py

craw 1 : https://baike.baidu.com/item/Python/407313?fr=aladdin

Traceback (most recent call last):

  File "C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py", line 34, in <module>

    obj_spider.craw(root_url)

  File "C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py", line 19, in craw

    new_urls,new_data = self.parser.parse(new_url,html_cont)

TypeError: 'NoneType' object is not iterable


Process finished with exit code 1


正在回答

1 回答

在获取节点的地方,加上try :   except:  处理一下

比如:

summary_node = soup.find('div',class_='lemma-summary')
try:
   res_data['summary'] = summary_node.get_text()
except:
   res_data['summary'] = ''

0 回复 有任何疑惑可以回复我~

举报

0/150
提交
取消
Python开发简单爬虫
  • 参与学习       227586    人
  • 解答问题       1288    个

本教程带您解开python爬虫这门神奇技术的面纱

进入课程

求助,爬虫运行失败,错误提示如下

我要回答 关注问题
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号