为了账号安全,请及时绑定邮箱和手机立即绑定

soup 对象为none的问题

craw 350 : https://baike.baidu.com/item/%E6%A2%85%E7%88%B1%E8%8A%B3/983014

craw 351 : https://baike.baidu.com/item/%E5%93%88%E5%A8%81%C2%B7%E5%87%AF%E7%89%B9%E5%B0%94/4528376

Traceback (most recent call last):

  File "c:/Users/VULCAN/Desktop/文件/爬虫学习.py", line 127, in <module>

    obj_spider.craw(root_url)

  File "c:/Users/VULCAN/Desktop/文件/爬虫学习.py", line 114, in craw

    new_urls, new_data = self.parser.parse(new_url, html_cont)

  File "c:/Users/VULCAN/Desktop/文件/爬虫学习.py", line 69, in parse

    new_data = self._get_new_data(page_url, soup)

  File "c:/Users/VULCAN/Desktop/文件/爬虫学习.py", line 57, in _get_new_data

    title_node = soup.find('dd', class_="lemmaWgt-lemmaTitle-title").find("h1")

AttributeError: 'NoneType' object has no attribute 'find'


爬取到一半后报错,相关代码如下

def parse(self, page_url, html_cont):
    if page_url is None or html_cont is None:
        return
    soup = BeautifulSoup(html_cont, 'html.parser', from_encoding='utf-8')
    new_urls = self._get_new_urls(page_url, soup)
    new_data = self._get_new_data(page_url, soup)
    return new_urls, new_data

求大神解答!!


正在回答

1 回答

已解决,自己看错了??

1 回复 有任何疑惑可以回复我~

举报

0/150
提交
取消
Python开发简单爬虫
  • 参与学习       227753    人
  • 解答问题       1218    个

本教程带您解开python爬虫这门神奇技术的面纱

进入课程

soup 对象为none的问题

我要回答 关注问题
意见反馈 帮助中心 APP下载
官方微信