我已经尝试过下面的脚本，它工作得很好：from bs4 import BeautifulSoupimport requests pr= input("search: ")source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).contentsoup = BeautifulSoup(source, 'html.parser')url= soup.find_all('div', class_=('_3O0U0u'))whole_product_list= []whole_url_list= []main_product_list= []main_url_list= [] for i in url: tag_a_data= i.find_all('a') for l in tag_a_data: product_list= l.find('div', class_= '_3wU53n') if product_list: main_product_list.append(product_list.text) else: product_ok= l.get('title') main_product_list.append(product_ok)print(main_product_list) 例如，如果我传递“samsung”作为输入，它会返回具有给定类 ID 的可用属性“div”的列表，该属性作为参数传递，如果我传递其他内容作为输入，例如具有“title”的“shoes”属性它返回 html 中所有可用标题的列表。但如果我颠倒顺序，如下所示：from bs4 import BeautifulSoupimport requests pr= input("search: ")source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).contentsoup = BeautifulSoup(source, 'html.parser')url= soup.find_all('div', class_=('_3O0U0u'))whole_product_list= []whole_url_list= []main_product_list= []main_url_list= [] for i in url: tag_a_data= i.find_all('a') for l in tag_a_data: product_list = l.get('title') if product_list: main_product_list.append(product_list) else: product_ok= l.find('div', class_= '_3wU53n').text main_product_list.append(product_ok) print(main_product_list)它开始给出属性错误：Traceback (most recent call last): File "tess.py", line 28, in <module> product_ok= l.find('div', class_= '_3wU53n').textAttributeError: 'NoneType' object has no attribute 'text'我不明白为什么第一个脚本基于 if-else 操作运行良好，但第二个脚本却不能。
2 回答
慕雪6442864
TA贡献1812条经验 获得超5个赞
在这一行中：
product_ok= l.find('div', class_= '_3wU53n').textl.find('div', class_= '_3wU53n')返回None，意味着它没有找到 div。None值没有text属性，因此会引发AttributeError异常。
解决方法是使用新的 walrus 运算符：
if product_ok := l.find('div', class_= '_3wU53n'):
product_ok = product_ok.text
弑天下
TA贡献1818条经验 获得超7个赞
假设您为“l”值收集了以下数据
项目1
<title>title1</title><div class_= '_3wU53n'>xyz</div>项目2
<title>title1</title><div>xyz</div>项目3
<title>title1</title><div class_= '_3wU53n'>xyz</div>
使用第一个代码，您的product_list变量将包含 item1 和 item3。然后您就可以获取title给定项目的可用信息。所以代码运行没有任何问题。
使用第二个代码，您的product_list变量将包含 item1、item2 和 item3。但在这种情况下，您将无法获得所需的div标签，因为第二个项目不存在该标签。这会导致属性错误。
简单的事情是数据库中的项目总是有一个标题，但很可能不会总是有所需的div标签。
以下更改应该可以使其正常工作：
from bs4 import BeautifulSoup
import requests
pr= input("search: ")
source= requests.get('https://www.flipkart.com/search?q={}&otracker=search&otracker1=search&marketplace=FLIPKART&as-show=on&as=off'.format(pr)).content
soup = BeautifulSoup(source, 'html.parser')
url= soup.find_all('div', class_=('_3O0U0u'))
whole_product_list= []
whole_url_list= []
main_product_list= []
main_url_list= []
for i in url:
tag_a_data= i.find_all('a')
for l in tag_a_data:
product_list = l.get('title')
if product_list:
main_product_list.append(product_list)
else:
if l.find("div", class_='_3wU53n'):
product_ok= l.find('div', class_= '_3wU53n').text
main_product_list.append(product_ok)
print(main_product_list)
添加回答
举报
0/150
提交
取消