为了账号安全,请及时绑定邮箱和手机立即绑定
老师讲得真好 两倍速过了一遍大概知道怎么用了 中间还有很多值得深入学习的 回去就跟着做

已采纳回答 / 暮日孤影
老师的多行处理是错的,
content = i_item.xpath(".//div[@class='info']/div[@class='bd']/p[1]//text()").extract()
这个解析出来是一个两个元素的列表,两个元素分别是&".jbr&(i_的前后两段,因此下面这段代码...

最新回答 / 幕布斯9266291
第一次判断是男啊没看到男的美奖金啊k
https://github.com/StaticWalk/douban
有xpath helper的下载地址吗

最新回答 / 慕娘5347480
您使用的是python2 , 尝试用python3运行
老师的方法不行,换成User-Agent,USER_AGENT都不可以,后来改成在settings里面直接设置USER_AGENT就可以了

最新回答 / 慕粉7538698
import MySQLdb
from douban.settings import mysql_host, mysql_port, mysql_user, mysql_passwd, mysql_db_name


# Define your item pipelines here
#
# Don't forget to add your pipeline to the ITEM_PIPELINES setting
# See: https://...

最新回答 / qq_鱼_23
你没有创建douban这个项目,scrapy startproject douban

最赞回答 / 慕尼黑3605071
在pycharm左下terminal输入
scrapy crawl douban_spider -o xxx.csv

然后就可以在项目的spiders文件夹下面出现了

最新回答 / 慕盖茨9247136
尝试输出到文件 什么格式都可以
课程须知
1、具有一定的Python基础 2、具有一定的linux系统管理基础,编译安装软件,yum包管理工具等 3、具有一定的Mongdb数据库管理基础,增删改查
老师告诉你能学到什么?
1、scrapy框架简介、数据在框架内如何进行流动 2、scrapy框架安装、mongodb数据库安装 3、scrapy抓取项目如何创建 4、scrapy抓取项目如何进行数据解析 5、scrapy抓取项目如何绕过反爬机制抓取数据 6、scrapy抓取项目如何存储数据到不同的格式

微信扫码,参与3人拼团

意见反馈 帮助中心 APP下载
官方微信
友情提示:

您好,此课程属于迁移课程,您已购买该课程,无需重复购买,感谢您对慕课网的支持!

本次提问将花费2个积分

你的积分不足,无法发表

为什么扣积分?

本次提问将花费2个积分

继续发表请点击 "确定"

为什么扣积分?

举报

0/150
提交
取消