Python最火爬虫框架Scrapy入门与实践_技术问答

课程 \后端开发 \Python \Python最火爬虫框架Scrapy入门与实践

Python最火爬虫框架Scrapy入门与实践

                
                大壮老师
            Python工程师

                    查看讲师更多课程 
                    大壮老师讲师的其他课程
                
Python爬虫实战数据可视化分析
实战·中级·3447

                                                                                                                                    ￥6.60
                                            
Python爬虫工程师必学 App数据抓取实战
实战·中级·718

                                                                                                                                    ￥299.00
                                            
                难度初级
            
                时长 1小时31分
            
                学习人数
            
综合评分95.7
                            47人评价
                        查看评价
                                9.7
                                内容实用
                            
                                9.6
                                简洁易懂
                            
                                9.4
                                逻辑清晰

全部评论问答未解决精华

报错ModuleNotFoundError: No module named 'douban.settings'

最赞回答 / 潇丶潇

问题已解决

1 回答 6 浏览 2-7 spider文件的编写（2）

3天前

为什么输出格式不是中文呢？

最新回答 / weixin_慕桂英7016479

scrapy crawl douban_spider -o test.json -s FEED_EXPORT_ENCODING=UTF-8

1 回答 19 浏览 2-7 spider文件的编写（2）

6天前

慕斯5281784

大壮老师是我遇到讲课最好的老师，各方面！

0 2-11 最后的注意事项

2019-10-08

指令工具在哪

+ 我来回答回答最高可+2积分

0 回答 9 浏览

2019-10-03

Mecil9

建议：利用pipenv建立一个新的环境，然后直接pipenv install srcapy，搞定。就没有这样麻烦了！

0 2-1 scrapy的安装、和安装中遇到的问题

2019-09-25

user-angent 里面要加一个：w是为什么啊？？

+ 我来回答回答最高可+2积分

0 回答 34 浏览 2-6 spider文件的编写（1）

2019-09-17

霜花似雪

求代码，lhf20132175@163.com，谢谢老师！

0 2-4 新建scrapy项目

2019-09-15

😣怎么插入到sql server数据库中，mssql😇

+ 我来回答回答最高可+2积分

0 回答 47 浏览 2-8 保存数据

2019-09-11

如何存储到mysql

最新回答 / 慕的地8021373

可以先存文本在存数据库，字典格式的数据直接存数据库比较麻烦

1 回答 37 浏览

2019-09-10

win 本地 mongo_host = 'localhost' 下载文件的时候URL不唯一 mongodb不能保存请问怎么解决

最新回答 / weixin_慕粉7099041

😣怎么插入到sql server数据库中，mssql😇

1 回答 54 浏览 2-8 保存数据

2019-09-04

Tscheung

2.0倍速才是正常语速hhh

0 2-6 spider文件的编写（1）

2019-08-31

代码在哪里

最赞回答 / 臭黑

https://github.com/freedom-wy/small-spider-project/tree/master/douban_movie_top250_scrapy

1 回答 37 浏览 2-6 spider文件的编写（1）

2019-08-30

未爬取到完整的电影链接，所有链接相同？

+ 我来回答回答最高可+2积分

0 回答 49 浏览 2-6 spider文件的编写（1）

2019-08-29

qq_木头_26

824023982@qq.com
老师可以给个代码吗？

0 2-4 新建scrapy项目

2019-08-26

scrapy crawl的时候提示ModuleNotFoundError: No module named 'spider'是什么问题

最新回答 / 慕慕9194742

没有导包

1 回答 48 浏览 2-6 spider文件的编写（1）

2019-08-23

raise error.ReactorNotRestartable()

+ 我来回答回答最高可+2积分

0 回答 53 浏览 2-7 spider文件的编写（2）

2019-08-23

首页上一页1 2 3 4 5 6 7 下一页尾页

开始学习

课程须知: 1、具有一定的Python基础 2、具有一定的linux系统管理基础，编译安装软件，yum包管理工具等 3、具有一定的Mongdb数据库管理基础，增删改查

老师告诉你能学到什么？: 1、scrapy框架简介、数据在框架内如何进行流动 2、scrapy框架安装、mongodb数据库安装 3、scrapy抓取项目如何创建 4、scrapy抓取项目如何进行数据解析 5、scrapy抓取项目如何绕过反爬机制抓取数据 6、scrapy抓取项目如何存储数据到不同的格式

慕课网APP - 随时随地学编程

热搜

最近搜索清空

Python最火爬虫框架Scrapy入门与实践