Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

我就想说输出了几条卡住了是怎么回事

最新回答 / August_us

有可能是电脑问题，关闭重新运行试试

1 回答 619 浏览 7-7 开始运行爬虫和爬取结果展示

2017-05-01

运行spider_miam，报错，实在找不出错误了

最新回答 / qq_闭关修炼fn_0

AttributeError: 'UrlManager' object has no attribute 'new_urls' 'UrlManager'对象没有 'new_urls' 这个描述

1 回答 956 浏览 7-2 调度程序

2017-04-30

如何在互联网上爬到自己想要的数据？

最新回答 / Tyeson

可以用python啊推荐你疯狂的蚂蚁crazyant老师的课程 python开发简单爬虫

1 回答 1421 浏览 3-1 Python简单爬虫架构

2017-04-30

有没有用vscode的？

最新回答 / 慕粉1944452010

有，现在学习python用的工具就是vscode

1 回答 723 浏览 6-2 BeautifulSoup模块介绍和安装

2017-04-27

我要爬50个不同网站该怎么做？

最新回答 / 妙柴

先将50个不同站点你做成一个HTML文件，然后用老师讲的办法将入口换成你自己指定的这个HTML文件就可以了

1 回答 692 浏览 6-3 BeautifulSoup的语法

2017-04-26

您好，想请问您关于简单爬虫的问题

最新回答 / keenor

alt+enter 自动导包

1 回答 451 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-26

我是用sublime来编写的，所有的类都在同一页。然后提示我#管理器没有定义#

最新回答 / qq_应捷远_0

object有什么用

2 回答 794 浏览 7-2 调度程序

2017-04-23

怎么这样呢

最新回答 / 慕粉3637657

Python版本3以上要加（），即print（）

1 回答 634 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-21

什么情况这是

最新回答 / 图奇

是BeautifuSoup不是beautifulsoup

3 回答 427 浏览 6-4 BeautifulSoup实例测试

2017-04-21

使用Python不能直接编译

最新回答 / 强力搅局者

不可以，如果需要运行的话推荐使用PyCharm进行编译

1 回答 694 浏览 5-3 Python爬虫urlib2实例代码演示

2017-04-21

只出了两个结果= =后来调试出来了，但是拼接那出错，也不知道是什么原因一直拼接不成功

最赞回答 / SiCheng_Sheen

我之前也遇到过这种情况，纠结了很久，最后才发现一个非常重要的问题，百度的词条信息发生了变化，你可以仔细看看，现在不再是以 .htm结尾了，之前在html_parser模块中的正则表达式已经失效了，原来是href=re.compile(r"/view/\d+\.htm")，现在应该改为href=re.compile(r'/item/\w+')。这也再次证明了在采集数据前，一定要对目标进行仔细认真的分析！

3 回答 555 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-21

AttributeError: 'NoneType' object has no attribute 'find'

最新回答 / 白兰地加冰苏打水

版本问题吧

2 回答 4440 浏览 7-5 HTML解析器html_parser

2017-04-20

只出俩条不报错终止，前一段时间还都能出来

最赞回答 / 阿雷雷雷雷

百度百科的链接地址都变了，你修改一下html_parser里面的_get_new_urls方法：links = soup.find_all('a', href=re.compile(r"/view/\d+\.html"))改为：links = soup.find_all('a', href=re.compile(r"/item/"))

2 回答 441 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-17

eclipse怎么自动补全python

最新回答 / 么哒

如果不行再试试Ctrl+1

2 回答 913 浏览 7-3 URL管理器

2017-04-14

首页上一页 42 43 44 45 46 47 48 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫