Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

为什么感觉我的第三个结果把前面的覆盖了

最赞回答 / Torres0521

<...图片...>代码和结果是这样的

3 回答 581 浏览 5-3 Python爬虫urlib2实例代码演示

2016-10-07

html_parser里面的parse的return值顺序问题

+ 我来回答回答最高可+2积分

0 回答 1003 浏览

2016-10-06

求视频源码

最新回答 / 才小圣

可以自己跟着敲一遍的，如果需要的话我这里有

1 回答 602 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-06

html.parser后缺了一个逗号

最新回答 / OMG快到碗里来

纳尼？

2 回答 542 浏览 6-3 BeautifulSoup的语法

2016-10-06

我想知道那些词条是以什么方式搜索出来的？

已采纳回答 / 墨尔卡娜

当第一个页面被分析之后，会获取到该页面上的其他词条的跳转url，也就是/view/*****.html,然后这些url会被拼装成完整的url加入到set中，程序循环一次之后检查set是否为空，如果不为空就会拿一个新的url去爬取，新的页面也会有些引用的词条的，然后就源源不断的有新的词条地址添加到set中去了，代码就是分析模块中使用正则表达式的那部分

1 回答 719 浏览 1-1 Python开发简单爬虫课程介绍

2016-10-05

为什么最多只能爬取79条？

最新回答 / 创建香菇

楼上说的对，注释里面已经讲清楚了，所以是百科词条的原因，可以把count限制在50，或者换一个root_url，或者当出现nonetype的时候就结束运行。

2 回答 644 浏览 1-1 Python开发简单爬虫课程介绍

2016-10-05

只能爬取两条，没报错，请问是什么问题？

最新回答 / leve__9

try?要怎么改呢我的是这样的<...图片...>

2 回答 679 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-05

一直只能爬一个，接下来就不爬了

最新回答 / 十年磨一健

我也是，你解决了吗

2 回答 1153 浏览 7-3 URL管理器

2016-10-04

运行时直接报错

已采纳回答 / Duiknow

代码没有报错是因为你有自定义报错的try except 应该是哪里你出现了拼写错误或者判断条件写错了运行跟踪调试下就可以了代码刚刚测试过没有问题

1 回答 580 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-04

终于好了，但是最后浏览器输入有问题啊

讲师回答 / 蚂蚁帅帅

<...图片...>如果是chrome浏览器的话，这样子设置一下编码。如果是其他浏览器的话，在菜单找一下。设置一下编码就好了。

2 回答 484 浏览

2016-10-02

求老师讲课的环境

已采纳回答 / NoBB_

用eclipse的话，可以打开eclipse，然后在help->eclipse Marketplace->搜索 pyDev->install或者不用eclipse，直接下个pyCharm, 感觉也挺好用

2 回答 532 浏览 7-3 URL管理器

2016-10-01

python 改装那个版本

已采纳回答 / 蚂蚁帅帅

python的版本2和版本3差别好大。一些公司里面大多用的都是版本2，不过慢慢的都开始迁移到版本3了。这个课程我用的还是版本2~

4 回答 699 浏览 6-2 BeautifulSoup模块介绍和安装

2016-09-30

代码是按照视频中来的，但是运行还是报错。。。。。。。

讲师回答 / 蚂蚁帅帅

看起来确实是，你的__init___中，后面多了个下划线

2 回答 1296 浏览 7-7 开始运行爬虫和爬取结果展示

2016-09-30

soup.find_all()为什么这里总过不去呢？

最新回答 / 慕移动9181930

老师，extension=php_gd2.dll这个模块是干嘛的啊是不是只讲在线安装了，没讲包安装。

2 回答 973 浏览 7-5 HTML解析器html_parser

2016-09-30

AttributeError: 'SpiderMain' object has no attribute 'craw'

+ 我来回答回答最高可+2积分

0 回答 932 浏览

2016-09-29

首页上一页 64 65 66 67 68 69 70 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫