Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

在Pycharm下，怎么新建模块？

最赞回答 / 达达里昂

.py为后缀名的文件都会被认为是python模块。package相当于文件夹，只不过其每层目录下一定有一个 _init_.py 的文件。Pycharm中，在package上右键"New-Python File"可以新建模块<...图片...>

7 回答 18806 浏览 7-2 调度程序

2016-01-11

control+1 怎么做到的，我这是mac ，我commod 和control 都试过了，不行啊

已采纳回答 / aleenlee

command +1可以

4 回答 1328 浏览 7-2 调度程序

2016-01-07

没报错，但只输出了一条记录，第二条就failed，然后就没了

已采纳回答 / 戴暉

仔细看看你的代码哪里写的有问题，估计是不仔细。或者是你爬的网页有问题，换个东西爬爬看

4 回答 1153 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-02

刚看到一个最近的相似的问题-_-||有可能你的try-except中间的print 'craw %d : %s' %(count, new_url)到except那一块某个地方使用的代码打错了而不是self.urls.has_new_url()==0导致的错误，python的百科里面是有别的链接的，你可以试着把try-except去掉，让错误直接显示出来中间这一块指的是：html_cont=self.downloader.download(new_url)new_urls,new_data=self.pa...

1 回答 1101 浏览

2016-01-01

python 验证码识别

已采纳回答 / 路船长

python 三个库进行识别验证码如下：numpy(数学处理库)Image(图像处理库)ImageEnhance(图像处理库)具体自己查资料~

1 回答 1104 浏览 8-1 课程总结

2015-12-31

本课程应用的问题

已采纳回答 / 凡所在的世界

这只是简单的讲了讲，有兴趣的下来还有很多要学。

1 回答 857 浏览 2-2 爬虫技术的价值

2015-12-23

为什么爬下来的内容为乱码？

最赞回答 / McDaddy

data['xxx'].encode('gbk')

6 回答 1305 浏览 7-5 HTML解析器html_parser

2015-12-22

求解决一步步按照老师来的W764 2.7.11版本

讲师回答 / 蚂蚁帅帅

不好意思没有遇到过这种问题，可以重新安装最新的python的32位版本试一试。

1 回答 755 浏览 5-3 Python爬虫urlib2实例代码演示

2015-12-22

输出结果为craw 1:http://baike.baidu.com/view/21087.htm crawl failed为什么？

最赞回答 / nickasan

我的也是这个问题，楼主解决没有，求助

6 回答 1455 浏览

2015-12-22

找不到urllib2

最新回答 / Roc_J

import urllib.request'''Created on 2016年2月23日@author: Roc-J'''url = "http://www.baidu.com"print('第一种方法')response =urllib.request.urlopen(url)print(response.getcode())

7 回答 2865 浏览 5-3 Python爬虫urlib2实例代码演示

2015-12-19

首页上一页 13 14 15 16 17下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫