为了账号安全,请及时绑定邮箱和手机立即绑定

python遇见数据采集

难度初级
时长 2小时 5分
学习人数
综合评分9.63
95人评价 查看评价
9.7 内容实用
9.5 简洁易懂
9.7 逻辑清晰

讲师回答 / 秋名山车神
比如说你想收集所有上市公司历年来资产负债,资产增长,股份变革等等这些情况,你不可能通过人工的方法来查找,因为单单深沪都有几千家公司,只能依靠程序来完成,但是这些信息大部分都是以PDF文件保存的,如果不读取PDF文件还有什么好的方法来完成呢?而且大部分的文件都是以PDF保存的,如果你想从这些文件里面查找信息,一两个文件可能还能人工去查找统计,如果是一百个,一万个文件,依靠人工不知道要到什么时候才能完成,而且还可能会统计错误。
老师用的win10,这视频看来挺新的吖
不知道老师为什么要import pymysql.cursors
我平时都是这样写的:
import pymysql

conn = pymysql.connect()
cur = conn.cursor()

这样就行了,后面就可以用cur来执行sql语句

楼上有错误的同学可以试试
@Hankong
我已经私信给你了,其他同学下不了的也可以在这里下:
http://pan.baidu.com/s/1qYeXrWS
能否给个python的安装包
找个post登陆的站呗 怎么爬虫换页 判断已经抓取的URL呢车神

最新回答 / 孤独的小猪
其实主要是为了解决以后出现乱码做基础知识,因为python爬取数据,由于编码格式问题,常常导致爬下来的数据是乱码,所以讲了一些Unicode知识。
车身讲课棒棒哒,充满磁性的声音和清晰的步骤说明,很不错!
成功‘不过google被墙了。。。
class_='xxx' 更加方便
@不打伞的人

检查一下你的代码,如果找不到的话,把代码发出来看看。
恕我直言,直接把string和get_text()方法的区别列出来也不用举这么多例子,乱七八糟的
台湾高铁是反爬虫了吗,并没有数据……
课程须知
熟悉Python语言的语法,掌握Python的正则表达式模块,懂得如何使用Python操作数据库
老师告诉你能学到什么?
使用Python内置urllib模块和第三方BeautifulSoup模块进行数据采集和提取、MySQL数据库的操作、TXT和PDF文档的读取,以及robots协议和相关注意事项

微信扫码,参与3人拼团

意见反馈 帮助中心 APP下载
官方微信
友情提示:

您好,此课程属于迁移课程,您已购买该课程,无需重复购买,感谢您对慕课网的支持!

本次提问将花费2个积分

你的积分不足,无法发表

为什么扣积分?

本次提问将花费2个积分

继续发表请点击 "确定"

为什么扣积分?

举报

0/150
提交
取消