python遇见数据采集_技术问答

首页免费课 python遇见数据采集问答

python遇见数据采集

                
                秋名山车神
            全栈工程师

                    查看讲师更多课程 
                    秋名山车神讲师的其他课程
                
浏览器开发者工具使用技巧
初级·41705
免费课程
                                
                难度初级
            
                时长 2小时 5分
            
                学习人数
            
综合评分9.63
                            95人评价
                        查看评价
                                9.7
                                内容实用
                            
                                9.5
                                简洁易懂
                            
                                9.7
                                逻辑清晰

全部评论问答未解决精华

如何以request payload形式发送post请求

最赞回答 / syaofox

看这里 http://outofmemory.cn/code-snippet/37910/python-requests-request-http-post-payload-method

1 回答 16960 浏览 3-2 使用urllib发送post请求

2017-02-17

运行报错，求解

最新回答 / 滴滴艾斯

自己解答一波，是因为漏掉一个逗号。。。

1 回答 1092 浏览 3-2 使用urllib发送post请求

2017-02-17

相对于MATLAB和R语言 python更适合做数据采集、挖掘、分析吗

已采纳回答 / 慕粉3773557

是的，因为python提供了大量的包，下载网页用urllib 解析网页用bs 数据分析用xx 还有很多的开源数据挖掘平台，如weka，都提供了python的接口，在python里调用他们会很简单

1 回答 1863 浏览

2017-02-17

chrome浏览器中没有from data信息

最新回答 / 放学路上的小学生

先按F12打开开发者工具，然后手动选择起始站点、时间，点击查询，这样开发者工具就能捕获到data信息。然后这些data信息用来当爬虫post的数据。

3 回答 2344 浏览 3-2 使用urllib发送post请求

2017-02-09

安装时出错

最新回答 / 顾一辰

默认安装就行

1 回答 893 浏览 2-1 python开发环境搭建

2017-02-04

验证失败？

最赞回答 / phoenixor

我也是直接打开pdf2txt文件了，没有读取pdf文档。前面加了python就成功了，但是为什么老师没有加也成功了？？？

2 回答 812 浏览 5-3 验证pdfminer3k是否安装成功

2017-02-02

没能使用request

已采纳回答 / 请叫我百度

你用的不是python3.5吧，或者说是你用的编译工具的python包是2.7版本而不是3.5版本

2 回答 1474 浏览 3-1 urllib基本用法

2017-02-02

服务器是用uft8存储还是unicode?

最赞回答 / 孤独的小猪

服务器是用unicode存储，因为utf8 是个缩减版的码表，也就是说有些特殊的符号里面是没有的，所以说数据库为了保证最大的兼容性就使用这种编码来存储，就是为了防止有些字符不识别，而转换成utf8传输是因为为了保证网络传输的时候能够最大化的节约带宽，因为很少有特殊的符号需要在网络上传输。<...图片...>

2 回答 1266 浏览 5-1 python读取TXT文档

2017-02-02

在哪里下载可以用于python2版本的pdfminer

最新回答 / 矢寸心

Python 2可以看下： https://pypi.python.org/pypi/pdfminer/

1 回答 1946 浏览 5-3 验证pdfminer3k是否安装成功

2017-02-02

为什么要使用反引号

最赞回答 / 益达吃益达

#个人见解#当使用的字段名、表名等与MySQL保留字冲突时（如创建名为desc的字段、往desc表中插入记录），如果不加反引号``，无法执行成功。因此，INSERT `desc` VALUES('aa','bb');可以执行成功。而INSERT desc VALUES('aa','bb');执行失败。而当你所使用的的字段名、表名不含有保留字时，可以不加反引号``

3 回答 3199 浏览 4-1 存储数据到MySQL

2017-01-18

进行与mysql数据库连接的时候出现错误

最新回答 / 芳芳菲菲

你要么写charset='utf8'，要么写charset='utf8mb4',而不是'utf8md4'。

3 回答 4127 浏览 4-1 存储数据到MySQL

2017-01-18

求帮忙解决

+ 我来回答回答最高可+2积分

3 回答 795 浏览 5-5 python读取PDF文档(二)

2017-01-11

BeautifulSoup文档实例结果不符（has_class_but_no_id())

最新回答 / Explorer_C

原本我也是遇到这个问题搜索全网发现就这么一个帖子相关-。-其实程序输出没错，是理解错误的原因。BS4解析HTML文件，就很直接的，看到<p>这个标签符合条件，返回值为True，打印出来的就是<p>标签里的内容呀，只是恰好包含了几个<a>标签，因为这些<a>标签是<p>标签的子节点呀。而并没有单独地把<a>标签打印出来就说明程序的输出是没问题的。

2 回答 1492 浏览 3-4 BeautifulSoup使用

2017-01-09