为了账号安全,请及时绑定邮箱和手机立即绑定

python爬虫多线程假死怎么解决?

python爬虫多线程假死怎么解决?

一只名叫tom的猫 2018-10-09 15:11:49
python爬虫多线程假死怎么解决
查看完整描述

1 回答

?
翻翻过去那场雪

TA贡献2065条经验 获得超13个赞

如果是爬虫的话,这个一般都是由于网络原因造成的卡住,可以做两层控制:
在HTTP请求上设置好超时时间,最好设定sockect的超时,这样更底层一些。
在上层做一个检测机制,定时轮询线程是否正常,如果遇到不响应的直接kill掉。

查看完整回答
反对 回复 2018-11-06
  • 1 回答
  • 0 关注
  • 2421 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信