自己改进了一下,但是发现爬虫读取某些网页的时候会卡住,也没超时

如题,爬虫读取某些网页的时候会卡住,也没超时,没有进入错误界面...有没有大佬帮一下,这种问题怎么去分析和解决?
卡住的时候不是每次都是同一个url,不同url也会卡住....

如题,爬虫读取某些网页的时候会卡住,也没超时,没有进入错误界面...有没有大佬帮一下,这种问题怎么去分析和解决?
卡住的时候不是每次都是同一个url,不同url也会卡住....
 
                            2020-03-31
举报