最新回答 / UFO2015
# 初始化 class```pyclass UrlManage(object): def __init__(self): self.new_urls = set(); self.old_urls = set(); def add_new_url(self, url): # todo```
2016-09-13
已采纳回答 / sin丶
下载代码后发现问题还是挺多的，除了那个outputer，在html_parser下data写成date，title也打错了,参数page_url也没设置。html_outputer里，方法output_html没有写进去标题。慢慢改吧。
2016-09-13
最新回答 / 慕粉3182733
python3里面没有urllib2，只有urllib，跟2的用法不一样。我同时安装了python2和3，在解释2编写的代码的时候用2的解释器，解释3编写的代码的时候用3的解释器。开发环境是pycharm，可以更改settings里面的interpreter。如果是命令行的话可以用py -2或者py -3运行程序。如果环境变量2在前可以省略py -2，3同样。
2016-09-08
最新回答 / 否则悲伤从何而来
那你唯一需要修改的就是“然后又随机选一个链接接着爬”，这边的规则应该是你自己想的算法吧建议你写一个方法，把和当前url的关键词按照某种规律，把当前页面的所有url“过滤”成自己需要的有“相关性”URL，就在UrlManger里面的get_new_url下，比如self.new_urls.getMyRulUrl(self.new_urls)
2016-09-07
