那位大神能提供告诉下 10W数据 快速查询的算法谢谢

Question

那位大神能提供告诉下  10W数据 快速查询的算法谢谢我自己在写一个网络蜘蛛玩  里边的URL去重  要是用常规方法 需要花很久的时间我希望能以算法实现快速查找 希望路过的  都给吓意见吗  小弟在这里 谢谢啦

Answer 1

用蚁群算法

Answer 2

说明URL是常用的搜索条件，给它建立索引试试看吧，应该会快一些。