如何使用开源工具构造小型搜索引擎(12)

使用开源引擎Lucene搭建小型搜索引擎

信息的搜集- 礼貌” 信息的搜集-“礼貌” 遵守网站上发布的Robot.txt 采集限制 遵守网站上发布的Robot.txt 协议 搜集时尽量不要太过密集地采集某个网 站，这种密集访问类似于DoS攻击，导 站，这种密集访问类似于DoS攻击，导 致普通用户正常浏览网站产生困难。有 些网站会严密控制这种密集访问行为。

12

2011-6-3

百度搜索“77cn”或“免费范文网”即可找到本站免费阅读全部范文。收藏本站方便下次阅读，免费范文网，提供经典小说教育文库如何使用开源工具构造小型搜索引擎(12)在线全文阅读。