随着网络的迅速发展，万维网成为大量信息的载体，如何有效地提取并利用这些信息成为一个巨大的挑战。搜索引擎(Search Engine)，例如传统的通用搜索引擎AltaVista，Yahoo!和Google等，作为一个辅助人们检索信息的工具成为用户访问万维网的入口和指南。但是，这些通用性搜索引擎也存在着一定的局限性。
网络爬虫（又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者），是一种按照一定的规则，自动的抓取万维网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁，自动索引，模拟程序或者蠕虫。
安装了K9的爬虫后，可在管理中心进入爬虫应用界面（至于如何安装爬虫应用，在之前已提过，可参考《K9安装之本地调试式的安装过程》）
爬虫来访时段统计，可查看网站上线后，爬虫每日的访问统计
注意：可别关了爬虫功能
月份统计，可查看网站的每月访问统计
爬虫的详细访问记录
K9爬虫类型
更多爬虫特征码的代号【请看这里】
转载请注明出处：唯众网络
