全文搜索引擎中的"机器人"或"蜘蛛"程序使用了哪种计算机技术（ ）

第一章 搜索引擎简史

1．1 前互联网搜索时代

在互联网发展初期，网站相对较少，信息查找比较容易。然而伴随互联网爆炸性的发展，普通网络用户想找到所需的资料简直如同大海捞针，这时为满足大众信息检索需求的专业搜索网站便应运而生了。

所有搜索引擎的祖先，是1990年由Montreal的McGill University学生Alan Emtage、Peter Deutsch、Bill Wheelan发明的Archie（Archie FAQ）。当时World Wide Web还未出现。Archie是第一个自动索引互联网上匿名FTP网站文件的程序，但它还不是真正的搜索引擎。Archie是一个可搜索的FTP文件名列表，用户必须输入精确的文件名搜索，然后Archie会告诉用户哪一个FTP地址可以下载该文件。

Archie工作原理与现在的搜索引擎已经很接近，它依靠脚本程序自动搜索网上的文件，然后对有关信息进行索引，供使用者以一定的表达式查询。由于Archie深受用户欢迎，受其启发，美国内华达System Computing Services大学于1993年开发了另一个与之非常相似的搜索工具，不过此时的搜索工具除了索引文件外，已能检索网页。

当时，“机器人”一词在编程者中十分流行。电脑“机器人”（Computer Robot）是指某个能以人类无法达到的速度不间断地执行某项任务的软件程序。由于专门用于检索信息的“机器人”程序象蜘蛛一样在网络间爬来爬去，因此，搜索引擎的“机器人”程序就被称为“蜘蛛”程序。由于专门用于检索信息的Robot程序象蜘蛛（spider）一样在网络间爬来爬去，因此，搜索引擎的Robot程序被称为spider（SpiderFAQ）程序。世界上第一个Spider程序，是MIT Matthew Gray的World wide Web Wanderer，用于追踪互联网发展规模。刚开始它只用来统计互联网上的服务器数量，后来则发展为也能够捕获网址（URL）。

世界上第一个用于监测互联网发展规模的“机器人”程序是Matthew Gray开发的World wide Web Wanderer。刚开始它只用来统计互联网上的服务器数量，后来则发展为能够检索网站域名。

与Wanderer相对应，1993年10月Martijn Koster创建了ALIWEB（Martijn Koster Annouces the Availability of Aliweb），它相当于Archie的>

蜘蛛是一种由网络程序构成的程序，其作用是自动收集网络上的信息。它们分析网络上的文档，检索其中的链接，再将这些链接返回给搜索引擎，以便搜索引擎可以把它们的索引添加到其索引数据库中。蜘蛛程序不是由号码构成的，而是由一系列的程序代码组成，这些代码可以帮助网络爬虫解析网络上的文档，从而获取有用的信息。蜘蛛程序也可以根据网络上的文档内容，将它们分类并归档。

以上就是关于全文搜索引擎中的"机器人"或"蜘蛛"程序使用了哪种计算机技术（ ）全部的内容，包括:全文搜索引擎中的"机器人"或"蜘蛛"程序使用了哪种计算机技术（ ）、百度这个搜索引擎是怎么做出来的、蜘蛛是什么号码等相关内容解答，如果想了解更多相关内容，可以关注我们，你们的支持是我们更新的动力！