爬网

对内容进行爬网是指系统访问和分析内容及其属性（有时称为“元数据”）从而建立可提供搜索查询服务的内容索引的过程。

通过成功地对内容进行爬网，爬网程序可以访问和读取您希望用于搜索查询的单个文件或内容片段。这些文件的关键字和元数据存储在内容索引（有时称为“索引”）中。该索引包含关键字和元数据，关键字存储在索引服务器的文件系统中，而元数据存储在搜索数据库中。该系统可维护关键字、与单个内容片段关联的元数据以及从中对内容进行爬网的源的 URL 之间的映射。