为了收集数据，搜索引擎让爬行器跟踪链接周游、组织数据并判定每个页面上的文本与什么内容相关。当搜索者举办搜索时，搜索引擎操作爬行器收集的信息，通过专用排名算法成立与这次查询最相关的站点列表，并显示在 SERP 中。
目次事情道理 —— 简化版
Google 是真正的搜索引擎。它提供一些来自 Open Directory 或 DMOZ 的目次功效（拜见 参考资料），可是大大都功效来自爬行器的周游和 PageRank 算法（拜见 PageRank）。Yahoo!® 是一种目次殽杂型搜索引擎，它搜索本身的目次，然后利用 Yahoo Bot Slurp! 举办搜索引擎搜索。
纯粹的目次就像是图书馆中的分类卡，只不外是回收了电子形式。它包括编辑好的已提交到目次中的站点列表。它知道这个列表中有什么，并且知道对付搜索字段中输入的单词应该搜索哪些种别。这是因为最初的提交者经常会选择分类。别的，搜索者大概按照目次的种别举办欣赏，寻找带有他所请求的单词的站点。
目次和真正的搜索引擎之间的差别是，目次是工钱编辑出来的，济南百度爱采购入驻，而搜索引擎是由爬行器通过跟踪链接周游 Web 而成立的。白帽 SEO 的主要存眷点在于提高站点在利用爬行器编辑的搜索引擎中的排名。
