为保证“广泛的关键词”策略的有效性，网站需要进行组织，让搜索引擎可以顺利地遍历或检索网站内的所有网页。为了更好的理解这一点，让我们先来看看搜索引擎的Spiders是如何遍历网站的。
在对网站的第一次造访中，Spider首先会取得一个叫做Robots.txt的文件来决定是否允许它检索。
当Spiders从另外一个站点发现你网站的链接时，若Robots.txt文件里并未声明不允许它访问该页面，则Spiders会把这个页面保存下来。它不一定就是主页，也可能是你网站的其它页面。
Spider在对这一页进行检索时，它会从中摘录一些关于内容方面的信息和页面上的所有链接，并将其放入搜索引擎的数据库里面。如果它所认为你的网站十分重要，它稍后会检索这些链接页面。
如果你在网站的每个页面上都放了一组指向网站主要部分的链接(网站全局导航链接)，那么接下来这些链接页极有可能得到Spider的检索。假设网站上的每个页面上都依次放有指向网站主要内容的链接，那么搜索引擎要想遍历整个网站真是易如反掌。
因而，最有效的网站结构当属自顶而下(Top-Down)或金字塔型设计结构。规模较大的网站(至少十几页)应设立一个网站地图页，用以列出网站的所有内部链接页。SUN微电子公司的网上大师级人物杰可布.尼尔森(Jakob Nielsen)认为：一个网站设计的精良与否的一个重要标志就是是否有网站地图。
许多人对文本链接方式的网站导航持排斥态度(可能因为它不那么漂亮吧)，而是热衷于Flash或动态网页(DHTML)形式的菜单。使用这种导航方式的人要当心了，因为搜索引擎目前尚无法很好地支持这种导航系统。不过别担心，只需将文本导航链接放到网页的最下方，这样既保持了你喜欢的网站风格，又向搜索引擎提供了更对它们口味的东西，可谓皆大欢喜。
内容清楚的文字性链接不但可使你的网站很容易得到Spiders的检索，而且对我们这些真实的访问者来说亦一目了然。做文字链接时需注意一个问题：尽量让网站的内容只需最多两三次点击就可以打开，可创建一个网站地图把这些链接放到一起。
