如果搜索引擎无法正确访问您的内容，那么您为构建网站所投入的所有努力都不会意味着什么。确保不会发生这种情况的一个重要方法是拥有适合搜索的网站架构。
要了解此问题，您需要了解搜索引擎如何构建索引，从中导出其结果页面上显示的网站列表。谷歌和其他搜索引擎没有将网站上的每一页存档的人员团队。它依赖于称为“蜘蛛”的程序 - 自动机器人在链接之间移动并将信息存储在其数据库中的站点代码中。
确保这些蜘蛛可以访问您网站上的所有内容对于seo非常重要。遗憾的是，许多网站架构错误可能会使搜索引擎的蜘蛛程序无法访问您网站的大部分内容。
以下是一些做网站中最常见的错误，以及如何避免它们的提示。
1.过度使用图像或脚本文件中的内容。
因为它们不是生活，呼吸人类读者，搜索引擎蜘蛛只能读取呈现给他们的基于文本的内容。如果您将信息存储在图像文件，flash动画或javascript代码中，例如您网站的标题图片或介绍性视频，则蜘蛛可能无法正确处理内容。
解决方案是使用文本版本复制以这些替代格式存储的信息。尝试使用webconf的搜索引擎蜘蛛模拟器等工具来观察蜘蛛到达您的网站后看到的内容。如果您发现缺少大量内容，请将排除的信息作为文本提供在页面的其他位置，或使用您网站的robot.txt文件 - 将搜索引擎提供给您的网站的说明 - 将蜘蛛重定向到专门设计的，您创建的基于文本的页面，为他们提供相同的信息。
2.深导航与浅导航。
当网站的导航变得太深时，许多初级网站管理员都会遇到麻烦。由于搜索引擎蜘蛛通过您创建的链接在您网站的页面之间移动，因此尽可能简化这种移动非常重要。如果您的导航结构很深，这意味着只有经过长时间的连续点击后才能访问某些页面，您将面临蜘蛛无法深入到您的网站以便适当地索引所有页面的风险。
解决方案是实现“浅层”导航结构，访问者和搜索引擎蜘蛛可以在两到三次点击中访问您网站上的每个页面。您可以通过将导航结构分解为子类别或合并其他内部链接来完成此任务。
3.不一致的链接实践。
在做网站构建这些链接时，您需要注意如何命名它们。再次，因为搜索引擎无法应用人类判断来查看您的意图，他们的蜘蛛程序可能会将url“www.yoursite.com/page1.html”和“yoursite.com/page1.html”编入索引为两个单独的页面 - 即使两个链接都将访问者引导到同一位置。
要防止出现这些索引错误，请在构建和命名链接的方式上保持一致。如果您在过去犯过这个错误，请使用301重定向让搜索引擎蜘蛛知道您网址的“www”和“非www”版本都是相同的。
4.重定向不正确。
当涉及到301重定向时，无论何时移动网站上的页面 - 无论是简单地重命名它们还是将整个网站转移到新的主机帐户或url - 您都希望将正确的重定向到位。如果不这样做，可能会导致将来出现索引错误，并消除您花费时间获取的反向链接所带来的好处，因为这些链接不再指向有效页面。这两个问题都可以降低您努力开发的搜索引擎结果排名。那还想要了解更多关于网站的相关内容，还可以看看《哪些工具有利于提升百度排名》。
由于这个主题可以获得技术性，并且无法用几句话充分涵盖，您可能需要寻找在线资源以供参考，例如seomoz的网站重定向指南。
5.末尾包含站点地图。
当您改进网站架构的辅助功能时，请确保您已准备好站点地图。此文件为蜘蛛提供了站点上所有页面的可访问引用，允许索引正确进行。例如，这是f360f.com的站点地图。
如果您的网站在wordpress，joomla，drupal，magento或任何其他已建立的平台上运行，您应该能够安装一个能够自动为您生成站点地图页面的插件。如果没有，创建站点地图可以像构建单个html页面一样简单，该页面包含指向所有其他页面的链接，并将其提交给搜索引擎以供考虑。