一个企业的网站在很多方面，比如一个数字商店或办公室。 它是客户或客户与业务互动的地方。 这是他们第一次接触的地方，也是他们最终购买公司产品或服务的地方。 这也是他们经常用来发展他们对企业品牌的看法。 正如一个办公室或商店应该是有吸引力和欢迎访客，商业网站也应该是如此。

一个网站需要易于导航，并允许访问者快速找到他们想要的东西。 事实上，一个网站有一个简单的结构更为重要。 这是因为不良的网站架构可能对SEO产生负面影响。 如果Google机器人和搜索引擎爬虫无法理解或导航网站，则可能会导致大问题。

不幸的是，网站架构很容易变得混乱和混乱—即使网站所有者或网站管理员从最好的意图开始。 一个企业的日常运作往往阻碍了网站结构的最佳实践。

我们与客户网站的经验

临时内容策略可以查看添加到站点的页面和元素，而无需考虑整体架构。 员工流失可能导致个人对网站的整体结构不了解，突然负责维护它。 最终的结果往往是一个笨拙和低效的网站架构。

这正是我们与客户合作时所面临的情况。 随着时间的推移，他们的网站已经发展到500,000+页面。 页面的数量和添加到网站的方式造成了一些严重的搜索引擎优化问题。 我们面临的挑战是解开一个庞大的网站的网站架构。

即使是最大、最令人困惑的网站也可以排队。你需要的是一个坚实的战略和坚持到底的意志。 我们将分享我们与一个名字已经匿名的客户合作的经验。 通过这样做，我们希望能给你一些关于如何满足你自己的结构的建议SEO挑战.

分析

作为一名外部专家前来提供建议或解决问题技术SEO问题对于网站，第一步是了解项目的范围。 一旦你欣赏了全貌，你就可以开始制定一个前进的策略了吗？ 即使您正在努力改进自己的网站，将网站分析为整体实体仍然是一个很好的起点。

对于较小的站点，可以手动查看站点架构并发现问题。 随着网站越来越大，这变得越来越困难。 一旦你到达一个超过500,000页的网站，它是不可行的。 你可以花几个星期的每一天的每一个小时的过程，但仍然没有划伤表面。 这就是技术搜索引擎优化工具的用武之地。

有各种各样的技术搜索引擎优化和谷歌分析工具大约在今天。 有些是免费使用的，有些则需要付费，还有一些同时有免费和付费版本。 这些工具可以帮助您执行从检查页面速度到测试结构化数据是否存在实现错误的所有操作。

使用SEMrush进行网站抓取

SEMrush机器人是一种有效的方式来执行深爬行需要掌握一个巨大的技术搜索引擎优化项目。 这种深度抓取将有助于识别困扰任何网站的基本和更高级的技术SEO问题。

它可以诊断的一些更基本的问题如下:

• Url中的错误

• 缺少页面标题

• 缺少元数据

• 错误响应代码

• 规范中的错误

最重要的是，使用SEMrush进行深度抓取可以帮助您完成一些更高级的任务:

• 识别分页的问题

• 评估内部链接

• 可视化和诊断站点体系结构的其他问题

当我们对网站进行深入抓取时，它突出了几个严重的问题。 识别这些问题有助于我们制定整体策略，以解开网站的架构。 下面是我们发现的一些问题的概述。

问题一：与网页的距离

Deep crawl突出显示的最明显的问题之一是某些页面距离主页有多远。 网站上的内容被发现是15页之外的任何内容。 作为一项规则，您应该尝试确保内容永远不会超过三次点击从您的主页。

"三次点击规则"的原因是双重的;它对您的网站访问者和SEO目的都是有意义的。 就访问者而言，他们不太可能愿意点击15页面以找到他们需要的内容。 如果他们无法快速找到他们正在寻找的内容，他们会从您的网站反弹并在其他地方搜索。

限制性点击距离从SEO的角度来看也是有意义的。 搜索引擎算法会考虑页面与网站主页的距离。 它越远，页面就越不重要。 更重要的是，远离主页的页面不太可能从主页的更高链接权限中获得许多好处。

问题二：只有10%的页面被索引

从Google Search Console中，我们发现只有10％的页面被编入索引。 作为我们技术搜索引擎优化分析的一部分，我们还审查了网站的日志文件;这揭示了许多其他问题。

一个没有索引的页面基本上是"未读"的谷歌和其他搜索引擎。 如果搜索引擎没有找到并"阅读"它，那么从搜索引擎优化的角度来看，您绝对无法为页面做任何事情。 它不会对任何搜索查询进行排名，并且对SEO无用。

我们的深度抓取显示，高达90％的网站页面属于该类别。 该网站拥有超过500,000页面，相当于大约450,000，几乎没有SEO价值。 正如我们所说，这是一个重大问题。

问题三：Url结构不清

通过网站审核，也清楚地表明内容缺乏明确的URL结构。 应该在网站的同一级别上的页面没有Url来反映这一点。 有关内容如何分类的混乱信号正在发送给Google;这是您需要考虑的问题建立你的博客或网站。

解释这个问题的最好方法是用一个例子。 假设你有一个网站，其中包括各种产品。 您的Url应该从域到类别到子类别到产品的逻辑流动。 一个例子是"网站/类别/子类别/产品"。 然后，所有产品页面都应该具有一致的URL结构。

如果某些产品具有不同的URL结构，则会出现问题。 例如，如果一个产品有一个像"网站/产品"这样的URL。 然后，该产品在网站上与其他产品处于不同的水平。 这给搜索引擎和用户造成了混乱。

问题四：主页和菜单上的链接太多

除了URL结构的问题之外，需要解决的另一个因素是在页面上找到的链接数量;这部分是一个全站问题。 例如，菜单有400多个链接。 页脚菜单同时包含42个链接。 这个数字比一个人可能使用的链接要多得多。 很明显，这些链接的很大一部分没有被使用到足以使其值得将它们合并到菜单或页脚中。

通过网站抓取，我们还确定了几个页面，包括主页，有100多个链接。 一个页面的链接越多，包括菜单，每个链接传递的内部PageRank就越少。 它也表明了一个令人困惑的网站结构。

总体而言，该网站实施的内部链接战略显然存在严重问题。 这一策略影响了谷歌如何为网站编制索引，并导致网站访问者的用户体验不佳。

其他问题

通过现场审计，确定了一些其他问题。 其中一些问题不会影响网站架构，但如果得到解决，将提高搜索排名。 以下是我们需要采取行动的一些关键因素的概述:

• 机器人文本文件:网站上使用了数千个标签。 大多数标签只有少数与它们相关联的内容。 除此之外，还有机会通过拒绝机器人访问网站来优化爬网预算;这有可能提高页面速度。

• 改进元数据:排名页面的元数据可以被审查和改进，以增加有机点击率。

• 页面加载时间:有机会改善页面的加载时间。 再次，这是谷歌的排名因素。

• 遗物域名页:作为服务器日志分析的结果，我们确定了一些获得大量Google Bot活动的relic域页面;这远非理想。 该活动可能意味着这些过期的页面仍出现在搜索结果中。

解决方案

我们的分析和研究确定了我们前面项目的范围。 它阐明了需要解决的问题。 这使我们能够制定一项战略，逐步解决这些问题。 以下是我们改进网站结构的四个关键领域的概述。 该列表不包括我们完成的其他任务，例如更新核心页面上的元描述和内容，这是网站审核的核心部分。

第一步：重定向和其他调整

让我们的牙齿进入的第一个任务是重定向遗物页面。 从我们确定为Google机器人活动最多的那些开始。 我们确保页面被重定向到最相关的内容。 有时这意味着一个页面已经取代了原来的页面。 在其他场合，它意味着主页。

这个策略让我们很快就赢了。 它确保了由过期域产生的任何流量都不会遇到损坏的页面。 我们在一开始做的另一个简单的调整是PR页面的布局;这消除了谷歌对它是否实际上是网站的存档页面的困惑。 这导致了内容索引的立即改进。

除此之外，该网站还有数千个标签。 我们不希望内容有限的标签出现在搜索结果中，因为它为访问该网站的人提供了糟糕的用户体验。 出于这个原因，我们对这些页面进行了解索引。

第二步：减少菜单中的链接数量

除了重定向过期页面的任务外，我们还致力于改进菜单结构。 正如我之前提到的，该网站在菜单上有400多个链接;这远远超过网站访问者所需要的。 此外，它比一个页面上推荐的链接数量多四倍。

虽然我们知道菜单中的链接数量是一个需要处理的问题，但我们仍然必须选择要删除的链接。 我们的解决方案是首先分析人们点击了哪些链接，以便我们了解哪些链接对读者最有用。 我们结合使用了谷歌分析和热图软件来生成我们随后分析的数据。

一旦我们确定了最有用的链接，我们就开始了识别我们知道需要在菜单上的类别和子类别页面的过程。 我们在这方面的方法是创建一个网站结构，所有内容都在主页的三次点击之内。

第三步：集群与重组

在我们最初的快速胜利之后，是时候转向重塑网站架构的更大工作了。 我们需要解决点击距离的问题，并给网站一个更合乎逻辑的结构。 这样，爬行器和实际用户都可以更容易地导航它。

我们采取的一步是利用聚类内容. 这意味着将相关页面汇集在一起，并从"支柱主题"页面链接到它们。 该页面将在网站主页的几次点击中，这意味着可以在三次点击中带来大量相关页面。 像这样的内容集群使访问者和抓取工具更容易操纵网站的内容。

集群是我们开始组织大量页面的方式。 当谈到整体结构时，我们专注于创建内容金字塔的想法。 这样的金字塔是公认的网站结构的黄金标准。 该网站的主页位于金字塔顶部。 类别页面位于下方，子类别进一步下降。 然后，各个页面构成了金字塔的宽底。

一旦内容集群和金字塔成型，链接的问题也很容易解决。 具有定义的结构使得链接页面更加直接。 不再有任何页面有数百个过多的链接。

第四步：改进URL结构

我们对网站结构的重组使得改进URL结构变得轻而易举。 内容金字塔意味着网站的Url可以实现我们前面提到的逻辑流。 不再是一个临时的基础上坐在不同的网站级别的网页。

该网站无数页面的Url与一个定义的结构一致;删除了发送给Google的混合消息。 搜索引擎现在可以更容易地理解–因此索引-网站的内容。

第五步：为图像添加尺寸

一个的文件大小图像对于很多网站来说，这是一个重要的问题。 如果有的话，图像通常格式不正确。 通过向图像添加尺寸，您可以通过确保首次显示大小和格式正确的图像来显着缩短页面加载时间。

通过为图像添加尺寸，我们将类别页面从通常超过25+MB减少到更可接受的每页2-4MB。 这显着提高了页面速度和用户体验，同时减少了服务器上的压力。

结果

我们的工作对现场的影响是显而易见的. 网站结构的改进对索引产生了深远而迅速的影响。 结果，它对网站流量产生了类似的愉悦效果。 在前三个月内，google索引的页面百分比从10％上升到93％。 此外，提交的url被批准的百分比也有所提高。

不出所料，突然索引了350,000页面的事实导致了网站流量的增加。 前三个月游客量增长了27%，9个月后增长了120%。

结论

我们为改进网站架构所采取的确切步骤可能不适用于您的网站。 然而，有效的是我们采用的一般策略。 这是一个策略，可以提供令人印象深刻的结果，即使是最大，最令人困惑的网站。

首先，你必须彻底研究手头的项目。 对你的网站进行全面的研究和分析应该确定你的工作范围。 然后，您将有一个改进的路线图。 如果您按照该路线图完成工作，您肯定会看到结果。