可索引的内部搜索页面
Magento SEO 的另一个问题是内部搜索页面可以立即建立索引。面并将其编入索引。这些页面通常位于 /catalogsearch/ URL 路径中。
例如，这是一个 Magento 网站，其中 Google 索引中捕获了 4,000 多个内部搜索页面：
内部搜索页面在 Google 搜索结果中的排名
为了确保这些页面不被 Google 索引，您需要确保对它们应用“noindex”标签。我们建议让开发人员为您实现此功能，并提供本文作为他们的参考。
实施“noindex”标签后，您需要确保您的内部搜索 URL 均未真 whatsapp 数据库 正被编入索引。搜索 。如果您看到索引中出现网址，我们建议您等到 Google 删除其中的大部分。如果您在索引中没有看到这些 URL，您可以考虑使用 robots.txt 命令来阻止它们。
机器人.txt
在 Magento 中，您还可以配置 robots.txt 文件。您可能需要使用 robots.txt 文件来 了解差异：Boosted Posts 与 Facebook（元）广告 限制 Google 能够抓取 Magento 网站的页面数量。如果您的网站使用允许用户从不同属性中进行选择的分面导航，那么设置这一点尤其重要。
幸运的是，Magento 允许您控制站点的 robots.txt。为此，您可以采取以下步骤：
在管理侧边栏中，转到内容 > 设计 > 配置。
找到您要调整的“商店视图”并选择“编辑”。
展开“搜索引擎机器人”下拉列表。
将命令添加到“编辑 文件自定义指令”字段。
如何调整 robots.txt 将取决于您的具体商店。不幸的是，没有一种放之四海而 安圭拉销售 皆准的选择。主要目标是防止抓取任何低价值页面（未排序），同时允许抓取高优先级页面。
以下是您可能会考虑在 robots.txt 中阻止的一些常规内容：
通过分面导航和排序选项创建的低成本页面
网站内部搜索页面
登录页面
用户的购物车
站点地图.xml
件可确保 Google 能够发现您网站的所有关键网址。这意味着无论网站的体系结构如何，sitemap.xml 都为 Google 提供了一种在网站上查找重要 URL 的方法。
幸运的是，，并且在默认设置下做得很好。从技术上讲，您可以在 Magento 的“目录”菜单中配置 XML 站点地图设置。不过，大多数应该没问题。