Shopify 商店现在可以编辑他们的robots.txt文件，这使所有者可以更好地控制谷歌搜索引擎如何抓取他们的网站。
所有 Shopify 商店都以相同的robots.txt开头，该公司表示这适用于大多数网站，但现在可以通过 robots.txt.liquid 主题模板编辑该文件。
网站所有者可以对 robots.txt 文件进行以下编辑：
- 允许或禁止抓取某些 URL
- 为某些爬虫添加爬取延迟规则
- 添加额外的站点地图 URL
- 阻止某些爬虫
Shopify 建议使用 Liquid 在 robots.txt.liquid 模板中添加或删除指令，因为它保留了保持文件自动更新的能力。
如何在 Shopify 中编辑 Robots.txt
以下是自定义 Shopify 商店的 robots.txt 文件的步骤：
- 从 Shopify 管理员处，转到在线商店> 主题。
- 单击“操作”，然后单击“编辑代码”。
- 单击添加新模板，然后选择机器人。
- 单击创建模板。
- 对默认模板进行您想要的更改。
- 将更改保存到您已发布主题中的 robots.txt.liquid 文件。
或者，网站所有者可以删除模板的内容并将其替换为纯文本规则，但 Shopify 不建议这样做，因为它不会自动更新。
ThemeKit 或命令行更改将保留 robots.txt.liquid 文件。从 Shopify 管理员的主题部分上传主题不会导入 robots.txt.liquid。
Shopify 警告说，编辑 robots.txt.liquid 文件是一种不受支持的自定义，这意味着他们的支持团队无法帮助进行编辑。
Shopify 警告称：“错误使用该功能可能会导致所有流量损失。”尽管任何网站的 robots.txt 文件都是如此。
其他资源
以下是 Shopify 提供的一些资源，可能有助于编辑 robots.txt。
首先，这是前面引用的robots.txt liquid 模板。
Shopify还提供了robots.txt自定义教程。
专注于 Shopify SEO 的人员对于此次更新的消息非常满意，并表示 Shopify 是时候提供编辑 robots.txt 的功能了。