管理店铺防爬虫设定

【防爬虫设定】可让您限制爬虫访问指定的店铺前台页面路径。此功能有助于减少不必要的抓取行为，并限制爬虫访问特定店铺前台内容。本文将说明如何配置防爬虫设定，并管理店铺前台页面的爬虫访问行为。

了解店铺防爬虫设定

防爬虫设定可帮助您限制爬虫访问指定的店铺前台页面路径。

此功能常用于以下场景：

• 限制不必要的抓取行为
• 限制爬虫访问临时页面
• 减少过量的爬虫流量
• 防止指定内容被索引

当页面路径启用防爬虫保护后，搜索引擎使用的爬虫也可能无法访问或索引受保护的内容。

添加防爬虫保护页面

如需添加防爬虫页面，请按以下步骤操作：

1. 在 SHOPLINE 管理后台，前往【在线商店】>【偏好设置】。

2. 找到【防爬虫设定】区域，点击【添加防爬虫页面】。

   

3. 在【添加防爬虫页面】窗口中，

   • 输入您希望限制爬虫访问的页面路径。
   • 仅需输入网址中的路径部分。

   例如：

   • 完整网址：https://yourstore.com/products/example-product
   • 输入的路径：products/example-product

   

4. 点击【添加】。

配置完成后，该页面路径会加入防爬虫保护列表。

查询店铺前台页面路径

如需查询页面 Path，请按以下步骤操作：

1. 打开您希望限制爬虫访问的店铺前台页面。
2. 在浏览器地址栏中找到该页面网址。
3. 仅复制网址中的路径部分。
4. 将复制的路径粘贴到【页面path】字段中。

管理现有防爬虫保护规则

在【防爬虫设定】列表中，您可以通过【操作】列管理现有防爬虫规则。

编辑防爬虫保护规则

如需编辑防爬虫规则，请找到已配置的页面路径条目，然后点击【操作】列中的【铅笔图标】。根据需要更新页面路径，然后保存更改。

删除防爬虫保护规则

如需删除防爬虫规则，请找到已配置的页面路径条目，然后点击【操作】列中的【垃圾桶图标】。

防爬虫设定的重要注意事项

• 防爬虫设定可能会影响店铺前台的 SEO 可见性和搜索引擎索引。
• 搜索引擎爬虫可能无法访问受保护的页面路径。
• 除非必要，请避免对重要店铺前台页面启用防爬虫保护。
• 爬虫限制设置变更可能需要数分钟才会生效。
• 在正式运营的店铺前台启用防爬虫设置前，请仔细检查相关配置。

关于防爬虫设定的常见问题

问题 1：为什么我的页面没有出现在搜索引擎结果中？

该页面路径可能已受到防爬虫设定保护，导致搜索引擎爬虫无法访问或索引内容。您可以在以下位置检查设置：【在线商店】>【偏好设置】>【防爬虫设定】

问题 2：防爬虫保护会阻挡搜索引擎吗？

有可能。搜索引擎爬虫也可能受到防爬虫保护设置影响。

问题 3：顾客仍可以访问受防爬虫保护的页面吗？

可以。防爬虫设定用于限制爬虫访问，而不是限制普通顾客浏览页面。

问题 4：为什么受保护的页面仍显示在搜索结果中？

应用爬虫限制后，搜索引擎可能需要一段时间才会更新索引结果。已被索引的内容也可能会暂时继续显示。