Optimization SEO-如何避免搜索引擎爬虫无法读取整个URL

我的URL中有大约7个查询字符串参数：

如果我将其分解为以下查询字符串参数：
productid
documentid
producttitle
类别ID
来源
数字页面
pos

其中我只需要向搜索引擎显示productId和documentId，实现这一点的最佳方法是什么

我可以再容纳一个名为“extendedattributes”的查询字符串参数，该参数将包含一个逗号分隔的剩余参数列表，我可以在请求中重新分隔这些参数并相应地创建响应，但这是实现这一点的好方法吗？还有其他更好的办法吗

---

谢谢

使用robots.txt或其他技术删除所有备选方案，并仅向站点地图添加所需的URL。搜索引擎将只为您想要的内容编制索引。

使用robots.txt或其他技术删除所有备选内容，并仅向站点地图添加您需要的URL。搜索引擎只会为你想要的索引。

我想到的第一件事是：#剩下的参数如下。然后使用JavaScript/Ajax检索其余参数并相应地加载内容。但是，该方法可能需要根据需要更改设计

---

我想到的第一件事是：剩下的参数如下。然后使用JavaScript/Ajax检索其余参数并相应地加载内容。但是，该方法可能需要根据需要更改设计

---

谷歌网站管理员工具会让你在索引你的网站时。（在“站点配置”和“设置”下查看）当然不能帮助您使用其他爬虫程序，因此这只是部分解决方案。

谷歌网站管理员工具在为您的站点编制索引时会允许您使用。（在“站点配置”和“设置”下查看）当然对其他爬虫程序没有帮助，因此这只是部分解决方案。

听起来是个不错的方法，但我倾向于考虑使用这种方法的响应时间？几乎相同。因为页面将只加载一次。后续请求只针对数据。听起来是个不错的方法，但我倾向于考虑这种方法对响应时间的影响？几乎相同。因为页面将只加载一次。后续请求仅针对数据。我们有超过一百万个动态url不确定这是否可行？我不是专家，但可能有一种方法可以使用通配符值或正则表达式，以便您可以在所需url之后定义任何url。我确信这可以自动化，但我不确定这是最好的方法。我只是给出了我的想法，搜索更多。我们有超过一百万个动态url不确定这是否可行？我不是专家，但也许有一种方法可以使用通配符值或正则表达式，这样你就可以在你想要的url之后定义任何url。我确信这可以自动化，但我不确定这是最好的方法。我只是给出了我的想法，搜索更多。为什么你要隐藏你的URL的部分？？？因为这些额外的参数根本无助于SEO排名。为什么你要隐藏你的URL的部分？？？因为这些额外的参数根本无助于SEO排名。

http://www.examplesitname.com/EN/en/tshirt-jeans.aspx?productid=324175730&documentid=295110#producttitle=Pyjama+Tshirt&categoryid=55479572&source=TreeStructureNavigation&numberpage=1&pos=TG_n_n