Ajax 避免重复内容在谷歌上点击归档页面？

我的网站上的每一篇博客文章——都被归档在自己的永久链接URL中

在每个归档页面上，我不仅要显示归档的文章，还要显示之前发布的10篇文章，这样人们可以更好地了解博客提供的内容

我担心的是，谷歌和其他搜索引擎会认为其他帖子是重复的内容，因为每个帖子都会出现在多个页面上。

在我的另一个博客上-，我试图通过将以前的文章作为AJAX调用加载来解决这个问题，但是我想知道是否有更简单的方法

有没有办法向搜索引擎发出信号，表示页面的某个特定部分不应该被索引

---

如果没有，有没有比AJAX调用更简单的方法来完成我想做的事情呢？

我担心，但我认为不可能告诉搜索引擎不应该为网页的某个特定部分编制索引（例如HTML源中的div）。解决这个问题的一个方法是使用一个Iframe来为您不知道要索引什么搜索引擎的内容创建索引，因此我将使用一个robot.text文件，该文件带有一个适当的标记Disallow，以拒绝访问链接到Iframe的特定文件

你不能告诉谷歌忽略网页的某些部分，但你可以以搜索引擎无法找到的方式提供这些内容。您可以将该内容放在

中，也可以通过JavaScript提供该内容

我不喜欢这两种方法，因为它们太粗糙了。你最好的办法是从搜索引擎中完全屏蔽这些页面，因为所有内容都是重复的。您可以通过以下几种方式实现：

使用robots.txt阻止存档。如果中的存档文件位于它们自己的目录中，则可以轻松地阻止整个目录。您还可以阻止单个文件并使用通配符匹配模式

使用

标记阻止每个页面被索引

使用

X-Robots-Tag:noindex

HTTP头阻止搜索引擎索引每个页面。这在效果上与使用`标记相同，尽管这个标记更容易实现，因为您可以在.htaccess文件中使用它并将其应用于整个目录

---

警告：这还没有在野外测试过，但根据我对谷歌站长中心博客和schema.org文档的阅读，应该可以工作。无论如何

---

这似乎是一个很好的用例，可以使用它来构建您的内容。这包括将内容标记为类型，如下所示：

   <div itemscope itemtype="http://schema.org/Article" class="item first">
      <h3 itemprop="name">August 13's correlation</h3>        
      <p itemprop="description" class="stat">In general, 27 percent of people have never had any wisdom teeth extracted. But among those who describe themselves as pessimists, 38 percent haven't had wisdom teeth extracted.</p>
      <p class="info">Based on a survey of 222 people who haven't had wisdom teeth extracted and 576 people in general.</p>
      <p class="social"><a itemprop="url" href="http://www.correlated.org/153">Link to this statistic</a></p>  
   </div>

href=”http://en.wikipedia.org/wiki/The_Catcher_in_the_Rye“>维基百科 页

因此，当以这种方式标记时，谷歌应该能够正确地归属于哪一段内容属于哪一个规范URL，并在SERP中对其进行相应的加权

一旦你完成了内容的标记，你就可以使用测试，在你将其投入生产之前，它应该能很好地告诉你谷歌关于你的页面的内容

---

---

p、 为了避免重复的内容惩罚，你可以做的最重要的事情就是修复永久链接页面上的标题。目前，他们都读到了“相关-发现惊人的相关性”，这将导致你的排名遭受巨大打击。

在我们在开始和归档页面上展开文章的网站上也有同样的问题。我们不使用hashbang，而是history.pushState。当我们扩展内容时，可能会重复：这不完全是您要找的内容，但如果您不发布完整的其他文章，而只发布他们的标题和简短摘录并链接到他们，则用户和搜索引擎可能会更清楚。Itressing。将尝试使用canonical itemproppostscript->他们是否会因为相关/相关的重复而“受到打击”？否@Kieran-他们会受到打击，因为每个permalink页面上的标题都是相同的。每个页面的标题都应该是唯一的。请参见此处的重复标题：，

<div itemscope itemtype="http://schema.org/Book">
  <span itemprop="name">The Catcher in the Rye</span>—
  by <span itemprop="author">J.D. Salinger</a>
  Here is the book's <a itemprop="url"