Reactjs 谷歌如何知道在使用GatsbyJS时要抓取哪些页面

Reactjs 谷歌如何知道在使用GatsbyJS时要抓取哪些页面,reactjs,seo,gatsby,google-crawlers,Reactjs,Seo,Gatsby,Google Crawlers,请原谅我在这里缺乏知识,我仍然是新的使用盖茨比 在本地构建时,如果我点击404页面,我会得到可用页面的列表。(见附件) 只是想知道谷歌是否会索引所有这些页面 如果谷歌能看到指向它们的链接,并且你没有索引提示,或者不允许在robots.txt中影响它们的规则,它很可能会这样做。最好是使用生成sitemap.xml。你可以提交给谷歌和其他人。谢谢传奇!!!我投票结束这个问题,因为它是关于搜索引擎优化,而不是编程。搜索引擎优化问题可能会在

请原谅我在这里缺乏知识,我仍然是新的使用盖茨比

在本地构建时,如果我点击404页面,我会得到可用页面的列表。(见附件)

只是想知道谷歌是否会索引所有这些页面


如果谷歌能看到指向它们的链接,并且你没有索引提示,或者
不允许
robots.txt
中影响它们的规则,它很可能会这样做。最好是使用生成sitemap.xml。你可以提交给谷歌和其他人。

谢谢传奇!!!我投票结束这个问题,因为它是关于搜索引擎优化,而不是编程。搜索引擎优化问题可能会在