Seo 如何停止jomres中特定页面的爬网?

Seo 如何停止jomres中特定页面的爬网?,seo,web-crawler,jomres,Seo,Web Crawler,Jomres,如何在jomres中停止此页面的google爬网,是否可以在robot.txt文件或任何其他解决方案中执行此操作?是,您可以通过添加以下行来通过robots.txt对此页面进行爬网 Disallow : /index.php/en/component/jomres/?Itemid=0&task=search&page=1&towns%5B0%5D=calangute 上面的行将仅阻止此页面,如果要阻止具有上述参数的所有页面,请使用this one Disallow :

如何在jomres中停止此页面的google爬网,是否可以在robot.txt文件或任何其他解决方案中执行此操作?

是,您可以通过添加以下行来通过robots.txt对此页面进行爬网

Disallow : /index.php/en/component/jomres/?Itemid=0&task=search&page=1&towns%5B0%5D=calangute 
上面的行将仅阻止此页面,如果要阻止具有上述参数的所有页面,请使用this one

Disallow : /index.php/en/component/jomres/?Itemid=*&task=*&page=*&towns%5B0%5D=*

在这里,我们将动态值更改为stars*,您可以根据自己的需要和任何特定情况对其进行自定义。

好的,非常感谢您。。。我试试看