Web crawler “移除/停止”;“谷歌机器人”;从扼杀站点带宽开始

Web crawler “移除/停止”;“谷歌机器人”;从扼杀站点带宽开始,web-crawler,bandwidth,googlebot,Web Crawler,Bandwidth,Googlebot,在magento站点中,32 gb的“带宽”被“未查看的流量包括机器人、蠕虫或带有特殊HTTP状态码的回复产生的流量”所浪费 仅谷歌机器人就使用了29.41 gb。我想避免所有这些“机器人/蜘蛛”占用带宽 主要是如何删除至少“谷歌机器人” 提前谢谢 可能重复的嗨迈克尔,谢谢你的回复。请访问此链接:这足以阻止googlebot访问该网站吗

在magento站点中,32 gb的“带宽”被“未查看的流量包括机器人、蠕虫或带有特殊HTTP状态码的回复产生的流量”所浪费

仅谷歌机器人就使用了29.41 gb。我想避免所有这些“机器人/蜘蛛”占用带宽

主要是如何删除至少“谷歌机器人”


提前谢谢

可能重复的嗨迈克尔,谢谢你的回复。请访问此链接:这足以阻止googlebot访问该网站吗