Php 我可以在我的网站上提供网站审计工具吗?
我计划开发一个在线网站审计工具,使用PHP和CURL,就像我的网站一样,并希望在我的网站上提供它,这样人们就可以完全免费查看多个网站的网站审计报告。在这个工具的开发过程中,我需要抓取一些像Alexa这样的站点。我想知道这是允许的吗?如果有规则,请告诉我。感谢任何与我关注的问题相关的建议。您可以按照以下步骤开始: 注册亚马逊网络服务AWS 注册Alexa Web信息服务 阅读如何通过以下方式向此服务提交请求:Php 我可以在我的网站上提供网站审计工具吗?,php,seo,web-crawler,Php,Seo,Web Crawler,我计划开发一个在线网站审计工具,使用PHP和CURL,就像我的网站一样,并希望在我的网站上提供它,这样人们就可以完全免费查看多个网站的网站审计报告。在这个工具的开发过程中,我需要抓取一些像Alexa这样的站点。我想知道这是允许的吗?如果有规则,请告诉我。感谢任何与我关注的问题相关的建议。您可以按照以下步骤开始: 注册亚马逊网络服务AWS 注册Alexa Web信息服务 阅读如何通过以下方式向此服务提交请求: 当然,对于第1步和第2步,您必须支付…允许爬网网站。然而,破坏网站在大多数国家并不普遍
当然,对于第1步和第2步,您必须支付…允许爬网网站。然而,破坏网站在大多数国家并不普遍。这意味着你不应该干扰网站。只是观察。按照惯例,你也应该遵循这些准则
具体法律因国家而异。但是请记住,您不能显示您所爬网的实际站点,因为它们的所有者拥有版权。但是,您可以在大多数国家/地区发布审计结果。您可以使用siteliner.com帮助开发网站aduit工具。siteliner是一个提供网站报告的网站,如重复内容的内部页面、断开的链接等。您还可以查看smallseotools.com。站点aduti工具。您需要询问Alexa或检查他们是否已经有了用于此的API。谢谢Alex。我将遵循robots.txt指南。我会搜索更多细节谢谢你barak manos。我会核对你分享的细节。