Warning: file_get_contents(/data/phpspider/zhask/data//catemap/1/php/241.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Php 我可以在我的网站上提供网站审计工具吗?_Php_Seo_Web Crawler - Fatal编程技术网

Php 我可以在我的网站上提供网站审计工具吗?

Php 我可以在我的网站上提供网站审计工具吗?,php,seo,web-crawler,Php,Seo,Web Crawler,我计划开发一个在线网站审计工具,使用PHP和CURL,就像我的网站一样,并希望在我的网站上提供它,这样人们就可以完全免费查看多个网站的网站审计报告。在这个工具的开发过程中,我需要抓取一些像Alexa这样的站点。我想知道这是允许的吗?如果有规则,请告诉我。感谢任何与我关注的问题相关的建议。您可以按照以下步骤开始: 注册亚马逊网络服务AWS 注册Alexa Web信息服务 阅读如何通过以下方式向此服务提交请求: 当然,对于第1步和第2步,您必须支付…允许爬网网站。然而,破坏网站在大多数国家并不普遍

我计划开发一个在线网站审计工具,使用PHP和CURL,就像我的网站一样,并希望在我的网站上提供它,这样人们就可以完全免费查看多个网站的网站审计报告。在这个工具的开发过程中,我需要抓取一些像Alexa这样的站点。我想知道这是允许的吗?如果有规则,请告诉我。感谢任何与我关注的问题相关的建议。

您可以按照以下步骤开始:

注册亚马逊网络服务AWS

注册Alexa Web信息服务

阅读如何通过以下方式向此服务提交请求:


当然,对于第1步和第2步,您必须支付…

允许爬网网站。然而,破坏网站在大多数国家并不普遍。这意味着你不应该干扰网站。只是观察。按照惯例,你也应该遵循这些准则


具体法律因国家而异。但是请记住,您不能显示您所爬网的实际站点,因为它们的所有者拥有版权。但是,您可以在大多数国家/地区发布审计结果。

您可以使用siteliner.com帮助开发网站aduit工具。siteliner是一个提供网站报告的网站,如重复内容的内部页面、断开的链接等。您还可以查看smallseotools.com。站点aduti工具。

您需要询问Alexa或检查他们是否已经有了用于此的API。谢谢Alex。我将遵循robots.txt指南。我会搜索更多细节谢谢你barak manos。我会核对你分享的细节。