C# 4.0 如何通过编程方式搜索Robots.txt文件
我想在谷歌搜索这个词，然后用.Net搜索100个结果。我们可以向{searchterm}&num=100发出请求。但根据谷歌的服务条款，我们不应该让这个过程自动化。我验证了Robots.txt文件，我们不应该发送任何请求，我们有一个谷歌免费的自定义搜索API。它每天只允许100个请求。如果我们想要更多的要求，那么我们需要支付。付款后，我们无法搜索整个网站。免费谷歌自定义搜索结果不匹配，如果我们试图在谷歌搜索同一个词，请让我知道如何获得搜索词使用谷歌合法前100名的结果。我们能做自动化处理吗？它会阻止我们的IP吗C# 4.0 如何通过编程方式搜索Robots.txt文件,c#-4.0,google-cloud-platform,google-custom-search,google-search-api,C# 4.0,Google Cloud Platform,Google Custom Search,Google Search Api,我想在谷歌搜索这个词，然后用.Net搜索100个结果。我们可以向{searchterm}&num=100发出请求。但根据谷歌的服务条款，我们不应该让这个过程自动化。我验证了Robots.txt文件，我们不应该发送任何请求，我们有一个谷歌免费的自定义搜索API。它每天只允许100个请求。如果我们想要更多的要求，那么我们需要支付。付款后，我们无法搜索整个网站。免费谷歌自定义搜索结果不匹配，如果我们试图在谷歌搜索同一个词，请让我知道如何获得搜索词使用谷歌合法前100名的结果。我们能做自动化处理吗？它会