Search 免费网络搜索API或网络搜索日志

Search 免费网络搜索API或网络搜索日志,search,dataset,logging,web,Search,Dataset,Logging,Web,对于大学研究,我需要很多web查询示例和一些搜索引擎返回的相关资源,为此我有两种可能:从搜索引擎收集它们或搜索一些可用的数据集 我知道谷歌提供了一个API,但我知道它每天只允许100个免费查询 有人能给我其他建议吗?有几个免费的查询日志数据集可用,但据我所知,它们都比较旧 对于英文查询日志: --您可能需要请求访问此文件,但应可用于研究目的 或者,你可以为谷歌或其他搜索引擎编写自己的scraper来绕过API限制,但这在道德上是一个灰色地带,我知道谷歌会在几百次查询后向你提供CAPTCHA

对于大学研究,我需要很多web查询示例和一些搜索引擎返回的相关资源,为此我有两种可能:从搜索引擎收集它们或搜索一些可用的数据集

我知道谷歌提供了一个API,但我知道它每天只允许100个免费查询


有人能给我其他建议吗?

有几个免费的查询日志数据集可用,但据我所知,它们都比较旧

对于英文查询日志:

  • --您可能需要请求访问此文件,但应可用于研究目的

或者,你可以为谷歌或其他搜索引擎编写自己的scraper来绕过API限制,但这在道德上是一个灰色地带,我知道谷歌会在几百次查询后向你提供CAPTCHA。

有几个免费的查询日志数据集可用,但据我所知,他们都比较老

对于英文查询日志:

  • --您可能需要请求访问此文件,但应可用于研究目的
或者,你可以为谷歌或其他搜索引擎编写自己的scraper来绕过API限制,但这在道德上是一个灰色地带,我知道谷歌将在几百次查询后开始向你提供CAPTCHA