Fatal编程技术网
  • java/
  • Java crawler4j总是返回致命的传输错误

Java crawler4j总是返回致命的传输错误

java web-crawler

Java crawler4j总是返回致命的传输错误,java,web-crawler,crawler4j,Java,Web Crawler,Crawler4j,这就是我添加到crawler4j的任何种子所得到的 ERROR [Crawler 1] Fatal transport error: Connection to http://example.com refused while fetching http://example.com/page.html (link found in doc #0) 这对我来说真的很奇怪。我不知道是什么原因造成的。尝试增加爬虫的礼貌设置。当我想要爬网的服务器不好时，它总是发生在我身上。当你访问http://exa

这就是我添加到crawler4j的任何种子所得到的

ERROR [Crawler 1] Fatal transport error: Connection to http://example.com refused while fetching http://example.com/page.html (link found in doc #0)
这对我来说真的很奇怪。我不知道是什么原因造成的。

尝试增加爬虫的礼貌设置。当我想要爬网的服务器不好时，它总是发生在我身上。

当你访问
http://example.com/page.html
在同一系统的浏览器中？它不会打开页面！：这是一个网络问题。这不是更多的评论