使用WebCollector遇到的异常—java.io.IOException: Premature EOF

异常表达：java.io.IOException: Premature EOFat sun.net.www.http.ChunkedInputStream.fastReadat..........

原因：
1.运行时网络情况差
——过段时间再次运行，看看是否有改善
2.crawler.setThreads(50);参数设置成50 太小了改成5000试试，在你的url很多的时候，这个地方也需要变大。