如何使用Java解析twitter搜索页面的内容（结果）？

我正在尝试解析twitter搜索页面的HTML内容，即：。 我想从这个页面中提取所有推文

页面没有完全加载，因为如果我们到达页面的末尾，新内容总是会显示出来。

---

谢谢

您可以使用Twitter API，搜索iThanks！但是搜索API太有限了，我需要大量的tweet才能将其用作数据挖掘算法的输入：Twitter API需要注册电话号码来创建应用程序nowtoken等，即使是简单的GET请求。经过长时间的研究，我决定尝试对Twitter提要进行XML解析，但事实证明Twitter也停止了该服务。我找到converter希望继续我的研究，但Twitter也让他们停止了。我不知道他们为什么这么强迫自己，但我可以说一些隐私问题正在发生。但是，如果你仍然想获取内容，你可以使用。