Python 2.7 Python:在留言板上刮取多个页面
我想能够从雅虎财经的消息页面上抓取特定股票的所有消息 以下是一个示例页面: 我希望能在那里得到所有的信息。 如果我点击上述链接上的“消息”按钮,我将转到此链接: 它有10多页 我如何使用Python代码通过只知道股票符号“AMD”来刮取这些数据?基本知识:Python 2.7 Python:在留言板上刮取多个页面,python-2.7,web-scraping,Python 2.7,Web Scraping,我想能够从雅虎财经的消息页面上抓取特定股票的所有消息 以下是一个示例页面: 我希望能在那里得到所有的信息。 如果我点击上述链接上的“消息”按钮,我将转到此链接: 它有10多页 我如何使用Python代码通过只知道股票符号“AMD”来刮取这些数据?基本知识: tickers = ['AMD', 'AAPL', 'GOOG'] for t in tickers: url = 'http://finance.yahoo.com/mb/' + t + '/' r = br.open(url
tickers = ['AMD', 'AAPL', 'GOOG']
for t in tickers:
url = 'http://finance.yahoo.com/mb/' + t + '/'
r = br.open(url)
html = r.read()
soup = BeautifulSoup(html)
print soup
您想要的内容位于特定的html标记中。使用
汤。找到所有你想要的。要在页面之间移动,请使用Selenium。Jonathan:您能详细说明一下吗?谢谢。