Python BeautifulSoup并没有获取所有数据，只有一些数据 导入请求 从bs4导入BeautifulSoup def trade_spider（最大页数）： 第页=0 当页面

而不是获取帖子正文的

.string

（为我工作）时：

---

作为旁注，您的脚本具有阻塞“特性”，您可以通过切换到来显著加快速度

你就快到了。只需将

item\u name.string

更改为

item\u name.text

import requests
from bs4 import BeautifulSoup


def trade_spider(max_pages):
page = 0
while page <= max_pages:
    url = 'http://orangecounty.craigslist.org/search/foa?s=' + str(page * 100)
    source_code = requests.get(url)
    plain_text = source_code.text
    soup = BeautifulSoup(plain_text)
    for link in soup.findAll('a', {'class':'hdrlnk'}):
        href = 'http://orangecounty.craigslist.org/' + link.get('href')
        title = link.string
        print title
        #print href
        get_single_item_data(href)
    page += 1

def get_single_item_data(item_url):
    source_code = requests.get(item_url)
    plain_text = source_code.text
    soup = BeautifulSoup(plain_text)
    for item_name in soup.findAll('section', {'id':'postingbody'}):
        print item_name.string



trade_spider(1)

item_name.get_text(strip=True)