Python 将URL复制到包含特定术语的文件

因此，我尝试获取该范围内的所有URL，这些URL的页面包含术语“Recipes adapted from”或“Recipe from”。这将复制到该文件的所有链接，直到大约7496，然后抛出HTTPError 404。我做错了什么？我已尝试实现BeautifulSoup和请求，但仍然无法使其工作

import urllib2
with open('recipes.txt', 'w+') as f:
    for i in range(14477):
        url = "http://www.tastingtable.com/entry_detail/{}".format(i)
        page_content = urllib2.urlopen(url).read()
        if "Recipe adapted from" in page_content:
            print url
            f.write(url + '\n')
        elif "Recipe from" in page_content:
            print url
            f.write(url + '\n')
        else:
            pass

---

您试图获取的某些URL不存在。通过忽略异常，简单地跳过：

import urllib2
with open('recipes.txt', 'w+') as f:
    for i in range(14477):
        url = "http://www.tastingtable.com/entry_detail/{}".format(i)
        try:
            page_content = urllib2.urlopen(url).read()
        except urllib2.HTTPError as error:
            if 400 < error.code < 500:
                continue  # not found, unauthorized, etc.
            raise   # other errors we want to know about
        if "Recipe adapted from" in page_content or "Recipe from" in page_content:
            print url
            f.write(url + '\n')

导入urllib2
将open（'recipes.txt'，w+'）作为f：
对于范围内的i（14477）：
url=”http://www.tastingtable.com/entry_detail/{}格式（一）
尝试：
page_content=urllib2.urlopen（url.read）（）
除了urllib2.HTTPError作为错误外：
如果400<错误代码<500：
继续#未找到、未经授权等。
提出我们想知道的其他错误
如果第\页内容中的“配方改编自”或第\页内容中的“配方来源”：
打印url
f、 写入（url+“\n”）