Python 关于如何从本网站中获取数据的建议
我想就如何从这个网站刮取数据一些建议 我从selenium开始，但一开始就被卡住了，因为，例如，我不知道如何设置日期 我的代码到现在为止：Python 关于如何从本网站中获取数据的建议,python,selenium,Python,Selenium,我想就如何从这个网站刮取数据一些建议 我从selenium开始，但一开始就被卡住了，因为，例如，我不知道如何设置日期 我的代码到现在为止： from bs4 import BeautifulSoup as soup from openpyxl import load_workbook from openpyxl.styles import PatternFill, Font from selenium import webdriver from selenium.webdriver.common
from bs4 import BeautifulSoup as soup
from openpyxl import load_workbook
from openpyxl.styles import PatternFill, Font
from selenium import webdriver
from selenium.webdriver.common.by import By
import datetime
import os
import time
import re
day = datetime.date.today().day
month = datetime.date.today().month
year = datetime.date.today().year
my_url = 'https://www.eex-transparency.com/homepage/power/germany/production/availability/non-usability-by-unit/non-usability-history'
cookieValue = '12-c12-cached|from:' +str(year)+ '-' +str(month)+ '-' +str(day-5)+ ','+'to:' +str(year)+ '-' +str(month)+ '-' + str(day) +',dateType:1,company:PreussenElektra,fuel:uranium,canceled:0,durationComparator:ge,durationValue:5,durationUnit:day'
#saving url
browser = webdriver.Chrome(executable_path=r"C:\Program Files (x86)\Google\Chrome\Application\chromedriver.exe")
my_url = 'https://www.eex-transparency.com/homepage/power/germany/production/availability/non-usability-by-unit'
browser.add_cookie({'name': 'tem', 'value': cookieValue})
browser.get(my_url)
my_url = 'https://www.eex-transparency.com/homepage/power/germany/production/availability/non-usability-by-unit/non-usability-history'
browser.get(my_url)
编辑：我正在尝试遵循cookie的方式。这是我更新的代码，我读到在加载页面之前需要创建cookie，我也这么做了，你知道它为什么不工作吗？你决定使用selenium而不是其他web抓取工具（scrapy、urllib等）有什么特别的原因吗？我个人没有使用Selenium，但我使用了其他一些工具。下面是一个脚本示例，用于从页面中提取所有html
import urllib
import urllib2
from bs4 import BeautifulSoup as soup
link = "https://ubuntu.com"
page = urllib2.urlopen(link)
data = soup(page, 'html.parser')
print (data)
编辑：这里有一个讨论，我不久前在reddit上保存了web抓取工具，对您来说最好的方法是更改cookie，因为每个过滤器数据都保存在cookie中 检查chrome
（f12->应用程序->cookies）radio = browser.find_elements_by_class_name('aaaaaa')
您可以始终使用xPath搜索元素（chrome将为您生成这些元素） 此id
infected\u datec-12