R-在多个线程中运行download.file脚本
我必须从雅虎财经下载纽约证券交易所所有股票的历史收盘价。这是一个工作脚本,下载600多只股票的数据大约需要20分钟。我有强大的服务器,并想下载这些并行。我该怎么做R-在多个线程中运行download.file脚本,r,rstudio,data-science,R,Rstudio,Data Science,我必须从雅虎财经下载纽约证券交易所所有股票的历史收盘价。这是一个工作脚本,下载600多只股票的数据大约需要20分钟。我有强大的服务器,并想下载这些并行。我该怎么做 for(val in stocks$V1) { url <- paste(paste("http://real-chart.finance.yahoo.com/table.csv?s=", val, sep=""), "&a=11&b=12&c=1980&d=9&e=28&f=
for(val in stocks$V1) {
url <- paste(paste("http://real-chart.finance.yahoo.com/table.csv?s=", val, sep=""), "&a=11&b=12&c=1980&d=9&e=28&f=2015&g=d&ignore=.csv", sep="")
file_name <- paste(paste("/Users/usdgadiraj/Research/BigData/data/nyse/rscript/", val, sep=""), ".csv", sep="")
download.file(url, file_name)
}
for(股票价值$V1){
url使用foreach
软件包和%dopar%
功能。您需要根据您的操作系统使用特定于系统的并行后端,并从中注册群集。有关详细信息,请参阅以下链接: