Amazon redshift 使用SQL Workbench从Redshift加载大型数据
我正在尝试使用SQLWorkbench/J的Amazon redshift 使用SQL Workbench从Redshift加载大型数据,amazon-redshift,sql-workbench-j,Amazon Redshift,Sql Workbench J,我正在尝试使用SQLWorkbench/J的WBExport函数从AmazonRedshift导出一个大表(100万行) WbExport -type=text -file='datafile.csv' -header=true -showProgress=1000 -delimiter=',' -dateFormat='dd-MM-yyyy' -timestampFo
WBExport
函数从AmazonRedshift导出一个大表(100万行)
WbExport -type=text
-file='datafile.csv'
-header=true
-showProgress=1000
-delimiter=','
-dateFormat='dd-MM-yyyy'
-timestampFormat='HH-mm-ss'
;
SELECT *
FROM large_data_table
;
但我得到了一个错误:
> GC overhead limit exceeded
PostgreSQL记录了此错误。但对亚马逊红移公司来说并非如此
有人能建议我如何将此数据集导出到文本中吗?例如,如果每个月使用for循环是一种好方法,或者如果有一种方法可以关闭缓冲,从而关闭内存限制