Python 错误:字段大于字段限制(131072)
我使用spyder python中的大csv数据将csv转换为json,但它显示的错误字段大于字段限制(131072) 转换脚本:Python 错误:字段大于字段限制(131072),python,json,csv,data-conversion,Python,Json,Csv,Data Conversion,我使用spyder python中的大csv数据将csv转换为json,但它显示的错误字段大于字段限制(131072) 转换脚本: import csv import json file = r'abcdata.csv' json_file = r'abcdata.json' #Read CSV File def read_CSV(file, json_file): csv_rows = [] with open(file) as csvfile: rea
import csv
import json
file = r'abcdata.csv'
json_file = r'abcdata.json'
#Read CSV File
def read_CSV(file, json_file):
csv_rows = []
with open(file) as csvfile:
reader = csv.DictReader(csvfile)
field = reader.fieldnames
for row in reader:
csv_rows.extend([{field[i]:row[field[i]] for i in range(len(field))}])
convert_write_json(csv_rows, json_file)
#Convert csv data into json
def convert_write_json(data, json_file):
with open(json_file, "w") as f:
f.write(json.dumps(data, sort_keys=False, indent=1, separators=(',', ': '))) #for pretty
f.write(json.dumps(data))
read_CSV(file, json_file)
您必须有大的数据列。单个列中数据的默认限制为
csv.field\u size\u limit()
。它可以更改为:
>>> import csv
>>> csv.field_size_limit()
131072
>>> csv.field_size_limit(256<<10)
131072
>>> csv.field_size_limit()
262144
导入csv
>>>csv.字段大小限制()
131072
>>>csv.field\u size\u limit(256>csv.field\u size\u limit)()
262144
您也可能错误地读取了.CSV。请添加stacktrace。还可以添加更多有关您正在使用的数据、行/列编号、文件大小等的数据。