Python 计算块的数量
我正在使用chuncksize(熊猫数据帧)读取一个大型csv文件,如下所示 我知道我可以计算它在文件中读取的块数,但我想自动计算并将块数保存到一个变量中,就像这样(在伪代码中)Python 计算块的数量,python,pandas,dataframe,chunks,Python,Pandas,Dataframe,Chunks,我正在使用chuncksize(熊猫数据帧)读取一个大型csv文件,如下所示 我知道我可以计算它在文件中读取的块数,但我想自动计算并将块数保存到一个变量中,就像这样(在伪代码中) 有什么想法吗?您对读取的数据还做了什么吗?是的,我需要更改格式、多重索引、do mean和std等,但这些都很好。我只想知道你们走的时候,chuncksJust轨道的数量,也许对于块的数量,枚举中的df(读取器,开始=1):? reader = pd.read_csv('log_file.csv', low_memor
有什么想法吗?您对读取的数据还做了什么吗?是的,我需要更改格式、多重索引、do mean和std等,但这些都很好。我只想知道你们走的时候,chuncksJust轨道的数量,也许<代码>对于块的数量,枚举中的df(读取器,开始=1):?
reader = pd.read_csv('log_file.csv', low_memory = False, chunksize = 4e7)
number_of_chuncks = countChuncks(reader)