关于使用python读取大约1600万行的巨大csv文件

关于使用python读取大约1600万行的巨大csv文件,python,Python,我是python新手,我正在尝试对比特币的twitter推特进行情绪分析,但我得到的数据非常庞大,大约有1600万行,大小约为4GB 我不知道如何使用python读取此文件 它是一个csv文件 你能帮我一下吗 数据集链接-是否尝试将文件压缩为.gz并通过pandas打开 df = pd.read_csv('yourfile.gz', compression='gzip', header=0, sep=' ', quotechar='"', error_bad_lines=False) 你应该看

我是python新手,我正在尝试对比特币的twitter推特进行情绪分析,但我得到的数据非常庞大,大约有1600万行,大小约为4GB

我不知道如何使用python读取此文件

它是一个csv文件

你能帮我一下吗


数据集链接-

是否尝试将文件压缩为.gz并通过pandas打开

df = pd.read_csv('yourfile.gz', compression='gzip', header=0, sep=' ', quotechar='"', error_bad_lines=False)
你应该看看我投票结束这个问题,因为在互联网上有很多指南,你可以在谷歌的第一页上找到,这些指南将比一篇帖子更详细。