从Python缓慢插入MySQL

从Python缓慢插入MySQL,python,mysql,innodb,pymysql,Python,Mysql,Innodb,Pymysql,我试图使用PythonPyMySQL连接器将一些数据插入MySQL数据库,但每秒插入10行数据的性能非常差。该表是InnoDB,我使用了一个多值insert语句,并确保关闭了autocommit。你知道为什么我的插页还是这么慢吗 我最初认为autocommit没有被正确地禁用,但我添加了代码来测试它在每个连接期间是否被禁用=0 下面是我的示例代码: for i in range(1,500): params.append([i,i,i,i,i,i]) insertDB(params)

我试图使用PythonPyMySQL连接器将一些数据插入MySQL数据库,但每秒插入10行数据的性能非常差。该表是InnoDB,我使用了一个多值insert语句,并确保关闭了autocommit。你知道为什么我的插页还是这么慢吗

我最初认为autocommit没有被正确地禁用,但我添加了代码来测试它在每个连接期间是否被禁用=0

下面是我的示例代码:

for i in range(1,500):
    params.append([i,i,i,i,i,i])
insertDB(params)

def insertDB(params):
    query = """INSERT INTO test (o_country_id, i_country_id,c_id,period_id,volume,date_created,date_updated)
        VALUES (%s,%s,%s,%s,%s,NOW(),NOW())
        ON DUPLICATE KEY UPDATE trade_volume = %s, date_updated = NOW();"""
    db.insert_many(query,params)

def insert_many(query,params=None):
    cur = _connection.cursor()
    try:
        _connection.autocommit(False)
        cur.executemany(query,params)
        _connection.commit()
    except pymysql.Error, e:
        print ("MySQL error %d: %s" %
            (e.args[0], e.args[1]))
    cur.close()

还有什么问题?上面的示例需要大约110秒的时间来执行。

不确定出了什么问题,但我会尝试mysqldb和/或mysql连接器模块,看看是否得到相同的性能数字。

谢谢@panofish。我现在已经用sqlalchemy尝试了上面的代码,我相信它使用了mysqldb,并得到了相同的结果。很酷,那么你的服务器或连接一定出了问题。是的,这肯定是由于与服务器连接相关的延迟。