当前位置：首页 > 网络编程 > 数据库 > Mysql > MySQL两种表存储结构性能比较测试过程

MySQL两种表存储结构性能比较测试过程

点击次数：21 次 发布日期：2008-11-22 09:06:43 作者：源代码网
源代码网推荐

源代码网整理以下MySQL支持的两种主要表存储格式MyISAM，InnoDB，上个月做个项目时，先使用了InnoDB，结果速度特别慢，1秒钟只能插入10几条。后来换成MyISAM格式，一秒钟插入上万条。当时觉的这两个表的性能也差别太大了吧。后来自己推测，不应该差别这么慢，估计是写的插入语句有问题，决定做个测试：

源代码网整理以下测试环境：Redhat Linux9，4CPU，内存2G，MySQL版本为4.1.6-gamma-standard

源代码网整理以下测试程序：Python＋Python-MySQL模块。

源代码网整理以下测试方案：

源代码网整理以下1、MyISAM格式分别测试，事务和不用事务两种情况：

源代码网整理以下2、InnoDB格式分别测试AutoCommit＝1（不用begin transaction和用begin transaction模式），AutoCommit=0 （不用begin transaction和用begin transaction模式）四种情况。

源代码网整理以下测试方法为插入10000条记录。为了测试不互相影响，单独建立了专用的测试表，建表语句如下：

源代码网整理以下1、MyISAM不用事务表：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `MyISAM_NT` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=MyISAM;

源代码网整理以下2、MyISAM用事务表：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `MyISAM_TS` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=MyISAM;

源代码网整理以下3、InnoDB关闭AutoCommit，不用事务：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `INNODB_NA_NB` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=InnoDB;

源代码网整理以下4、InnoDB关闭AutoCommit，用事务：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `INNODB_NA_BE` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=InnoDB;

源代码网整理以下5、InnoDB开启AutoCommit，不用事务：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `INNODB_AU_NB` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=InnoDB;

源代码网整理以下6、InnoDB开启AutoCommit，用事务：

源代码网整理以下

以下为引用的内容：

源代码网整理以下CREATE TABLE `INNODB_AU_BE` (

源代码网整理以下`TableId` int(11) NOT NULL default "0",

源代码网整理以下`TableString` varchar(21) NOT NULL default ""

源代码网整理以下) ENGINE=InnoDB;

源代码网整理以下测试的Python脚本如下：

源代码网整理以下#!/usr/bin/env Python

源代码网整理以下"""

源代码网整理以下MyISAM,InnoDB性能比较

源代码网整理以下作者：空心菜（Invalid）

源代码网整理以下时间：2004-10-22

源代码网整理以下

以下为引用的内容：

源代码网整理以下"""

源代码网整理以下import MySQLdb

源代码网整理以下import sys

源代码网整理以下import os

源代码网整理以下import string

源代码网整理以下import time

源代码网整理以下c = None

源代码网整理以下testtables = [("MyISAM_NT",None,0),

源代码网整理以下("MyISAM_TS",None,1),

源代码网整理以下("INNODB_NA_NB",0,0),

源代码网整理以下("INNODB_NA_BE",0,1),

源代码网整理以下("INNODB_AU_NB",1,0),

源代码网整理以下("INNODB_AU_BE",1,1)

源代码网整理以下]

源代码网整理以下def BeginTrans():

源代码网整理以下print "ExecSQL:BEGIN;"

源代码网整理以下c.execute("BEGIN;")

源代码网整理以下return

源代码网整理以下def Commit():

源代码网整理以下print "ExecSQL:COMMIT;"

源代码网整理以下c.execute("COMMIT;")

源代码网整理以下return

源代码网整理以下def AutoCommit(flag):

源代码网整理以下print "ExecSQL:Set AUTOCOMMIT = "+str(flag)

源代码网整理以下c.execute("Set AUTOCOMMIT = "+str(flag))

源代码网整理以下return

源代码网整理以下def getcount(table):

源代码网整理以下#print "ExecSQL:select count(*) from "+table

源代码网整理以下c.execute("select count(*) from "+table)

源代码网整理以下return c.fetchall()[0][0]

源代码网整理以下def AddTable (Table,TableId,TableString):

源代码网整理以下sql = "INSERT INTO "+Table+"(TableId, TableString) VALUES( "+ TableId+ ","" + TableString +"")"

源代码网整理以下try:

源代码网整理以下c.execute(sql)

源代码网整理以下except MySQLdb.OperationalError,error:

源代码网整理以下print "AddTable Error:",error

源代码网整理以下return -1;

源代码网整理以下return c.rowcount

源代码网整理以下def main():

源代码网整理以下argv = sys.argv

源代码网整理以下if len(argv) < 2:

源代码网整理以下print "Usage:",argv[0]," TableId TestCount "

源代码网整理以下sys.exit(1)

源代码网整理以下global c #MySQL访问cursor

源代码网整理以下db_host = "localhost"

源代码网整理以下db_name = "demo"

源代码网整理以下db_user = "root"

源代码网整理以下db_user_passwd = ""

源代码网整理以下print "Config:[%s %s/%s %s] DB "%(db_host,db_user,db_user_passwd,db_name)

源代码网整理以下if len(argv) > 2:

源代码网整理以下tableid = argv[1]

源代码网整理以下testcount = int(argv[2]) #

源代码网整理以下for test in testtables:

源代码网整理以下#每次操作前都重写建立数据库连接

源代码网整理以下

以下为引用的内容：

源代码网整理以下try:

源代码网整理以下mdb = MySQLdb.connect(db_host, db_user, db_user_passwd, db_name)

源代码网整理以下except MySQLDb.OperationalError,error:

源代码网整理以下print "Connect MySQL[%s %s/%s %s] DB Error:"%(db_host,db_user,db_user_passwd,db_name),error," "

源代码网整理以下sys.exit(1)

源代码网整理以下else:

源代码网整理以下c = mdb.cursor()

源代码网整理以下table,autocommit,trans = test

源代码网整理以下starttime = time.time()

源代码网整理以下print table," ",time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

源代码网整理以下if autocommit != None:

源代码网整理以下AutoCommit(autocommit)

源代码网整理以下if trans == 1:

源代码网整理以下BeginTrans()

源代码网整理以下for i in xrange(testcount):

源代码网整理以下tablestring = "%020d"%i

源代码网整理以下if (AddTable(table,tableid,tablestring)<1):

源代码网整理以下print "AddTable Error",tablestring

源代码网整理以下if trans == 1:

源代码网整理以下Commit()

源代码网整理以下print time.strftime("%y-%m-%d %H:%M:%S",time.localtime())

源代码网整理以下endtime = time.time()

源代码网整理以下usedtime = endtime-starttime

源代码网整理以下print table,"count:",getcount(table)," used time:",usedtime

源代码网整理以下c.close()

源代码网整理以下mdb.close()

源代码网整理以下if __name__ == "__main__":

源代码网整理以下main()

源代码网整理以下测试结果如下：

源代码网整理以下Config:[localhost root/ demo] DB

源代码网整理以下MyISAM_NT 04-10-22 16:33:24

源代码网整理以下04-10-22 16:33:26

源代码网整理以下MyISAM_NT count: 10000 used time: 2.1132440567

源代码网整理以下MyISAM_TS 04-10-22 16:33:26

源代码网整理以下ExecSQL:BEGIN;

源代码网整理以下ExecSQL:COMMIT;

源代码网整理以下04-10-22 16:33:29

源代码网整理以下MyISAM_TS count: 10000 used time: 2.65475201607

源代码网整理以下INNODB_NA_NB 04-10-22 16:33:29

源代码网整理以下ExecSQL:Set AUTOCOMMIT = 0

源代码网整理以下04-10-22 16:33:31

源代码网整理以下INNODB_NA_NB count: 10000 used time: 2.51947999001

源代码网整理以下INNODB_NA_BE 04-10-22 16:33:31

源代码网整理以下ExecSQL:Set AUTOCOMMIT = 0

源代码网整理以下ExecSQL:BEGIN;

源代码网整理以下ExecSQL:COMMIT;

源代码网整理以下04-10-22 16:33:35

源代码网整理以下INNODB_NA_BE count: 10000 used time: 3.85625100136

源代码网整理以下INNODB_AU_NB 04-10-22 16:33:35

源代码网整理以下ExecSQL:Set AUTOCOMMIT = 1

源代码网整理以下04-10-22 16:34:19

源代码网整理以下INNODB_AU_NB count: 10000 used time: 43.7153041363

源代码网整理以下INNODB_AU_BE 04-10-22 16:34:19

源代码网整理以下ExecSQL:Set AUTOCOMMIT = 1

源代码网整理以下ExecSQL:BEGIN;

源代码网整理以下ExecSQL:COMMIT;

源代码网整理以下04-10-22 16:34:22

源代码网整理以下INNODB_AU_BE count: 10000 used time: 3.14328193665

源代码网整理以下结论：

源代码网整理以下由此得知影响速度的主要原因是AUTOCOMMIT默认设置是打开的，

源代码网整理以下我当时的程序没有显式调用BEGIN;开始事务，导致每插入一条都自动Commit，严重影响了速度。

源代码网整理以下算来也是个低级错误！

源代码网整理以下相关参考：

源代码网整理以下http://dev.mysql.com/doc/MySQL/en/COMMIT.html

源代码网整理以下http://dev.mysql.com/doc/MySQL/en/InnoDB_and_AUTOCOMMIT.html

源代码网供稿.
网友评论 (0)
我也要写评论
会员中心
网络编程
本站推荐
网络编程之精华