MySQL内存表

来源:互联网 发布:新浪股票财经数据接口 编辑:程序博客网 时间:2024/06/09 22:19

MySQL内存表

 

create table heaptable type=heap select * from userinfo;

创建的内存表无主键、无索引、无自动增长。

添加主键:ALTER TABLE heaptable ADD PRIMARY KEY (`id`); 

添加索引:ALTER TABLE heaptable ADD INDEX index_name (`name`); 

添加自动增长:alter table heaptable change id id int not null auto_increment;

表定义存放名称heaptable.frm 路径:C:\Program Files\MySQL\MySQL Server 5.0\data\lintest,重启不会丢失表定义,数据会丢失,用完后记得删除。drop table heaptable

不支持BLOB/TEXT类型,若包含创建时会提示“1163 - The used table type doesn't support BLOB/TEXT columns”

create table heaptable type=heap max_rows=2 select * from userinfo;--设置max_rows=2有用,超过大小限制会报SQLException: The table 'heaptable' is full

mysql重启后,表结构还在(表、索引、主键、自动增长),数据消失。

 

内存表,就是放在内存中的表,所使用内存的大小可通过My.cnf中的max_heap_table_size指定,如

max_heap_table_size=1024M,内存表与临时表并不相同,临时表也是存放在内存中,临时表最大所需内存需要通过

tmp_table_size =

128M设定。当数据超过临时表的最大值设定时,自动转为磁盘表,此时因需要进行IO操作,性能会大大下降,而内存表不会,内存表满后,会提示数据满错

误。

临时表和内存表都可以人工创建,但临时表更多的作用是系统自己创建后,组织数据以提升性能,如子查询,临时表在多个连接之间不能共享。

创建表是,用engine=heap可创建(mysql5.5中已经不支持type,以后都用engine,形成习惯)

1、内存表的表定义是存放在磁盘上的,扩展名为.frm,所以重启不会丢失

2、内存表的数据是存放在内存中的,所以重启会丢失数据。

3、内存表使用一个固定的记录长度格式。

4、内存表不支持BLOB或TEXT列。

5、内存表支持AUTO_INCREMENT列和对可包含NULL值的 列的索引。

6、mysql重启后,主键、自增、索引不仍然存在,数据丢失。

7、内存表表在所有客户端之间共享(就像其它任何非TEMPORARY表)。

8、MEMORY存储引擎执行HASH和BTREE索引。你可以通过添加一个如下所示的USING子句为给定的索引指定一个或另一个:

CREATE TABLE lookup (id INT, INDEX USING HASH (id))

ENGINE = MEMORY;

9、内存表初始化,可以使用--init-file来初始化,避免重启mysql后数据被清空。比如--init-file="/data/mysql/init.sql", init.sql格式为:

use db_test;

select *** into m_table;

10、在数据库复制时,如果主机当掉,则会在binLog中自动加入delete from [内存表],将slave的数据也删除掉,以保证两边的数据一致性

11、内存表不支持事务

12、内存表是表锁,当修改频繁时,性能可能会下降

几个关键参数

max_heap_table_size

mysql HEAP MEMORY tables 提高行数支持的方法 
别人问到的 记一下 
mysql MEMORY tables 如果目前支持的行数到上限还不够用 可以把 my.conf 配置里面 
max_heap_table_size = 256M 
改大 
设置 MAX_ROWS 
在跑着 可以 ALTER TABLE tbl_name MAX_ROWS= 
MAX_ROWS 依赖于 max_heap_table_size 设置

我的配置文件

my.cnf

[mysqld] 
datadir=/var/lib/mysql 
socket=/var/lib/mysql/mysql.sock 
port=5004 
tmp_table_size=1000M 
max_heap_table_size=950M 
# Default to using old password format for compatibility with mysql 3.x 
# clients (those using the mysqlclient10 compatibility package). 
old_passwords=1 
default-character-set=utf8 
default-collation=utf8_bin 
[mysql.server] 
user=mysql 
basedir=/var/lib 
[mysqld_safe] 
default-character-set=utf8 
default-collation=utf8_bin 
log-error=/var/log/mysqld.log 
pid-file=/var/run/mysqld/mysqld.pid 
[client] 
#default-character-set=utf8

 

看MySQL参考手册 发现CREATE TABLE 时有多种数据库存储引擎: 
TYPE = {BDB | HEAP | ISAM | InnoDB | MERGE | MRG_MYISAM | MYISAM } 
MySQL数据库引擎ISAM,myISAM,heap2007-07-20 23:40如果你是个赛车手并且按一下按钮就能够立即更换引擎而不需要把车开到车库里去换,那会是怎么感觉呢?MySQL数据库为开发人员所做的就好像是按按钮换引擎;它让你选择数据库引擎,并给你一条简单的途径来切换它。 
MySQL的自带引擎肯定是够用了,但是在有些情况下,其他的引擎可能要比手头所用更适合完成任务。如果愿意的话,你甚至可以使用MySQL++ API来创建自己的数据库引擎,就像打穿气缸装上自己的化油器。现在让我们来看看你该如何选择引擎,以及如何在可用引擎之间切换。 
选择你的引擎 
你能用的数据库引擎取决于MySQL在安装的时候是如何被编译的。要添加一个新的引擎,就必须重新编译MySQL。仅仅为了添加一个特性而编译应用程序的概念对于Windows的开发人员来说可能很奇怪,但是在UNIX世界里,这已经成为了标准。在缺省情况下,MySQL支持三个引擎:ISAM、MyISAM和HEAP。另外两种类型InnoDB和Berkley(BDB),也常常可以使用。 
ISAM 
ISAM是一个定义明确且历经时间考验的数据表格管理方法,它在设计之时就考虑到数据库被查询的次数要远大于更新的次数。因此,ISAM执行读取操作的速度很快,而且不占用大量的内存和存储资源。ISAM的两个主要不足之处在于,它不支持事务处理,也不能够容错:如果你的硬盘崩溃了,那么数据文件就无法恢复了。如果你正在把ISAM用在关键任务应用程序里,那就必须经常备份你所有的实时数据,通过其复制特性,MySQL能够支持这样的备份应用程序。 
MyISAM 
MyISAM是MySQL的ISAM扩展格式和缺省的数据库引擎。除了提供ISAM里所没有的索引和字段管理的大量功能,MyISAM还使用一种表格锁定的机制,来优化多个并发的读写操作。其代价是你需要经常运行OPTIMIZE TABLE命令,来恢复被更新机制所浪费的空间。MyISAM还有一些有用的扩展,例如用来修复数据库文件的MyISAMChk工具和用来恢复浪费空间的MyISAMPack工具。 
MyISAM强调了快速读取操作,这可能就是为什么MySQL受到了Web开发如此青睐的主要原因:在Web开发中你所进行的大量数据操作都是读取操作。所以,大多数虚拟主机提供商和Internet平台提供商(Internet Presence Provider,IPP)只允许使用MyISAM格式。 
HEAP 
HEAP允许只驻留在内存里的临时表格。驻留在内存里让HEAP要比ISAM和MyISAM都快,但是它所管理的数据是不稳定的,而且如果在关机之前没有进行保存,那么所有的数据都会丢失。在数据行被删除的时候,HEAP也不会浪费大量的空间。HEAP表格在你需要使用SELECT表达式来选择和操控数据的时候非常有用。要记住,在用完表格之后就删除表格。让我再重复一遍:在你用完表格之后,不要忘记删除表格。 
InnoDB和Berkley DB 
InnoDB和Berkley DB(BDB)数据库引擎都是造就MySQL灵活性的技术的直接产品,这项技术就是MySQL++ API。在使用MySQL的时候,你所面对的每一个挑战几乎都源于ISAM和MyISAM数据库引擎不支持事务处理也不支持外来键。尽管要比ISAM和MyISAM引擎慢很多,但是InnoDB和BDB包括了对事务处理和外来键的支持,这两点都是前两个引擎所没有的。如前所述,如果你的设计需要这些特性中的一者或者两者,那你就要被迫使用后两个引擎中的一个了。 
如果感觉自己的确技术高超,你还能够使用MySQL++来创建自己的数据库引擎。这个API为你提供了操作字段、记录、表格、数据库、连接、安全帐号的功能,以及建立诸如MySQL这样DBMS所需要的所有其他无数功能。深入讲解API已经超出了本文的范围,但是你需要了解MySQL++的存在及其可交换引擎背后的技术,这一点是很重要的。估计这个插件式数据库引擎的模型甚至能够被用来为MySQL创建本地的XML提供器(XML provider)。(任何读到本文的MySQL++开发人员可以把这一点当作是个要求。) 
按开关 
让所有的灵活性成为可能的开关是提供给ANSI SQL的MySQL扩展——TYPE参数。MySQL能够让你在表格这一层指定数据库引擎,所以它们有时候也指的是table formats。下面的示例代码表明了如何创建分别使用MyISAM、ISAM和HEAP引擎的表格。要注意,创建每个表格的代码是相同的,除了最后的TYPE参数,这一参数用来指定数据引擎。 
CREATE TABLE tblMyISAM ( 
          id INT NOT NULL AUTO_INCREMENT, 
          PRIMARY KEY (id), 
          value_a TINYINT 
) TYPE=MyISAM 
CREATE TABLE tblISAM ( 
          id INT NOT NULL AUTO_INCREMENT, 
          PRIMARY KEY (id), 
          value_a TINYINT 
) TYPE=ISAM 
CREATE TABLE tblHeap ( 
          id INT NOT NULL AUTO_INCREMENT, 
          PRIMARY KEY (id), 
          value_a TINYINT 
) TYPE=Heap 
你也可以使用ALTER TABLE命令,把原有的表格从一个引擎移动到另一个引擎。下面的代码显示了如何使用ALTER TABLE把MyISAM表格移动到InnoDB的引擎: 
ALTER TABLE tblMyISAM CHANGE TYPE=InnoDB 
MySQL用三步来实现这一目的。首先,这个表格的一个副本被创建。然后,任何输入数据的改变都被排入队列,同时这个副本被移动到另一个引擎。最后,任何排入队列的数据改变都被送交到新的表格里,而原来的表格被删除。 
-------------------------------------------------------------------------------- 
ALTER TABLE捷径 
如果只是想把表格从ISAM更新为MyISAM,你可以使用mysql_convert_table_format命令,而不需要编写ALTER TABLE表达式。 
-------------------------------------------------------------------------------- 
你可以使用SHOW TABLE命令(这是MySQL对ANSI标准的另一个扩展)来确定哪个引擎在管理着特定的表格。SHOW TABLE会返回一个带有多数据列的结果集,你可以用这个结果集来查询获得所有类型的信息:数据库引擎的名称在Type字段里。下面的示例代码说明了SHOW TABLE的用法: 
SHOW TABLE STATUS FROM tblInnoDB 
-------------------------------------------------------------------------------- 
SHOW TABLE的替换方法 
你可以用SHOW CREATE TABLE [TableName]来取回SHOW TABLE能够取回的信息。 
-------------------------------------------------------------------------------- 
最后,如果你想使用没有被编译成MySQL也没有被激活的引擎,那是没有用的,MySQL不会提示这一点。而它只会给你提供一个缺省格式(MyISAM)的表格。除了使用缺省的表格格式外,还有办法让MySQL给出错误提示,但是就现在而言,如果不能肯定特定的数据库引擎是否可用的话,你要使用SHOW TABLE来检查表格格式。 
更多的选择意味着更好的性能 
用于特定表格的引擎都需要重新编译和追踪,考虑到这种的额外复杂性,为什么你还是想要使用非缺省的数据库引擎呢?答案很简单:要调整数据库来满足你的要求。 
可以肯定的是,MyISAM的确快,但是如果你的逻辑设计需要事务处理,你就可以自由使用支持事务处理的引擎。进一步讲,由于MySQL能够允许你在表格这一层应用数据库引擎,所以你可以只对需要事务处理的表格来进行性能优化,而把不需要事务处理的表格交给更加轻便的MyISAM引擎。对于MySQL而言,灵活性才是关键。

 

max_rows主要对myisam生效,avg_row_length对blob,text字段起作用,以优化存储空间。

max_rows 是配合myisam_data_pointer_size使用的。
官方文档:
To change the default size limit for MyISAM tables, set the myisam_data_pointer_size, which sets the number of bytes
used for internal row pointers. The value is used to set the pointer size for new tables if you do not specify the MAX_ROWS op-
tion. The value of myisam_data_pointer_size can be from 2 to 7. A value of 4 permits tables up to 4GB; a value of 6
permits tables up to 256TB

如果你把max_rows 设为5, 但 myisam_data_pointer_size范围是 2~7, 2个字节就足够了( 2^16=64k),  所以其实就是让myisam是用2个字节的指针,并不是说最多5行。 如果你把max_rows 设为 100k,此时 100K>64K, 就要用3个字节表示,所以myisam_data_pointer_size会设为3, 此时最多存放 2^24行。

mysql> create table t1 (a int) max_rows=2 engine=myisam;
Query OK, 0 rows affected (0.05 sec)

mysql> insert into t1 values(1);
Query OK, 1 row affected (0.00 sec)

mysql> insert into t1 values(1);
Query OK, 1 row affected (0.00 sec)

mysql> insert into t1 values(1);
Query OK, 1 row affected (0.00 sec)

mysql> insert into t1 values(1);
Query OK, 1 row affected (0.00 sec)

mysql> insert into t1 select * from t1;
Query OK, 4 rows affected (0.01 sec)
Records: 4  Duplicates: 0  Warnings: 0

mysql> insert into t1 select * from t1;
Query OK, 8 rows affected (0.00 sec)
Records: 8  Duplicates: 0  Warnings: 0


............
继续执行insert into t1 select * from t1;
............
mysql> select count(*) from t1;
+----------+
| count(*) |
+----------+
|    65535 |
+----------+
1 row in set (0.00 sec)

mysql> insert into t1 select * from t1;
ERROR 1114 (HY000): The table 't1' is full

原创粉丝点击