mySQL单表限制⼤⼩
MySQL单表⼤⼩的限制在⽬前的技术环境中,由所在主机的OS上⾯的⽂件系统来界定⽽不是由MySQL数据库本⾝来决定了。
在⽼版本的MySQL 3.22中,MySQL单表⼤⼩为4GB,当时的MySQL的存储引擎还是ISAM存储引擎。但是,当出现MyISAM存储引擎之后,也就是从MySQL 3.23开始,MySQL单表最⼤限制就已经扩⼤到了64PB了(官⽅⽂档显⽰)。也就是说,从⽬前的技术环境来
看,MySQL数据库的MyISAM存储引擎单表⼤⼩限制已经不是由MySQL数据库本⾝来决定,⽽是由所在主机的OS上⾯的⽂件系统来决定了。
⽽MySQL另外⼀个最流⾏的存储引擎之⼀Innodb存储数据的策略是分为两种的,⼀种是共享表空间存储⽅式,还有⼀种是独享表空间存储⽅式。
当使⽤共享表空间存储⽅式的时候,Innodb的所有数据保存在⼀个单独的表空间⾥⾯,⽽这个表空间可以由很多个⽂件组成,⼀个表可以跨多个⽂件存在,所以其⼤⼩限制不再是⽂件⼤⼩的限制,⽽是其⾃⾝的限制。从Innodb的官⽅⽂档中可以看到,其表空间的最⼤限制为
64TB,也就是说,Innodb的单表限制基本上也在64TB左右了,当然这个⼤⼩是包括这个表的所有索引
等其他相关数据。
⽽当使⽤独享表空间来存放Innodb的表的时候,每个表的数据以⼀个单独的⽂件来存放,这个时候的单表限制,⼜变成⽂件系统的⼤⼩限制了。
以下是从收集到的⼀点信息,不⼀定全部准确:
操作系统⼤⼩限制
Java代码
win32 w/ FAT/FAT32                2GB/4GB
win32 w/ NTFS                      2TB(可能更⼤)
Linux 2.2-Intel 32-bit            2GB (LFS: 4GB)
Linux 2.4+                        4TB(ext3)
Solaris 9/10                      16TB
NetWare w/NSS filesystem          8TB
MacOS X w/ HFS+                    2TB
win32 w/ FAT/FAT32                2GB/4GB
win32 w/ NTFS                      2TB(可能更⼤)
Linux 2.2-Intel 32-bit            2GB (LFS: 4GB)
Linux 2.4+                        4TB(ext3)
Solaris 9/10                      16TB
NetWare w/NSS filesystem          8TB
MacOS X w/ HFS+                    2TB
以下是MySQL⽂档中的内容:
Windows⽤户请注意: FAT和VFAT (FAT32)不适合MySQL的⽣产使⽤。应使⽤NTFS。
在默认情况下,MySQL创建的MyISAM表允许的最⼤尺⼨为4GB。你可以使⽤SHOW TABLE STATUS语句或myisamchk -dv tbl_name检查表的最⼤尺⼨。请参见13.5.4节,“SHOW语法”。
如果需要使⽤⼤于4GB的MyISAM表(⽽且你的操作系统⽀持⼤⽂件),可使⽤允许AVG_ROW_LENGTH和MAX_ROWS选项的CREATE TABLE语句。创建了表后,也可以使⽤ALTER TABLE更改这些选项,以增加表的最⼤允许容量。
mongodb和mysql结合利⽤MySQL数据库如何解决⼤数据量存储问题?
暂时可以先考虑⽤infobright  这是mysql的数据仓库解决⽅案
如果这都满⾜不了需求再考虑hadoop
好吧,你的检索SQL是怎么样的?
每张表每天⼏千万,对于写⼊性能的要求也就很⾼了。10000000/3600/24,每秒要写⼊115条记录。
⽽且你的数据属于归档类数据,可以⽤mongodb来存储,写⼊速度和查询速度⽐MYSQL都要好很多。