共计 4715 个字符,预计需要花费 12 分钟才能阅读完成。
一 前言
TokuDB 是一个高性能、支持 MVCC 的 MySQL 和 MariaDB 的存储引擎。TokuDB 的主要特点是数据压缩功能出色, 对高写压力的支持, 由美国 TokuTek 公司(http://www.tokutek.com/) 研发,该公司于 2015 年 4 月份被 Percona 收购, 理所当然地提供了 TokuDB 版本的 Percona Server。本文使用 Peronca server 5.6.30 版本进行测试安装。
二 安装前的准备
请参考官方文档 Percona Server YUM 源,Percona Server tokudb 安装文档
三 安装步骤
3.1 关闭系统的大页
- echo never > /sys/kernel/mm/transparent_hugepage/enabled
- echo never > /sys/kernel/mm/transparent_hugepage/defrag
- echo never > /sys/kernel/mm/RedHat_transparent_hugepage/enabled
- echo never > /sys/kernel/mm/redhat_transparent_hugepage/defrag
3.2 禁用 SELINUX
- root@rac2:~# >vim /etc/selinux/config 设置 SELINUX=disabled
- root@rac2:~# >setenforce 0
- root@rac2:~# >getenforce
3.3 利用 percona 的 yum 源进行安装
- yum install http://www.percona.com/downloads/percona–release/redhat/0.1–3/percona–release–0.1–3.noarch.rpm
- yum list | grep percona #检查 yum 源里面是否有 tokudb 相关的 rpm 包
- yum install Percona–Server–tokudb–56.x86_64 –y
3.4 初始化数据库实例并启动数据库
- /usr/bin/mysql_install_db ––user=mysql ––datadir=/srv/my3306/data ––basedir=/usr/ ––defaults–file=/srv/my3306/my.cnf &
- /usr/bin/mysqld_safe ––defaults–file=/srv/my3306/my.cnf ––user=mysql &
3.5 使用 ps_tokudb_admin 安装 tokudb 存储引擎,记得实例必须是启动状态的。
- root@rac2:/srv/my3306/data# >ps_tokudb_admin ––enable –uroot –h127.0.0.1 –P 3306
- Checking SELinux status...
- INFO: SELinux is in permissive mode.
- Checking if Percona Server is running with jemalloc enabled...
- INFO: Percona Server is running with jemalloc enabled.
- Checking transparent huge pages status on the system...
- INFO: Transparent huge pages are currently disabled on the system.
- Checking if thp–setting=never option is already set in config file...
- INFO: Option thp–setting=never is not set in the config file.
- (needed only if THP is not disabled permanently on the system)
- Checking TokuDB engine plugin status...
- INFO: TokuDB engine plugin is not installed.
- Adding thp–setting=never option into /etc/my.cnf
- INFO: Successfully added thp–setting=never option into /etc/my.cnf
- Installing TokuDB engine...
- INFO: Successfully installed TokuDB engine plugin. ––> 说明 Tokudb 存储引擎插件安装成功
3.6 登陆实例进行检查
- root@rac2:/srv/my3306/data# >my 3306
- Server version: 5.6.31–77.0–log Percona Server (GPL), Release 77.0, Revision 5c1061c
- mysql> show engines;
- +–––––––––+–––––––––+––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––+––––––––––––––+––––––+––––––––––––+
- | Engine | Support | Comment | Transactions | XA | Savepoints
- +–––––––––+–––––––––+––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––+––––––––––––––+––––––+––––––––––––+
- | TokuDB | YES | Percona TokuDB Storage Engine with Fractal Tree(tm) Technology| YES | YES | YES |
- +–––––––––+–––––––––+–––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––––+–––––––––––––+––––––+––––––––––––+
- 10 rows in set (0.02 sec)
- mysql> SELECT @@tokudb_version;
- +––––––––––––––––––+
- | @@tokudb_version |
- +––––––––––––––––––+
- | 5.6.31–77.0 |
- +––––––––––––––––––+
- 1 row in set (0.00 sec)
四 测试
4.1 压缩比例
创建 innodb 和 tokudb 存储引擎的表,测试插入 和文件大小。
- mysql> create table t_tokudb (id int,val varchar(256)) engine=tokudb default charset utf8;
- Query OK, 0 rows affected (0.05 sec)
- mysql> insert into t_tokudb(val) select val from t_tokudb;
- Query OK, 262144 rows affected (2.32 sec)
- Records: 262144 Duplicates: 0 Warnings: 0
- mysql> CREATE TABLE `t_innodb` (
- –> `id` int(11) DEFAULT NULL,
- –> `val` varchar(256) DEFAULT NULL
- –> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
- Query OK, 0 rows affected (0.13 sec)
- mysql> insert into t_innodb select * from t_tokudb;
- Query OK, 1048576 rows affected (10.40 sec)
- Records: 1048576 Duplicates: 0 Warnings: 0
查看 innodb 表和 tokudb 表的大小
root@rac2:/srv/my3306/data# >du -sm _yang_t_tokudb_main_5_2_1d.tokudb
8 _yang_t_tokudb_main_5_2_1d.tokudb
root@rac2:/srv/my3306/data/yang# >du -sm t_innodb.ibd
149 t_innodb.ibd
root@rac2:/srv/my3306/data/yang# >
innodb 149M
tokudb 8M
压缩比达到惊人的 149/8 = 18:1. 因为测试例子中 val 的值都是相同的,生产环境中 val 值不相同的会比较多,压缩比会有所减小。
4.2 存储引擎转换
- mysql> show create table t1 \G
- *************************** 1. row ***************************
- Table: t1
- Create Table: CREATE TABLE `t1` (
- `id` int(10) NOT NULL AUTO_INCREMENT,
- `val` varchar(10) DEFAULT NULL,
- PRIMARY KEY (`id`)
- ) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8
- 1 row in set (0.01 sec)
- mysql> alter table t1 engine=tokudb;
- Query OK, 4 rows affected (0.25 sec)
- Records: 4 Duplicates: 0 Warnings: 0
4.3 online ddl 测试
- mysql> alter table t_tokudb add name varchar(30) default ‘a’;
- Query OK, 0 rows affected (0.06 sec)
- Records: 0 Duplicates: 0 Warnings: 0
- mysql> alter table t_tokudb add key idx_a(name);
Query OK, 0 rows affected (4.79 sec)
Records: 0 Duplicates: 0 Warnings: 0 - mysql> alter table t_tokudb drop key idx_a;
Query OK, 0 rows affected (0.57 sec)
Records: 0 Duplicates: 0 Warnings: 0
五 TokuDB 总结
TokuDB 特点
1 高压缩比,默认使用 zlib 进行压缩,尤其是对字符串(varchar,text 等) 类型有非常高的压缩比,比较适合存储日志、原始数据等。一般有 5 -10 倍压缩比。
2 支持在线字段增加、删除、扩展、重命名操作。
3 支持完整的 ACID 特性和事务机制
4 支持快速的写入场景,Fractal-tree 在事务实现上有优势, 无 undo log
TokuDB 缺点
1,响应时间相对较长
2,online ddl 对 text,blob 等类型的字段不适用
3,没有完善的热备工具,目前有阿里云数据库团队推荐的备份方案和逻辑备份
建议适用场景:
1 访问频率不高的数据或历史数据归档
2 表非常大并且时不时还需要进行 ddl 操作
TokuDB 的压缩算法如何选择
tokudb_zlib: 表启用 zlib 压缩,压缩效果偏中,CPU 消耗偏中,建议使用(默认);
tokudb_quicklz: 表启用 quicklz 压缩,压缩效果差,CPU 消耗低;
tokudb_lzma: 表启用 lzma 压缩,压缩效果好,CPU 消耗高。
TokuDB 默认压缩算法为 zlib,建议您不要做修改,因为 zlib 压缩的性价比非常高。
本文永久更新链接地址:http://www.linuxidc.com/Linux/2016-08/134647.htm