如何进行Tokudb安装测试

38次阅读

共计 4779 个字符，预计需要花费 12 分钟才能阅读完成。

如何进行 Tokudb 安装测试，相信很多没有经验的人对此束手无策，为此本文总结了问题出现的原因和解决方法，通过这篇文章希望你能解决这个问题。

一前言
TokuDB 是一个高性能、支持 MVCC 的 MySQL 和 MariaDB 的存储引擎。TokuDB 的主要特点是数据压缩功能出色, 对高写压力的支持, 由美国 TokuTek 公司(http://www.tokutek.com/) 研发，该公司于 2015 年 4 月份被 Percona 收购, 理所当然地提供了 TokuDB 版本的 Percona Server。本文使用 Peronca server 5.6.30 版本进行测试安装。
二安装前的准备
请参考官方文档 Percona Server YUM 源，Percona Server tokudb 安装文档
三安装步骤
3.1 关闭系统的大页

echo never /sys/kernel/mm/transparent_hugepage/enabled

echo never /sys/kernel/mm/transparent_hugepage/defrag

echo never /sys/kernel/mm/redhat_transparent_hugepage/enabled

echo never /sys/kernel/mm/redhat_transparent_hugepage/defrag

3.2 禁用 SELINUX

root@rac2:~# vim /etc/selinux/config 设置 SELINUX=disabled

root@rac2:~# setenforce 0

root@rac2:~# getenforce

undefined3.3 利用 percona 的 yum 源进行安装

yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

yum list | grep percona #检查 yum 源里面是否有 tokudb 相关的 rpm 包

yum install Percona-Server-tokudb-56.x86_64 -y

3.4 初始化数据库实例并启动数据库

/usr/bin/mysql_install_db –user=mysql –datadir=/srv/my3306/data –basedir=/usr/ –defaults-file=/srv/my3306/my.cnf

/usr/bin/mysqld_safe –defaults-file=/srv/my3306/my.cnf –user=mysql

3.5 使用 ps_tokudb_admin 安装 tokudb 存储引擎，记得实例必须是启动状态的。

root@rac2:/srv/my3306/data# ps_tokudb_admin –enable -uroot -h227.0.0.1 -P 3306

Checking SELinux status…

INFO: SELinux is in permissive mode.

Checking if Percona Server is running with jemalloc enabled…

INFO: Percona Server is running with jemalloc enabled.

Checking transparent huge pages status on the system…

INFO: Transparent huge pages are currently disabled on the system.

Checking if thp-setting=never option is already set in config file…

INFO: Option thp-setting=never is not set in the config file.

(needed only if THP is not disabled permanently on the system)

Checking TokuDB engine plugin status…

INFO: TokuDB engine plugin is not installed.

Adding thp-setting=never option into /etc/my.cnf

INFO: Successfully added thp-setting=never option into /etc/my.cnf

Installing TokuDB engine…

INFO: Successfully installed TokuDB engine plugin. — 说明 Tokudb 存储引擎插件安装成功

3.6 登陆实例进行检查

root@rac2:/srv/my3306/data# my 3306

Server version: 5.6.31-77.0-log Percona Server (GPL), Release 77.0, Revision 5c1061c

mysql show engines;

+———+———+————————————————————–+————–+——+————+

+———+———+————————————————————–+————–+——+————+

| TokuDB | YES | Percona TokuDB Storage Engine with Fractal Tree(tm) Technology| YES | YES | YES |

+———+———+—————————————————————+————-+——+————+

10 rows in set (0.02 sec)

mysql SELECT @@tokudb_version;

+——————+

| @@tokudb_version |

+——————+

| 5.6.31-77.0 |

+——————+

1 row in set (0.00 sec)

四测试
4.1 压缩比例
创建 innodb 和 tokudb 存储引擎的表，测试插入和文件大小。

mysql create table t_tokudb (id int,val varchar(256)) engine=tokudb default charset utf8;

Query OK, 0 rows affected (0.05 sec)

mysql insert into t_tokudb(val) select val from t_tokudb;

Query OK, 262144 rows affected (2.32 sec)

Records: 262144 Duplicates: 0 Warnings: 0

mysql CREATE TABLE `t_innodb` (

– `id` int(11) DEFAULT NULL,

– `val` varchar(256) DEFAULT NULL

– ) ENGINE=InnoDB DEFAULT CHARSET=utf8;

Query OK, 0 rows affected (0.13 sec)

mysql insert into t_innodb select * from t_tokudb;

Query OK, 1048576 rows affected (10.40 sec)

Records: 1048576 Duplicates: 0 Warnings: 0

查看 innodb 表和 tokudb 表的大小
root@rac2:/srv/my3306/data# du -sm _yang_t_tokudb_main_5_2_1d.tokudb
8 _yang_t_tokudb_main_5_2_1d.tokudb
root@rac2:/srv/my3306/data/yang# du -sm t_innodb.ibd
149 t_innodb.ibd
root@rac2:/srv/my3306/data/yang#
innodb 149M
tokudb 8M
压缩比达到惊人的 149/8 = 18:1. 因为测试例子中 val 的值都是相同的，生产环境中 val 值不相同的会比较多，压缩比会有所减小。
4.2 存储引擎转换

mysql show create table t1 \G

*************************** 1. row ***************************

Table: t1

Create Table: CREATE TABLE `t1` (

`id` int(10) NOT NULL AUTO_INCREMENT,

`val` varchar(10) DEFAULT NULL,

PRIMARY KEY (`id`)

) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8

1 row in set (0.01 sec)

mysql alter table t1 engine=tokudb;

Query OK, 4 rows affected (0.25 sec)

Records: 4 Duplicates: 0 Warnings: 0

4.3 online ddl 测试

mysql alter table t_tokudb add name varchar(30) default a

Query OK, 0 rows affected (0.06 sec)

Records: 0 Duplicates: 0 Warnings: 0

mysql alter table t_tokudb add key idx_a(name);
Query OK, 0 rows affected (4.79 sec)
Records: 0 Duplicates: 0 Warnings: 0

mysql alter table t_tokudb drop key idx_a;
Query OK, 0 rows affected (0.57 sec)
Records: 0 Duplicates: 0 Warnings: 0

五 TokuDB 总结
TokuDB 特点
1 高压缩比，默认使用 zlib 进行压缩，尤其是对字符串(varchar,text 等) 类型有非常高的压缩比，比较适合存储日志、原始数据等。一般有 5 -10 倍压缩比。
2 支持在线字段增加、删除、扩展、重命名操作。
3 支持完整的 ACID 特性和事务机制
4 支持快速的写入场景，Fractal-tree 在事务实现上有优势, 无 undo log
TokuDB 缺点
1，响应时间相对较长
2，online ddl 对 text,blob 等类型的字段不适用
3，没有完善的热备工具，目前有阿里云数据库团队推荐的备份方案和逻辑备份
建议适用场景：
1 访问频率不高的数据或历史数据归档
2 表非常大并且时不时还需要进行 ddl 操作
TokuDB 的压缩算法如何选择
tokudb_zlib: 表启用 zlib 压缩，压缩效果偏中，CPU 消耗偏中，建议使用(默认)；
tokudb_quicklz: 表启用 quicklz 压缩，压缩效果差，CPU 消耗低；
tokudb_lzma: 表启用 lzma 压缩，压缩效果好，CPU 消耗高。
TokuDB 默认压缩算法为 zlib，建议您不要做修改，因为 zlib 压缩的性价比非常高。