阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

拷贝ibd实现MySQL的数据导入

192次阅读
没有评论

共计 1866 个字符,预计需要花费 5 分钟才能阅读完成。

官方手册介绍:

http://dev.MySQL.com/doc/refman/5.7/en/tablespace-copying.html

http://dev.mysql.com/doc/refman/5.7/en/innodb-transportable-tablespace-examples.html

实验环境:

阿里云主机(双核 4G,普通云盘,2 个节点都是 yum 安装的 mysql-community-server5.6)

db1.table1 的大小(ibd 文件大小 1.2GB 备份出的 sql 文件大小为 750MB)

test1 节点上:

> use db1;
> FLUSH TABLE table1 FOR EXPORT;
 
# cd /var/lib/mysql/db1
# scp table1.ibd table1.cfg root@test2:/root/  # 因为是内网传输,因此这步花费不到 1 分钟的时间
 
> UNLOCK tables;

test2 节点上:

> use db1;
> truncate table table1;
> alter table table1 discard tablespace;
 
# cp /root/table1.* /var/lib/mysql/db1/
# chown mysql.mysql /var/lib/mysql/db1/ -R
 
> alter table table1 import tablespace;  # 这一步花费了 45s
 
> select count(*) from table1;  可以看到数据全部导入了

上面的这种方法导数据全部过程花费了 3 分钟吧。

而同样的数据,测试使用 sql 文件导入的花费的时间:10 分钟。二者高下立判。

附后来写的一个传输并导入远程主机的脚本:

#!/bin/bash
# Description: 简单粗暴的将表空间文件传输到其他节点, 并实现导入操作, 线上使用出问题后果自行承担
# Date: 2017/01/08
# Author: Lee
 
LOG=”/tmp/trans.log”
 
LOCAL_USER=’root’
LOCAL_PASS=’123456′
 
DATADIR=”/var/lib/mysql/”
MYSQL=’/usr/bin/mysql’
 
# step1 传输 *.ibd *.cfg 文件到其他节点
# 参数说明:
# $1 数据库名称
# $2 表名称
# $3 目标主机的地址
if [$# -eq 3]; then
  $MYSQL -u$LOCAL_USER -p$LOCAL_PASS -e “use $1; FLUSH TABLE $2 FOR EXPORT; system scp $DATADIR$1/$2.ibd $3:/root; system scp $DATADIR$1/$2.cfg $3:/root; UNLOCK TABLES;” > /dev/null 2>&1
else
  echo -e “\n\033[31mUsage: sh $0 数据库名 表名 远程主机 IP\033[0m\n” && exit 1
fi
 
if [$? -eq 0]; then
  echo -e “\033[32m 传输到远程主机成功  $(date +”%F %T”) \033[0m” | tee -a $LOG
else
  echo -e “\033[32m 传输到远程主机失败  $(date +”%F %T”) \033[0m” | tee -a $LOG && exit 10
fi
 
# step2 ssh 连接到远程节点,将拷贝的数据导入数据库
REMOTE_USER=”root”
REMOTE_PASS=”123456″
MYSQL=’/usr/bin/mysql’
 
ssh root@$3 “$MYSQL -u$REMOTE_USER -p$REMOTE_PASS -e ‘truncate table $1.$2; alter table $1.$2 discard tablespace;system cp /root/$2.* /var/lib/mysql/$1/;system chown mysql.mysql -R /var/lib/mysql;alter table $1.$2 import tablespace;'” > /dev/null 2>&1
 
if [$? -eq 0]; then
  echo -e “\033[32m 导入到远程主机成功  $(date +”%F %T”) \033[0m” | tee -a $LOG
else
  echo -e “\033[32m 导入到远程主机失败  $(date +”%F %T”) \033[0m” | tee -a $LOG
fi

本文永久更新链接地址 :http://www.linuxidc.com/Linux/2017-02/14070.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计1866字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中