canal来实现mysql的数据同步

Mysql视频教程栏目介绍基于canal实现数据同步。

基于上面的讲解，我们在实现canal之前，先简单做一个主从复制。一主 一从

• 首先下载mysql 镜像,并启动

docker pull mysql:latest
docker run -itd --name mysql-1 -p 23306:3306 -e MYSQL_ROOT_PASSWORD=root  mysql
docker run -itd --name mysql-2 -p 23307:3306 -e MYSQL_ROOT_PASSWORD=root  mysql

• 相关命令再解释一下：

name xxx :xxx为容器名 p 111:222 其中111是宿主机端口，222是容器端口 MYSQL_ROOT_PASSWORD=root 设置root账户密码为root

• 设置 mysql-1为主，mysql-2为从库
• 修改一下 mysql的配置，安装vim编辑器

apt-get update
apt-get install vim

• 在主库 创建一个mysql账户给从库使用

CREATE USER &＃39;slave&＃39;@&＃39;%&＃39; IDENTIFIED BY &＃39;123456&＃39;;
GRANT REPLICATION SLAVE, REPLICATION CLIENT ON . TO &＃39;slave&＃39;@&＃39;%&＃39;;
FLUSH PRIVILEGES；

• 修改一下从服务器

[mysqld]
pid-file        = /var/run/mysqld/mysqld.pid
socket          = /var/run/mysqld/mysqld.sock
datadir         = /var/lib/mysql
secure-file-priv= NULL
server_id=100
log-bin=mysql-slave-bin
relay_log=edu-mysql-relay-bin

• 退出重启从服务器docker
• 进入从服务器 执行

mysql> change master to master_host=&＃39;172.17.0.4&＃39;, master_user=&＃39;slave&＃39;, master_password=&＃39;123456&＃39;, master_port=3306, master_log_file=&＃39;edu-mysql-bin.000001&＃39;, master_log_pos= 877, master_connect_retry=30;

相关命令解释 master_port：Master的端口号，指的是容器的端口号 master_user：用于数据同步的用户 master_password：用于同步的用户的密码 master_log_file：指定 Slave 从哪个日志文件开始复制数据，即上文中提到的 File 字段的值 master_log_pos：从哪个 Position 开始读，即上文中提到的 Position 字段的值 master_connect_retry：如果连接失败，重试的时间间隔，单位是秒，默认是60秒 在Slave 中的mysql终端执行show slave status \\\\G;用于查看主从同步状态。

• 出现一下信息说明配置成功

为什么再 将canal 之前要先说主从复制呢，其实canal 就是把自己伪装成了从服务器，从而读取日志，拿到数据；

使用docker 部署canal

参考链接

docker pull canal/canal-server:latest
# 下载脚本
wget https://raw.githubusercontent.com/alibaba/canal/master/docker/run.sh 

# 构建一个destination name为test的队列， address 对应的数据库ip+端口 ，dbUsername对应数据库用户名，dbPassword对应数据库密码，注意修改为自己的
sh run.sh -e canal.auto.scan=false \\\\
-e canal.destinatiOns=test \\\\
-e canal.instance.master.address=172.17.0.4:3306  \\\\
-e canal.instance.dbUsername=canal  \\\\
-e canal.instance.dbPassword=canal  \\\\
-e canal.instance.cOnnectionCharset=UTF-8 \\\\
-e canal.instance.tsdb.enable=true \\\\
-e canal.instance.gtidon=false  \\\\

• 启动之后可以进入容器，看一下里面的 日志,如果出现了标红的信息，说明成功，否则就查看里面的报错信息吧！也不难

• 使用组件安装，此处我有一个laravel框架，直接在laravel里面安装使用了，相关代码贴出

 # 安装组件canal-php
 composer require xingwenge/canal_php
# 编写脚本监听
connect("172.17.0.5", 11111);//此处修改为自己的配置
            $client->checkValid();
            $client->subscribe("1001", "test", ".*\\\\\\\\..*");//对应启动容器时test的队列名
            while (true) {
                $message = $client->get(100);
                if ($entries = $message->getEntries()) {
                    foreach ($entries as $entry) {
                        Fmt::println($entry);
                    }
                }
                sleep(1);
            }

            $client->disConnect();
        } catch (\\\\Exception $e) {
            echo $e->getMessage(), PHP_EOL;
        }

    }

}

• 更改数据

相关免费学习推荐：mysql视频教程

以上就是canal来实现mysql的数据同步的详细内容，更多请关注其它相关文章！