首页 > 资讯 > 操作系统 >Mariadb之复制过滤器 - Linux

657

分享到

Mariadb之复制过滤器 - Linux

Mariadb之复制过滤器 -Linux 2014-09-12 01:09:57 657人浏览无得

摘要

mariadb的主从复制集群，默认情况下是把主库上的所有库进行复制，只要在主库上产生写操作，从库基于主库的二进制日志做重放，从而实现把主库的上的库表复制到从库；复制过滤器指的是我们仅复制一个或几个数据库相关的数据，而非所

　　mariadb的主从复制集群，默认情况下是把主库上的所有库进行复制，只要在主库上产生写操作，从库基于主库的二进制日志做重放，从而实现把主库的上的库表复制到从库；复制过滤器指的是我们仅复制一个或几个数据库相关的数据，而非所有；过滤器的作用就是来定义我们要复制那些库，那些表，这种定义过滤器的方式叫白名单机制；除了这种告诉服务器我们要复制的库表的，当然我们也可以告诉服务器我们不需要复制的库或表，或者需要忽略的库表的机制叫黑名单；在定义我们需要复制的库或者表，我们可以在主库上定义，也可以在从库上定义；不同的是在主库上定义，我们只能定义需要复制的那些库，忽略那些库；其实在主库上定义过滤器，就是告诉主库那些库的操作不记录二进制日志，当然在主库上不记录二进制，也就无法实现复制；这种在主库上定义那些库记录二进制，那些库不记录二进制，这种方式不是很推荐，原因在于如果主库宕机，做恢复操作时，我们不能利用二进制日志来把数据全部恢复；通常情况下我们在从库上定义复制那些库或者忽略那些库，这里需要注意一点，我们要么使用白名单机制，要么使用黑名单机制，不建议混合使用；

　　在主库上配置只允许某些库记录二进制日志，用binlog_do_db变量来指定，如下

　　提示：以上配置表示只记录和first_db库相关写操作的事件到二进制日志中；

　　重启主库，然后在主库上创建其他库，看看是否还会同步到从库呢？

　　提示：可以看到我们重启主库后，在主库上新建mydb库，在从库上并没有看到mydb从主库上复制过来；

　　在主库上操作first_db库，看看是否及时同步到从库呢？

　　提示：可以看到在主库上操作first_db中的表，在从库上是能够及时的看到；

　　配置在主库上忽略某些库，剩余所有库都记录二进制日志

　　提示：以上配置表示忽略first_db库上的二进制日志记录，剩余其他库都要做二进制日志记录；

　　测试：重启主库，在主库上操作first_db库，看看是否能够及时同步到从库？

　　提示：可以看到我们在主库上操作first_db库中的student表，没有被同步到从库的；

　　查看主库是binlog否记录了我们刚才的插入操作的语句

　　提示：在主库上看二进制日志，并没有记录我们刚才的插如语句相关的操作；

　　在主库上操作其他库看看是否能够被同步到从库呢？

　　提示：可以看到我们在主库上创建新的库表是能够及时同步到从库；

　　在从库上配置只复制first_db相关写操作事件

[root@docker-node03 ~]# mysql
Welcome to the MariaDB monitor.  Commands end with ; or g.
Your MariaDB connection id is 22
Server version: 5.5.65-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type "help;" or "h" for help. Type "c" to clear the current input statement.

MariaDB [(none)]> show global variables like "replicate%";
+----------------------------------+-----------+
| Variable_name                    | Value     |
+----------------------------------+-----------+
| replicate_annotate_row_events    | OFF       |
| replicate_do_db                  |           |
| replicate_do_table               |           |
| replicate_events_marked_for_skip | replicate |
| replicate_ignore_db              |           |
| replicate_ignore_table           |           |
| replicate_wild_do_table          |           |
| replicate_wild_ignore_table      |           |
+----------------------------------+-----------+
8 rows in set (0.00 sec)

MariaDB [(none)]> set @@global.replicate_do_db=first_db;
ERROR 1198 (HY000): This operation cannot be performed with a running slave; run STOP SLAVE first
MariaDB [(none)]> stop slave;
Query OK, 0 rows affected (0.01 sec)

MariaDB [(none)]> set @@global.replicate_do_db=first_db;
Query OK, 0 rows affected (0.01 sec)

MariaDB [(none)]> show global variables like "replicate%";
+----------------------------------+-----------+
| Variable_name                    | Value     |
+----------------------------------+-----------+
| replicate_annotate_row_events    | OFF       |
| replicate_do_db                  | first_db  |
| replicate_do_table               |           |
| replicate_events_marked_for_skip | replicate |
| replicate_ignore_db              |           |
| replicate_ignore_table           |           |
| replicate_wild_do_table          |           |
| replicate_wild_ignore_table      |           |
+----------------------------------+-----------+
8 rows in set (0.00 sec)

MariaDB [(none)]> start slave;
Query OK, 0 rows affected (0.00 sec)

MariaDB [(none)]> show slave statusG
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.0.22
                  Master_User: rpluser
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000017
          Read_Master_Log_Pos: 245
               Relay_Log_File: relay-log.000035
                Relay_Log_Pos: 529
        Relay_Master_Log_File: mysql-bin.000017
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: first_db
          Replicate_Ignore_DB: 
           Replicate_Do_Table: 
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 245
              Relay_Log_Space: 1101
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 1
1 row in set (0.00 sec)

MariaDB [(none)]>

　　提示：以上是在从节点上直接在线修改replicate_do_db变量来实现复制过滤功能；如果需要永久生效，那么把该配置写到配置文件中即可；以上配置表示只复制first_db相关写操作的事件；在线修改变量的方式，需要先停止slave，修改完成后在启动；从show slave status中，我们就能够清楚的replicate_do_db的值为first_db;

　　测试：在主库上对其他库操作，看看是否能够同步到从节点?

　　提示：可以看到我们在主库删除mydb2中的test表后，并没有同步到从库；

　　测试：操作first_db中的表，看看是否能同步？

　　提示：可以看到我们在first_db库中的student表中插入了一条新数据，在从库是能够及时的同步；

　　配置从节点只复制first_db库中的student表的操作相关事件

MariaDB [first_db]> stop slave;
Query OK, 0 rows affected (0.01 sec)

MariaDB [first_db]> show global variables like "replicate%";
+----------------------------------+-----------+
| Variable_name                    | Value     |
+----------------------------------+-----------+
| replicate_annotate_row_events    | OFF       |
| replicate_do_db                  | first_db  |
| replicate_do_table               |           |
| replicate_events_marked_for_skip | replicate |
| replicate_ignore_db              |           |
| replicate_ignore_table           |           |
| replicate_wild_do_table          |           |
| replicate_wild_ignore_table      |           |
+----------------------------------+-----------+
8 rows in set (0.00 sec)

MariaDB [first_db]> set @@global.replicate_do_table=first_db.student;
ERROR 1232 (42000): Incorrect argument type to variable "replicate_do_table"
MariaDB [first_db]> set @@global.replicate_do_table="first_db.student";
Query OK, 0 rows affected (0.00 sec)

MariaDB [first_db]> show global variables like "replicate%";           
+----------------------------------+------------------+
| Variable_name                    | Value            |
+----------------------------------+------------------+
| replicate_annotate_row_events    | OFF              |
| replicate_do_db                  | first_db         |
| replicate_do_table               | first_db.student |
| replicate_events_marked_for_skip | replicate        |
| replicate_ignore_db              |                  |
| replicate_ignore_table           |                  |
| replicate_wild_do_table          |                  |
| replicate_wild_ignore_table      |                  |
+----------------------------------+------------------+
8 rows in set (0.00 sec)

MariaDB [first_db]> start slave;
Query OK, 0 rows affected (0.00 sec)

MariaDB [first_db]> show slave statusG
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.0.22
                  Master_User: rpluser
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000017
          Read_Master_Log_Pos: 1198
               Relay_Log_File: relay-log.000050
                Relay_Log_Pos: 529
        Relay_Master_Log_File: mysql-bin.000017
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: first_db
          Replicate_Ignore_DB: 
           Replicate_Do_Table: first_db.student
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 1198
              Relay_Log_Space: 1101
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 1
1 row in set (0.00 sec)

MariaDB [first_db]>

　　提示：replicate_do_table这个变量在线修改时需要指明那个库中的那个表，并用引号引起来，否则会提示我们参数类型不正确；

　　测试：在主库的first_db库中新建一张表，看看是否能够被同步到从库？

　　提示：可以看到我们在主库的fisrt_db中新建一张test表，并没有同步到从库中去，这说明replicate_do_table的优先级要高于replicate_do_db；

　　在主库的first_db库中对student表做插入操作，看看是否能够被同步到从库？

　　提示：可以看到操作first_db中的student是能够及时同步到从库；

　　设置从节点只复制以student开头的表

MariaDB [first_db]> stop slave;
Query OK, 0 rows affected (0.00 sec)

MariaDB [first_db]> show global variables like "replicate%";
+----------------------------------+------------------+
| Variable_name                    | Value            |
+----------------------------------+------------------+
| replicate_annotate_row_events    | OFF              |
| replicate_do_db                  | first_db         |
| replicate_do_table               | first_db.student |
| replicate_events_marked_for_skip | replicate        |
| replicate_ignore_db              |                  |
| replicate_ignore_table           |                  |
| replicate_wild_do_table          |                  |
| replicate_wild_ignore_table      |                  |
+----------------------------------+------------------+
8 rows in set (0.00 sec)

MariaDB [first_db]> set @@global.replicate_wild_do_table="first_db.student%";
Query OK, 0 rows affected (0.00 sec)

MariaDB [first_db]> show global variables like "replicate%";                 
+----------------------------------+-------------------+
| Variable_name                    | Value             |
+----------------------------------+-------------------+
| replicate_annotate_row_events    | OFF               |
| replicate_do_db                  | first_db          |
| replicate_do_table               | first_db.student  |
| replicate_events_marked_for_skip | replicate         |
| replicate_ignore_db              |                   |
| replicate_ignore_table           |                   |
| replicate_wild_do_table          | first_db.student% |
| replicate_wild_ignore_table      |                   |
+----------------------------------+-------------------+
8 rows in set (0.01 sec)

MariaDB [first_db]> start slave;
Query OK, 0 rows affected (0.00 sec)

MariaDB [first_db]> show slave statusG
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: 192.168.0.22
                  Master_User: rpluser
                  Master_Port: 3306
                Connect_Retry: 60
              Master_Log_File: mysql-bin.000017
          Read_Master_Log_Pos: 1198
               Relay_Log_File: relay-log.000051
                Relay_Log_Pos: 529
        Relay_Master_Log_File: mysql-bin.000017
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: first_db
          Replicate_Ignore_DB: 
           Replicate_Do_Table: first_db.student
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: first_db.student%
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 1198
              Relay_Log_Space: 1101
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 1
1 row in set (0.00 sec)

MariaDB [first_db]>

　　测试：在主库first_db库中操作非student开头的表，看看是否能够被复制到从库呢？

　　提示：可以看到在主库的first_db库中新增test2表，并没有被同步到从库；

　　测试：在主库新增student_test表，看看是否被同步到从库？

　　提示：可以看到在主库上新建student_test表被同步到从库中去了；

　　以上就是mariadb/Mysql数据库主从复制中的复制过滤器的使用；以上演示部分使用白名单机制进行演示的，黑名单和白名单配置方式相同，只不过黑名单表示忽略指定的库或者表，其他剩下的库和表都要进行复制，而白名单是指定的库和表都要复制，其他剩余的库或表都不被复制；在从节点使用黑名单机制忽略库使用replicate_ignore_db变量指定；忽略某些表使用replicate_ignore_table变量来指定；忽略以某类表使用replicate_ignore_wild_do_table指定；使用方式和上面白名单机制的使用方式一样；如果需要永久生效，请把以上变量写到配置文件中重启服务即可生效；

--结束END--

本文标题: Mariadb之复制过滤器 - Linux

本文链接: https://lsjlt.com/news/7021.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

回答

如何调试操作系统的错误？
操作系统

2023-11-15发布

回答

操作系统中的I/O系统是如何实现的？
操作系统

2023-11-15发布

回答

如何实现操作系统的内存管理？
操作系统

2023-11-15发布

回答

什么是虚拟内存，它对操作系统有什么影响？
操作系统

2023-11-15发布

回答

ASP中的MVC架构和WebForms架构有什么区别和使用场景？
ASP.NET

2023-11-15发布

回答

ASP中的数据验证和数据校验有什么不同？
ASP.NET

2023-11-15发布

回答

ASP中的ADO对象和DAO对象有什么区别和使用方法？
ASP.NET

2023-11-15发布

回答

Node.js中的包管理器NPM是什么？如何使用它进行依赖管理？
node.js

2023-11-15发布

回答

Vue.js中的动态组件是什么？如何使用它来动态渲染组件？
VUE

2023-11-15发布

回答

如何使用Vue.js实现懒加载和预加载？
VUE

2023-11-15发布

Mariadb之复制过滤器 - Linux

Mariadb之复制过滤器 - Linux

MySQL过滤复制

Mariadb之半同步复制集群配置 - Linux

mysql过滤复制思路详解

linux如何过滤控制字符

mysql 如何动态修改复制过滤器

初识MariaDB之8——GTID主从复制

初识MariaDB之6——半同步复制

Vue之过滤器详解

mariadb多源主从复制错误跳过.md

SpringSecurity的过滤器链机制

详解Servlet之过滤器（Filter）

MySQL 5.7 复制的过滤参数有哪些

HBase Filter 过滤器之 ValueFilter 详解

HBase Filter 过滤器之 DependentColumnFilter 详解

HBase Filter 过滤器之FamilyFilter详解

HBase Filter 过滤器之QualifierFilter详解

HBase Filter 过滤器之RowFilter详解

在线更改复制过滤选项的方法

Java实战之敏感词过滤器

linux vmstat命令有哪些功能

linux转义字符使用的方法是什么

linux安装node怎么使用

如何查看Linux系统版本号

linux系统怎么配置ntp服务

win10安装报0x25D错误怎么解决

win10开机卡在用户登录界面如何解决

win10新机怎么跳过创建账户

win10中config.msi文章能不能删除

win10改为ahci后无法进入系统怎么解决