Centos7 Mysql 5.6 多主一從 解決方案與詳細(xì)配置
更新時(shí)間：2016年04月17日 11:59:29 作者：張玉坡
這篇文章主要介紹了Centos7 Mysql 5.6 多主一從 解決方案與詳細(xì)配置,需要的朋友可以參考下
業(yè)務(wù)場(chǎng)景：
公司幾個(gè)主要的業(yè)務(wù)已經(jīng)獨(dú)立，放在不同的數(shù)據(jù)庫(kù)服務(wù)器上面，但是有一個(gè)業(yè)務(wù)又需要關(guān)聯(lián)多個(gè)業(yè)務(wù)庫(kù)進(jìn)行聯(lián)合查詢統(tǒng)計(jì)。這時(shí)候就需要將不同的業(yè)務(wù)庫(kù)數(shù)據(jù)同步到一臺(tái)從庫(kù)進(jìn)行統(tǒng)計(jì)。根據(jù)Mysql主從同步原理使用多從一主的方案解決。主庫(kù)使用innodb引擎，從庫(kù)開(kāi)啟多實(shí)例使用myisam引擎并將多個(gè)實(shí)例的數(shù)據(jù)同步到同一個(gè)目錄，并通過(guò)flush tables 在一個(gè)實(shí)例里面訪問(wèn)其他實(shí)例的數(shù)據(jù)。
解決思路：
1、主數(shù)據(jù)庫(kù)使用Innodb引擎，并設(shè)置sql_mode為 NO_AUTO_CREATE_USER
2、從庫(kù)開(kāi)啟多實(shí)例，將多個(gè)主庫(kù)里面的數(shù)據(jù)通過(guò)主從復(fù)制同步到同一個(gè)數(shù)據(jù)目錄。從庫(kù)的每個(gè)實(shí)例對(duì)應(yīng)一個(gè)主庫(kù)。多個(gè)實(shí)例使用同一個(gè)數(shù)據(jù)目錄。
3、從庫(kù)使用Myisam引擎，關(guān)閉從庫(kù)默認(rèn)的innodb引擎,Myisam引擎可以訪問(wèn)同一個(gè)數(shù)據(jù)目錄里面其他實(shí)例的表。
4、從庫(kù)的每個(gè)實(shí)例需要執(zhí)行flush tables 才能看到其他實(shí)例表的數(shù)據(jù)變化，可以設(shè)置crontab任務(wù)計(jì)劃每分鐘在第一個(gè)實(shí)例刷新表，以便程序連接的默認(rèn)實(shí)例能看到表的實(shí)時(shí)變化。
5、設(shè)置主庫(kù)和從庫(kù)的sql_mode都為NO_AUTO_CREATE_USER，只有這樣主庫(kù)的innodb引擎的sql同步到從庫(kù)的時(shí)候才能執(zhí)行成功。
方案架構(gòu)圖：
環(huán)境說(shuō)明：
主庫(kù)-1：192.168.1.1
主庫(kù)-2：192.168.1.2
從庫(kù)-3：192.168.1.3
從庫(kù)-3：192.168.1.4
從庫(kù)-3：192.168.1.5
實(shí)現(xiàn)步驟：（Mysql安裝步驟這里不在描述）
1、主數(shù)據(jù)庫(kù)配置文件，多個(gè)主庫(kù)配置文件除了server-id不能一樣其他都一樣。
[root@masterdb01 ~]#cat /etc/my.cnf [client] port= 3306 socket= /tmp/mysql.sock [mysqld] port = 3306 basedir = /usr/local/mysql datadir = /data/mysql character-set-server = utf8mb4 default-storage-engine = InnoDB socket = /tmp/mysql.sock skip-name-resolv = 1 open_files_limit = 65535 back_log = 103 max_connections = 512 max_connect_errors = 100000 table_open_cache = 2048 tmp-table-size = 32M max-heap-table-size = 32M #query-cache-type = 0 query-cache-size = 0 external-locking = FALSE max_allowed_packet = 32M sort_buffer_size = 2M join_buffer_size = 2M thread_cache_size = 51 query_cache_size = 32M tmp_table_size = 96M max_heap_table_size = 96M query_cache_type=1 log-error=/data/logs/mysqld.log slow_query_log = 1 slow_query_log_file = /data/logs/slow.log long_query_time = 0.1 # BINARY LOGGING # server-id = 1 log-bin = /data/binlog/mysql-bin log-bin-index =/data/binlog/mysql-bin.index expire-logs-days = 14 sync_binlog = 1 binlog_cache_size = 4M max_binlog_cache_size = 8M max_binlog_size = 1024M log_slave_updates #binlog_format = row binlog_format = MIXED //這里使用的混合模式復(fù)制 relay_log_recovery = 1 #不需要同步的表 replicate-wild-ignore-table=mydb.sp_counter #不需要同步的庫(kù) replicate-ignore-db = mysql,information_schema,performance_schema key_buffer_size = 32M read_buffer_size = 1M read_rnd_buffer_size = 16M bulk_insert_buffer_size = 64M myisam_sort_buffer_size = 128M myisam_max_sort_file_size = 10G myisam_repair_threads = 1 myisam_recover transaction_isolation = REPEATABLE-READ innodb_additional_mem_pool_size = 16M innodb_buffer_pool_size = 5734M innodb_buffer_pool_load_at_startup = 1 innodb_buffer_pool_dump_at_shutdown = 1 innodb_data_file_path = ibdata1:1024M:autoextend innodb_flush_log_at_trx_commit = 2 innodb_log_buffer_size = 32M innodb_log_file_size = 2G innodb_log_files_in_group = 2 innodb_io_capacity = 4000 innodb_io_capacity_max = 8000 innodb_max_dirty_pages_pct = 50 innodb_flush_method = O_DIRECT innodb_file_format = Barracuda innodb_file_format_max = Barracuda innodb_lock_wait_timeout = 10 innodb_rollback_on_timeout = 1 innodb_print_all_deadlocks = 1 innodb_file_per_table = 1 innodb_locks_unsafe_for_binlog = 0 [mysqldump] quick max_allowed_packet = 32M
2、從庫(kù)配置文件。多個(gè)從庫(kù)配置文件除了server-id不能一樣其他都一樣。
[root@slavedb01 ~]# cat /etc/my.cnf [client] port= 3306 socket= /tmp/mysql.sock [mysqld_multi] # 指定相關(guān)命令的路徑 mysqld = /usr/local/mysql/bin/mysqld_safe mysqladmin = /usr/local/mysql/bin/mysqladmin ##復(fù)制主庫(kù)1的數(shù)據(jù)## [mysqld2] port = 3306 basedir = /usr/local/mysql datadir = /data/mysql character-set-server = utf8mb4 #指定實(shí)例1的sock文件和pid文件 socket = /tmp/mysql.sock pid-file=/data/mysql/mysql.pid skip-name-resolv = 1 open_files_limit = 65535 back_log = 103 max_connections = 512 max_connect_errors = 100000 table_open_cache = 2048 tmp-table-size = 32M max-heap-table-size = 32M query-cache-size = 0 external-locking = FALSE max_allowed_packet = 32M sort_buffer_size = 2M join_buffer_size = 2M thread_cache_size = 51 query_cache_size = 32M tmp_table_size = 96M max_heap_table_size = 96M query_cache_type=1 #指定第一個(gè)實(shí)例的錯(cuò)誤日志和慢查詢?nèi)罩韭窂? log-error=/data/logs/mysqld.log slow_query_log = 1 slow_query_log_file = /data/logs/slow.log long_query_time = 0.1 # BINARY LOGGING# # 指定實(shí)例1的binlog和relaylog路徑為/data/binlog目錄 # 每個(gè)從庫(kù)和每個(gè)實(shí)例的server_id不能一樣。 server-id = 2 log-bin = /data/binlog/mysql-bin log-bin-index =/data/binlog/mysql-bin.index relay_log = /data/binlog/mysql-relay-bin relay_log_index = /data/binlog/mysql-relay.index master-info-file = /data/mysql/master.info relay_log_info_file = /data/mysql/relay-log.info read_only = 1 expire-logs-days = 14 sync_binlog = 1 #需要同步的庫(kù)，如果不設(shè)置，默認(rèn)同步所有庫(kù)。 #replicate-do-db = xxx #不需要同步的表 replicate-wild-ignore-table=mydb.sp_counter #不需要同步的庫(kù) replicate-ignore-db = mysql,information_schema,performance_schema binlog_cache_size = 4M max_binlog_cache_size = 8M max_binlog_size = 1024M log_slave_updates =1 #binlog_format = row binlog_format = MIXED relay_log_recovery = 1 key_buffer_size = 32M read_buffer_size = 1M read_rnd_buffer_size = 16M bulk_insert_buffer_size = 64M myisam_sort_buffer_size = 128M myisam_max_sort_file_size = 10G myisam_repair_threads = 1 myisam_recover #設(shè)置默認(rèn)引擎為Myisam，下面這些參數(shù)一定要加上。 default-storage-engine=MyISAM default-tmp-storage-engine=MYISAM #關(guān)閉innodb引擎 skip-innodb innodb = OFF disable-innodb #設(shè)置sql_mode模式為NO_AUTO_CREATE_USER sql_mode = NO_AUTO_CREATE_USER #關(guān)閉innodb引擎 loose-skip-innodb loose-innodb-trx=0 loose-innodb-locks=0 loose-innodb-lock-waits=0 loose-innodb-cmp=0 loose-innodb-cmp-per-index=0 loose-innodb-cmp-per-index-reset=0 loose-innodb-cmp-reset=0 loose-innodb-cmpmem=0 loose-innodb-cmpmem-reset=0 loose-innodb-buffer-page=0 loose-innodb-buffer-page-lru=0 loose-innodb-buffer-pool-stats=0 loose-innodb-metrics=0 loose-innodb-ft-default-stopword=0 loose-innodb-ft-inserted=0 loose-innodb-ft-deleted=0 loose-innodb-ft-being-deleted=0 loose-innodb-ft-config=0 loose-innodb-ft-index-cache=0 loose-innodb-ft-index-table=0 loose-innodb-sys-tables=0 loose-innodb-sys-tablestats=0 loose-innodb-sys-indexes=0 loose-innodb-sys-columns=0 loose-innodb-sys-fields=0 loose-innodb-sys-foreign=0 loose-innodb-sys-foreign-cols=0 ##復(fù)制主庫(kù)2的數(shù)據(jù)## [mysqld3] port = 3307 basedir = /usr/local/mysql datadir = /data/mysql character-set-server = utf8mb4 #指定實(shí)例2的sock文件和pid文件 socket = /tmp/mysql3.sock pid-file=/data/mysql/mysql3.pid skip-name-resolv = 1 open_files_limit = 65535 back_log = 103 max_connections = 512 max_connect_errors = 100000 table_open_cache = 2048 tmp-table-size = 32M max-heap-table-size = 32M query-cache-size = 0 external-locking = FALSE max_allowed_packet = 32M sort_buffer_size = 2M join_buffer_size = 2M thread_cache_size = 51 query_cache_size = 32M tmp_table_size = 96M max_heap_table_size = 96M query_cache_type=1 log-error=/data/logs/mysqld3.log slow_query_log = 1 slow_query_log_file = /data/logs/slow3.log long_query_time = 0.1 # BINARY LOGGING # # 這里一定要注意，不能把兩個(gè)實(shí)例的binlog和relaylog放到同一個(gè)目錄， # 這里指定實(shí)例2的binlog日志為/data/binlog2目錄 # 每個(gè)從庫(kù)和每個(gè)實(shí)例的server_id不能一樣。 server-id = 22 log-bin = /data/binlog2/mysql-bin log-bin-index =/data/binlog2/mysql-bin.index relay_log = /data/binlog2/mysql-relay-bin relay_log_index = /data/binlog2/mysql-relay.index master-info-file = /data/mysql/master3.info relay_log_info_file = /data/mysql/relay-log3.info read_only = 1 expire-logs-days = 14 sync_binlog = 1 #不需要復(fù)制的庫(kù) replicate-ignore-db = mysql,information_schema,performance_schema binlog_cache_size = 4M max_binlog_cache_size = 8M max_binlog_size = 1024M log_slave_updates =1 #binlog_format = row binlog_format = MIXED relay_log_recovery = 1 key_buffer_size = 32M read_buffer_size = 1M read_rnd_buffer_size = 16M bulk_insert_buffer_size = 64M myisam_sort_buffer_size = 128M myisam_max_sort_file_size = 10G myisam_repair_threads = 1 myisam_recover #設(shè)置默認(rèn)引擎為Myisam default-storage-engine=MyISAM default-tmp-storage-engine=MYISAM #關(guān)閉innodb引擎 skip-innodb innodb = OFF disable-innodb #設(shè)置sql_mode模式為NO_AUTO_CREATE_USER sql_mode = NO_AUTO_CREATE_USER #關(guān)閉innodb引擎，下面這些參數(shù)一定要加上。 loose-skip-innodb loose-innodb-trx=0 loose-innodb-locks=0 loose-innodb-lock-waits=0 loose-innodb-cmp=0 loose-innodb-cmp-per-index=0 loose-innodb-cmp-per-index-reset=0 loose-innodb-cmp-reset=0 loose-innodb-cmpmem=0 loose-innodb-cmpmem-reset=0 loose-innodb-buffer-page=0 loose-innodb-buffer-page-lru=0 loose-innodb-buffer-pool-stats=0 loose-innodb-metrics=0 loose-innodb-ft-default-stopword=0 loose-innodb-ft-inserted=0 loose-innodb-ft-deleted=0 loose-innodb-ft-being-deleted=0 loose-innodb-ft-config=0 loose-innodb-ft-index-cache=0 loose-innodb-ft-index-table=0 loose-innodb-sys-tables=0 loose-innodb-sys-tablestats=0 loose-innodb-sys-indexes=0 loose-innodb-sys-columns=0 loose-innodb-sys-fields=0 loose-innodb-sys-foreign=0 loose-innodb-sys-foreign-cols=0 [mysqldump] quick max_allowed_packet = 32M ```
3、設(shè)置主庫(kù)sql_mode,Mysql5.6默認(rèn)需要在啟動(dòng)文件文件里面設(shè)置sql_mode才可以生效。
# cat /etc/init.d/mysqld
#other_args="$*" # uncommon, but needed when called from an RPM upgrade action
# Expected: "--skip-networking --skip-grant-tables"
# They are not checked here, intentionally, as it is the resposibility
# of the "spec" file author to give correct arguments only.
#將上面默認(rèn)的#other_args開(kāi)啟后改為
other_args="--sql-mode=NO_AUTO_CREATE_USER"
4、開(kāi)啟主庫(kù)和從庫(kù)
#主庫(kù) service mysqld start #開(kāi)啟從庫(kù)的二個(gè)實(shí)例 /usr/local/mysql/bin/mysqld_multi start 2 /usr/local/mysql/bin/mysqld_multi start 3
5、在兩臺(tái)主庫(kù)上面分別授權(quán)復(fù)制賬號(hào)
#需要授權(quán)三個(gè)從庫(kù)的ip可以同步 mysql> GRANT REPLICATION SLAVE ON *.* TO rep@'192.168.1.3' IDENTIFIED BY 'rep123'; mysql> GRANT REPLICATION SLAVE ON *.* TO rep@'192.168.1.4' IDENTIFIED BY 'rep123'; mysql> GRANT REPLICATION SLAVE ON *.* TO rep@'192.168.1.5' IDENTIFIED BY 'rep123'; mysql> flush privileges;
6、在三個(gè)從庫(kù)分別開(kāi)啟同步。
#進(jìn)入第一個(gè)實(shí)例執(zhí)行 $ mysql -S /tmp/mysql.sock mysql> CHANGE MASTER TO MASTER_HOST='192.168.1.1',MASTER_USER='rep',MASTER_PASSWORD='rep123',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=112; #進(jìn)入第二個(gè)實(shí)例執(zhí)行 $ mysql -S /tmp/mysql3.sock mysql> CHANGE MASTER TO MASTER_HOST='192.168.1.2',MASTER_USER='rep',MASTER_PASSWORD='rep123',MASTER_LOG_FILE='mysql-bin.000001',MASTER_LOG_POS=112;
7、測(cè)試數(shù)據(jù)同步
在二個(gè)主數(shù)據(jù)庫(kù)分別建表和插入數(shù)據(jù)，到從庫(kù)查看可以看到二個(gè)主庫(kù)同步到同一個(gè)從庫(kù)上面的所有數(shù)據(jù)。
8、在每臺(tái)從庫(kù)服務(wù)器上設(shè)置任務(wù)計(jì)劃每分鐘刷新第一個(gè)實(shí)例的表
# crontab -l */1 * * * * mysql -S /tmp/mysql.sock -e 'flush tables;'
Mysql5.6多主一從的坑
1、Mysql5.6默認(rèn)的引擎是innodb默認(rèn)同步的時(shí)候一定要把主和從的sql_mode模式里面的NO_ENGINE_SUBSTITUTION這個(gè)參數(shù)關(guān)閉。如果不關(guān)閉innodb同步到從庫(kù)上面的sql將會(huì)找不到innodb引擎導(dǎo)致同步失敗。
2、在mysql5.6開(kāi)啟多實(shí)例的時(shí)候第一次啟動(dòng)的時(shí)候在你數(shù)據(jù)庫(kù)的安裝目錄里面（/usr/local/mysql/)會(huì)生成my.cnf配置文件，默認(rèn)會(huì)優(yōu)先讀取數(shù)據(jù)庫(kù)安裝目錄里面的配置文件。導(dǎo)致多實(shí)例不生效。
相關(guān)文章
基于Ubuntu 16.04設(shè)置固定IP的方法教程
這篇文章主要給大家介紹了基于Ubuntu 16.04設(shè)置固定IP的方法教程，文中通過(guò)圖文以及示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友可以參考借鑒，下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧。2017-10-10
在Linux中限制root用戶SSH遠(yuǎn)程登錄的流程詳解
在Linux系統(tǒng)中,root用戶擁有最高權(quán)限,因此為了增強(qiáng)系統(tǒng)安全性,我們通常會(huì)限制root用戶通過(guò)SSH遠(yuǎn)程登錄,本文將介紹如何在Linux系統(tǒng)中限制root用戶的SSH遠(yuǎn)程登錄,需要的朋友可以參考下2024-03-03
Linux服務(wù)器配置ip白名單防止遠(yuǎn)程登錄以及端口暴露的問(wèn)題
今天小編就為大家分享一篇Linux服務(wù)器配置ip白名單防止遠(yuǎn)程登錄以及端口暴露的問(wèn)題，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-07-07
這篇文章主要為大家詳細(xì)介紹了Linux下Kafka分布式集群安裝教程，具有一定的參考價(jià)值，感興趣的小伙伴們可以參考一下2017-12-12
這篇文章主要介紹了Linux 常用命令掛載命令詳解的相關(guān)資料,需要的朋友可以參考下2017-01-01
Linux(Ubuntu 18.04)上安裝Anaconda步驟詳解
Anaconda是最受歡迎的python數(shù)據(jù)科學(xué)和機(jī)器學(xué)習(xí)平臺(tái)，用于大規(guī)模數(shù)據(jù)處理，預(yù)測(cè)分析和科學(xué)計(jì)算。這篇文章主要介紹了Linux(Ubuntu 18.04)上安裝Anaconda的方法,需要的朋友可以參考下2018-11-11
Logrotate實(shí)現(xiàn)Catalina.out日志每倆小時(shí)切割示例
Logrotate是一個(gè)日志文件管理工具，它是Linux默認(rèn)自帶的一個(gè)日志切割工具。本篇文章主要介紹了Logrotate實(shí)現(xiàn)Catalina.out日志每倆小時(shí)切割示例，有一定的參考價(jià)值，有需要的朋友可以參考一下，希望對(duì)你有所幫助2019-02-02
Centos7實(shí)現(xiàn)MySQL基于日志還原數(shù)據(jù)的示例代碼
這篇文章主要介紹了Centos7實(shí)現(xiàn)MySQL基于日志還原數(shù)據(jù)的示例代碼，文中通過(guò)示例代碼介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2020-07-07
在Ubuntu系統(tǒng)中,mkfs工具可以用來(lái)格式化磁盤(pán),支持多種文件系統(tǒng)格式,如ext4、vfat（FAT32）或ntfs,使用前需確認(rèn)磁盤(pán)設(shè)備名,文中通過(guò)代碼介紹的非常詳細(xì),需要的朋友可以參考下2024-09-09
CentOS 6.4安裝配置LNMP服務(wù)器(Nginx+PHP+MySQL)
這篇文章主要介紹了CentOS 6.4下配置LNMP服務(wù)器的詳細(xì)步驟，需要的朋友可以參考下2013-06-06