站長資訊網(wǎng)服務(wù)發(fā)現(xiàn)
其實(shí)簡單說，服務(wù)發(fā)現(xiàn)就是解耦服務(wù)與IP地址之間的硬綁定關(guān)系，
以典型的集群為例，對于集群來說，是有多個(gè)節(jié)點(diǎn)的，這些節(jié)點(diǎn)對應(yīng)多個(gè)IP（或者同一個(gè)IP的不同端口號(hào)），集群中不同節(jié)點(diǎn)責(zé)任是不一樣的。
比如說一個(gè)數(shù)據(jù)集群中，可以分為讀節(jié)點(diǎn)或者寫節(jié)點(diǎn)，寫節(jié)點(diǎn)和讀節(jié)點(diǎn)都是相對的，不是硬綁定的，某一個(gè)邏輯節(jié)點(diǎn)，隨著故障轉(zhuǎn)移及恢復(fù)，是可以變換身份的（寫變讀，讀變寫；主降從，從升主等等）
集群對外提供服務(wù)的時(shí)候，對于外界來說，集群中節(jié)點(diǎn)身份變換的時(shí)候需要對外透明，外界無需因?yàn)榧汗?jié)點(diǎn)的身份變換而更改配置，這就需要一個(gè)解耦合的服務(wù)。
Consul，zookeeper等中間件，就是做這個(gè)透明轉(zhuǎn)換的，也就是服務(wù)發(fā)現(xiàn)。這里簡單測試consul作為服務(wù)發(fā)現(xiàn)的實(shí)現(xiàn)。
Consul是一種服務(wù)解耦解決方案（service mesh solution，糾結(jié)了好久不知道怎么翻譯），提供具有服務(wù)發(fā)現(xiàn)，配置和分段功能的全功能控制系統(tǒng)（control plane）。
這些功能中的每一個(gè)都可以根據(jù)需要單獨(dú)使用，也可以一起使用以構(gòu)建完整的服務(wù)解耦。 即便是用了谷歌翻譯的情況下，這段翻譯糾結(jié)了半天，不知道怎么翻譯合適。
如下是按照自己對consul做服務(wù)發(fā)現(xiàn)的理解，簡單整理的邏輯結(jié)構(gòu)圖，其原理還是比較容易理解的。
Consul is a service mesh solution providing a full featured control plane with service discovery, configuration, and segmentation functionality. Each of these features can be used individually as needed, or they can be used together to build a full service mesh. Consul requires a data plane and supports both a proxy and native integration model. Consul ships with a simple built-in proxy so that everything works out of the box, but also supports 3rd party proxy integrations such as Envoy. https://www.consul.io/intro/index.html
它提供如下幾個(gè)關(guān)鍵功能：
服務(wù)發(fā)現(xiàn)：
Consul的某些客戶端可以提供一個(gè)服務(wù)，例如api或者mysql，其它客戶端可以使用Consul去發(fā)現(xiàn)這個(gè)服務(wù)的提供者。
使用DNS或者HTTP，應(yīng)用可以很容易的找到他們所依賴的服務(wù)。
健康檢查：
Consul客戶端可以提供一些健康檢查，這些健康檢查可以關(guān)聯(lián)到一個(gè)指定的服務(wù)（服務(wù)是否返回200 OK），也可以關(guān)聯(lián)到本地節(jié)點(diǎn)（內(nèi)存使用率是否在90%以下）。
這些信息可以被一個(gè)操作員用來監(jiān)控集群的健康狀態(tài)，被服務(wù)發(fā)現(xiàn)組件路由時(shí)用來遠(yuǎn)離不健康的主機(jī)。
鍵值存儲(chǔ)：
應(yīng)用可以使用Consul提供的分層鍵值存儲(chǔ)用于一些目的，包括動(dòng)態(tài)配置、特征標(biāo)記、協(xié)作、leader選舉等等。通過一個(gè)簡單的HTTP API可以很容易的使用這個(gè)組件。
多數(shù)據(jù)中心：
Consul對多數(shù)據(jù)中心有非常好的支持，這意味著Consul用戶不必?fù)?dān)心由于創(chuàng)建更多抽象層而產(chǎn)生的多個(gè)區(qū)域。
Consul被設(shè)計(jì)為對DevOps群體和應(yīng)用開發(fā)者友好，他非常適合現(xiàn)代的、可伸縮的基礎(chǔ)設(shè)施。
本文基于docker來實(shí)現(xiàn)consul的服務(wù)發(fā)現(xiàn)配置，方法consul agent是通過json注冊的模式實(shí)現(xiàn)服務(wù)注冊，
其中consul的服務(wù)端是3節(jié)點(diǎn)的集群，客戶點(diǎn)是6節(jié)點(diǎn)3主3從的redis服務(wù)器集群，consul實(shí)現(xiàn)redis集群中讀寫服務(wù)注冊于發(fā)現(xiàn)。
盡管Redis cluster有多IP方式驅(qū)動(dòng)連接，這里僅僅為了測試“服務(wù)發(fā)現(xiàn)”的。
其實(shí)本來想測試MySQL單主模式的MGR，實(shí)現(xiàn)讀寫分離的服務(wù)發(fā)現(xiàn)，但是MySQL有點(diǎn)太重了，機(jī)器配置不夠，所以做了Redis的集群來測試服務(wù)發(fā)現(xiàn)
consul服務(wù)端集群安裝配置
作為服務(wù)發(fā)現(xiàn)的載體，consul是可以使用單節(jié)點(diǎn)運(yùn)行的，作為解析服務(wù)的載體，是一個(gè)非常重要的角色，集群化具有更強(qiáng)的抗災(zāi)性，因此更多的時(shí)候是以多節(jié)點(diǎn)集群的方式運(yùn)行解析服務(wù)的這個(gè)載體。
這里使用三個(gè)節(jié)點(diǎn)作為consul的集群服務(wù)端來運(yùn)行，三個(gè)consul的服務(wù)節(jié)點(diǎn)IP分別是：172.18.0.11 ，172.18.0.12，172.18.0.13，需要固定IP
docker network create –subnet=172.18.0.11/16 mynetwork
docker run -itd –name consul01 –net mynetwork –ip 172.18.0.11 -v /usr/local/docker_file/consul01/:/usr/local/ CentOS
docker run -itd –name consul02 –net mynetwork –ip 172.18.0.12 -v /usr/local/docker_file/consul02/:/usr/local/ centos
docker run -itd –name consul03 –net mynetwork –ip 172.18.0.13 -v /usr/local/docker_file/consul03/:/usr/local/ centos
分別在每個(gè)容器中創(chuàng)建consul服務(wù)（unzip consul_1.6.2_linux_amd64.zip解壓縮即可，非常簡單）
三個(gè)容器節(jié)點(diǎn)的server.json節(jié)點(diǎn)配置文件如下，唯一的區(qū)別就是bind_addr指定為當(dāng)前節(jié)點(diǎn)的IP
如下是172.18.0.11節(jié)點(diǎn)的配置，不同節(jié)點(diǎn)僅需修改bind_addr為對應(yīng)機(jī)器（容器）的IP
/usr/local/server.json
{
“datacenter”: “dc1”,
“data_dir”: “/usr/local/”,
“log_level”: “INFO”,
“server”: true,
“bootstrap_expect”: 3,
“bind_addr”: “172.18.0.11”,
“client_addr”: “0.0.0.0”,
“start_join”: [“172.18.0.11″,”172.18.0.12″,”172.18.0.13”],
“ui”:true
}
./consul agent -server -config-dir=/usr/local > /usr/local/consul.log &
由于配置文件中制定了集群的IP列表，因此無需顯式加入集群（cluster join），正常情況下，啟動(dòng)三個(gè)節(jié)點(diǎn)后，會(huì)自動(dòng)組成一個(gè)集群，并且自動(dòng)選舉出來一個(gè)leader。
consul客戶端安裝配置
docker run -itd –name redis01 –net mynetwork –ip 172.18.0.21 -v /usr/local/docker_file/redis01/:/usr/local/ centos
docker run -itd –name redis02 –net mynetwork –ip 172.18.0.22 -v /usr/local/docker_file/redis02/:/usr/local/ centos
docker run -itd –name redis03 –net mynetwork –ip 172.18.0.23 -v /usr/local/docker_file/redis03/:/usr/local/ centos
docker run -itd –name redis04 –net mynetwork –ip 172.18.0.24 -v /usr/local/docker_file/redis04/:/usr/local/ centos
docker run -itd –name redis05 –net mynetwork –ip 172.18.0.25 -v /usr/local/docker_file/redis05/:/usr/local/ centos
docker run -itd –name redis06 –net mynetwork –ip 172.18.0.26 -v /usr/local/docker_file/redis06/:/usr/local/ centos
如下是172.18.0.21節(jié)點(diǎn)的配置，不同節(jié)點(diǎn)僅需修改bind_addr為對應(yīng)機(jī)器（容器）的IP
client.json { "data_dir": "usr/local/consuldata", "enable_script_checks": true, "bind_addr": "172.18.0.21", "retry_join": ["172.18.0.11","172.18.0.12","172.18.0.13"], "retry_interval": "30s", "rejoin_after_leave": true, "start_join": ["172.18.0.11","172.18.0.12","172.18.0.13"] }
consul客戶端代理服務(wù)注冊
Redis集群安裝參考https://www.cnblogs.com/wy123/p/12012848.html，還是非常方便的，在本地（容器節(jié)點(diǎn)）一鍵創(chuàng)建6個(gè)節(jié)點(diǎn)3主3從的集群。
其中主節(jié)點(diǎn)是172.18.0.21，172.18.0.22，172.18.0.23，從節(jié)點(diǎn)是172.18.0.24，172.18.0.25，172.18.0.26
172.18.0.21節(jié)點(diǎn)上的redis-master-8888.json（172.18.0.22，172.18.0.23，172.18.0.24，172.18.0.25，172.18.0.26 類同，僅需修改address）
{ "services": [ { "name": "w-master-redis-8888", "tags": [ "master" ], "address": "172.18.0.21", "port": 8888, "checks": [ { "args":["sh","-c","/usr/local/consuldata/check_redis_master.sh 172.18.0.21 8888 ******"], "Shell":"/bin/bash", "interval": "15s" } ] } ] }
redis-slave-8888.json
{ "services": [ { "name": "r-slave-redis-8888", "tags": [ "master" ], "address": "172.18.0.21", "port": 8888, "checks": [ { "args":["sh","-c","/usr/local/consuldata/check_redis_slave.sh 172.18.0.21 8888 ******"], "Shell":"/bin/bash", "interval": "15s" } ] } ] }
Consul client節(jié)點(diǎn)的Redis主節(jié)點(diǎn)（寫節(jié)點(diǎn)）服務(wù)檢查腳本check_redis_master.sh
以下腳本來源于https://www.cnblogs.com/gomysql/p/8010552.html，做了簡單的修改，在節(jié)點(diǎn)的身份判斷邏輯上需要加強(qiáng)。
#!/bin/bash host=$1 myport=$2 auth=$3 if [ ! -n "$auth" ] then auth='""' fi comm="/usr/local/redis_instance/redis8888/bin/redis-cli -h $host -p $myport -a $auth " role=`echo 'INFO Replication'|$comm |grep -Ec 'role:master'` echo 'INFO Replication'|$comm if [ $role -ne 1 ] then exit 2 fi
Consul client節(jié)點(diǎn)的Redis從節(jié)點(diǎn)服務(wù)檢查腳本check_redis_slave.sh
#!/bin/bash host=$1 myport=$2 auth=$3 if [ ! -n "$auth" ] then auth='""' fi comm="/usr/local/redis_instance/redis8888/bin/redis-cli -h $host -p $myport -a $auth " role=`echo 'INFO Replication'|$comm |grep -Ec 'role:slave'` echo $role echo 'INFO Replication'|$comm if [ $role -ne 1 ] then exit 2 fi
Consul服務(wù)發(fā)現(xiàn)
redis集群配置成功后，重新加載代理服務(wù)，consul reload，一切正常的話，consul服務(wù)端就可以解析配置的服務(wù)了。
如下注冊了兩個(gè)服務(wù)，分別是r-slave-redis-8888，w-master-redis-8888，分別代表Redis集群的讀寫節(jié)點(diǎn)。
需要注意的是，這三個(gè)節(jié)點(diǎn)都是寫節(jié)點(diǎn)，這里僅僅是為了實(shí)現(xiàn)服務(wù)發(fā)現(xiàn)（盡管redis 有多IP的驅(qū)動(dòng)支持）
r-slave-redis-8888.service.consul服務(wù)的解析，指向了三個(gè)從節(jié)點(diǎn)，172.18.0.24，172.18.0.25，172.18.0.26
故障轉(zhuǎn)移之后的服務(wù)發(fā)現(xiàn):模擬主節(jié)點(diǎn)故障，對172.18.0.21節(jié)點(diǎn)手動(dòng)故障轉(zhuǎn)移，現(xiàn)在172.18.0.21與172.18.0.24角色交換
Redis集群故障轉(zhuǎn)以后的服務(wù)發(fā)現(xiàn)解析結(jié)果 對于w-master-redis-8888.service.consul這個(gè)服務(wù)，成功解析到172.18.0.24，172.18.0.22，172.18.0.23三個(gè)主節(jié)點(diǎn)
Redis集群故障轉(zhuǎn)以后的服務(wù)發(fā)現(xiàn)解析結(jié)果 對于w-master-redis-8888.service.consul這個(gè)服務(wù)，成功解析到172.18.0.24，172.18.0.22，172.18.0.23三個(gè)主節(jié)點(diǎn)
遇到的問題：
1，cosnul服務(wù)端集群的時(shí)候，clustercenter一開始自定義了一個(gè)名稱myconsule_datacenter,導(dǎo)致client節(jié)點(diǎn)死活加不進(jìn)來,按照默認(rèn)的dc1就沒有問題
目前還不理解這個(gè)datacenter的命名規(guī)則是什么？
2，容器節(jié)點(diǎn)中的shell腳本要授予可執(zhí)行權(quán)限chmod +x check_XXX.sh
3，其他異常問題，一定要看日志，搜索一下基本上都有結(jié)果。
以下純粹是Redis集群的問題，與Consul沒有直接關(guān)系，僅作為本測試中遇到的問題。
4，容器節(jié)點(diǎn)的Redis集群時(shí)，需要移除bind_ip的127.0.0.1節(jié)點(diǎn)，直接配置docker創(chuàng)建容器時(shí)候的IP，創(chuàng)建集群的時(shí)候會(huì)一致等待，waiting for the cluster to join
這一點(diǎn)redis-cli –cluster做的很扯淡，明明找不到節(jié)點(diǎn)，還要死等，不人為終止的話，他會(huì)一直waiting
5，Redis集群時(shí)候，因?yàn)橹鲝亩际窍鄬Φ模枰嗷プR(shí)別對方，主從節(jié)點(diǎn)都要指定“masterauth”和“requirepass”，且密碼一致，否則執(zhí)行cluster failover提示成功，但故障轉(zhuǎn)移不成功
6，遇到一個(gè)靈異的問題（之前單機(jī)多實(shí)例的時(shí)候也遇到過），在啟動(dòng)容器上的Redis服務(wù)的時(shí)候，如果使用絕對路徑啟動(dòng)，在創(chuàng)建集群的時(shí)候會(huì)出現(xiàn)從節(jié)點(diǎn)無法添加到集群中去的情況，停止服務(wù)，以相對路徑方式重啟之后就沒有這個(gè)問題
總的來說consul這個(gè)中間件使用起來還算是比較簡單，配置也很清爽，不像某些中間件令人作嘔的配置結(jié)構(gòu)（mycat？？？）
這里沒有配置多數(shù)據(jù)中心模式，僅配置了單數(shù)據(jù)中心模式，作為一款服務(wù)發(fā)現(xiàn)的中間件，是完全沒有問題的，尤其是作為MySQL集群不支持多IP連接驅(qū)動(dòng)的數(shù)據(jù)庫連接。
