原文:https://my.oschina.net/xshuai/blog/917097
摘要: Nginx+Keepalived搭建高可用負載均衡環境(HA) http://blog.csdn.net/xyang81/article/details/52554398可以看更多介紹 Keepalived的介紹可以百度一堆一堆的資料。一定要看看哦。 1.基於上一篇博客總結,再次安裝一個虛擬機當backup服務器,這個服務器只安裝Keepalived+Nginx即可 2.Master還是上一篇博文的虛擬機,環境是Tomcat+JDK+Nginx+Keepalived 3.每個Nginx服務器都安裝Keepalived
基於 Nginx+Tomcat+Redis負載均衡Session共享來實現后續的功能
個人微信小程序。是關於人工智能的。應用是百度大腦 和 騰訊優圖的人臉識別
-
一張簡單的圖說下大概的意思
-
安裝Keepalived到CentOS虛擬機環境(2個虛擬機都安裝)
使用的版本為keepalived-1.2.24.tar.gz 為了方便安裝,在系統里面提前下載好相關的庫
yum -y install libnl libnl-devel yum install -y libnfnetlink-devel
然后就開始解壓編譯安裝吧
tar -zxvf keepalived-1.2.24.tar.gz
cd keepalived-1.2.24.tar.gz ./configure --prefix=/usr/local/keepalived make make install
然后繼續配置Keepalived
mkdir /etc/keepalived cp /usr/local/keepalived/etc/keepalived.conf /etc/keepalived/keepalived.conf cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/rc.d/init.d/keepalived cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/keepalived 添加到開機自啟 chkconfig keepalived on 如果提示keepalived: command not found 解決方法如下 ln -s /usr/local/keepalived/sbin/keepalived /sbin/ 如果遇權限不足 執行以下命令 chmod 755 /etc/init.d/keepalived 相關操作 service keepalived start #啟動服務 service keepalived stop #停止服務 service keepalived restart #重啟服務 請不要着急去啟動Keepalived
-
Keepalived的配置文件說明
引用於http://blog.csdn.net/xyang81/article/details/52554398 keepalived服務安裝完成之后,后面的主要工作就是在keepalived.conf文件中配置HA和負載均衡。 一個功能比較完整的常用的keepalived配置文件,主要包含三塊: 全局定義塊、VRRP實例定義塊和虛擬服務器定義塊。 全局定義塊是必須的,如果keepalived只用來做ha, 虛擬服務器是可選的。下面是一個功能比較完整的配置文件模板: #全局定義塊 global_defs { # 郵件通知配置 notification_email { email1 email2 } notification_email_from email smtp_server host smtp_connect_timeout num lvs_id string router_id string ## 標識本節點的字條串,通常為hostname } #VRRP 實例定義塊 vrrp_sync_group string { group { string string } } vrrp_instance string { state MASTER|BACKUP virtual_router_id num interface string mcast_src_ip @IP priority num advert_int num nopreempt smtp_alert lvs_sync_daemon_interface string authentication { auth_type PASS|AH auth_pass string } virtual_ipaddress { # Block limited to 20 IP addresses @IP @IP @IP } } #虛擬服務器定義塊 virtual_server (@IP PORT)|(fwmark num) { delay_loop num lb_algo rr|wrr|lc|wlc|sh|dh|lblc lb_kind NAT|DR|TUN persistence_timeout num protocol TCP|UDP real_server @IP PORT { weight num notify_down /path/script.sh TCP_CHECK { connect_port num connect_timeout num } } real_server @IP PORT { weight num MISC_CHECK { misc_path /path_to_script/script.sh(or misc_path “/path_to_script/script.sh <arg_list>”) } } real_server @IP PORT { weight num HTTP_GET|SSL_GET { url { # You can add multiple url block path alphanum digest alphanum } connect_port num connect_timeout num nb_get_retry num delay_before_retry num } } } 全局定義塊 1、email通知(notification_email、smtp_server、smtp_connect_timeout): 用於服務有故障時發送郵件報警,可選項,不建議用。需要系統開啟sendmail服務, 建議用第三獨立監控服務,如用nagios全面監控代替。 2、lvs_id:lvs負載均衡器標識,在一個網絡內,它的值應該是唯一的。 3、router_id:用戶標識本節點的名稱,通常為hostname 4、花括號{}:用來分隔定義塊,必須成對出現。如果寫漏了, keepalived運行時不會得到預期的結果。由於定義塊存在嵌套關系, 因此很容易遺漏結尾處的花括號,這點需要特別注意。 VRRP實例定義塊 vrrp_sync_group:同步vrrp級,用於確定失敗切換(FailOver)包含的路由實例個數。 即在有2個負載均衡器的場景,一旦某個負載均衡器失效,需要自動切換到另外一個負載均衡器的實例是哪 group:至少要包含一個vrrp實例,vrrp實例名稱必須和vrrp_instance定義的一致 vrrp_instance:vrrp實例名 1> state:實例狀態,只有MASTER 和 BACKUP兩種狀態,並且需要全部大寫。 搶占模式下,其中MASTER為工作狀態,BACKUP為備用狀態。當MASTER所在的服務器失效時, BACKUP所在的服務會自動把它的狀態由BACKUP切換到MASTER狀態。 當失效的MASTER所在的服務恢復時,BACKUP從MASTER恢復到BACKUP狀態。 2> interface:對外提供服務的網卡接口,即VIP綁定的網卡接口。 如:eth0,eth1。當前主流的服務器都有2個或2個以上的接口(分別對應外網和內網),在選擇網卡接口時,一定要核實清楚。 3> mcast_src_ip:本機IP地址 4> virtual_router_id:虛擬路由的ID號,每個節點設置必須一樣, 可選擇IP最后一段使用,相同的 VRID 為一個組,他將決定多播的 MAC 地址。 5> priority:節點優先級,取值范圍0~254,MASTER要比BACKUP高 6> advert_int:MASTER與BACKUP節點間同步檢查的時間間隔,單位為秒 7> lvs_sync_daemon_inteface:負載均衡器之間的監控接口, 類似於 HA HeartBeat 的心跳線。但它的機制優於 Heartbeat,因為它沒有“裂腦”這個問題, 它是以優先級這個機制來規避這個麻煩的。在 DR 模式中, lvs_sync_daemon_inteface與服務接口interface使用同一個網絡接口 8> authentication:驗證類型和驗證密碼。類型主要有 PASS、AH 兩種,通常使用PASS類型, 據說AH使用時有問題。驗證密碼為明文,同一vrrp 實例MASTER與BACKUP使用相同的密碼才能正常通信。 9> smtp_alert:有故障時是否激活郵件通知 10> nopreempt:禁止搶占服務。默認情況,當MASTER服務掛掉之后, BACKUP自動升級為MASTER並接替它的任務,當MASTER服務恢復后, 升級為MASTER的BACKUP服務又自動降為BACKUP, 把工作權交給原MASTER。當配置了nopreempt, MASTER從掛掉到恢復,不再將服務搶占過來。 11> virtual_ipaddress:虛擬IP地址池,可以有多個IP,每個IP占一行,不需要指定子網掩碼。注意:這個IP必須與我們的設定的vip保持一致。 虛擬服務器virtual_server定義塊 virtual_server:定義一個虛擬服務器,這個ip是virtual_ipaddress中定義的其中一個,后面一個空格,然后加上虛擬服務的端口號。 1> delay_loop:健康檢查時間間隔,單位:秒 2> lb_algo:負載均衡調度算法,互聯網應用常用方式為wlc或rr 3> lb_kind:負載均衡轉發規則。包括DR、NAT、TUN 3種,一般使用路由(DR)轉發規則。 4> persistence_timeout:http服務會話保持時間,單位:秒 5> protocol:轉發協議,分為TCP和UDP兩種 real_server:真實服務器IP和端口,可以定義多個 1> weight:負載權重,值越大,轉發的優先級越高 2> notify_down:服務停止后執行的腳本 3> TCP_CHECK:服務有效性檢測 * connect_port:服務連接端口 * connect_timeout:服務連接超時時長,單位:秒 * nb_get_retry:服務連接失敗重試次數 * delay_before_retry:重試連接間隔,單位:秒
-
Keepalived+Nginx配置實現高可用負載均衡
-
服務器IP配置信息
VIP(虛擬IP) | IP | 主機名 | Nginx端口 |
---|---|---|---|
192.168.110.138 | 192.168.110.128 | nginx_master | 80 |
192.168.110.138 | 192.168.110.130 | nginx_backup | 80 |
想了解更多內容移步:http://freeloda.blog.51cto.com/2033581/1280962
Nginx安裝上個博文中有給出
-
配置Keepalived(搶占模式配置) 增加VIP 啟動服務
-
MASTER(192.168.110.128)配置信息
global_defs {
router_id nginx_master #hostname } vrrp_script chk_nginx { script "/etc/keepalived/nginx_check.sh" #檢測nginx的腳本 interval 2 #每2秒檢測一次 weight -20 #如果某一個nginx宕機 則權重減20 } vrrp_instance VI_1 { state MASTER #狀態 MASTER BACKUP interface eth0 #綁定的網卡 virtual_router_id 51 #虛擬路由的ID號,兩個節點設置必須一樣 mcast_src_ip 192.168.110.128 #本機的IP priority 90 advert_int 1 # 設置驗證信息,兩個節點必須一致 authentication { auth_type PASS auth_pass 1111 } # 虛擬IP,兩個節點設置必須一樣。 virtual_ipaddress { 192.168.110.138 } # nginx存活狀態檢測腳本 track_script { chk_nginx } }
-
BACKUP(192.168.110.130)配置信息
global_defs {
router_id nginx_backup #hostname } vrrp_script chk_nginx { script "/etc/keepalived/nginx_check.sh" #檢測nginx的腳本 interval 2 #每2秒檢測一次 weight -20 #如果某一個nginx宕機 則權重減20 } vrrp_instance VI_1 { state BACKUP #狀態 MASTER BACKUP interface eth0 #綁定的網卡 virtual_router_id 51 mcast_src_ip 192.168.110.130 priority 90 advert_int 1 authentication { auth_type PASS auth_pass 1111 } virtual_ipaddress { 192.168.110.138 } track_script { chk_nginx } }
-
創建Nginx服務檢測腳本
原文地址http://blog.csdn.net/xyang81/article/details/52556886
#!/bin/bash A=`ps -C nginx --no-header | wc -l` if [ $A -eq 0 ];then /opt/nginx/sbin/nginx #嘗試重新啟動nginx sleep 2 #睡眠2秒 if [ `ps -C nginx --no-header | wc -l` -eq 0 ];then killall keepalived #啟動失敗,將keepalived服務殺死。將vip漂移到其它備份節點 fi fi
-
啟動Keepalived服務 service keepalived start 看是否在MASTER綁定了VIP地址
MASTER 信息 (可以看到虛擬IP 192.168.110.138綁定在了MASTER服務器上面)
BACKUP信息
-
手動關閉MASTER模擬主服務器宕機,再看網絡信息
MASTER 信息 (看到虛擬IP已經不存在 證明已經轉移目標主機)
BACKUP信息(虛擬IP 192.168.110.138已經轉移到BACKUP服務器)
-
查看項目是否正常,Session是否共享
使用是虛擬IP進行訪問 登錄沒錯
輪詢Tomcat服務器也沒有重新登錄
Redis也是一個唯一的Session