Python學習筆記—自動化部署【新手必學】

 

 

前言
本文的文字及圖片來源於網絡,僅供學習、交流使用,不具有任何商業用途,版權歸原作者所有,如有問題請及時聯系我們以作處理。
作者：唯戀殊雨

 

目錄

pexpect

fabric

---

pexpect

Pexpect 是 Don Libes 的 Expect 語言的一個 Python 實現，是一個用來啟動子程序，並使用正則表達式對程序輸出做出特定響應，以此實現與其自動交互的 Python 模塊。 Pexpect 的使用范圍很廣，可以用來實現與 ssh、ftp 、telnet 等程序的自動交互；可以用來自動復制軟件安裝包並在不同機器自動安裝；還可以用來實現軟件測試中與命令行交互的自動化。當然如果你還沒學到自動化，建議可以先去小編的Python交流.裙 ：一久武其而而流一思（數字的諧音）轉換下可以找到了，里面有最新Python教程項目，多交流進步更快

1.  
   import pexpect
2.  
   import sys
3.  
    
4.  
   child = pexpect.spawn('ssh std20@123.57.211.212')
5.  
   child.logfile = sys.stdout
6.  
   #fout = file('mylog.txt', 'w')
7.  
   #child.logfile = fout
8.  
   child.expect('password:')
9.  
   child.sendline('std20')
10.  
    child.expect('std20.*')
11.  
    child.sendline('ls /')
12.  
    child.expect('std20.*')
13.  
    child.sendline('exit')

1.  
   #coding=utf_8
2.  
    
3.  
   from pexpect import pxssh
4.  
   import sys
5.  
    
6.  
   s = pxssh.pxssh()
7.  
   s.logfile = sys.stdout
8.  
   hostname = '123.57.211.212'
9.  
   username = 'std20'
10.  
    password = 'std20'
11.  
    s.login(hostname, username, password)
12.  
    s.sendline('ls /')
13.  
    s.prompt() #匹配系統提示符
14.  
    s.sendline('whoami')
15.  
    s.prompt()
16.  
    s.logout()

fabric

項目發布和運維的工作相當機械，頻率還蠻高，導致時間浪費在敲大量重復的命令上。

修復bug什么的，測試，提交版本庫(2分鍾)，ssh到測試環境pull部署（2分鍾），rsync到線上機器A,B,C,D,E（1分鍾），分別ssh到ABCDE五台機器，逐一重啟(8-10分鍾) = 13-15分鍾

其中郁悶的是，每次操作都是相同的，命令一樣，要命的是在多個機器上，很難在本機一個腳本搞定，主要時間都浪費在ssh，敲命令上了，寫成腳本，完全可以一鍵執行，花兩分鍾看下執行結果。

安裝

pip install fabric

入門示例

1.  
   #fabfile.py
2.  
   from fabric.api import run
3.  
    
4.  
   def host_type():
5.  
   run('uname -s')

啟動

1.  
   itcast@ubuntu:~/tmp/fab$ fab -H 127.0.0.1 host_type
2.  
   [127.0.0.1] Executing task 'host_type'
3.  
   [127.0.0.1] run: uname -s
4.  
   [127.0.0.1] Login password for 'itcast':
5.  
   [127.0.0.1] out: Linux
6.  
   [127.0.0.1] out:
7.  
    
8.  
    
9.  
   Done.
10.  
    Disconnecting from 127.0.0.1... done.
11.  
    itcast@ubuntu:~/tmp/fab$ fab -H 127.0.0.1 host_type
12.  
    [127.0.0.1] Executing task 'host_type'
13.  
    [127.0.0.1] run: uname -s
14.  
    [127.0.0.1] Login password for 'itcast':
15.  
    [127.0.0.1] out: Linux
16.  
    [127.0.0.1] out:

fabric常用參數

• -l : 顯示定義好的任務函數名
• -f : 指定fab入口文件，默認入口文件名為fabfile.py
• -H : 指定目標主機，多台主機用","號分割

fabric常用API

• local : 執行本地命令，如：local('uname -s')
• lcd : 切換本地目錄，如：lcd('/home')
• cd : 切換遠程目錄，如：cd('/etc')
• run : 執行遠程命令，如：run('free -m')
• sudo : sudo方式執行遠程命令，如：sudo('touch /abc')
• put : 上傳本地文件到遠程主機，如：put('/hello', '/home/itcast/hello')
• get : 從遠程主機下載文件到本地，如：get('/home/python/world', '/home/itcast/world')
• reboot : 重啟遠程主機，如：reboot()
• @task : 函數裝飾器，標識的函數為fab可調用的，非標記的對fab不可見，純業務邏輯
• @runs_once : 函數裝飾器，標識的函數只會執行一次，不受多台主機影響

fabric全局屬性設定

• env.host : 定義目標主機，如：env.host=['192.168.17.192', '192.168.17.193']
• env.user : 定義用戶名，如：env.user="root"
• env.port : 定義目標主機端口，默認為22，如：env.port="22"
• env.password : 定義密碼，如：env.password="chuanzhi"
• env.passwords : 不同的主機不同的密碼，如：env.passwords={'itcast@192.168.17.192:22':'chuanzhi', 'itcast@192.168.17.193:22':'python'}

示例1：動態獲取遠程目錄列表

1.  
   from fabric.api import *
2.  
    
3.  
   env.hosts=['192.168.17.192', '192.168.17.193']
4.  
   #env.password='python'
5.  
   env.passwords = {
6.  
   'itcast@192.168.17.192:22':'python',
7.  
   'itcast@192.168.17.193:22':'python',
8.  
   }
9.  
    
10.  
    @runs_once
11.  
    def input_raw():
12.  
    return prompt("please input directory name:", default="/home")
13.  
     
14.  
    def workask(dirname):
15.  
    run('ls -l ' + dirname)
16.  
     
17.  
    @task
18.  
    def go():
19.  
    print('start ...')
20.  
    getdirname = input_raw()
21.  
    workask(getdirname)
22.  
    print('end ...')

示例2：上傳文件並執行

1.  
   from fabric.api import *
2.  
    
3.  
   env.user = 'itcast'
4.  
   env.hosts = ['192.168.17.192', '192.168.17.193']
5.  
   env.password = 'python'
6.  
    
7.  
   @task
8.  
   @runs_once
9.  
   def tar_task():
10.  
    with lcd('/home/itcast/testdemo'):
11.  
    local('tar zcvf demo.tar.gz demo.py')
12.  
     
13.  
    @task
14.  
    def put_task():
15.  
    run('mkdir -p /home/itcast/testdemo')
16.  
    with cd('/home/itcast/testdemo'):
17.  
    put('/home/itcast/testdemo/demo.tar.gz', '/home/itcast/testdemo/demo.tar.gz')
18.  
     
19.  
    @task
20.  
    def check_task():
21.  
    lmd5 = local('md5sum /home/itcast/testdemo/demo.tar.gz', capture=True).split(' ')[0]
22.  
    rmd5 = run('md5sum /home/itcast/testdemo/demo.tar.gz').split(' ')[0]
23.  
    if lmd5 == rmd5:
24.  
    print('OK ...')
25.  
    else:
26.  
    print('ERROR ...')
27.  
     
28.  
    @task
29.  
    def run_task():
30.  
    with cd('/home/itcast/testdemo'):
31.  
    run('tar zxvf demo.tar.gz')
32.  
    run('python demo.py')
33.  
     
34.  
    @task
35.  
    def go():
36.  
    tar_task()
37.  
    put_task()
38.  
    check_task()
39.  
    run_task()

代碼自動化部署

1.  
   from fabric.api import *
2.  
    
3.  
   env.user = 'itcast'
4.  
   env.hosts = ['192.168.17.192', '192.168.17.193']
5.  
   env.password = 'python'
6.  
    
7.  
   @runs_once
8.  
   @task
9.  
   def local_update():
10.  
    with lcd("/home/itcast/tmp/itcasthello"):
11.  
    local("git add -A")
12.  
    local("git commit -m 'update'")
13.  
    local("git pull origin master")
14.  
    local("git push origin master")
15.  
     
16.  
     
17.  
    @task
18.  
    def remote_update():
19.  
    with cd("/home/itcast/tmp/itcasthello"):
20.  
    run("git checkout master")
21.  
    run("git pull origin master")
22.  
     
23.  
    @task
24.  
    def deploy():
25.  
    local_update()
26.  
    remote_update()