學(xué)習(xí)與分享——Python自動化運(yùn)維

yestreenstars

回復(fù) 8# qingduo04

最好能把書名也說一下，方便大家互相學(xué)習(xí)~
   

睿智2012

正在學(xué)習(xí)中。…：好想要書，可惜沒什么好分享的

donalds2008

1.你是如何學(xué)習(xí)Python的？看書？看視頻？還是？
主要是通過看電子書，所以希望樓主賞本紙質(zhì)書拜讀拜讀😊。看過python學(xué)習(xí)手冊，python cookbook。感覺py自帶的手冊不錯，很系統(tǒng)，可惜沒時間翻，用到具體模塊時翻翻。

2.你工作中有用到Python嗎？主要用來做什么？
主要在網(wǎng)絡(luò)設(shè)備資源管理方面寫過一些腳本，py里的pexpect、re、mysqldb等模塊功能強(qiáng)大，可以實(shí)現(xiàn)設(shè)備交互、信息提取、結(jié)構(gòu)化存儲等功能，快速支撐業(yè)務(wù)需求。

3.你覺得Python跟其他腳本語言比優(yōu)勢在哪？
對bash，pl，py略懂，也都寫過一些工具。個人感覺，py的優(yōu)勢包括：
1）語法簡潔�？s進(jìn)的編碼規(guī)則使得編碼可讀性比較高，輔以必要注釋，即使較久的腳本也能短時間內(nèi)進(jìn)入當(dāng)時的編碼邏輯，加以優(yōu)化擴(kuò)展。雖然好的編碼規(guī)范也能讓寫出可讀性好的pl腳本，但是在先天性方面顯然py更佳，也適合團(tuán)隊(duì)協(xié)作。
2）代碼執(zhí)行效率較高。與bash比，自然有優(yōu)勢。一般開始時侯，主體功能先用bash寫完，如果腳本超過100行或者有效率提升、擴(kuò)展要求，用py重構(gòu)，特別是一些通用功能以類方式重新整理。
3）自帶模塊豐富。pl雖有強(qiáng)大的cpan，但是逐一安裝模塊較麻煩，py則自帶許多模塊，能省去不少時間。

4.談?wù)凱ython在自動化運(yùn)維中的應(yīng)用。
很多開源工具如ganglia，Hadoop都支持py，因此用處廣泛。在自動化運(yùn)維方面，如監(jiān)控項(xiàng)擴(kuò)展、報警通知方式、定制報表等方面，都大有發(fā)揮空間。

5.給出一個你自己寫的Python腳本（最好有詳細(xì)注釋）。
這是我寫的一個ETL模塊，比較簡單，主要用于分析網(wǎng)絡(luò)設(shè)備交互日志，提取關(guān)鍵數(shù)據(jù)，并入庫。
最后面附有模塊測試的代碼。

1. #!/usr/bin/python
   
2. """
   
3. Script File: port_etl.py                                                               
   
4. Description: The file is a etl module, which used to analyse equiment information, and save this into      
   
5.              Database.                                                                 
   
6. Author: Donalds2008                                                            
   
7. Last Update: 2014.5.16                                                                  
   
8. """
   
9. import re, sys, os
   
10. import pexpect, MySQLdb
    
11. 
    
12. class port_etl():
    
13.              #構(gòu)造函數(shù)
    
14.         def __init__(self, log_file, ip_re, port_re, vlan_re):
    
15.                 self.log_file  = log_file
    
16.                 if not self.check_file( self.log_file ):
    
17.                         print( '%s does not exists!!\n' % self.log_file)
    
18.                         sys.exit()
    
19.                 #導(dǎo)入文件
    
20.                 self.raw_file  = os.path.splitext( self.log_file )[0]
    
21.                 self.vlan_file = '%s.vlan' % self.raw_file
    
22.                
    
23.                 #構(gòu)造正則式
    
24.                 self.ip_rx     = re.compile(  ip_re  )
    
25.                 self.port_rx   = re.compile( port_re )
    
26.                 self.vlan_rx   = re.compile( vlan_re )
    
27.              #檢查文件是否存在
    
28.         def check_file( self, file ):
    
29.                 return True if os.path.exists( file ) else False
    
30.              #使用正則式匹配，并輸出
    
31.         def match_write(self):
    
32.                 print('matching...')
    
33.                 self.vlan_fh      = open( self.vlan_file, 'w' )
    
34.                 ( ip, port, vlan) = (None, None, None)
    
35.                 for line in open( self.log_file, 'r' ):
    
36.                         match = self.ip_rx.search( line )
    
37.                         if match != None:
    
38.                                 ip = match.group(1)
    
39.                         match = self.port_rx.search( line )
    
40.                         if match != None:
    
41.                                 port = match.group(1).replace(',', ' ')
    
42.                         match = self.vlan_rx.search( line )
    
43.                         if match != None:
    
44.                                 vlan = match.group(1)
    
45.                                 self.vlan_fh.write( '%s,%s,%s\n' % ( ip, port, vlan ) )
    
46.                 self.vlan_fh.close()
    
47.                 print('match finished.')
    
48.              #寫入數(shù)據(jù)庫
    
49.         def db_write(self):
    
50.                 host_db= '127.0.0.1'
    
51.                 usr_db = 'usr'
    
52.                 pwd_db = 'pwd'
    
53.                 sel_db = 'mydb'
    
54.                 print('loading...')
    
55. 
    
56.                 con = MySQLdb.connect( host=host_db, user=usr_db, passwd=pwd_db, db=sel_db)
    
57.                 cur = con.cursor()
    
58.                 last_ip = None
    
59.                 for line in open( self.vlan_file, 'r'):
    
60.                         line = line.strip('\n')
    
61.                         (ip, port, vlan) = line.split(',')
    
62.                         if ip != last_ip:
    
63.                                 cur.execute( "delete from t_ip where ip = '%s'" % ip )
    
64.                                 last_ip = ip
    
65.                         cur.execute( "insert into t_ip values('%s', '%s', '%s')" % (ip, port, vlan) )       
    
66.                 con.commit()
    
67.                 cur.close()
    
68.                 con.close()
    
69.                 self.vlan_fh.close()
    
70.                 print('load finished.')
    
71.         def __del__(self):
    
72.                 self.vlan_fh.close()
    
73. #模塊測試
    
74. if __name__ == '__main__':
    
75.         etl = port_etl( r'/log/a.txt',\
    
76.                         r'Connected to ([\d\.]+)\.', \
    
77.                         r'interface xx([\d\/]+)', \
    
78.                         r'multipvc .+ vlan (\d+)')
    
79.         etl.match_write()
    
80.         etl.db_write()
    
81.         del etl
    
82. 
    
83. 
    

復(fù)制代碼

bfmo

1.你是如何學(xué)習(xí)Python的？看書？看視頻？還是？
    主要是看書（如python核心編程），其次，在實(shí)際工作中簡單應(yīng)用，邊學(xué)邊用，遇到問題，去網(wǎng)上找相關(guān)解決方式或找朋友討論。
2.你工作中有用到Python嗎？主要用來做什么？
   工作中會用到python，主要數(shù)據(jù)相關(guān)處理方面，項(xiàng)目偶爾會用到，另外，在運(yùn)維方面會有簡單應(yīng)用。

3.你覺得Python跟其他腳本語言比優(yōu)勢在哪？
  優(yōu)勢有幾方面：1，開源，可以免費(fèi)使用，和產(chǎn)品開發(fā)發(fā)布沒有其他限制。2，代碼簡潔，簡單易用，作為腳本語言，可隨意移植。3.可與其他開發(fā)語言混合使用，粘接性較強(qiáng)。

4.談?wù)凱ython在自動化運(yùn)維中的應(yīng)用。
   python在系統(tǒng)管理上的優(yōu)勢在與強(qiáng)大的開發(fā)能力和完整的工具鏈。python的工程開發(fā)能力強(qiáng)大，遠(yuǎn)強(qiáng)于各種shell和perl。易讀易寫，兼具面向?qū)ο蠛秃瘮?shù)式風(fēng)格，還有不錯元編程能力。通過系統(tǒng)化的將各種管理工具結(jié)合，對上述的各類工具進(jìn)行二次開發(fā)，形成統(tǒng)一的服務(wù)器管理系統(tǒng),非常合適運(yùn)維人員編寫一些自動化的軟件程序。
  python在服務(wù)器管理工具上非常豐富，配置管理(saltstack) 批量執(zhí)行( fabric, saltstack) 監(jiān)控(Zenoss, nagios 插件) 虛擬化管理( python-libvirt) 進(jìn)程管理 (supervisor) 云計算(openstack) ...... 還有大部分系統(tǒng)C庫都有python綁定。
對于流程確定的事情，最終一定是納入系統(tǒng)管理的體系，寫成程序，成為系統(tǒng)的一部分。而不是無法復(fù)用游離與整體的各種腳本。

5.給出一個你自己寫的Python腳本（最好有詳細(xì)注釋）
  
  我曾在異構(gòu)數(shù)據(jù)同步項(xiàng)目，數(shù)據(jù)處理過程中應(yīng)用到python，

腳本如下：

# -*- coding: utf-8 -*-
import os
os.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.UTF8'
import cx_Oracle
import pymongo
import sys
v_sdb=sys.argv[1]
v_stable=sys.argv[2]
v_tdb=sys.argv[3]
v_ttable=sys.argv[4]

#connection
Conn_mongo=pymongo.Connection('127.0.0.1',30001)
T_mongo='Conn_mongo.'+v_tdb+'.'+v_ttable
#user
Conn_orcl=cx_Oracle.Connection('data_main/yw_data@yewu_1')
cursor_orcl=Conn_orcl.cursor()

sql_2='select * from '+v_sdb+'.'+v_stable

rs2=cursor_orcl.execute(sql_2)
columns=[item[0] for item in rs2.description]
if eval(T_mongo+'.count()')==0:
    for item in rs2:
        data=dict(zip(columns,item))
        exec(T_mongo+".insert(data)")

cursor_orcl.close()
Conn_orcl.close()
Conn_mongo.close()

sohusina

1.你是如何學(xué)習(xí)Python的？看書？看視頻？還是？
看書，一本老書�！秔ython核心編程，第二版》。還是python2.6的。

2.你工作中有用到Python嗎？主要用來做什么？
沒有，只幫別人做著玩玩。

3.你覺得Python跟其他腳本語言比優(yōu)勢在哪？
簡單易學(xué)，至少跟perl比要簡單些。但是優(yōu)勢很明顯，既可以搞web編程，還可以搞系統(tǒng)。哎，為什么php,perl當(dāng)初放棄了其中一條路呢？

4.談?wù)凱ython在自動化運(yùn)維中的應(yīng)用。
這幾年python很火，應(yīng)該能實(shí)現(xiàn)很多功能吧。

sohusina

5.給出一個你自己寫的Python腳本（最好有詳細(xì)注釋）。
把前幾天剛學(xué)完python教程寫的腳本分享一下吧，注：windows下面要把腳本的相應(yīng)部分的代碼縮進(jìn)
改寫一下即可。

可以查看win32和linux redhat 5下的cpu型號，平臺是Python2.6+Django1.1.4

1、新建一個django項(xiàng)目，django-admin.py startproject mysite；
2、修改urls.py，加上

urlpatterns = patterns('',
    # Example:
    # (r'^mysite/', include('mysite.foo.urls')),

    # Uncomment the admin/doc line below and add 'django.contrib.admindocs'
    # to INSTALLED_APPS to enable admin documentation:
    # (r'^admin/doc/', include('django.contrib.admindocs.urls')),

    # Uncomment the next line to enable the admin:
    # (r'^admin/', include(admin.site.urls)),
    url(r'^$','mysite.views.look_page'),
)

3、建立一個views.py,代碼如下

1. # -*- coding: utf-8 -*-
   
2. import time
   
3. import os,sys,platform
   
4. from django.http import HttpResponse
   
5. 
   
6. def first_page(request):
   
7.     return HttpResponse('
   
8. Hello World,你好
   
9. ')
   
10. 
    
11. def look_page(request):
    
12.     return HttpResponse('
    
13. cpu 型號是: '+ getcpu()+'
    
14. ')
    
15. 
    
16. def getcpu():
    
17.     sysname=platform.system()
    
18. # if sysname== 'Windows':
    
19. # return getwincpu()
    
20. # else:
    
21.     return getlinuxcpu()
    
22. # return
    
23. 
    
24. #def getwincpu():
    
25. # import win32com.client
    
26. # s=""
    
27. # com=win32com.client.Dispatch("WbemScripting.SWbemRefresher")
    
28. # obj=win32com.client.GetObject("winmgmts:\\root\cimv2")
    
29.            
    
30. # processorItems=com.AddEnum(obj,"Win32_Processor").objectSet
    
31.                
    
32. # com.Refresh()
    
33. # for item in processorItems:
    
34. # s +=item.Name+"\r\n"
    
35. # return s
    
36.          
    
37. 
    
38. def read_cpu():
    
39.     try:
    
40.         fd=open("/proc/cpuinfo",'r')
    
41.         lines=fd.readlines()
    
42.         s=""
    
43.         k=0
    
44.     finally:
    
45.         if fd:
    
46.             fd.close()
    
47.     for line in lines:
    
48.         
    
49.         li=line.split(':')
    
50.         if len(li) > 2:
    
51.             continue
    
52.         if li[0].startswith('model name'):
    
53.             k+=1
    
54.             s+="第"+ str(k) +"個cpu:"+ li[1]
    
55.     return s
    
56. 
    
57. def getlinuxcpu():
    
58.     cpustr=read_cpu()
    
59.     if not cpustr:
    
60.         return "no cpu info"
    
61.     else:
    
62.         return cpustr

復(fù)制代碼

4、進(jìn)入django下的項(xiàng)目mysite,運(yùn)行 python manage.py runserver 8000
5、打開瀏覽器 http://127.0.0.1:8000 即可看到cpu 型號

fengzhanhai

回復(fù) 1# yestreenstars 這個活動好，必須得頂一下！對于運(yùn)維人員來說學(xué)好一種運(yùn)維自動化腳本語言在以后的求職中絕對是一大亮點(diǎn)，尤其是像python這種模塊化、可移植的語言~


   

seesea2517

星辰開始實(shí)習(xí)啦，要頂一下！

jh417728

http://www.federmanagerquadri.it/fmq/woolrich.asp: I suoi oltre 7 mesi. Cosa posso fare. Come possono confermare che la sua ansia. Chiunque potrebbe farlo a nessuno. Hanno potuto fare questo a me. Vorrei aprire la porta di un agente della DEA.

http://www.fral.it/woolrich.asp: Una volta che si inizia a conoscere l'equipaggio è come avere la tua famiglia prendendo il mickey fuori you.What ti tiene sveglio la notte? Io vivo a Los Angeles così mi preoccupo miei figli non sono così collegati in Gran Bretagna, suppongo che non voglio loro di diventare i bambini americani. Cerchiamo di ottenere indietro tre o quattro volte l'anno. Quando vanno a scuola parlano con un accento americano britannico, ma quando tornano a casa da noi tornano al loro accento inglese, quindi posso fare con that.Do si ottiene detto off per ammorbidire il proprio accento? Sono stato sempre bastone su questo per anni, non è niente di nuovo.

http://www.blitzbovisa.com/shop/feed/woolrichparka.asp: Ho cercato su eBay e altrove per un trench, ma non solo io sono a buon mercato, io sono molto esigente credo quelli allacciati guardano bunchy e quelli non guardano con cintura informe, quindi voglio il genere in cui il nastro si trova proprio in. Si crea un bel look attrezzata. Ho visto questa chiamata cintura inserto sembra avere senso, giusto? Ma, come un termine di ricerca che non salta fuori risultati.

http://www.fsconsult.it/automezzi/woolrich.asp: Mi separai società con il mio medico di 17 anni che ho amato e rispettato. Era stato assolutamente meraviglioso fino ad agosto di allora era quasi come Dr. Jekyll e Mr.

http://www.democentersipe.it/Risorse/master.asp: Sono più facili da usare e rimuovere e l'effetto dura fino al prossimo shampoo. Il vantaggio principale è che assicurano la sicurezza da eventuali danni alla struttura dei capelli e texture. Abbiamo introdotto erbe Mascaras capelli striature per i capelli, per aggiungere glamour, o camuffare i capelli grigi.

CUTianrui007

1.你是如何學(xué)習(xí)Python的？看書？看視頻？還是？
看書，這樣比較快，看視頻太浪費(fèi)時間了，且視頻 講得都太簡單了。
我愛問為什么，很少有視頻會講解為什么。所以看視頻也記不住。


2.你工作中有用到Python嗎？主要用來做什么？
Python太有用了，幾乎天天用，我是做汽車電子軟件開發(fā)的，

A：軟件發(fā)布時要用到ROM/RAM統(tǒng)計，我就是寫Python腳本實(shí)現(xiàn)的。
另外，
B：給客戶發(fā)布特殊的上位機(jī)程序時，也使用Python ctypes調(diào)用DLL
函數(shù)，控制CANcase（汽車總線監(jiān)控工具），然后將Python腳本再通過
py2exe轉(zhuǎn)化為單獨(dú)的Exe文件發(fā)給客戶，這樣客戶就可以脫離Python環(huán)境運(yùn)行。

C:工作需要，要給另外一個供應(yīng)商提供二進(jìn)制BIN文件，此文件就客戶要求有特殊的格式，
要從生成的HEX或ELF文件中提取數(shù)據(jù)生成BIN文件，我也是用Python實(shí)現(xiàn)的。

Python很犀利的。

3.你覺得Python跟其他腳本語言比優(yōu)勢在哪？
以前學(xué)過Perl，后來公司來了新人用Python我也跟著用了。
記得特別清楚的一個區(qū)別是：Python的字符串可以直接做切片操作，而Perl不行，Perl要將字符串轉(zhuǎn)化為
序列才可以做切片。這一點(diǎn)很讓人不舒服。

Perl的安裝太麻煩了，也沒有好的調(diào)試工個�，F(xiàn)在我用PyScripter來調(diào)試Python，強(qiáng)啊。

另外，Python類庫太強(qiáng)大了，可以直接操作WindowsAPI函數(shù)，調(diào)用DLL，這一點(diǎn)Perl不能比。

Python在網(wǎng)絡(luò)方面應(yīng)用極多，語言簡單精煉。


4.談?wù)凱ython在自動化運(yùn)維中的應(yīng)用。
喜歡上一本書《編程狂人》，本書每周二發(fā)布一期，但是每次要手動下載，比較麻煩，就
寫了個Python腳本自動從網(wǎng)頁豐爬取書。


5.給出一個你自己寫的Python腳本（最好有詳細(xì)注釋）。

# -*- coding: utf-8-*-
#此腳本用于提取S19數(shù)據(jù)，并生成到單獨(dú)文件中
import os, sys
#定義列表接收處理后的數(shù)據(jù)
gAllLineList = []
#生成文件
fOut = open("FlashDriver.c","w")
#打開文件
fS19 = open("ReleaseFlashDriver.s19",'r')
#遍歷文件每一行
for eachLine in fS19:
    #S19文件格式
    #S3 19 FEDE8000 01 32 20 3E 35 05 A6 39 00 00 E0 39 DA FD 7F 00 20 3E 01 00 12
    #將此行的數(shù)據(jù)部分存儲到列表中
    gAllLineList.append(eachLine[12:-3])

#將列表寫入到文件中，并在最后添加\表示換行
for eachItem in gAllLineList:
    fOut.write(eachItem +"\\")
    fOut.write("\n")
#關(guān)閉文件
fS19.close()
fOut.close()