python运维开发笔记4

1.函数如何被调用,通过return返回值来调用

2.生成器和return区别

yield 生成器返回对象,可以迭代

可以执行

glob模块 类似shell中的正则匹配

shlex模块  Popen 将命令参数直接分词

cmd = "ps ax -o pid,ppid,cmd"

shlex.split(cmd)

[‘ps‘,‘ax‘,‘-o‘,‘pid,ppid,cmd‘]

[‘mysql‘,‘-u‘,‘root‘,‘-p123‘,‘-e‘,‘show processlist‘]

p = Popen(shlex.split(cmd),stdout=PIPE)

p.communicate()

(‘‘,None)

代替

p.stdin.write()

p.stdin.close()

p.stdout.read()

p.terminate()#终止执行

p = Popen([‘sleep‘,‘10‘],stdout=PIPE)

p.pid

kill -HUP

HUP(1) 是让进程挂起,睡眠;

kill(9) 六亲不认的杀掉

term(15) 正常的退出进程

因为进程可能屏蔽某些信号,所以它们的用处也就不一样i

内核产生的2,是用户产生的1

列表变成字符串  ‘‘.join(s[2:])

字符串变成列表  s.split()

搜集主机信息

devname

macaddr

ipaddr

字符串换行符  split,列表最后一个元素为空

[i.strip() for i in data.split(‘\n‘) if i]

定义函数的参数是需要传值的

正则表达式

re模块

分析日志,提取信息

普通字符

元字符:

. 除了换行符\n

^

$

* 前面的字母出现0次或者n次

+

?

{} 数字

[] 字符串

() 分组

\  转义符号

|  或

import re

p = re.compile(‘ab*‘)

re.match

re.match 尝试从字符串的开始匹配一个模式,如:下面的例子匹配第一个单词。

import re

text = "JGood is a handsome boy, he is cool, clever, and so on..."

m = re.match(r"(\w+)\s", text)

if m:

print m.group(0), ‘\n‘, m.group(1)

else:

print ‘not match‘

re.match的函数原型为:re.match(pattern, string, flags)

第一个参数是正则表达式,这里为"(\w+)\s",如果匹配成功,则返回一个Match,否则返回一个None;

第二个参数表示要匹配的字符串;

第三个参数是标致位,用于控制正则表达式的匹配方式,如:是否区分大小写,多行匹配等等。

re.search

re.search函数会在字符串内查找模式匹配,只到找到第一个匹配然后返回,如果字符串没有匹配,则返回None。

import re

text = "JGood is a handsome boy, he is cool, clever, and so on..."

m = re.search(r‘\shan(ds)ome\s‘, text)

if m:

print m.group(0), m.group(1)

else:

print ‘not search‘

re.search的函数原型为: re.search(pattern, string, flags)

每个参数的含意与re.match一样。

re.match与re.search的区别:re.match只匹配字符串的开始,如果字符串开始不符合正则表达式,则匹配失败,函数返回None;而re.search匹配整个字符串,直到找到一个匹配。

re.sub

re.sub用于替换字符串中的匹配项。下面一个例子将字符串中的空格 ‘ ‘ 替换成 ‘-‘ :

import re

text = "JGood is a handsome boy, he is cool, clever, and so on..."

print re.sub(r‘\s+‘, ‘-‘, text)

re.sub的函数原型为:re.sub(pattern, repl, string, count)

其中第二个函数是替换后的字符串;本例中为‘-‘

第四个参数指替换个数。默认为0,表示每个匹配项都替换。

re.sub还允许使用函数对匹配项的替换进行复杂的处理。如:re.sub(r‘\s‘, lambda m: ‘[‘ + m.group(0) + ‘]‘, text, 0);将字符串中的空格‘ ‘替换为‘[ ]‘。

re.split

可以使用re.split来分割字符串,如:re.split(r‘\s+‘, text);将字符串按空格分割成一个单词列表。

re.findall

re.findall可以获取字符串中所有匹配的字符串。如:re.findall(r‘\w*oo\w*‘, text);获取字符串中,包含‘oo‘的所有单词。

re.compile

可以把正则表达式编译成一个正则表达式对象。可以把那些经常使用的正则表达式编译成正则表达式对象,这样可以提高一定的效率

re.S

re.I

re.M

re.I|re.M|re.S

re.I:忽略大小写

re.L:表示特殊字符集 \w, \W, \b, \B, \s, \S 依赖于当前环境

re.M:多行模式

re.S:’ . ’并且包括换行符在内的任意字符(注意:’ . ’不包括换行符)

re.U: 表示特殊字符集 \w, \W, \b, \B, \d, \D, \s, \S 依赖于 Unicode 字符属性数据库

re.findall(r‘[gG].d‘,s1,re.s)

reg = re.compile(r‘[gG].d‘,re.s)

p = r‘[0-9a-zA-Z_]{1,16}@[0-9a-zA-Z_-]{1,}\.[a-zA-Z]{2,3}‘#匹配邮箱地址

python正则匹配HTML标签

设计3个需求:

1. 取<script> </script>标签之间的内容。

>>> re.findall(‘<script>([\s\S]*?)</script>‘, s)

[" alert(‘test‘) "]

2. 取包含<script ...></script>标签以及之间的内容。

>>> re.findall(‘<script[\s\S]*?</script>‘, s)

[‘<script type="text/javascript" src="/scripts/jquery.js"></script>‘, "<script> alert(‘test‘) </script>"]

3. 取<script> </script>标签之外所有的内容。

>>> re.sub(‘<script[\s\S]*?</script>‘, ‘‘, s)

‘\n<html>\n<head>\n<title>This is title</title>\n\n</head>\n<body>\n<h1>hello world!</h1>\n\n</body>\n</html>\n‘

>>> re.subn(‘<script[\s\S]*?</script>‘, ‘‘, s)

(‘\n<html>\n<head>\n<title>This is title</title>\n\n</head>\n<body>\n<h1>hello world!</h1>\n\n</body>\n</html>\n‘, 2)

匹配IP,MAC,IFNAME

作业

1./proc  status  cmdline  实现‘pid‘  ‘ppid‘  ‘cmd‘

2.统计所有httpd进程占用物理内存多少,物理内存比例是多少   status中VmRSS  apache的内存值

/proc/meminfo 总的内存

取得http所有的pid号,依次取得进程号下所有的VmRSS的值

#ps -e

#正则过滤 httpd pid号

#用pid号找内存

#正则过滤出apache内存的值

for循环得出总的apache的内存值

计算公式除meminfo的内存 Memtotal的值

TypeError: expected string or buffer

原因:re_h=re.compile(‘</?\w+[^>]*>‘)

s=re_h.sub(‘‘,str)

传入的str是list变量导致出错

解决办法:传入str类型变量

python运维开发笔记4,布布扣,bubuko.com

时间: 07-14

python运维开发笔记4的相关文章

python运维开发笔记5

diff -Nur Diff和patch是Linux标配的工具.在Windows上,也有移植的版本可以使用. 使用中注意: 1.保证文件名完全相同,避免只有大小写不同的文件存在. 2.Diff只能比较文本文件,二进制文件只能判断是否相同,不能记录差异.Diff根据文件的前几个字节判断文件是不是文本文件. 使用方法: 可以对单个文件或者整个目录树进行处理. 以最实用的方式举例: diff –Nur dir_old dir_new > dir.patch patch –p0 < dir.patch

python运维学习笔记1

辞职在家,边找工作边学python看了一本python基础之后感觉远远不够,之后在某东上搜索找到一本<Python自动化运维>的书,写这个想给自己留下点学习的痕迹吧,在此先感谢大神作者刘天斯, 不在多说开始吧 python 系统基础信息模块详解 系统基础信息采集模块作为监控模块的重要组成部分 系统性能信息模块:psutil 这个模块能够轻松的获取系统运行进程和系统利用率信息,主要用于系统监控,分析和限制系统资源及进程管理. 首先先下载个psutil 的包 网址https://github.co

python运维开发(七)----面向对象(上)

内容目录: 面向对象应用场景 类和对象的创建 类中的__init__构造方法 self理解 面向对象的三大特性:封装.继承.多态 概述 面向过程:根据业务逻辑从上到下写垒代码 函数式:将某功能代码封装到函数中,日后便无需重复编写,仅调用函数即可 面向对象:对函数进行分类和封装,让开发“更快更好更强...” 面向过程编程最易被初学者接受,其往往用一长段代码来实现指定功能,开发过程中最常见的操作就是粘贴复制,即:将之前实现的代码块复制到现需功能处. 面向对象应用场景 当某一些函数具有相同参数时,可以

python运维开发(二十)----models操作、中间件、缓存、信号、分页

内容目录 select Form标签数据库操作 models操作F/Q models多对多表操作 Django中间件 缓存 信号 分页 select Form标签补充 在上一节中我们可以知道Form标签有两个作用,一个做用户提交数据验证,一个是生成HTML标签 在生成HTML标签中可以生成select标签,select的选项数据我们可以在数据库中查询读取到. class UserType(models.Model): caption = models.CharField(max_length=1

python运维开发(八)----面向对象(下)

内容目录: 面向对象三大特性之多态性 面向对象中的成员:字段.方法.属性 类的成员修饰符 类的特殊成员 特殊成员方法 面向对象其他 异常处理 设计模式之单例模式 面向对象的多态性 多态性:即指多种形态多种类型 比如在函数中可以定义def func(arg),arg可以为为整型,可以为字符串可以为字典可以为列表等等多种类型,这就是面向对象的多态性. #python中 def func(arg): print(arg) func(1) func('jabe') func([11,22,33]) #p

python运维开发(十)----IO多路复用多线程、进程、协程

内容目录: python作用域 python2.7和python3.5的多继承区别 IO多路复用 多线程.进程.协程 python作用域  python中无块级作用域 if 1 == 1: name = 'jabe' print(name) #可以正常输出jabe #在python中无块级作用域 #在c#或者java中是不能这样使用的,提示name未定义的 python中以函数为作用域 def func(): name = 'jbae' func() print(name) #会提示name为定

python运维开发之第五天

一.模块五大部分 定义,导入方法,import本质(路径搜索),导入优化,模块的分类 1.定义: 模块是用来从逻辑上组织python代码(变量,函数,类,逻辑实现一个功能),本质就是.py结尾的python文件 2.导入方法 (1)import module_name1,module_name2 导入多个的话,用“,”隔开 (2)from module_alex import *    (导入模块内所有函数,不建议使用) 或者from module_alex import m1,m2,m3 (3

python运维开发(十二)----rabbitMQ、pymysql、SQLAchemy

内容目录: rabbitMQ python操作mysql,pymysql模块 Python ORM框架,SQLAchemy模块 Paramiko 其他with上下文切换 rabbitMQ RabbitMQ是一个在AMQP基础上完整的,可复用的企业消息系统.他遵循Mozilla Public License开源协议. MQ全称为Message Queue, 消息队列(MQ)是一种应用程序对应用程序的通信方法.应用程序通过读写出入队列的消息(针对应用程序的数据)来通信,而无需专用连接来链接它们.消

python运维开发(二十五)---cmdb开发

内容目录: 浅谈ITIL CMDB介绍 Django自定义用户认证 Restful 规范 资产管理功能开发 浅谈ITIL TIL即IT基础架构库(Information Technology Infrastructure Library, ITIL,信息技术基础架构库)由英国政府部门CCTA(Central Computing and Telecommunications Agency)在20世纪80年代末制订,现由英国商务部OGC(Office of Government Commerce)负