Python编程中常用的12种基础知识总结

Python编程中常用的12种基础知识总结：正则表达式替换，遍历目录方法，列表按列排序、去重，字典排序，字典、列表、字符串互转，时间对象操作，命令行参数解析(getopt)，print 格式化输出，进制转换，Python调用系统命令或者脚本，Python 读写文件。

1、正则表达式替换

目标: 将字符串line中的 overview.gif 替换成其他字符串

>>>line
= '<IMG ALIGN="middle" SRC=\'#\'" /span>

>>> mo=re.compile(r'(?<=SRC=)"([\w+\.]+)"',re.I)

>>> mo.sub(r'"\1****"',line)

'<IMG ALIGN="middle" SRC=\'#\'" /span>

>>> mo.sub(r'replace_str_\1',line)

'<IMG ALIGN="middle" replace_str_overview.gif BORDER="0" ALT="">'<
/span>

>>> mo.sub(r'"testetstset"',line)

'<IMG ALIGN="middle" SRC=\'#\'" /span>

注意: 其中 \1 是匹配到的数据，可以通过这样的方式直接引用
2、遍历目录方法

在某些时候，我们需要遍历某个目录找出特定的文件列表，可以通过os.walk方法来遍历，非常方便

import os

fileList = []

rootdir = "/data"

for root, subFolders, files
in os.walk(rootdir):

if
'.svn' in subFolders: subFolders.remove('.svn') # 排除特定目录

for file
in files:

if file.find(".t2t")
!= -1:# 查找特定扩展名的文件

file_dir_path =
os.path.join(root,file)

fileList.append(file_dir_path)

print fileList

3、列表按列排序(list sort)

如果列表的每个元素都是一个元组(tuple),我们要根据元组的某列来排序的化，可参考如下方法

下面例子我们是根据元组的第2列和第3列数据来排序的,而且是倒序(reverse=True)

>>> a
= [('2011-03-17',
'2.26', 6429600,
'0.0'), ('2011-03-16',
'2.26', 12036900,
'-3.0'),

('2011-03-15', '2.33',
15615500,'-19.1')]

>>>
print a[0][0]

2011-03-17

>>> b
= sorted(a, key=lambda result: result[1],reverse=True)

>>>
print b

[('2011-03-15', '2.33',
15615500, '-19.1'), ('2011-03-17',
'2.26', 6429600,
'0.0'),

('2011-03-16', '2.26',
12036900, '-3.0')]

>>> c
= sorted(a, key=lambda result: result[2],reverse=True)

>>>
print c

[('2011-03-15', '2.33',
15615500, '-19.1'), ('2011-03-16',
'2.26', 12036900,
'-3.0'),

('2011-03-17', '2.26',
6429600, '0.0')]

4、列表去重(list uniq)
有时候需要将list中重复的元素删除，就要使用如下方法

>>> lst= [(1,'sss'),(2,'fsdf'),(1,'sss'),(3,'fd')]

>>> set(lst)

set([(2, 'fsdf'), (3,
'fd'), (1,
'sss')])

>>>

>>> lst
= [1, 1,
3, 4,
4, 5, 6,
7, 6]

>>> set(lst)

set([1, 3,
4, 5, 6,
7])

5、字典排序(dict sort)

一般来说，我们都是根据字典的key来进行排序，但是我们如果想根据字典的value值来排序，就使用如下方法

>>>
from operator import itemgetter

>>> aa
= {"a":"1","sss":"2","ffdf":'5',"ffff2":'3'}

>>> sort_aa
= sorted(aa.items(),key=itemgetter(1))

>>> sort_aa

[('a', '1'), ('sss',
'2'), ('ffff2',
'3'), ('ffdf',
'5')]

>>> sort_aa=sorted(aa.items(),key=itemgetter(0))
>>> sort_aa
[('a', '1'), ('ffdf', '5'), ('ffff2', '3'), ('sss', '2')]
>>>

从上面的运行结果看到，按照字典的value值进行排序的

6、字典,列表,字符串互转

以下是生成数据库连接字符串,从字典转换到字符串

>>> params
= {"server":"mpilgrim",
"database":"master",
"uid":"sa",
"pwd":"secret"}

>>> ["%s=%s"
% (k, v) for k, v
in params.items()]

['server=mpilgrim',
'uid=sa', 'database=master',
'pwd=secret']

>>>
";".join(["%s=%s"
% (k, v) for k, v
in params.items()])

'server=mpilgrim;uid=sa;database=master;pwd=secret'

下面的例子 是将字符串转化为字典

>>> a
= 'server=mpilgrim;uid=sa;database=master;pwd=secret'

>>> aa
= {}

>>>
for i in a.split(';'):aa[i.split('=',1)[0]]
= i.split('=',1)[1]

...

>>> aa

{'pwd':
'secret', 'database':
'master', 'uid':
'sa', 'server':
'mpilgrim'}
7、时间对象操作

将时间对象转换成字符串

>>>
import datetime

>>> datetime.datetime.now().strftime("%Y-%m-%d %H:%M")

'2011-01-20 14:05'

时间大小比较

>>>
import time

>>> t1
= time.strptime('2011-01-20 14:05',"%Y-%m-%d %H:%M")

>>> t2
= time.strptime('2011-01-20 16:05',"%Y-%m-%d %H:%M")

>>> t1
> t2

False

>>> t1
< t2

True

时间差值计算,计算8小时前的时间

>>> datetime.datetime.now().strftime("%Y-%m-%d %H:%M")

'2011-01-20 15:02'

>>> (datetime.datetime.now()
- datetime.timedelta(hours=8)).strftime("%Y-%m-%d %H:%M")

'2011-01-20 07:03'

将字符串转换成时间对象

>>> endtime=datetime.datetime.strptime('20100701',"%Y%m%d")

>>>
type(endtime)

<type
'datetime.datetime'>

>>>
print endtime

2010-07-01 00:00:00

将从 1970-01-01 00:00:00
UTC 到现在的秒数，格式化输出

>>>
import time

>>> a
= 1302153828

>>> time.strftime("%Y-%m-%d %H:%M:%S",time.localtime(a))

'2011-04-07 13:23:48'

8、命令行参数解析(getopt)
通常在编写一些日运维脚本时，需要根据不同的条件，输入不同的命令行选项来实现不同的功能 在Python中提供了getopt模块很好的实现了命令行参数的解析,下面距离说明。请看如下程序:

#!/usr/bin/env python

# -*- coding: utf-8 -*-

import
sys,os,getopt

def usage():

print
'''''

Usage: analyse_stock.py [options...]

Options:

-e : Exchange Name

-c : User-Defined Category Name

-f : Read stock info from file and save to db

-d : delete from db by stock code

-n : stock name

-s : stock code

-h : this help info

test.py -s haha -n "HA Ha"

'''

try:

opts, args = getopt.getopt(sys.argv[1:],'he:c:f:d:n:s:')

except
getopt.GetoptError:

usage()

sys.exit()

if
len(opts) ==
0:

usage()

sys.exit()

for opt, arg
in opts:

if opt
in ('-h',
'--help'):

usage()

sys.exit()

elif opt
== '-d':

print
"del stock %s" % arg

elif opt
== '-f':

print
"read file %s" % arg

elif opt
== '-c':

print
"user-defined %s " % arg

elif opt
== '-e':

print
"Exchange Name %s" % arg

elif opt
== '-s':

print
"Stock code %s" % arg

elif opt
== '-n':

print
"Stock name %s" % arg

sys.exit()

9、print
格式化输出
9.1、格式化输出字符串

截取字符串输出,下面例子将只输出字符串的前3个字母

>>>
str="abcdefg"

>>>
print "%.3s"
% str

abc

按固定宽度输出，不足使用空格补全,下面例子输出宽度为10

>>>
str="abcdefg"

>>>
print "%10s"
% str

abcdefg

截取字符串，按照固定宽度输出

>>>
str="abcdefg"

>>>
print "%10.3s"
% str

abc

浮点类型数据位数保留

>>>
import fpformat

>>> a=
0.0030000000005

>>> b=fpformat.fix(a,6)

>>>
print b

0.003000

对浮点数四舍五入,主要使用到round函数

>>>
from decimal import
*

>>> a
="2.26"

>>> b
="2.29"

>>> c
= Decimal(a) - Decimal(b)

>>>
print c

-0.03

>>> c
/ Decimal(a) *
100

Decimal('-1.327433628318584070796460177')

>>> Decimal(str(round(c
/ Decimal(a) *
100, 2)))

Decimal('-1.33')

9.2、进制转换

有些时候需要作不同进制转换，可以参考下面的例子(%x 十六进制,%d 十进制,%o 八进制)

>>> num
= 10

>>>
print "Hex = %x,Dec = %d,Oct = %o"
%(num,num,num)

Hex = a,Dec =
10,Oct =
12

10、Python调用系统命令或者脚本

使用 os.system() 调用系统命令 , 程序中无法获得到输出和返回值

>>>
import os

>>>
os.system('ls -l /proc/cpuinfo')

>>>
os.system("ls -l /proc/cpuinfo")

-r--r--r--
1 root root 0  3月
29 16:53
/proc/cpuinfo

0

使用 os.popen() 调用系统命令, 程序中可以获得命令输出，但是不能得到执行的返回值

>>> out
= os.popen("ls -l /proc/cpuinfo")

>>>
print out.read()

-r--r--r--
1 root root 0  3月
29 16:59
/proc/cpuinfo

使用 commands.getstatusoutput() 调用系统命令, 程序中可以获得命令输出和执行的返回值

>>>
import commands

>>>
commands.getstatusoutput('ls /bin/ls')

(0, '/bin/ls')

11、Python 捕获用

户 Ctrl+C ,Ctrl+D 事件

有些时候，需要在程序中捕获用户键盘事件，比如ctrl+c退出，这样可以更好的安全退出程序

try:

do_some_func()

except
KeyboardInterrupt:

print
"User Press Ctrl+C,Exit"

except
EOFError:

print
"User Press Ctrl+D,Exit"

12、Python 读写文件

一次性读入文件到列表，速度较快，适用文件比较小的情况下

track_file = "track_stock.conf"

fd = open(track_file)

content_list = fd.readlines()

fd.close()

for line
in content_list:

print line

逐行读入，速度较慢,适用没有足够内存读取整个文件(文件太大)

fd = open(file_path)

fd.seek(0)

title = fd.readline()

keyword = fd.readline()

uuid = fd.readline()

fd.close()

写文件 write 与 writelines 的区别

Fd.write(str)
: 把str写到文件中，write()并不会在str后加上一个换行符

Fd.writelines(content) : 把content的内容全部写到文件中,原样写入，不会在每行后面加上任何东西