其他标准库

py

collections

1. Counter 计数器
2. Deque 双端队列
3. Defaultdict 默认值字典
4. Array 数组
5. Heapq 优先级队列
6. Bisect 没懂，好像跟顺序有关
7. Weakref 弱引用
8. Copy 各种拷贝
9. Pprint 结构化打印

参考

Python 中的高级数据结构

IO

CSV

读取

import csv
from collections import namedtuple
with open('xxx.csv') as f:
    f_csv = csv.reader(d) #读取为元组序列
    f_csv = csv.DictReader(f) #读取为字典序列
    headers = next(f_csv) #数据头
    Row = namedtuple('Row', headers) #从list中初始化命名元组类
    for r in f_csv: #读出每一行
        r[0] #元组下标索引索引
        row = Row(*r) #将元组解包用于初始化对象
        row.data #用data索引元素
        r['data'] #字典序列索引

存储

headers = ['header1','header2']
rows = [('x', 'x'), ('x', 'x')]
with open('xxx.csv') as f:
    f_csv = csv.writer(f)
    f_csv.writerow(headers)
    f_csv.writerows(rows)

JSON

import json
data={
    'xxx': 'xxx',
}
json_str = json.dumps(data) #字符串读取
data = json.loads(json_str)
with open('data.json', 'w') as f:
    json.dump(data, f) #写入文件
with open('data.json', 'r') as f:
    data = json.load(f)

open函数

文件模式

fileobj = open(path[, mode[, buffering]]) #缓存-1参数使用默认大小
None = f.write() #多次写入会追加
None = f.close() #关闭文件流
data = f.read([nbits]) #默认读取全部文件
#读写都会移动光标
None = f.seek(offset[, whence]) #移动光标到指定位置
# offset表示偏移字节数负的从文件尾开始，whence表示起始位置默认为0
data = f.readline([maxbit]) #读取行包括换行符,可指定最大字符数
data = f.readlines() #将所有行作为列表返回
None = f.writelines(iter) #写入多行

使用with

确保文件被正常关闭

with open('filepath') as somefile:
    do_something(somefile)

fileinput

$ python script.py file1.txt file2.txt

fileinput.input([files[, inplace, backup]])
#返回可遍历对象，每次遍历一行
# inplace=True 原地处理，backup 备份路径
fileinput.filename() #返回当前文件名称
fileinput.lineno() #返回当前累计行数，多文件会持续
fileinput.filelineno() #返回当前文件行数
fileinput.isfirstline() #检查当前行是否为第一行
fileinput.isstdin() #检查当前文件是否为stdin
fileinput.nextfile() #关闭当前文件跳到下一个文件且跳过行数不计
fileinput.close() #关闭整个文件链

urllib

urllib2增加了http验证和cookies

from urllib import urlopen
webpagefile = urlopen('http://www.python.org')

url操作

urllib.qoute(string[, safe])    #将传入的字符转化为url友好字符
urllib.quote_plus...            #功能相同，用+代替空格
urllib.unquote(string)          #跟quote功能相反
urllib.unquote_plus(string)
urllib.urlencode(query[, doseq])#将映射转化为字符

sqlite

import sqlite3 as sl
conn = sl.connect('xxx.db') #连接数据库 不存在则创建
cursor =conn.cursor() #返回游标对象
cursor.execute('') #执行语句
cursor.fetchall() 
cursor.rowcount #数据数目
cursor.close()
conn.commit()
conn.close()

sys

sys.argv #命令行参数
# pyhthon file.py [arg]
sys.exit([arg]) #退出当前程序且返回相应错误信息
sys.modules #映射模块名称到载入模块的字典
sys.path #import语句所查找的模块目录
sys.platform #平台标识符
sys.stdin,stdout,stderr #文件流

os

os.getcwd() #获得当前目录
os.listdir() #返回目录下所有文件的list
os.mkdir() 
os.rename('old', 'new')
os.rmdir()
os.path.abspath(file.txt) #返回文件的绝对路径
os.path.split(file.txt) #将文件的路径以文件夹，文件的格式分离
os.path.dirname(file.txt) #返回文件所在的文件夹
os.path.basename(file.txt) #返回文件的全名
os.path.splitext(file.txt) #分离文件的拓展名
os.path.exists()
os.path.isfile()
os.path.isdir()
os.path.expanduser('~/local') #返回以用户路径连接的路径名
os.join() #连接路径
os.environ #环境变量的字典
os.getenv('PYTHONPATH') #获得环境变量
os.system(command) #在shell中执行指定的命令
os.sep #路径分割符
# unix '/' windows '\\' macos ':'
os.pathsep #分割路径的分隔符
# unix ':' windows ';' macos '::'
os.linesep #字符串分割符即行分割符
# unix '\n' windows '\r\n' macos '\r'
os.startfile #接受路径打开文件

time

日期元组

(0,年) 如2016
(1,月) 1-12
(2,日) 1-31
(3,时) 0-23
(4,分) 0-59
(5,秒) 0-61
(6,周) 0-6
(7,儒历日) 1-366
(8,夏令时) 0，-1，1

strtime   = time.asctime([timetuple]) #参数可选下同
timetuple = time.localtime([secs]) #
secs      = time.mktime(timetuple) #与上函数功能相反
None      = time.sleep(secs) #休眠
timetuple = time.strtime(string[, format]) #解析字符串为时间元组
secs      = time.time()

random

注意事项

生成一个伪随机数

#系统相关强加密
os.urandom() #返回一个random对象

obj      = random.SystemRandom() #功能与os.urandom()类似
num[0,1) = random.random() 
num      = random.getrandbits(n) #以长整型的形式返回一个nbits的随机数
num      = randrange([start,] stop[, step]) #返回range()中的随机数
ele      = choice(seq) #返回序列中的随机元素
None     = shuffle(seq[, random]) #随机排列序列
subseq   = sample(seq, n) #从序列中返回n个随机且独立的元素

re

flag

• re.I(IGNORECASE): 忽略大小写
• re.M(MULTILINE): 多行模式，改变'^'和'$'的行为
• re.S(DOTALL): 点任意匹配模式，改变'.'的行为
• re.L(LOCALE): 使预定字符类 \w \W \b \B \s \S 取决于当前区域设定
• re.U(UNICODE): 使预定字符类 \w \W \b \B \s \S \d \D 取决于unicode定义的字符属性
• re.X(VERBOSE): 详细模式。这个模式下正则表达式可以是多行，忽略空白字符，并可以加入注释。

reboj       = re.compile(pattern[, flags]) #根据正则表达式字符串创建模式对象
MatchObject = re.search(pattern, string[, flags]) #任意位置，匹配一次
MatchObject = re.match(pattern, string[, flags]) #匹配开头
list        = re.findall(pattern, string) #匹配全部
list re.split(pattern, string[, maxsplit = 0]) #根据匹配模式来分割字符串
str         = re.sub(pat, repl, string[, count=0]) #将匹配到的字符用repl替换
str         = re.escape(string) #字符变为pat 不用转义

MatchObject(匹配对象)

str      = MatchObject.group([groupnum,...]) #获取指定组的匹配项
num      = MatchObject.start([groupnum]) #指定组的开始位置
num      = MatchObject.end([groupnum]) #同上
tuplenum = MatchObject.span([groupnum]) #开始和结束的位置

模块

模块即为python文件
导入即被执行
包包含多个模块
本质为一个文件夹
根目录下边包含init.py文件
导入时 init文件会被执行

#A包包含B模块
import A #导入A包
import A.B #从A包中导入B模块,但要以A.B来使用
from A import B #功能与上语句相同,但可作为B来使用模块
dir(pak)#可查看包内包含的内容
mod.__all__ #定义模块公用接口
from pak import * #__all__ 变量定义了import*可调用的方法
mod.__doc__ #模块的文档
mod.__file__ #模块所在的位置