Python 3 小甲鱼 笔记

笔记
Python / JavaScript

模块

pip

我的电脑 > 属性 > 高级系统设置 > 环境变量（Win+R Cmd Set）> Path > 编辑
C:
%USERPROFILE%\AppData\Local\Programs\Python\Python35\Scripts
%USERPROFILE%\AppData\Local\Programs\Python\Python35

easy_install 模块管理

pyinstaller 打包

官网 www.PyInstaller.org
下载 PyInstaller-3.2.tar.gz

import os
cmd = r'.\PyInstaller-3.2\pyinstaller.py --onefile Miao.py'
os.system( cmd )

os 系统

pickle 泡菜

import pickle
data= {'大海':'bigc.cc'}
with open( 'FileName' , 'wb' ) as file :
    pickle.dump( data , file ) #倒入
with open( 'FileName' , 'rb' ) as file :
    data = pickle.load( file ) #取出
print( data )

re 正则表达式

元字符

字符类

实例

IP = re.compile(r"""        #愉快的举栗时间到了
(
(?: [01]?\d?\d    |   2?[0-4]?\d    |   2?5?[0-4] )\.
(?: [01]?\d?\d    |   2?[0-4]?\d    |   2?5?[0-4] )\.
(?: [01]?\d?\d    |   2?[0-4]?\d    |   2?5?[0-4] )\.
(?: [01]?\d?\d    |   2?[0-4]?\d    |   2?5?[0-4] )
)                           #ip地址范围0到255
(?:    </td>\r\n\ \ \ \ <td>   )
( \d?\d?\d?\d?\d )          #IP端口范围0到65535
                            #测试网站www.xicidaili.com
""", re.VERBOSE)            

random 随机生成

easygui 图形用户界面

安装 pip install easygui

beautifulsoup4 网页解析

安装 pip install BeautifulSoup4
import bs4

Git Bash 安装 pip install wheel 下载 .whl 文件

http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
Ctrl + F，输入lxml

根据Python版本选择下载

pip install lxml‑3.4.4‑cp35‑none‑win_amd64.whl

keyword = { key : pattern }

import bs4 , re , urllib.request
url = 'http://baike.baidu.com/view/284853.htm'
html = urllib.request.urlopen( url ).read( ) #读取
soup = bs4.BeautifulSoup( html, 'lxml' ) #解析
>>> soup.find( 'a',{ 'href':re.compile('view') } ).attrs #查找 key
>>> {'title': '锁定', 'target': '_blank', 'href': '/view/10812319.htm', 'class': ['lock-lemma']}
url = soup.find( 'a',{ 'href':re.compile('view') } )
>>> url.get('href') #获取 key 对应的值
>>> '/view/10812319.htm'
>>> url.get_text() #获取 文字内容
>>> '锁定'

json 轻量级数据交换

urllib.request 网页访问

urllib.parse 网址分解

工厂函数

@decorator 装饰器

def decorator( eve ) :
    def tor( *args, **kwargs ) :
        print( '在这里 添加 装饰' )
        return eve( *args, **kwargs )
        '''    eve( *args, **kwargs ) == eve '''
    return tor
def jia( a, b ):
    print( '正在调用 jia 函数' )
    return a+b
@decorator #装饰器
def mer( eve ) :
    return eve

>>> x = mer( jia( 2, 3 ) )
正在调用函数 jia( )
在这里 添加 装饰
>>> x
5
>>> y = mer( 'everything' )
在这里 添加 装饰
>>> y
'everything'

yield 生成器

iterable = [1, 2, 3]
def mer( iterable ):
   for i in iterable :
        yield i
a = mer( iterable )
>>> next(a)
>>> 1

List 列表

Str 字符串

格式化 / 转译

Map 遍历

map ( function , *iterable )
>>> def a( x , y ) :  return x + y       # a -> function
>>> b = map( a , '1357' , '2468' )       # b -> *iterable
>>> [ i for i in b ]
>>> ['12', '34', '56', '78']

Filter 过滤

filter ( function or None , iterable )
>>> def a( x ) :  return x % 2 !=0       # a -> function
>>> b = filter( a , range(15) )          # b -> iterable
>>> [ i for i in b ]
>>> [1, 3, 5, 7, 9, 11, 13]

Set 集合

set ( iterable )
>>> set ( [1,1,2,3,4,5] )
>>> {1,2,3,4,5}

lambda 创建匿名函数

a =lambda x : x * 2
>>> a(3)
>>> 6
b = lambda x, y, z : ( x - y ) * z
>>>b(3,1,3)
>>> 6

参数说明

Cmd Markdown 简明语法手册

文件对象

异常总结

$Flask$ $Web$ 开发

$ cd c:\Flasky

$ python -m venv venv

$ c:\Flasky\venv\Scripts\activate.bat #进入

$ deactivate #退出

• Flask Web.bat 启动程序：（venv）$

@echo off
echo python hello.py----Hasaki - 面对疾风吧！
cd c:\Flasky
start /b venv\Scripts\activate.bat

• Flask IDLE 启动程序：
  新建： > 快捷方式 Flask IDLE
  位置： > C:\Flasky\
  目标： >

C:\Flasky\venv\Scripts\pythonw.exe "%UserProFile%\AppData\Local\Programs\Python\Python35\Lib\idlelib\idle.pyw"

Git 分布式版本控制系统

Github 远程仓库

.gitignore 忽略特殊文件

Pyhton 实例

喵图

import re, urllib.request, os, sys, random 
def new ( ) :
    '''获取最新地址'''
    try : 
        url = urllib.request.Request('http://jandan.net/ooxx/')
        url.add_header ( 'User-Agent' , 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.108 Safari/537.36 2345Explorer/7.2.0.12990' ) #隐藏
        html = urllib.request.urlopen( url )
    except ( urllib.error.URLError ) :
        print( '网页打不开，请稍后 (或检查网络)' )
        sys.exit(0)
    miao = html.read( ).decode( 'UTF-8' )
    miao= re.search( '<span class="current-comment-page">\[(.+?)\]</span>' , miao ).group(1)
    return miao
def img ( url ) : 
    '''打开网页并解析'''
    url = urllib.request.Request( url )
    url.add_header ( 'User-Agent' , 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.108 Safari/537.36 2345Explorer/7.2.0.12990' ) #隐藏
    miao = urllib.request.urlopen( url ).read( ).decode( 'UTF-8' )
    img = re.findall( '<img src="(.+?)" /></p>' , miao )
    return img
def down ( miao ) :
    '''下载图片并保存'''
    url = r'http://jandan.net/ooxx/page-%s#comments' % miao
    if not os.path.exists( r'.\miao' ) :
        os.makedirs( r'.\miao' )
    for url in img( url ) :
        urllib.request.urlretrieve( url , '.\miao\%s.jpg' % random.choice( range( int(1e+18) -1 ) ) )
def kaishi ( ) :
    '''开始么'''
    miao = int( new( ) )
    print('最新页面地址：%s' % miao )
    while True :
        try :
            miao = int ( input ( '——————————\n第几页开始：' ) )
            x = int( input ( '要下载几页：' ) )
            break
        except ( ValueError ) :
            print( '请输入整数' )
    print( '正在下载 (～￣▽￣)～* 请耐心等候' )
    try :
        for i in range( x ) :
            down( miao - i )
            print( '第 %s 页完成' % ( miao - i ) )
    except ( urllib.error.URLError ) :
        print( '网页打不开 (╯▔皿▔)╯ 请稍后 (或检查网络)' )
        sys.exit(0)
    print( '\n完成 (●ˇ∀ˇ●) 保存在 %s\miao' % os.getcwd( ) )
if __name__ == '__main__' :
    kaishi( )
#本 程 序 用 于 抓 取 页 面 图 片 JianDan.net/OOXX

TS 视频文件下载/合并

澎湃新闻地址 视频地址
Google Chrome F12 -> Network -> Copy all as AHR -> TsFile.txt

import urllib.request
with open ('TsFile.txt','w') as tsfile : #解析
    with open ( 'TSdata.txt' ) as file : 
        for i in file :
            if '.ts' in i :
                tsfile.write( '%s\n' % i[18:-3] )

import urllib.request
with open ('TsFile.txt' ) as ts : #下载
    for url in ts :
        local = r'.\SELF2016\%s' % url[81:-1]
        urllib.request.urlretrieve( url , local )

import os #当前目录
cmd = r'copy /b .\SELF2016\*.ts  .\SELF2016.ts'
os.system( cmd )

有道翻译

Google Chrome F12 -> Network -> Method.POST -> Request URL / Request Headers / Form Data

import urllib.request , urllib.parse , json
fanyi = input('输入要翻译的内容：')
url = urllib.request.Request('http://fanyi.youdao.com/translate?smartresult=dict&smartresult=rule&smartresult=ugc&sessionFrom=null')
url.add_header ( 'User-Agent' , 'Mozilla/5.0' )
data = {
'type' :                'AUTO' ,
'i' :                   fanyi  ,
'doctype' :             'json' ,
'xmlVersion' :           '1.8' ,
'keyfrom' :        'fanyi.web' ,
'ue' :                 'UTF-8' ,
'action' : 'FY_BY_CLICKBUTTON' ,
'typoResult' :          'true' }
data = urllib.parse.urlencode(data).encode( 'utf-8' )
result = urllib.request.urlopen( url ,data ) #POST 发送请求
result = result.read( ).decode( 'utf-8' ) #读取结果
result = json.loads( result ) #读取 json 数据交换格式
print( result['translateResult'][0][0]['tgt'] )

素数

def su( n ) :
    num = list(range(n+1)) #初始化列表
    for i in range( 2, n+1 ) :
        for k in num[ i+1 : n+1 ] :
            if k % i == 0 :
                num[k] = 0
    return [ i for i in num[2:] if i != 0 ]
print ( su(100) ) #100以内素数

网页编码 \ 转译

文件编码

with open( '123.txt' , 'rb' ) as file : # 二进制读取
    file = file.read().decode() #解码

网页编码

import urllib.request , chardet
while True : #查询网页
    try :
        url = input('请输入URL：')
        if url[:4] != 'http' :
            url = 'http://' + url
        url = urllib.request.Request( url ) #隐藏
        url.add_header ( 'User-Agent' , 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.108 Safari/537.36 2345Explorer/7.2.0.12990' )
        page = urllib.request.urlopen( url ).read( )
        break
    except ( urllib.error.URLError , NameError ):
        print('网页打不开，请重新输入(或检查网络)')
code = chardet.detect( page )['encoding'] #查询编码
if code == 'GB2312' :
    code = 'GBK'
print( '您输入的网页编码为：' , code )
page = page.decode( code,'ignore' ) #解码
with open('123.txt' ,'w',encoding= code) as file :
    file.write( page )

Python 库

• 启蒙

  • 完成 Python 3 小甲鱼 教程
  • 完成 Git 分布式版本控制系统

• 入门

  • 完成 Flask Web 开发