温故而知新:
1. 集合
主要作用:
- 去重
- 关系测试, 交集\差集\并集\反向(对称)差集
2. 元组
只读列表,只有count, index 2 个方法
作用:如果一些数据不想被人修改, 可以存成元组,比如身份证列表
3. 字典(key-value对)
- 特性:
- 无顺序
- 去重
- 查询速度快,比列表快多了
4. 字符编码
先说python2
- py2里默认编码是ascii
- 文件开头那个编码声明是告诉解释这个代码的程序 以什么编码格式 把这段代码读入到内存,因为到了内存里,这段代码其实是以bytes二进制格式存的,不过即使是2进制流,也可以按不同的编码格式转成2进制流,你懂么?
- 如果在文件头声明了#_*_coding:utf-8*_,就可以写中文了, 不声明的话,python在处理这段代码时按ascii,显然会出错, 加了这个声明后,里面的代码就全是utf-8格式了
- 在有#_*_coding:utf-8*_的情况下,你在声明变量如果写成name=u"大保健",那这个字符就是unicode格式,不加这个u,那你声明的字符串就是utf-8格式
- utf-8 to gbk怎么转,utf8先decode成unicode,再encode成gbk
再说python3
- py3里默认文件编码就是utf-8,所以可以直接写中文,也不需要文件头声明编码了,干的漂亮
- 你声明的变量默认是unicode编码,不是utf-8, 因为默认即是unicode了(不像在py2里,你想直接声明成unicode还得在变量前加个u), 此时你想转成gbk的话,直接your_str.encode("gbk")即可以
- 但py3里,你在your_str.encode("gbk")时,感觉好像还加了一个动作,就是就是encode的数据变成了bytes里,我擦,这是怎么个情况,因为在py3里,str and bytes做了明确的区分,你可以理解为bytes就是2进制流,你会说,我看到的不是010101这样的2进制呀, 那是因为python为了让你能对数据进行操作而在内存级别又帮你做了一层封装,否则让你直接看到一堆2进制,你能看出哪个字符对应哪段2进制么?什么?自己换算,得了吧,你连超过2位数的数字加减运算都费劲,还还是省省心吧。
- 那你说,在py2里好像也有bytes呀,是的,不过py2里的bytes只是对str做了个别名(python2里的str就是bytes, py3里的str是unicode),没有像py3一样给你显示的多出来一层封装,但其实其内部还是封装了的。 这么讲吧, 无论是2还是三, 从硬盘到内存,数据格式都是 010101二进制到-->b'xe4xbdxa0xe5xa5xbd' bytes类型-->按照指定编码转成你能看懂的文字
编码应用比较多的场景应该是爬虫了,互联网上很多网站用的编码格式很杂,虽然整体趋向都变成utf-8,但现在还是很杂,所以爬网页时就需要你进行各种编码的转换,不过生活正在变美好,期待一个不需要转码的世界。
最后,编码is a piece of fucking shit, noboby likes it.
函数基本语法及特性
背景提要
现在老板让你写一个监控程序,监控服务器的系统状况,当cpu\memory\disk等指标的使用量超过阀值时即发邮件报警,你掏空了所有的知识量,写出了以下代码
while True: if cpu利用率 > 90%: #发送邮件提醒 连接邮箱服务器 发送邮件 关闭连接 if 硬盘使用空间 > 90%: #发送邮件提醒 连接邮箱服务器 发送邮件 关闭连接 if 内存占用 > 80%: #发送邮件提醒 连接邮箱服务器 发送邮件 关闭连接
这样写是不是有问题呢?是的,存在以下两个问题
- 代码重复过多,一个劲的copy and paste不符合高端程序员的气质
- 如果日后需要修改发邮件的这段代码,比如加入群发功能,那你就需要在所有用到这段代码的地方都修改一遍
要想解决这个问题,其实很简单,只需要把重复的代码提取出来,放在一个公共的地方,起个名字,以后谁想用这段代码,就通过这个名字调用就行了,如下:
def 发送邮件(内容) #发送邮件提醒 连接邮箱服务器 发送邮件 关闭连接 while True: if cpu利用率 > 90%: 发送邮件('CPU报警') if 硬盘使用空间 > 90%: 发送邮件('硬盘报警') if 内存占用 > 80%: 发送邮件('内存报警')
函数是什么?
定义:函数是组织好的,可重复使用的,用来实现单一,或相关联功能的代码段。
函数能提高应用的模块性,和代码的重复利用率。你已经知道Python提供了许多内建函数,比如print()。但你也可以自己创建函数,这被叫做用户自定义函数。
特性:
- 减少重复代码
- 使程序变的可扩展
- 使程序变得易维护
语法:定义函数使用 def 关键字,一般格式如下:
def 函数名(参数列表): 函数体
注意:你可以定义一个由自己想要功能的函数,以下是简单的规则:
函数定义:
- 函数代码块以 def 关键词开头,后接函数标识符名称和圆括号 ()。
- .函数名:任何有效的Python标识符
- 参数列表:调用参数时传递给它的值
- 参数的个数大于等于零
- 多个参数由逗号分隔
- 任何传入参数和自变量必须放在圆括号中间,圆括号之间可以用于定义参数。
- 形式参数:定义函数时,函数名后面圆括号中的变量,简称“形参”。形参只在函数内部有效!
- 实际参数:调用函数时,函数名后面圆括号中的变量,简称“实参”
- 函数体:函数被调用时执行的代码,由一个或多个语句组成。
- 函数的第一行语句可以选择性地使用文档字符串—用于存放函数说明。
- 函数内容以冒号起始,并且缩进。
- 默认情况下,参数值和参数名称是按函数声明中定义的的顺序匹配起来的。
- return [表达式] 结束函数,选择性地返回一个值给调用方。不带表达式的return相当于返回 None
- Python中的函数可以返回任意数据类型
- 函数调用的一般形式:函数名(参数)
函数分为两部分:函数定义和函数调用【以上是函数定义】
如下所示:
def hello(): print("Hello World!") hello() #函数调用
下面是有参数的函数定义和调用:
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
# 计算面积函数 def area(width, height): return width * height def print_welcome(name): print("Welcome", name) print_welcome("Runoob") w = 4 h = 5 print("width =", w, " height =", h, " area =", area(w, h))
函数参数(形参和实参)
1.形参变量只有在被调用时才分配内存单元,在调用结束时,即刻释放所分配的内存单元。因此,形参只在函数内部有效。函数调用结束返回主调用函数后则不能再使用该形参变量
2.实参可以是常量、变量、表达式、函数等,无论实参是何种类型的量,在进行函数调用时,它们都必须有确定的值,以便把这些值传送给形参。因此应预先用赋值,输入等办法使参数获得确定值
位置参数和关键字(标准调用:实参与形参位置一一对应;关键字调用:位置无需固定)
形参又分为三中不同的参数:
- 普通参数(位置参数)
- 默认参数
- 动态参数
如下所示:
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
def hello(): print("say hello") hello()
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
def hello(name,age): print("name:",name," age:",age) hello(12,"张安")
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
发现 country 这个参数 基本都 是"CN", 就像我们在网站上注册用户,像国籍这种信息,你不填写,默认就会是 中国, 这就是通过默认参数实现的,把country变成默认参数非常简单。
def stu_register(name,age,course,country="CN"):
这样,这个参数在调用时不指定,那默认就是CN,指定了的话,就用你指定的值。
另外,在没有动态参数的情况下,你可能注意到了,在把country变成默认参数后,我同时把它的位置移到了最后面!
若你的函数在定义时不确定用户想传入多少个参数,就可以使用非固定参数,非固定参数是元组!
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
def stu_register(name,age,*args): # *args 会把多传入的参数变成一个元组形式 print(name,age,args) stu_register("Alex",22) #输出 #Alex 22 () #后面这个()就是args,只是因为没传值,所以为空 stu_register("Jack",32,"CN","Python") #输出 # Jack 32 ('CN', 'Python')
注意:当形参是非固定参数的时候,实参就不要使用关键参数了,因为
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
def stu_register(name, age, *args, **kwargs): # *kwargs 会把多传入的参数变成一个dict形式 print(name, age, args, kwargs) stu_register("Alex", 22) # 输出 # Alex 22 () {}#后面这个{}就是kwargs,只是因为没传值,所以为空 stu_register("Jack", 32, "CN", "Python", sex="Male", province="ShanDong") # 输出 # Jack 32 ('CN', 'Python') {'province': 'ShanDong', 'sex': 'Male'}
从上面这个例子中可以看出,*args接收的是普通参数,**kwargs是接收的是关键参数!
实参:
- 普通参数 按着顺序给形参传值就好
- 关键参数 关键参数要放在实参的最后,否则有错!
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
def stu_register(name, age,sex): # *kwargs 会把多传入的参数变成一个dict形式 print(name, age,sex) stu_register("张三",sex="Man",age=12)
总结:对于实参,关键参数要放在实参最后!
全局、局部变量、参数
代码演示如下:
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
name = "Alex Li" def change_name(name1): sex = "Man" global name name = "hah" print(name1,sex,name) print("after change", name) change_name("汪峰")
区分:参数变量和局部变量、全局变量
返回值
函数按着有无返回值分为:有返回值函数和无返回值函数,要想获取函数的执行结果,就可以用return语句把结果返回
注意:
- 函数在执行过程中只要遇到return语句,就会停止执行并返回结果,so 也可以理解为 return 语句代表着函数的结束
- 如果未在函数中指定return,那这个函数的返回值为None
强行插入知识点: 嵌套函数
看上面的标题的意思是,函数还能套函数?of course
name = "Alex" def change_name(): name = "Alex2" def change_name2(): name = "Alex3" print("第3层打印", name) change_name2() # 调用内层函数 print("第2层打印", name) change_name() print("最外层打印", name)
此时,在最外层调用change_name2()会出现什么效果?
没错, 出错了, 为什么呢?
嵌套函数的用法会了,但它有什么用呢?下节课揭晓。。。
匿名函数
匿名函数就是不需要显式的指定函数
匿名函数的语法:
: 为分隔符,左侧为参数【普通参数,默认参数,可变参数都可以】,右侧为表达式
为什么要用匿名函数?
1. 程序一次行使用,所以不需要定义函数名,节省内存中变量定义空间
2. 如果想让程序更加简洁时。
# 这段代码 def calc(n): return n ** n print(calc(10)) # 换成匿名函数 calc = lambda n: n ** n print(calc(10))
匿名函数的几个规则:
1. 一般也就一行表达式,必须有返回值
2. 不能有return
3. 可以没有参数,可以有一个或多个参数
eg:无参匿名函数
t = lambda : True #分号前无任何参数
带参匿名函数
lambda x: x**3 #一个参数 lambda x,y,z:x+y+z #多个参数 lambda x,y=3: x*y #允许参数存在默认值
匿名函数调用
#直接赋值给一个变量,然后再像一般函数调用
c = lambda x,y,z: x*y*z d= c(2,3,4) print(d)
直接后面传递实参
(lambda x,y: x if x> y else y)(101,102)
嵌套使用
def increment(n): return lambda x: x+n f=increment(4) f(2)
案例:求最小值
lower = lambda x,y: x if x<y else y c =lower('aa','ab') print(c)
函数式编程介绍
函数是Python内建支持的一种封装,我们通过把大段代码拆成函数,通过一层一层的函数调用,就可以把复杂任务分解成简单的任务,这种分解可以称之为面向过程的程序设计。函数就是面向过程的程序设计的基本单元。
函数式编程中的函数这个术语不是指计算机中的函数(实际上是Subroutine),而是指数学中的函数,即自变量的映射。也就是说一个函数的值仅决定于函数参数的值,不依赖其他状态。比如sqrt(x)函数计算x的平方根,只要x不变,不论什么时候调用,调用几次,值都是不变的。
Python对函数式编程提供部分支持。由于Python允许使用变量,因此,Python不是纯函数式编程语言。
一、定义
简单说,"函数式编程"是一种"编程范式"(programming paradigm),也就是如何编写程序的方法论。
主要思想是把运算过程尽量写成一系列嵌套的函数调用。举例来说,现在有这样一个数学表达式:
(1 + 2) * 3 - 4
传统的过程式编程,可能这样写:
var a = 1 + 2;
var b = a * 3;
var c = b - 4;
函数式编程要求使用函数,我们可以把运算过程定义为不同的函数,然后写成下面这样:
var result = subtract(multiply(add(1,2), 3), 4);
这段代码再演进以下,可以变成这样
add(1,2).multiply(3).subtract(4)
这基本就是自然语言的表达了。再看下面的代码,大家应该一眼就能明白它的意思吧:
merge([1,2],[3,4]).sort().search("2")
因此,函数式编程的代码更容易理解。
要想学好函数式编程,不要玩py,玩Erlang,Haskell, 好了,我只会这么多了。。。
高阶函数
变量可以指向函数,函数的参数能接收变量,那么一个函数就可以接收另一个函数作为参数或者函数的返回值为函数,这种函数就称之为高阶函数。
def add(x,y,f): return f(x) + f(y) res = add(3,-6,abs) print(res)
内置函数
内置参数详解 https://docs.python.org/3/library/functions.html?highlight=built#ascii
![](https://images.cnblogs.com/OutliningIndicators/ContractedBlock.gif)
#compile f = open("函数递归.py") data =compile(f.read(),'','exec') exec(data) #print msg = "又回到最初的起点" f = open("tofile","w") print(msg,"记忆中你青涩的脸",sep="|",end="",file=f) # #slice # a = range(20) # pattern = slice(3,8,2) # for i in a[pattern]: #等于a[3:8:2] # print(i) # # #memoryview #usage: #>>> memoryview(b'abcd') #<memory at 0x104069648> #在进行切片并赋值数据时,不需要重新copy原列表数据,可以直接映射原数据内存, import time for n in (100000, 200000, 300000, 400000): data = b'x'*n start = time.time() b = data while b: b = b[1:] print('bytes', n, time.time()-start) for n in (100000, 200000, 300000, 400000): data = b'x'*n start = time.time() b = memoryview(data) while b: b = b[1:] print('memoryview', n, time.time()-start)
递归
在函数内部,可以调用其他函数。如果一个函数在内部调用自身本身,这个函数就是递归函数。
def calc(n): print(n) if int(n / 2) == 0: return n return calc(int(n / 2)) calc(10)
递归特性:
1. 必须有一个明确的结束条件
2. 每次进入更深一层递归时,问题规模相比上次递归都应有所减少
3. 递归效率不高,递归层次过多会导致栈溢出(在计算机中,函数调用是通过栈(stack)这种数据结构实现的,每当进入一个函数调用,栈就会加一层栈帧,每当函数返回,栈就会减一层栈帧。由于栈的大小不是无限的,所以,递归调用的次数过多,会导致栈溢出)
堆栈扫盲http://www.cnblogs.com/lln7777/archive/2012/03/14/2396164.html
递归函数实际应用案例,二分查找
data = [1, 3, 6, 7, 9, 12, 14, 16, 17, 18, 20, 21, 22, 23, 30, 32, 33, 35] def binary_search(dataset,find_num): print(dataset) if len(dataset) >1: mid = int(len(dataset)/2) if dataset[mid] == find_num: #find it print("找到数字",dataset[mid]) elif dataset[mid] > find_num :# 找的数在mid左面 print("