python高级编程读书笔记（一）

python高级编程读书笔记（一）

python 高级编程读书笔记，记录一下基础和高级用法

python2和python3兼容处理

使用sys模块使程序python2和python3兼容

import sys

ver=sys.version_info
#(major=3, minor=6, micro=6)

if ver<(3,0,0):# 3是版本号，0是此版本号，第二个0修订号。
    import urllib2
else:
   import urllib 

获取当前环境所用的python包

pip freeze>requirements.txt

会发现输出的所有的python包，包括python标准库的，所以独立的python运行环境很重要，使用virtualenv或者pipenv建立独立的python环境很重要。
之后写入到requirements.txt文件里。

requirements.txt 的用法

这个文件含有当前项目使用的python包为了避免一个一个安装项目中缺失的包我们一般用。

pip install -r requirements.txt

即可安装当前项目使用的包。

使用pdb模块交互式调试

import pdb
pdb.set_trance()

命令 n：执行下一步，其他的命令可以通过

help pdb 

进行获取。

zip均匀分配迭代对象

for i in zip(["name","sex","age"],["张三","男",25]):
    print(i)

输出

('name', '张三')
('sex', '男')
('age', 25)

两个列表转化为字典的形式

print(dict(zip(["name","sex","age"],["张三","男",25])))

输出

{'name': '张三', 'sex': '男', 'age': 25}

序列解包

a,b,c=("this","is","seq")
a1,*b1,c1=("this","is","seq",'tuple')
a2,b2,*c2=("this","is","seq",'tuple')
print(a)
print(b1)
print(c2)

输出

this
['is', 'seq']
['seq', 'tuple']

字典推导式

d={f"num{num}":num**2 for num in range(10)}
print(d)

输出

{'num0': 0, 'num1': 1, 'num2': 4, 'num3': 9, 'num4': 16, 'num5': 25, 'num6': 36, 'num7': 49, 'num8': 64, 'num9': 81}

for….else语句

在for后面加else的语句，表示是for循环自然结束的而不是因为break结束的。

for  i in range(10):
    if i==6:
        break

else:
    print("跳出循环")


for  i in range(10):
    if i==6:
        pass

else:
    print("自然循环结束") 

输出

自然循环结束

函数注解

def foo(num:4>5 and 6>7)->(6666):
    return num+1
print(foo(5))

参数的冒号后计算注解值的表达式，->填入返回值类型
以上这种注解只会让人糊涂没什么卵用。

描述符

class RevealAcess(object):
    def __init__(self, initval=None, name='var'):
        self.val = initval
        self.name = name

    def __get__(self, obj, objtype):
        print("Retrieving", self.name)
        return self.val

    def __set__(self, obj, val):
        print("updating", self.name)
        self.val = val


class MyClass(object):
    x = RevealAcess(10, 'var "x"')
    y = 5


if __name__ == "__main__":
    m = MyClass()
    print(m.x)
    m.x = 20
    m.x
    print(m.y)

输出

Retrieving var "x"
10
updating var "x"
Retrieving var "x"
5

如果一个类的某个属性有数据描述符(含有__get__,
__set__方法的类称之为数据描述符),
通过上述的例子可以知道，每次读取属性的时候会调用 __get__方法
每次对属性赋值的时候调用__set__方法，只实现了__get__的称之为非数据描述符。

延迟求值属性

import pymongo
class A():
    def __init__(self):
        self._client = None

    def __get__(self, instance, owner):
        if self._client is None:
            print("创建mongodb连接")
            self._client = pymongo.MongoClient(host='127.0.0.1',port=27017,maxPoolSize=10)
        else:
            print('使用存在连接!')
        return self._client
class B():
    db=A()

if __name__ == '__main__':
    m=B()
    print(m.db)
    print(m.db)

如果mongodb的连接已经建立就不重新创建了。单例模式的一种。实例之间共享属性达到节省资源的目的。

property的使用

from requests_html import HTMLSession


class Spider():
    __slots__ = ['url', 'new_url', 'session']  # 冻结属性

    def __init__(self):
        self.url = "https://www.baidu.com"
        self.new_url = None
        self.session = HTMLSession()

    @property
    def get_url(self):
        return self.url

    @get_url.setter
    def get_url(self, key):
        self.url = f'{self.url}/s?wd={key}'

    def get_html(self):
        req = self.session.get(self.url)
        if req.status_code == 200:
            return req.text


if __name__ == '__main__':
    s = Spider()
    s.get_url = 'python'
    print(s.get_html())

使用property装饰器修饰函数get_url,在调用的时候就可以当属性直接调用，
然后在此基础上定义同名函数，使用同名函数装饰器的setter方法修饰函数，可以实现赋值的功能。