zoukankan      html  css  js  c++  java
  • 图解Python 【第七篇】:网络编程Socket

    本节内容一览图:


     前言总结:

    Python 提供了两个基本的 socket 模块。

       第一个是 Socket,它提供了标准的 BSD Sockets API。

       第二个是 SocketServer, 它提供了服务器中心类,可以简化网络服务器的开发。

    注意socket模块创建的服务无法进行多进程的处理

    下面讲的是Socket模块功能


    一、Socket

    socket通常也称作"套接字",用于描述IP地址和端口,是一个通信链的句柄,应用程序通常通过"套接字"向网络发出请求或者应答网络请求。

    socket起源于Unix,而Unix/Linux基本哲学之一就是“一切皆文件”,对于文件用【打开】【读写】【关闭】模式来操作。socket就是该模式的一个实现,socket即是一种特殊的文件,一些socket函数就是对其进行的操作(读/写IO、打开、关闭)

    1.1、socket和file的区别:

    • file模块是针对某个指定文件进行【打开】【读写】【关闭】
    • socket模块是针对 服务器端 和 客户端Socket 进行【打开】【读写】【关闭】

     

    复制代码
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    
    import socket
    
    ip_port = ('127.0.0.1',9999)
    
    sk = socket.socket()
    sk.bind(ip_port)
    sk.listen(5)
    
    while True:
        print 'server waiting...'
        conn,addr = sk.accept()
    
        client_data = conn.recv(1024)
        print client_data
        conn.sendall('不要回答,不要回答,不要回答')
    
        conn.close()
    复制代码
    socket server
    复制代码
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    import socket
    ip_port = ('127.0.0.1',9999)
    
    sk = socket.socket()
    sk.connect(ip_port)
    
    sk.sendall('请求占领地球')
    
    server_reply = sk.recv(1024)
    print server_reply
    
    sk.close()
    复制代码
    socket client

    1.2、WEB服务应用:

     
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    #!/usr/bin/env python
    #coding:utf-8
    import socket
     
    def handle_request(client):
        buf = client.recv(1024)
        client.send("HTTP/1.1 200 OK ")
        client.send("Hello, World")
     
    def main():
        sock = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
        sock.bind(('localhost',8080))
        sock.listen(5)
     
        while True:
            connection, address = sock.accept()
            handle_request(connection)
            connection.close()
     
    if __name__ == '__main__':
      main()

    更多功能

    sk = socket.socket(socket.AF_INET,socket.SOCK_STREAM,0)

    参数一:地址簇

      socket.AF_INET IPv4(默认)
      socket.AF_INET6 IPv6

      socket.AF_UNIX 只能够用于单一的Unix系统进程间通信

    参数二:类型

      socket.SOCK_STREAM  流式socket , for TCP (默认)
      socket.SOCK_DGRAM   数据报式socket , for UDP

      socket.SOCK_RAW 原始套接字,普通的套接字无法处理ICMP、IGMP等网络报文,而SOCK_RAW可以;其次,SOCK_RAW也可以处理特殊的IPv4报文;此外,利用原始套接字,可以通过IP_HDRINCL套接字选项由用户构造IP头。
      socket.SOCK_RDM 是一种可靠的UDP形式,即保证交付数据报但不保证顺序。SOCK_RAM用来提供对原始协议的低级访问,在需要执行某些特殊操作时使用,如发送ICMP报文。SOCK_RAM通常仅限于高级用户或管理员运行的程序使用。
      socket.SOCK_SEQPACKET 可靠的连续数据包服务

    参数三:协议

      0  (默认)与特定的地址家族相关的协议,如果是 0 ,则系统就会根据地址格式和套接类别,自动选择一个合适的协议

    import socket
    ip_port = ('127.0.0.1',9999)
    sk = socket.socket(socket.AF_INET,socket.SOCK_DGRAM,0)
    sk.bind(ip_port)
    
    while True:
        data = sk.recv(1024)
        print data
    
    
    
    
    import socket
    ip_port = ('127.0.0.1',9999)
    
    sk = socket.socket(socket.AF_INET,socket.SOCK_DGRAM,0)
    while True:
        inp = raw_input('数据:').strip()
        if inp == 'exit':
            break
        sk.sendto(inp,ip_port)
    
    sk.close()
    UDP Demo

    1.3、 socket函数详细解释:

    sk.bind(address)

      s.bind(address) 将套接字绑定到地址。address地址的格式取决于地址族。在AF_INET下,以元组(host,port)的形式表示地址。

    sk.listen(backlog)

      开始监听传入连接。backlog指定在拒绝连接之前,可以挂起的最大连接数量。

          backlog等于5,表示内核已经接到了连接请求,但服务器还没有调用accept进行处理的连接个数最大为5
          这个值不能无限大,因为要在内核中维护连接队列

    sk.setblocking(bool)

      是否阻塞(默认True),如果设置False,那么accept和recv时一旦无数据,则报错。

    sk.accept()

      接受连接并返回(conn,address),其中conn是新的套接字对象,可以用来接收和发送数据。address是连接客户端的地址。

      接收TCP 客户的连接(阻塞式)等待连接的到来

    sk.connect(address)

      连接到address处的套接字。一般,address的格式为元组(hostname,port),如果连接出错,返回socket.error错误。

    sk.connect_ex(address)

      同上,只不过会有返回值,连接成功时返回 0 ,连接失败时候返回编码,例如:10061

    sk.close()

      关闭套接字

    sk.recv(bufsize[,flag])

      接受套接字的数据。数据以字符串形式返回,bufsize指定最多可以接收的数量。flag提供有关消息的其他信息,通常可以忽略。

    sk.recvfrom(bufsize[.flag])

      与recv()类似,但返回值是(data,address)。其中data是包含接收数据的字符串,address是发送数据的套接字地址。

    sk.send(string[,flag])

      将string中的数据发送到连接的套接字。返回值是要发送的字节数量,该数量可能小于string的字节大小。即:可能未将指定内容全部发送。

    sk.sendall(string[,flag])

      将string中的数据发送到连接的套接字,但在返回之前会尝试发送所有数据。成功返回None,失败则抛出异常。

          内部通过递归调用send,将所有内容发送出去。

    sk.sendto(string[,flag],address)

      将数据发送到套接字,address是形式为(ipaddr,port)的元组,指定远程地址。返回值是发送的字节数。该函数主要用于UDP协议。

    sk.settimeout(timeout)

      设置套接字操作的超时期,timeout是一个浮点数,单位是秒。值为None表示没有超时期。一般,超时期应该在刚创建套接字时设置,因为它们可能用于连接的操作(如 client 连接最多等待5s )

    sk.getpeername()

      返回连接套接字的远程地址。返回值通常是元组(ipaddr,port)。

    sk.getsockname()

      返回套接字自己的地址。通常是一个元组(ipaddr,port)

    sk.fileno()

      套接字的文件描述符


    1.4、总结:

    1.5、Socket 函数

    注意点:

    1)TCP发送数据时,已建立好TCP连接,所以不需要指定地址。UDP是面向无连接的,每次发送要指定是发给谁。

    2)服务端与客户端不能直接发送列表,元组,字典。需要字符串化repr(data)。

    socket函数

    描述

    服务端socket函数

    s.bind(address)

    将套接字绑定到地址, 在AF_INET下,以元组(host,port)的形式表示地址.

    s.listen(backlog)

    开始监听TCP传入连接。backlog指定在拒绝连接之前,操作系统可以挂起的最大连接数量。该值至少为1,大部分应用程序设为5就可以了。

    s.accept()

    接受TCP连接并返回(conn,address),其中conn是新的套接字对象,可以用来接收和发送数据。address是连接客户端的地址。

    客户端socket函数

    s.connect(address)

    连接到address处的套接字。一般address的格式为元组(hostname,port),如果连接出错,返回socket.error错误。

    s.connect_ex(adddress)

    功能与connect(address)相同,但是成功返回0,失败返回errno的值。

    公共socket函数

    s.recv(bufsize[,flag])

    接受TCP套接字的数据。数据以字符串形式返回,bufsize指定要接收的最大数据量。flag提供有关消息的其他信息,通常可以忽略。

    s.send(string[,flag])

    发送TCP数据。将string中的数据发送到连接的套接字。返回值是要发送的字节数量,该数量可能小于string的字节大小。

    s.sendall(string[,flag])

    完整发送TCP数据。将string中的数据发送到连接的套接字,但在返回之前会尝试发送所有数据。成功返回None,失败则抛出异常。

    s.recvfrom(bufsize[.flag])

    接受UDP套接字的数据。与recv()类似,但返回值是(data,address)。其中data是包含接收数据的字符串,address是发送数据的套接字地址。

    s.sendto(string[,flag],address)

    发送UDP数据。将数据发送到套接字,address是形式为(ipaddr,port)的元组,指定远程地址。返回值是发送的字节数。

    s.close()

    关闭套接字。

    s.getpeername()

    返回连接套接字的远程地址。返回值通常是元组(ipaddr,port)。

    s.getsockname()

    返回套接字自己的地址。通常是一个元组(ipaddr,port)

    s.setsockopt(level,optname,value)

    设置给定套接字选项的值。

    s.getsockopt(level,optname[.buflen])

    返回套接字选项的值。

    s.settimeout(timeout)

    设置套接字操作的超时期,timeout是一个浮点数,单位是秒。值为None表示没有超时期。一般,超时期应该在刚创建套接字时设置,因为它们可能用于连接的操作(如connect())

    s.gettimeout()

    返回当前超时期的值,单位是秒,如果没有设置超时期,则返回None。

    s.fileno()

    返回套接字的文件描述符。

    s.setblocking(flag)

    如果flag为0,则将套接字设为非阻塞模式,否则将套接字设为阻塞模式(默认值)。非阻塞模式下,如果调用recv()没有发现任何数据,或send()调用无法立即发送数据,那么将引起socket.error异常。

    s.makefile()

    创建一个与该套接字相关连的文件

    1.6、socket编程思路

     

    TCP服务端:

    1 创建套接字,绑定套接字到本地IP与端口
       # socket.socket(socket.AF_INET,socket.SOCK_STREAM) , s.bind()
    2 开始监听连接                   #s.listen()
    3 进入循环,不断接受客户端的连接请求              #s.accept()
    4 然后接收传来的数据,并发送给对方数据         #s.recv() , s.sendall()
    5 传输完毕后,关闭套接字                     #s.close()
    个人笔记

    1  创建套接字

    import socket
    s1=socket.socket(family,type)
    #family参数代表地址家族,可为AF_INET或AF_UNIX。AF_INET家族包括Internet地址,AF_UNIX家族用于同一台机器上的进程间通信。
    #type参数代表套接字类型,可为SOCK_STREAM(流套接字,就是TCP套接字)和SOCK_DGRAM(数据报套接字,就是UDP套接字)。 
    #默认为family=AF_INET  type=SOCK_STREM    
    #返回一个整数描述符,用这个描述符来标识这个套接字

      2  绑定套接字

    s1.bind( address ) 
    #由AF_INET所创建的套接字,address地址必须是一个双元素元组,格式是(host,port)。host代表主机,port代表端口号。
    #如果端口号正在使用、主机名不正确或端口已被保留,bind方法将引发socket.error异常。 #例: ('192.168.1.1',9999)

      3  监听套接字

    s1.listen( backlog ) 
    #backlog指定最多允许多少个客户连接到服务器。它的值至少为1。收到连接请求后,这些请求需要排队,如果队列满,就拒绝请求。 

      4  等待接受连接

    connection, address = s1.accept()
    #调用accept方法时,socket会时入“waiting”状态,也就是处于阻塞状态。客户请求连接时,方法建立连接并返回服务器。
    #accept方法返回一个含有两个元素的元组(connection,address)。
    #第一个元素connection是所连接的客户端的socket对象(实际上是该对象的内存地址),服务器必须通过它与客户端通信;
    #第二个元素 address是客户的Internet地址。

      5  处理阶段

    connection.recv(bufsize[,flag])
    #注意此处为connection #接受套接字的数据。数据以字符串形式返回,bufsize指定最多可以接收的数量。flag提供有关消息的其他信息,通常可以忽略 connection.send(string[,flag]) #将string中的数据发送到连接的套接字。返回值是要发送的字节数量,该数量可能小于string的字节大小。即:可能未将指定内容全部发送。

      6  传输结束,关闭连接

    s1.close()
    #关闭套接字

    TCP客户端:

    1 创建套接字,连接远端地址
           # socket.socket(socket.AF_INET,socket.SOCK_STREAM) , s.connect()
    2 连接后发送数据和接收数据          # s.sendall(), s.recv()
    3 传输完毕后,关闭套接字          #s.close()
    个人笔记

     1  创建socket对象

    import socket
    s2=socket.socket()

      2  连接至服务器端

    s2.connect(address)
    #连接到address处的套接字。一般,address的格式为元组(hostname,port),如果连接出错,返回socket.error错误。

      3  处理阶段

    s2.recv(bufsize[,flag])
    #接受套接字的数据。数据以字符串形式返回,bufsize指定最多可以接收的数量。flag提供有关消息的其他信息,通常可以忽略
    
    s2.send(string[,flag])
    #将string中的数据发送到连接的套接字。返回值是要发送的字节数量,该数量可能小于string的字节大小。即:可能未将指定内容全部发送。

      4  连接结束,关闭套接字

    s2.close()

    # 服务端
    import socket
    ip_port = ('127.0.0.1',9999)
    sk = socket.socket(socket.AF_INET,socket.SOCK_DGRAM,0)
    sk.bind(ip_port)
    
    while True:
        data,(host,port) = sk.recvfrom(1024)
        print(data,host,port)
        sk.sendto(bytes('ok', encoding='utf-8'), (host,port))
    
    
    #客户端
    import socket
    ip_port = ('127.0.0.1',9999)
    
    sk = socket.socket(socket.AF_INET,socket.SOCK_DGRAM,0)
    while True:
        inp = input('数据:').strip()
        if inp == 'exit':
            break
        sk.sendto(bytes(inp, encoding='utf-8'),ip_port)
        data = sk.recvfrom(1024)
        print(data)
    
    sk.close()
    UDP

    实例:智能机器人

    复制代码
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    
    
    import socket
    
    ip_port = ('127.0.0.1',8888)
    sk = socket.socket()
    sk.bind(ip_port)
    sk.listen(5)
    
    while True:
        conn,address =  sk.accept()
        conn.sendall('欢迎致电 10086,请输入1xxx,0转人工服务.')
        Flag = True
        while Flag:
            data = conn.recv(1024)
            if data == 'exit':
                Flag = False
            elif data == '0':
                conn.sendall('通过可能会被录音.balabala一大推')
            else:
                conn.sendall('请重新输入.')
        conn.close()
    复制代码
    服务端
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    
    import socket
    
    
    ip_port = ('127.0.0.1',8005)
    sk = socket.socket()
    sk.connect(ip_port)
    sk.settimeout(5)
    
    while True:
        data = sk.recv(1024)
        print 'receive:',data
        inp = raw_input('please input:')
        sk.sendall(inp)
        if inp == 'exit':
            break
    
    sk.close()
    客户端

     

    二、IO多路复用

     

     2.1、I/O模型:

    同步I/O:

    一问一答 等待数据(阻塞模式)或 不管有没有数据都返回(非阻塞模式)

    异步I/O:

    用户进程问完之后干别的处理结果出来之后告知用户进程

    I/O多路复用指:通过一种机制,可以监视多个描述符,一旦某个描述符就绪(一般是读就绪或者写就绪),能够通知程序进行相应的读写操作。


    Linux

    Linux中的 select,pollepoll 都是IO多路复用的机制。

    Python

    Python中有一个select模块,其中提供了:select、poll、epoll三个方法,分别调用系统的 select,poll,epoll 从而实现IO多路复用。

    1
    2
    3
    4
    5
    6
    Windows Python:
        提供: select
    Mac Python:
        提供: select
    Linux Python:
        提供: select、poll、epoll

    注意:网络操作、文件操作、终端操作等均属于IO操作,对于windows只支持Socket操作,其他系统支持其他IO操作,但是无法检测 普通文件操作 自动上次读取是否已经变化。


    2.2、相同点和不同点图解

    2.3、Python IO复用之poll

    触发方式:

    水平触发

    只适用于Unix/Linux操作系统

    2.4 Python IO复用之epoll

    触发方式:

    边缘触发

    只适用于Unix/Linux操作系统

    2.5、对于select方法:

    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    句柄列表11, 句柄列表22, 句柄列表33 = select.select(句柄序列1, 句柄序列2, 句柄序列3, 超时时间)
     
    参数: 可接受四个参数(前三个必须)
    返回值:三个列表
     
    select方法用来监视文件句柄,如果句柄发生变化,则获取该句柄。
    1、当 参数1 序列中的句柄发生可读时(accetp和read),则获取发生变化的句柄并添加到 返回值1 序列中
    2、当 参数2 序列中含有句柄时,则将该序列中所有的句柄添加到 返回值2 序列中
    3、当 参数3 序列中的句柄发生错误时,则将该发生错误的句柄添加到 返回值3 序列中
    4、当 超时时间 未设置,则select会一直阻塞,直到监听的句柄发生变化
       当 超时时间 = 1时,那么如果监听的句柄均无任何变化,则select会阻塞 1 秒,之后返回三个空列表,如果监听的句柄有变化,则直接执行。
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    
    import select
    import threading
    import sys
    
    while True:
        readable, writeable, error = select.select([sys.stdin,],[],[],1)
        if sys.stdin in readable:
            print 'select get stdin',sys.stdin.readline()
    利用select监听终端操作实例
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    
    import socket
    import select
    
    sk1 = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
    sk1.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1)
    sk1.bind(('127.0.0.1',8002))
    sk1.listen(5)
    sk1.setblocking(0)
    
    inputs = [sk1,]
    
    while True:
        readable_list, writeable_list, error_list = select.select(inputs, [], inputs, 1)
        for r in readable_list:
            # 当客户端第一次连接服务端时
            if sk1 == r:
                print 'accept'
                request, address = r.accept()
                request.setblocking(0)
                inputs.append(request)
            # 当客户端连接上服务端之后,再次发送数据时
            else:
                received = r.recv(1024)
                # 当正常接收客户端发送的数据时
                if received:
                    print 'received data:', received
                # 当客户端关闭程序时
                else:
                    inputs.remove(r)
    
    sk1.close()
    利用select实现伪同时处理多个Socket客户端请求:服务端
    #!/usr/bin/env python
    # -*- coding:utf-8 -*-
    import socket
    
    ip_port = ('127.0.0.1',8002)
    sk = socket.socket()
    sk.connect(ip_port)
    
    while True:
        inp = raw_input('please input:')
        sk.sendall(inp)
    sk.close()
    利用select实现伪同时处理多个Socket客户端请求:客户端

    此处的Socket服务端相比与原生的Socket,他支持当某一个请求不再发送数据时,服务器端不会等待而是可以去处理其他请求的数据。但是,如果每个请求的耗时比较长时,select版本的服务器端也无法完成同时操作。

    #!/usr/bin/env python
    #coding:utf8
    
    '''
     服务器的实现 采用select的方式
    '''
    
    import select
    import socket
    import sys
    import Queue
    
    #创建套接字并设置该套接字为非阻塞模式
    
    server = socket.socket(socket.AF_INET,socket.SOCK_STREAM)
    server.setblocking(0)
    
    #绑定套接字
    server_address = ('localhost',10000)
    print >>sys.stderr,'starting up on %s port %s'% server_address
    server.bind(server_address)
    
    #将该socket变成服务模式
    #backlog等于5,表示内核已经接到了连接请求,但服务器还没有调用accept进行处理的连接个数最大为5
    #这个值不能无限大,因为要在内核中维护连接队列
    
    server.listen(5)
    
    #初始化读取数据的监听列表,最开始时希望从server这个套接字上读取数据
    inputs = [server]
    
    #初始化写入数据的监听列表,最开始并没有客户端连接进来,所以列表为空
    
    outputs = []
    
    #要发往客户端的数据
    message_queues = {}
    while inputs:
        print >>sys.stderr,'waiting for the next event'
        #调用select监听所有监听列表中的套接字,并将准备好的套接字加入到对应的列表中
        readable,writable,exceptional = select.select(inputs,outputs,inputs)#列表中的socket 套接字  如果是文件呢? 
        #监控文件句柄有某一处发生了变化 可写 可读  异常属于Linux中的网络编程 
        #属于同步I/O操作,属于I/O复用模型的一种
        #rlist--等待到准备好读
        #wlist--等待到准备好写
        #xlist--等待到一种异常
        #处理可读取的套接字
    
        '''
            如果server这个套接字可读,则说明有新链接到来
            此时在server套接字上调用accept,生成一个与客户端通讯的套接字
            并将与客户端通讯的套接字加入inputs列表,下一次可以通过select检查连接是否可读
            然后在发往客户端的缓冲中加入一项,键名为:与客户端通讯的套接字,键值为空队列
            select系统调用是用来让我们的程序监视多个文件句柄(file descrīptor)的状态变化的。程序会停在select这里等待,
            直到被监视的文件句柄有某一个或多个发生了状态改变
            '''
    
        '''
            若可读的套接字不是server套接字,有两种情况:一种是有数据到来,另一种是链接断开
            如果有数据到来,先接收数据,然后将收到的数据填入往客户端的缓存区中的对应位置,最后
            将于客户端通讯的套接字加入到写数据的监听列表:
            如果套接字可读.但没有接收到数据,则说明客户端已经断开。这时需要关闭与客户端连接的套接字
            进行资源清理
            '''
            
        for s in readable: 
            if s is server:
                connection,client_address = s.accept()
                print >>sys.stderr,'connection from',client_address
                connection.setblocking(0)#设置非阻塞
                inputs.append(connection)
                message_queues[connection] = Queue.Queue()
            else:
                data = s.recv(1024)
                if data:
                    print >>sys.stderr,'received "%s" from %s'% 
                    (data,s.getpeername())
                    message_queues[s].put(data)
                    if s not in outputs:
                        outputs.append(s)
                else:
                    print >>sys.stderr,'closing',client_address
                    if s in outputs:
                        outputs.remove(s)
                    inputs.remove(s)
                    s.close()
                    del message_queues[s]
                        
        #处理可写的套接字
        '''
            在发送缓冲区中取出响应的数据,发往客户端。
            如果没有数据需要写,则将套接字从发送队列中移除,select中不再监视
            '''
    
        for s in writable:
            try:
                next_msg = message_queues[s].get_nowait()
    
            except Queue.Empty:
                print >>sys.stderr,'  ',s,getpeername(),'queue empty'
                outputs.remove(s)
            else:
                print >>sys.stderr,'sending "%s" to %s'% 
                (next_msg,s.getpeername())
                s.send(next_msg)
    
    
    
        #处理异常情况
    
        for s in exceptional:
            for s in exceptional:
                print >>sys.stderr,'exception condition on',s.getpeername()
                inputs.remove(s)
                if s in outputs:
                    outputs.remove(s)
                s.close()
                del message_queues[s]
    基于select实现socket服务端

     

    三、SocketServer模块

     3.1、起因:

    利用socket模块创建socket通信服务,但细心学习后就会发现利用socket模块创建的服务无法进行多进程的处理,当需要进行大量请求处理时,请求就会阻塞在队列中,甚至发生请求丢弃。并且如果我们需要大量的socket时,就需要重复创建许多socket、绑定端口..... ,对于程序员来说意味着重复书写大量无意义代码。

    那有没有一种方式既能简化书写流程又能实现多线程开发呢 ? 答案是肯定的,这就是SocketServer模块。

    socketserver中包含了两种类,一种为服务类(server class),一种为请求处理类(request handle class)。前者提供了许多方法:像绑定,监听,运行…… (也就是建立连接的过程) 后者则专注于如何处理用户所发送的数据(也就是事务逻辑)。

      一般情况下,所有的服务,都是先建立连接,也就是建立一个服务类的实例,然后开始处理用户请求,也就是建立一个请求处理类的实例。

    SocketServer简化了网络服务器的编写,大大减少创建的步骤,

    3.2、服务类:

    SocketServer使用了select它有5个类:一个baseserver;TCPServer,UDPServer,UnixStreamServer,UnixDatagramServer。这4个类是同步进行处理的,另外通过ForkingMixIn和ThreadingMixIn类来支持异步

    BaseServer不直接对外服务。

    TCPServer针对TCP套接字流

    UDPServer针对UDP数据报套接字

    UnixStreamServer和UnixDatagramServer针对UNIX域套接字,不常用。

    继承关系联系图如下:

    3.3、服务类方法:

    class SocketServer.BaseServer:这是模块中的所有服务器对象的超类。它定义了接口,如下所述,但是大多数的方法不实现,在子类中进行细化。
    
        BaseServer.fileno():返回服务器监听套接字的整数文件描述符。通常用来传递给select.select(), 以允许一个进程监视多个服务器。
    
        BaseServer.handle_request():处理单个请求。处理顺序:get_request(), verify_request(), process_request()。如果用户提供handle()方法抛出异常,将调用服务器的handle_error()方法。如果self.timeout内没有请求收到, 将调用handle_timeout()并返回handle_request()。
    
        BaseServer.serve_forever(poll_interval=0.5): 处理请求,直到一个明确的shutdown()请求。每poll_interval秒轮询一次shutdown。忽略self.timeout。如果你需要做周期性的任务,建议放置在其他线程。
    
        BaseServer.shutdown():告诉serve_forever()循环停止并等待其停止。python2.6版本。
    
        BaseServer.address_family: 地址家族,比如socket.AF_INET和socket.AF_UNIX。
    
        BaseServer.RequestHandlerClass:用户提供的请求处理类,这个类为每个请求创建实例。
    
        BaseServer.server_address:服务器侦听的地址。格式根据协议家族地址的各不相同,请参阅socket模块的文档。
    
        BaseServer.socketSocket:服务器上侦听传入的请求socket对象的服务器。
    
    服务器类支持下面的类变量:
    
        BaseServer.allow_reuse_address:服务器是否允许地址的重用。默认为false ,并且可在子类中更改。
    
        BaseServer.request_queue_size
    
    请求队列的大小。如果单个请求需要很长的时间来处理,服务器忙时请求被放置到队列中,最多可以放request_queue_size个。一旦队列已满,来自客户端的请求将得到 “Connection denied”错误。默认值通常为5 ,但可以被子类覆盖。
    
        BaseServer.socket_type:服务器使用的套接字类型; socket.SOCK_STREAM和socket.SOCK_DGRAM等。
    
        BaseServer.timeout:超时时间,以秒为单位,或 None表示没有超时。如果handle_request()在timeout内没有收到请求,将调用handle_timeout()。
    
    下面方法可以被子类重载,它们对服务器对象的外部用户没有影响。
    
        BaseServer.finish_request():实际处理RequestHandlerClass发起的请求并调用其handle()方法。 常用。
    
        BaseServer.get_request():接受socket请求,并返回二元组包含要用于与客户端通信的新socket对象,以及客户端的地址。
    
        BaseServer.handle_error(request, client_address):如果RequestHandlerClass的handle()方法抛出异常时调用。默认操作是打印traceback到标准输出,并继续处理其他请求。
    
        BaseServer.handle_timeout():超时处理。默认对于forking服务器是收集退出的子进程状态,threading服务器则什么都不做。
    
        BaseServer.process_request(request, client_address) :调用finish_request()创建RequestHandlerClass的实例。如果需要,此功能可以创建新的进程或线程来处理请求,ForkingMixIn和ThreadingMixIn类做到这点。常用。
    
        BaseServer.server_activate():通过服务器的构造函数来激活服务器。默认的行为只是监听服务器套接字。可重载。
    
        BaseServer.server_bind():通过服务器的构造函数中调用绑定socket到所需的地址。可重载。
    
        BaseServer.verify_request(request, client_address):返回一个布尔值,如果该值为True ,则该请求将被处理,反之请求将被拒绝。此功能可以重写来实现对服务器的访问控制。默认的实现始终返回True。client_address可以限定客户端,比如只处理指定ip区间的请求。 常用。
    服务类方法

    这个几个服务类都是同步处理请求的:一个请求没处理完不能处理下一个请求。要想支持异步模型,可以利用多继承让server类继承ForkingMixIn 或 ThreadingMixIn mix-in classes。

    ForkingMixIn利用多进程(分叉)实现异步。

    ThreadingMixIn利用多线程实现异步


    3.4、请求处理器类:

    要实现一项服务,还必须派生一个handler class请求处理类,并重写父类的handle()方法。handle方法就是用来专门是处理请求的。该模块是通过服务类和请求处理类组合来处理请求的。

    SocketServer模块提供的请求处理类有BaseRequestHandler,以及它的派生类StreamRequestHandler和DatagramRequestHandler。从名字看出可以一个处理流式套接字,一个处理数据报套接字

    3.5、请求处理类有三种方法

    setup()
    Called before the handle() method to perform any initialization actions required. The default implementation does nothing.
    
    也就是在handle()之前被调用,主要的作用就是执行处理请求之前的初始化相关的各种工作。默认不会做任何事。(如果想要让其做一些事的话,就要程序员在自己的请求处理器中覆盖这个方法(因为一般自定义的请求处理器都要继承python中提供的BaseRequestHandler,ps:下文会提到的),然后往里面添加东西即可)
    
    handle()
    This function must do all the work required to service a request. The default implementation does nothing. Several instance attributes are available to it; the request is available as self.request; the client address as self.client_address; and the server instance as self.server, in case it needs access to per-server information.
    
    The type of self.request is different for datagram or stream services. For stream services,self.request is a socket object; for datagram services, self.request is a pair of string and socket.
    
    handle()的工作就是做那些所有与处理请求相关的工作。默认也不会做任何事。他有数个实例参数:self.request    self.client_address   self.server
    
    finish()
    Called after the handle() method to perform any clean-up actions required. The default implementation does nothing. If setup() raises an exception, this function will not be called.
    
    在handle()方法之后会被调用,他的作用就是执行当处理完请求后的清理工作,默认不会做任何事
    View Code

    BaseRequestHandler中的setup()/handle()/finish()什么内容都没有定义,而他的两个派生类StreamRequestHandler和DatagramRequestHandler则都重写了setup()/finish()。

    因此当我们需要自己编写socketserver程序时,只需要合理选择StreamRequestHandler和DatagramRequestHandler之中的一个作为父类,然后自定义一个请求处理类,并在其中重写handle()方法即可。

    详细解释:http://www.cnblogs.com/MnCu8261/p/5546823.html

    socket和进程线程的关系

    使用例子:

     


     四、本章总结:

     生动形象解释socket


     声明:

    本人在学习老男孩python自动化网络课程后,结合所学整理做次笔记,本文内容多出

    Alex老师博客:http://www.cnblogs.com/alex3714/articles/5740985.html

    武沛齐老师博客:http://www.cnblogs.com/wupeiqi/articles/5453708.html

    感谢老男孩教育老师Alex,武沛齐老师,本文多从二位老师文章中结合整理

    http://www.cnblogs.com/wupeiqi/p/4766801.html

    http://yangrong.blog.51cto.com/6945369/1339593

    http://www.cnblogs.com/MnCu8261/p/5546823.html

  • 相关阅读:
    JavaOOP对象和封装
    使用socket实现文件复制
    多线程模拟银行取款
    初入多线程示例展示--Runner
    初步学习多线程3
    初步学习多线程2
    初步线程学习1
    守护线程_setDaemon()
    多线程_yield()和sleep()方法比较
    java_多线程_优先级
  • 原文地址:https://www.cnblogs.com/geekmao/p/7592766.html
Copyright © 2011-2022 走看看