python笔记(flask DButils 数据库锁，请求上下文管理（LocalProxy,app,g）)_flask 资源锁

一、DButils

1. BDUtils数据库链接池 两种模式

   - 模式一：基于threaing.local实现为每一个线程创建一个连接，关闭是
     伪关闭，当前线程可以重复
   - 模式二：连接池原理
           - 可以设置连接池中最大连接数    9
           - 默认启动时，连接池中创建连接  5
           
           - 如果有三个线程来数据库中获取连接：
               - 如果三个同时来的，一人给一个链接
               - 如果一个一个来，有时间间隔，用一个链接就可以为三个线程提供服务
                   - 说不准
                       有可能:1个链接就可以为三个线程提供服务
                       有可能:2个链接就可以为三个线程提供服务
                       有可能:3个链接就可以为三个线程提供服务
            PS、：maxshared在使用pymysql中均无用。链接数据库的模块：只有threadsafety>1的时候才有用
   1
   2
   3
   4
   5
   6
   7
   8
   9
   10
   11
   12
   13
   14

2. 模式一：为每一个线程创建一个链接（是基于本地线程来实现的。thread.local），每个线程独立使用自己的数据库链接，该线程关闭不是真正的关闭，本线程再次调用时，还是使用的最开始创建的链接，直到线程终止，数据库链接才关闭

   from flask import Flask
   app = Flask(__name__)
   from DBUtils.PersistentDB import PersistentDB
   import pymysql
   POOL = PersistentDB(
       creator=pymysql,  # 使用链接数据库的模块
       maxusage=None,  # 一个链接最多被重复使用的次数，None表示无限制
       setsession=[],  # 开始会话前执行的命令列表。如：["set datestyle to ...", "set time zone ..."]
       ping=0,
       # ping MySQL服务端，检查是否服务可用。# 如：0 = None = never, 1 = default = whenever it is requested, 2 = when a cursor is created, 4 = when a query is executed, 7 = always
       closeable=False,
       # 如果为False时， conn.close() 实际上被忽略，供下次使用，再线程关闭时，才会自动关闭链接。如果为True时， conn.close()则关闭链接，那么再次调用pool.connection时就会报错，因为已经真的关闭了连接（pool.steady_connection()可以获取一个新的链接）
       threadlocal=None,  # 本线程独享值得对象，用于保存链接对象，如果链接对象被重置
       host='127.0.0.1',
       port=3306,
       user='root',
       password='123',
       database='pooldb',
       charset='utf8'
   )
   
   @app.route('/func')
   def func():
   　　conn = POOL.connection()
   　　cursor = conn.cursor()
   　　cursor.execute('select * from tb1')
   　　result = cursor.fetchall()
   　　cursor.close()
   　　conn.close() # 不是真的关闭，而是假的关闭。 conn = pymysql.connect()   conn.close()
   
   　　conn = POOL.connection()
   　　cursor = conn.cursor()
   　　cursor.execute('select * from tb1')
   　　result = cursor.fetchall()
   　　cursor.close()
   　　conn.close()
   if __name__ == '__main__': 
   	app.run(debug=True)
   1
   2
   3
   4
   5
   6
   7
   8
   9
   10
   11
   12
   13
   14
   15
   16
   17
   18
   19
   20
   21
   22
   23
   24
   25
   26
   27
   28
   29
   30
   31
   32
   33
   34
   35
   36
   37
   38

3. 模式二：创建一个链接池，为所有线程提供连接，使用时来进行获取，使用完毕后在放回到连接池。 PS：假设最大链接数有10个，其实也就是一个列表，当你pop一个，人家会在append一个，链接池的所有的链接都是按照排队的这样的方式来链接的。链接池里所有的链接都能重复使用，共享的，即实现了并发，又防止了链接次数太多

   import time
   import pymysql
   import threading
   from DBUtils.PooledDB import PooledDB, SharedDBConnection
   POOL = PooledDB(
       creator=pymysql,  # 使用链接数据库的模块
       maxconnections=6,  # 连接池允许的最大连接数，0和None表示不限制连接数
       mincached=2,  # 初始化时，链接池中至少创建的空闲的链接，0表示不创建
   
   
       maxcached=5,  # 链接池中最多闲置的链接，0和None不限制
       maxshared=3,  # 链接池中最多共享的链接数量，0和None表示全部共享。PS: 无用，因为pymysql和MySQLdb等模块的 threadsafety都为1，所有值无论设置为多少，_maxcached永远为0，所以永远是所有链接都共享。
       blocking=True,  # 连接池中如果没有可用连接后，是否阻塞等待。True，等待；False，不等待然后报错
       maxusage=None,  # 一个链接最多被重复使用的次数，None表示无限制
       setsession=[],  # 开始会话前执行的命令列表。如：["set datestyle to ...", "set time zone ..."]
       ping=0,
       # ping MySQL服务端，检查是否服务可用。# 如：0 = None = never, 1 = default = whenever it is requested, 2 = when a cursor is created, 4 = when a query is executed, 7 = always
       host='127.0.0.1',
       port=3306,
       user='root',
       password='123',
       database='pooldb',
       charset='utf8'
   )
   
   
   def func():
       # 检测当前正在运行连接数的是否小于最大链接数，如果不小于则：等待或报raise TooManyConnections异常
       # 否则
       # 则优先去初始化时创建的链接中获取链接 SteadyDBConnection。
       # 然后将SteadyDBConnection对象封装到PooledDedicatedDBConnection中并返回。
       # 如果最开始创建的链接没有链接，则去创建一个SteadyDBConnection对象，再封装到PooledDedicatedDBConnection中并返回。
       # 一旦关闭链接后，连接就返回到连接池让后续线程继续使用。
   
       # PooledDedicatedDBConnection
       conn = POOL.connection()
   
       # print(th, '链接被拿走了', conn1._con)
       # print(th, '池子里目前有', pool._idle_cache, '\r\n')
   
       cursor = conn.cursor()
       cursor.execute('select * from tb1')
       result = cursor.fetchall()
       conn.close()
   
   
   
   
   
       conn = POOL.connection()
   
       # print(th, '链接被拿走了', conn1._con)
       # print(th, '池子里目前有', pool._idle_cache, '\r\n')
   
       cursor = conn.cursor()
       cursor.execute('select * from tb1')
       result = cursor.fetchall()
       conn.close()
   
   
   func()
   1
   2
   3
   4
   5
   6
   7
   8
   9
   10
   11
   12
   13
   14
   15
   16
   17
   18
   19
   20
   21
   22
   23
   24
   25
   26
   27
   28
   29
   30
   31
   32
   33
   34
   35
   36
   37
   38
   39
   40
   41
   42
   43
   44
   45
   46
   47
   48
   49
   50
   51
   52
   53
   54
   55
   56
   57
   58
   59
   60
   61

二、数据库锁

1. MySQL数据库

    引擎：innodb
    支持事务
    锁：
      行锁    select * from user where id=1 for update
      表锁
              pymysql加锁
                    cursor.execute("select * from user where id=1 for update")
             Django加锁：
                    （1）装饰器:
                        @transaction.commit_on_success
                        def view():
                            a.save()
                            b.save()
                            return ...
                    （2）with用法:
                        def func()
                            with transaction.commit_on_success():
                                a.save()
                                b.save()
                            return ...
   1
   2
   3
   4
   5
   6
   7
   8
   9
   10
   11
   12
   13
   14
   15
   16
   17
   18
   19
   20

   2.mysaim

      不支持事务
       锁
          表锁
   1
   2
   3

三、请求上下文管理总流程图