Python 标准数据库接口为 Python DB-API，Python DB-API为开发人员提供了数据库应用编程接口。
数据库连接
Python 因为可以自由选择模组，所以就算是连接 MySQL 资料库也有很多种方式，在此使用 MySQLdb, pymysql, mysql.connector 三种模组来比较程式以及效能的差异。
MySQLdb
安裝:
示例代码:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
| import MySQLdb
import time db = MySQLdb.connect(host="192.168.6.121", user="user", password="password", database="database", port=3306, autocommit=True)
cursor = db.cursor(MySQLdb.cursors.DictCursor) # 使用execute方法执行SQL语句
cursor.execute("SELECT VERSION()") # 使用 fetchone() 方法获取一条数据
data = cursor.fetchone() print "Database version : %s " % data start_time = time.time() for i in range(0, 10000):
sql = " INSERT INTO Room (Game) VALUES ('') "
cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s "
cursor.execute(sql, {
'id': i
})
print(time.time() - start_time) # 28.631089210510254 sql = " SELECT * FROM Room WHERE id=%(id)s "
cursor.execute(sql, {
'id': 1
})
print(cursor.rowcount)
a = cursor.fetchone()
print(a)
|
PyMySQL
安裝
示例代码:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
| import pymysql
import time db = pymysql.connect(host="192.168.6.121", user="user", password="password", database="database", autocommit=True)
cursor = db.cursor(pymysql.cursors.DictCursor) start_time = time.time() for i in range(0, 10000):
sql = " INSERT INTO Room (Game) VALUES ('') "
cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s "
cursor.execute(sql, {
'id': i
})
print(time.time() - start_time) # 31.950004816055298 sql = " SELECT * FROM Room WHERE id=%(id)s "
cursor.execute(sql, {
'id': 1
})
print(cursor.rowcount)
a = cursor.fetchone()
print(a)
|
MySQL Connectors
安裝:
1
| pip install mysql-connector-python
|
这个库和 mysql-connector 不同，不能弄混
示例代码:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
| import mysql.connector
import time cnx = mysql.connector.connect(user='user', password='password', host='192.168.6.121', port=3306, database='database', autocommit=True)
cursor = cnx.cursor(dictionary=True, buffered=True) start_time = time.time() for i in range(0, 10000):
sql = " INSERT INTO Room (Game) VALUES ('" + str(i) + "') "
cursor.execute(sql) sql = " UPDATE Room SET Game=Game+1 WHERE id=%(id)s "
cursor.execute(sql, {
'id': i
})
print(time.time() - start_time) # 28.920193672180176 sql = " SELECT * FROM Room WHERE id=%(id)s "
cursor.execute(sql, {
'id': 1
})
print(cursor.rowcount)
a = cursor.fetchone()
print(a)
|
选择喜欢的用就行。
创建数据库表
如果数据库连接存在我们可以使用execute()方法来为数据库创建表，如下所示创建表EMPLOYEE：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
| #!/usr/bin/python
# -*- coding: UTF-8 -*-import MySQLdb # 打开数据库连接
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标
cursor = db.cursor() # 如果数据表已经存在使用 execute() 方法删除表。
cursor.execute("DROP TABLE IF EXISTS EMPLOYEE") # 创建数据表SQL语句
sql = """CREATE TABLE EMPLOYEE (
FIRST_NAME CHAR(20) NOT NULL,
LAST_NAME CHAR(20),
AGE INT,
SEX CHAR(1),
INCOME FLOAT )""" cursor.execute(sql) # 关闭数据库连接
db.close()
|
数据库插入操作
以下实例使用执行 SQL INSERT 语句向表 EMPLOYEE 插入记录：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
| #!/usr/bin/python
# -*- coding: UTF-8 -*-import MySQLdb # 打开数据库连接
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标
cursor = db.cursor() # SQL 插入语句
sql = """INSERT INTO EMPLOYEE(FIRST_NAME,
LAST_NAME, AGE, SEX, INCOME)
VALUES ('Mac', 'Mohan', 20, 'M', 2000)"""
try:
# 执行sql语句
cursor.execute(sql)
# 提交到数据库执行
db.commit()
except:
# Rollback in case there is any error
db.rollback() # 关闭数据库连接
db.close()
|
- 普通字符串有可能与内嵌变量重名，需要使用 ` 包裹对应列名字符串会比较安全
1
2
3
4
5
6
7
8
9
| cursor.execute(
"""
INSERT INTO `airport_info`
(`airport_id`, `model`, `drone_id`, `desc`, `lat`, `lon`, `alt`, `project_id`, `map`)
VALUES
(%s, %s, %s, %s, %s, %s, %s, %s, %s)
""",
('23234', '123', '123123', '123123', '123', '12', '23', '1', '13123')
)
|
以上例子也可以写成如下形式：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
| #!/usr/bin/python
# -*- coding: UTF-8 -*-import MySQLdb # 打开数据库连接
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标
cursor = db.cursor() # SQL 插入语句
sql = "INSERT INTO EMPLOYEE(FIRST_NAME, \
LAST_NAME, AGE, SEX, INCOME) \
VALUES (%s, %s, %s, %s, %s )" % \
('Mac', 'Mohan', 20, 'M', 2000)
try:
# 执行sql语句
cursor.execute(sql)
# 提交到数据库执行
db.commit()
except:
# 发生错误时回滚
db.rollback() # 关闭数据库连接
db.close()
|
实例：
以下代码使用变量向SQL语句中传递参数:
1
2
3
4
5
6
7
| ..................................
user_id = "test123"
password = "password"con.execute('insert into Login values(%s, %s)' % \
(user_id, password))
..................................
|
数据库查询操作
Python查询Mysql使用 fetchone() 方法获取单条数据, 使用fetchall() 方法获取多条数据。
- fetchone(): 该方法获取下一个查询结果集。结果集是一个对象
- **fetchall()😗*接收全部的返回结果行.
- rowcount: 这是一个只读属性，并返回执行execute()方法后影响的行数。
实例：
查询EMPLOYEE表中salary（工资）字段大于1000的所有数据：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
| #!/usr/bin/python
# -*- coding: UTF-8 -*-import MySQLdb # 打开数据库连接
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标
cursor = db.cursor() # SQL 查询语句
sql = "SELECT * FROM EMPLOYEE \
WHERE INCOME > %s" % (1000)
try:
# 执行SQL语句
cursor.execute(sql)
# 获取所有记录列表
results = cursor.fetchall()
for row in results:
fname = row[0]
lname = row[1]
age = row[2]
sex = row[3]
income = row[4]
# 打印结果
print "fname=%s,lname=%s,age=%s,sex=%s,income=%s" % \
(fname, lname, age, sex, income )
except:
print "Error: unable to fetch data" # 关闭数据库连接
db.close()
|
以上脚本执行结果如下：
1
| fname=Mac, lname=Mohan, age=20, sex=M, income=2000
|
数据库更新操作
更新操作用于更新数据表的的数据，以下实例将 EMPLOYEE 表中的 SEX 字段为 ‘M’ 的 AGE 字段递增 1：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
| #!/usr/bin/python
# -*- coding: UTF-8 -*-import MySQLdb # 打开数据库连接
db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标
cursor = db.cursor() # SQL 更新语句
sql = "UPDATE EMPLOYEE SET AGE = AGE + 1 WHERE SEX = '%c'" % ('M')
try:
# 执行SQL语句
cursor.execute(sql)
# 提交到数据库执行
db.commit()
except:
# 发生错误时回滚
db.rollback() # 关闭数据库连接
db.close()
|
删除操作
删除操作用于删除数据表中的数据，以下实例演示了删除数据表 EMPLOYEE 中 AGE 大于 20 的所有数据：#!/usr/bin/python # -*- coding: UTF-8 -*- import MySQLdb # 打开数据库连接 db = MySQLdb.connect("localhost", "testuser", "test123", "TESTDB", charset='utf8' ) # 使用cursor()方法获取操作游标 cursor = db.cursor() # SQL 删除语句 sql = "DELETE FROM EMPLOYEE WHERE AGE > %s" % (20) try: # 执行SQL语句 cursor.execute(sql) # 提交修改 db.commit() except: # 发生错误时回滚 db.rollback() # 关闭连接 db.close()
执行事务
事务机制可以确保数据一致性。
事务应该具有4个属性：原子性、一致性、隔离性、持久性。这四个属性通常称为ACID特性。
- 原子性（atomicity）。一个事务是一个不可分割的工作单位，事务中包括的诸操作要么都做，要么都不做。
- 一致性（consistency）。事务必须是使数据库从一个一致性状态变到另一个一致性状态。一致性与原子性是密切相关的。
- 隔离性（isolation）。一个事务的执行不能被其他事务干扰。即一个事务内部的操作及使用的数据对并发的其他事务是隔离的，并发执行的各个事务之间不能互相干扰。
- 持久性（durability）。持续性也称永久性（permanence），指一个事务一旦提交，它对数据库中数据的改变就应该是永久性的。接下来的其他操作或故障不应该对其有任何影响。
Python DB API 2.0 的事务提供了两个方法 commit 或 rollback。
实例：
1
2
3
4
5
6
7
8
9
10
| # SQL删除记录语句
sql = "DELETE FROM EMPLOYEE WHERE AGE > %s" % (20)
try:
# 执行SQL语句
cursor.execute(sql)
# 向数据库提交
db.commit()
except:
# 发生错误时回滚
db.rollback()
|
对于支持事务的数据库， 在Python数据库编程中，当游标建立之时，就自动开始了一个隐形的数据库事务。
commit() 方法游标的所有更新操作，rollback（）方法回滚当前游标的所有操作。每一个方法都开始了一个新的事务。
测试
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
| # -*- coding:utf-8 -*-import mysql.connector # 打开数据库连接（请根据自己的用户名、密码及数据库名称进行修改）
cnn = mysql.connector.connect(user='root',passwd='root',database='testdb') # 使用cursor()方法获取操作游标
cursor = cnn.cursor() # 使用execute方法执行SQL语句
cursor.execute("SELECT VERSION()") # 使用 fetchone() 方法获取一条数据
data = cursor.fetchone()
print "Database version : %s " % data # 执行sql语句
cnn.close()
显示的结果应该如下： Database version : 8.0.12
|
错误处理
DB API中定义了一些数据库操作的错误及异常，下表列出了这些错误和异常:
| 异常 |
描述 |
| Warning |
当有严重警告时触发，例如插入数据是被截断等等。必须是 StandardError 的子类。 |
| Error |
警告以外所有其他错误类。必须是 StandardError 的子类。 |
| InterfaceError |
当有数据库接口模块本身的错误（而不是数据库的错误）发生时触发。 必须是Error的子类。 |
| DatabaseError |
和数据库有关的错误发生时触发。 必须是Error的子类。 |
| DataError |
当有数据处理时的错误发生时触发，例如：除零错误，数据超范围等等。 必须是DatabaseError的子类。 |
| OperationalError |
指非用户控制的，而是操作数据库时发生的错误。例如：连接意外断开、 数据库名未找到、事务处理失败、内存分配错误等等操作数据库是发生的错误。 必须是DatabaseError的子类。 |
| IntegrityError |
完整性相关的错误，例如外键检查失败等。必须是DatabaseError子类。 |
| InternalError |
数据库的内部错误，例如游标（cursor）失效了、事务同步失败等等。 必须是DatabaseError子类。 |
| ProgrammingError |
程序错误，例如数据表（table）没找到或已存在、SQL语句语法错误、 参数数量错误等等。必须是DatabaseError的子类。 |
| NotSupportedError |
不支持错误，指使用了数据库不支持的函数或API等。例如在连接对象上 使用.rollback()函数，然而数据库并不支持事务或者事务已关闭。 必须是DatabaseError的子类。 |
参考资料
文章链接：
https://www.zywvvd.com/notes/coding/dataset/mysql/python-mysql/python-mysql/
