python訪問資料庫
A. 利用python連接Mysql資料庫並執行相關sql操作
利用Python連接MySQL資料庫並執行相關SQL操作的步驟如下:
啟動MySQL服務與創建資料庫:
- 確保MySQL服務已啟動。如果在phpstudy等工具中啟動失敗,可以嘗試通過任務管理器關閉並重啟mysqld服務。
- 創建一個新的資料庫,指定資料庫名稱、用戶名和密碼。
提升資料庫用戶許可權:
- 復制root用戶的許可權信息。
- 下載並安裝phpMyAdmin,登錄後找到新建的資料庫用戶,修改其許可權,如提升至ALL PRIVILEGES,以確保Python腳本有足夠的許可權執行SQL操作。
使用Navicat for MySQL進行連接測試:
- 輸入資料庫的連接信息進行測試連接。
- 連接成功後,可以雙擊資料庫名稱,進入資料庫管理界面,新建表並添加所需的欄位。
Python代碼連接與操作MySQL資料庫:
- 直接連接:使用Python的mysqlconnectorpython或PyMySQL等庫,通過提供資料庫連接信息來建立連接。
- 執行SQL操作:
- 查詢操作:使用cursor.execute執行SELECT語句,並通過fetchall或fetchone等方法獲取查詢結果。
- 插入操作:使用INSERT INTO語句,結合參數化查詢來防止SQL注入攻擊。
- 更新操作:使用UPDATE語句,同樣採用參數化查詢。
- 刪除操作:使用DELETE FROM語句,同樣需要注意防止SQL注入。
- 動態SQL操作:根據資料庫內容和業務需求,動態構建SQL語句並執行。但務必注意安全性,避免直接使用字元串拼接來構建SQL語句。
通過以上步驟,Python可以成功連接到MySQL資料庫,並執行各種SQL操作,如數據查詢、插入、更新和刪除等,從而實現對資料庫的有效管理。
B. Python連接mysql資料庫及python使用mysqldb連接資料庫教程
做python的時候需要用到資料庫,於是自己重新整理了一下資料庫的知識,並且熟悉了python中MysqlDB模塊的功能和函數等介面,現在系統地來總結一下吧:
首先你要做的還是下載相應的模塊並且安裝啦,下載地址自己搜,網上有很多,安裝的話也很好辦,安裝之後python的安裝目錄下的Lib文件夾下的site-packages文件夾下的MySQLdb文件夾,這之中存放的便是該模塊的定義。准備工作做好之後我們需要在源碼中import MySQLdb
資料庫的連接:
模塊引入之後我們就需要和資料庫進行連接了,實例代碼如下:
db = MySQLdb.connect("localhost","root","123456","myciti" )
這三個關鍵參數的含義一目瞭然:第一個為伺服器的地址,第二個為用戶名,第三個為dbms密碼,第四個為要訪問的資料庫,其實該connect函數的參數不止這些,不過由於其有默認值而且大多數情況下不用修改,因而省略了。這里做如下列表:
host,連接的資料庫伺服器主機名,默認為本地主機(localhost)。
user,連接資料庫的用戶名,默認為當前用戶。
passwd,連接密碼,沒有默認值。
db,連接的資料庫名,沒有默認值。
conv,將文字映射到Python類型的字典。默認為MySQLdb.converters.conversions
cursorclass,cursor()使用的種類,默認值為MySQLdb.cursors.Cursor。
compress,啟用協議壓縮功能。
named_pipe,在windows中,與一個命名管道相連接。
init_command,一旦連接建立,就為資料庫伺服器指定一條語句來運行。
read_default_file,使用指定的MySQL配置文件。
read_default_group,讀取的默認組。
unix_socket,在unix中,連接使用的套接字,默認使用TCP。
port,指定資料庫伺服器的連接埠,默認是3306
大家可能會注意到源碼中沒有用到埠號,這是因為MySQLdb的connect函數的該參數的默認值便是3306,如果你在安裝mysql的時候修改了資料庫的埠號,那麼你就需要在源碼中加上該參數的修改值了。
一,安裝mysql
如果是windows 用戶,mysql 的安裝非常簡單,直接下載安裝文件,雙擊安裝文件一步一步進行操作即可。
linux 下的安裝可能會更加簡單,除了下載安裝包進行安裝外,一般的linux 倉庫中都會有mysql ,我們只需要通過一個命令就可以下載安裝:
Ubuntudeepin
>>sudo apt-get install mysql-server
>>Sudo apt-get install mysql-client
centOS/redhat
>>yum install mysql
二,安裝MySQL-python
要想使python可以操作mysql 就需要MySQL-python驅動,它是python 操作mysql必不可少的模塊。
下載地址:https://pypi.python.org/pypi/MySQL-python/
下載MySQL-python-1.2.5.zip 文件之後直接解壓。進入MySQL-python-1.2.5目錄:
>>python setup.py install
三,測試
測試非常簡單,檢查MySQLdb 模塊是否可以正常導入。
fnngj@fnngj-H24X:~/pyse$ python
Python 2.7.4 (default, Sep 26 2013, 03:20:56)
[GCC 4.7.3] on linux2
Type "help", "right", "credits" or "license" for more information.
>>> import MySQLdb
沒有報錯提示MySQLdb模塊找不到,說明安裝OK ,下面開始使用python 操作資料庫之前,我們有必要來回顧一下mysql的基本操作:
四,mysql 的基本操作
$ mysql -u root -p (有密碼時)
$ mysql -u root (無密碼時)
mysql> show databases; // 查看當前所有的資料庫
+--------------------+
| Database |
+--------------------+
| information_schema |
| csvt |
| csvt04 |
| mysql |
| performance_schema |
| test |
+--------------------+
6 rows in set (0.18 sec)
mysql> use test; //作用與test資料庫
Database changed
mysql> show tables; //查看test庫下面的表
Empty set (0.00 sec)
//創建user表,name 和password 兩個欄位
mysql> CREATE TABLE user (name VARCHAR(20),password VARCHAR(20)); Query OK, 0 rows affected (0.27 sec)
//向user表內插入若干條數據
mysql> insert into user values('Tom',');Query OK, 1 row affected (0.05 sec)
mysql> insert into user values('Alen',');Query OK, 1 row affected (0.08 sec)
mysql> insert into user values('Jack',');Query OK, 1 row affected (0.04 sec)
//查看user表的數據
mysql> select * from user;+------+----------+
| name | password |
+------+----------+
| Tom | 1321 |
| Alen | 7875 |
| Jack | 7455 |
+------+----------+
3 rows in set (0.01 sec)
//刪除name 等於Jack的數據
mysql> delete from user where name = 'Jack'Query OK, 1 rows affected (0.06 sec)
//修改name等於Alen 的password 為 1111
mysql> update user set password=' where name = 'Alen'Query OK, 1 row affected (0.05 sec)
Rows matched: 1 Changed: 1 Warnings: 0
//查看錶內容
mysql> select * from user;+--------+----------+
| name | password |
+--------+----------+
| Tom | 1321 |
| Alen | 1111 |
+--------+----------+
3 rows in set (0.00 sec)
五,python 操作mysql資料庫基礎
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#創建數據表#cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")#插入一條數據#cur.execute("insert into student values(ƈ','Tom',Ɖ year 2 class',Ə')")#修改查詢條件的數據#cur.execute("update student set class=Ɖ year 1 class' where name = 'Tom'")#刪除查詢條件的數據#cur.execute("delete from student where age=Ə'")cur.close()
conn.commit()
conn.close()
>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd=',db ='test',)
Connect() 方法用於創建資料庫的連接,裡面可以指定參數:用戶名,密碼,主機等信息。
這只是連接到了資料庫,要想操作資料庫需要創建游標。
>>> cur = conn.cursor()
通過獲取到的資料庫連接conn下的cursor()方法來創建游標。
>>> cur.execute("create table student(id int ,name varchar(20),class varchar(30),age varchar(10))")
通過游標cur 操作execute()方法可以寫入純sql語句。通過execute()方法中寫如sql語句來對數據進行操作。
>>>cur.close()
cur.close() 關閉游標
>>>conn.commit()
conn.commit()方法在提交事物,在向資料庫插入一條數據時必須要有這個方法,否則數據不會被真正的插入。
>>>conn.close()
Conn.close()關閉資料庫連接
六,插入數據
通過上面execute()方法中寫入純的sql語句來插入數據並不方便。如:
>>>cur.execute("insert into student values(ƈ','Tom',Ɖ year 2 class',Ə')")
我要想插入新的數據,必須要對這條語句中的值做修改。我們可以做如下修改:
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#插入一條數據sqli="insert into student values(%s,%s,%s,%s)"cur.execute(sqli,(Ɖ','Huhu',ƈ year 1 class',ƍ'))
cur.close()
conn.commit()
conn.close()
假如要一次向數據表中插入多條值呢?
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#一次插入多條記錄sqli="insert into student values(%s,%s,%s,%s)"cur.executemany(sqli,[
(Ɖ','Tom',Ƈ year 1 class',ƌ'),
(Ɖ','Jack',ƈ year 1 class',ƍ'),
(Ɖ','Yaheng',ƈ year 2 class',ƍ'),
])
cur.close()
conn.commit()
conn.close()
executemany()方法可以一次插入多條值,執行單挑sql語句,但是重復執行參數列表裡的參數,返回值為受影響的行數。
七,查詢數據
也許你已經嘗試了在python中通過
>>>cur.execute("select * from student")
來查詢數據表中的數據,但它並沒有把表中的數據列印出來,有些失望。
來看看這條語句獲得的是什麼
>>>aa=cur.execute("select * from student")
>>>print aa
5
它獲得的只是我們的表中有多少條數據。那怎樣才能獲得表中的數據呢?進入python shell
>>> import MySQLdb>>> conn = MySQLdb.connect(host='localhost',port = 3306,user='root', passwd=',db ='test',)>>> cur = conn.cursor()>>> cur.execute("select * from student")5L
>>> cur.fetchone()
(1L, 'Alen', Ƈ year 2 class', ƌ')>>> cur.fetchone()
(3L, 'Huhu', ƈ year 1 class', ƍ')>>> cur.fetchone()
(3L, 'Tom', Ƈ year 1 class', ƌ')
...>>>cur.scroll(0,'absolute')
fetchone()方法可以幫助我們獲得表中的數據,可是每次執行cur.fetchone() 獲得的數據都不一樣,換句話說我沒執行一次,游標會從表中的第一條數據移動到下一條數據的位置,所以,我再次執行的時候得到的是第二條數據。
scroll(0,'absolute') 方法可以將游標定位到表中的第一條數據。
還是沒解決我們想要的結果,如何獲得表中的多條數據並列印出來呢?
#coding=utf-8import MySQLdb
conn= MySQLdb.connect(
host='localhost',
port = 3306,
user='root',
passwd=',
db ='test',
)
cur = conn.cursor()#獲得表中有多少條數據aa=cur.execute("select * from student")print aa#列印表中的多少數據info = cur.fetchmany(aa)for ii in info: print ii
cur.close()
conn.commit()
conn.close()
通過之前的print aa 我們知道當前的表中有5條數據,fetchmany()方法可以獲得多條數據,但需要指定數據的條數,通過一個for循環就可以把多條數據列印出啦!執行結果如下:
5(1L, 'Alen', Ƈ year 2 class', ƌ')
(3L, 'Huhu', ƈ year 1 class', ƍ')
(3L, 'Tom', Ƈ year 1 class', ƌ')
(3L, 'Jack', ƈ year 1 class', ƍ')
(3L, 'Yaheng', ƈ year 2 class', ƍ')
[Finished in 0.1s]
C. python如何訪問資料庫
1.背景:
python提供了很多資料庫介面, 常用的資料庫有 MS SQL Server /mysql /oracle 等。
打開鏈接 https://wiki.python.org/moin/DatabaseInterfaces
是python 關於資料庫介面的一個總結 , 可以看到python支持的訪問的資料庫系統。
2.模塊:
python 主要是通過模塊和資料庫連接的。
2.1 安裝模塊:
如果使用anconda,本身就會集合很多模塊,不需要手動安裝。如果用pycharm就要手動安裝模塊。
安裝模塊流程:
下載模塊擴展包放到路徑下——>cmd找到相應路徑——> pip install +擴展包名字
下面列舉一些常用連接資料庫的模塊:pymssql / sqlite3/ PyMySQL/pyodbc/odbc/adodbapi
不同模塊連接的資料庫不同, 支持的版本系統有的也不一樣。但是大體用法都是相近的, 因為有DB-API
相關推薦:《Python教程》
3.Python DB-API
3.1背景:
在沒有DB-API 之前, 不同資料庫有不同的資料庫介面程序, 這就導致python 訪問 database 的介面程序非常混亂。如果我們學習了python 訪問 mysql 的介面程序, 然後要切換到另一個資料庫上, 我們還要在學習另外一個資料庫的介面程序。python DB-API就是為了解決介面程序混亂而生成的。有了DB-API, 在不同資料庫上移植代碼就變得簡單的多了。
3.2Python DB-API:
Python 定義了一套操作資料庫的 DB-API 介面,它是一個規范,定義了一系列必須的對象和資料庫存取方式,以便為不同的底層資料庫系統提供一致的訪問介面
這個鏈接就是python 官方給定的 DB-API 的說明 https://www.python.org/dev/peps/pep-0249/
3.3 Python DB--API的內容:
連接對象:
?Connect()創建連接:host/server /user/password/db connect方法生成一個connect對象, 我們通過這個對象來訪問資料庫。符合標準的模塊都會實現connect方法。
?close():關閉連接
?commit():提交當前事務。做出某些更改後確保已經進行了提交,這樣才可以將這些修改真正地保存到database中
?rollback() 回滾上一次調用 commit()以來對資料庫所做的更改
?cursor():創建游標。系統為用戶開通的一個數據緩沖區,用於存放SQL語句執行結果。cursor游標是有狀態的,它可以記錄當前已經取到結果的第幾個記錄了,因此,一般你只可以遍歷結果集一次。在上面的情況下,如果執行fetchone()會返回為空。這一點在測試時需要注意
游標對象:
?Execute()執行一個資料庫查詢或命令。 execute 執行sql 語句之後運行的結果不會直接output 出來 , 而是放到了一個緩存區, 要用 fetch語句+print 可以查詢sql運行的結果
?fetchone ()得到結果集的下一行
?fetchmany(size)得到結果集的下幾行
?fetchall()返回結果集中剩下的所有行
?rowcount 返回影響的行數
?Close()關閉游標對象
3.4Python DB--API的工作原理及流程:
如圖所示如果把python 和資料庫比作兩個不同的地點, connection 就是路, 能連接python和database。cursor就像在路上行駛的小貨車, 可以用於執行sql 語句, 以及存儲sql 運行的結果。
流程:
4.MS SQL Server 示例:
4.1 導入模塊、創建連接:
4.2 創建游標: 游標創建之後就可以對資料庫進行查詢更改了!
4.3對數據進行操作(創建表、插入行、更新數據、增加列、刪除行、列、表):
4.4 查詢 獲取行:
5.其他:
使用游標的時候要注意, 每次連接只能有一個游標查詢處於活躍狀態。 code演示:
execute()循環和 executemany() 插入100000 條數據測速: