當前位置：首頁 > 编程语言 > python >内容正文

python

Python学习笔记：访问数据库

發布時間：2025/3/15 python 27 豆豆

生活随笔收集整理的這篇文章主要介紹了 Python学习笔记：访问数据库小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

前言

最近在學習深度學習，已經跑出了幾個模型，但Pyhton的基礎不夠扎實，因此，開始補習Python了，大家都推薦廖雪峰的課程，因此，開始了學習，但光學有沒有用，還要和大家討論一下，因此，寫下這些帖子，廖雪峰的課程連接在這里：廖雪峰
Python的相關介紹，以及它的歷史故事和運行機制，可以參見這篇：python介紹
Python的安裝可以參見這篇：Python安裝
Python的運行模式以及輸入輸出可以參見這篇：Python IO
Python的基礎概念介紹，可以參見這篇：Python 基礎
Python字符串和編碼的介紹，可以參見這篇：Python字符串與編碼
Python基本數據結構：list和tuple介紹，可以參見這篇：Python list和tuple
Python控制語句介紹：ifelse，可以參見這篇：Python 條件判斷
Python控制語句介紹：循環實現，可以參見這篇：Python循環語句
Python數據結構：dict和set介紹Python數據結構dict和set
Python函數相關：Python函數
Python高階特性：Python高級特性
Python高階函數：Python高階函數
Python匿名函數：Python匿名函數
Python裝飾器：Python裝飾器
Python偏函數：Python偏函數
Python模塊：Python模塊
Python面向對象編程（1）：Python面向對象
Python面向對象編程（2）：Python面向對象（2）
Python面向對象編程（3）：Python面向對象（3）
Python面向對象編程（4）：Pyhton面向對象（4）
Python面向對象高級編程（上）：Python面向對象高級編程（上）
Python面向對象高級編程（中上）：Python面向對象高級編程（中上）
Python面向對象高級編程（中下）：Python面向對象高級編程（中下）
Python面向對象高級編程（完）：Python面向對象高級編程（完）
Python錯誤調試（起）：Python調試：起
Python錯誤調試（承）：Python調試：承
Python錯誤調試（轉）：Python調試：轉
Python錯誤調試（合）：python調試：合
Python文件IO編程：Python文件IO
Python文件IO編程2：Python文件IO2
Python文件IO編程3：PYthon文件IO3
Python進程和線程（起）：Python進程和線程起
Python進程和線程（承）：Python進程和線程承
Python進程和線程（轉）：Python進程和線程轉
Python進程和線程（合）：Python進程和線程合
Python正則表達式：Python正則表達式
Python學習筆記:常用內建模塊1：Python學習筆記：常用內建模塊1
Python學習筆記:常用內建模塊2：Python學習筆記：常用內建模塊2
Python學習筆記:常用內建模塊3：Python學習筆記：常用內建模塊3
Python學習筆記:常用內建模塊4：Python學習筆記: 常用內建模塊4
Python學習筆記:常用內建模塊5：Python學習筆記: 常用內建模塊5
Python學習筆記:常用內建模塊6:Python學習筆記：常用內建模塊6
Python學習筆記:第三方模塊1：Python常用第三方模塊
Python學習筆記:第三方模塊2：Python常用第三方模塊
Python學習筆記:第三方模塊3：Python常用第三方模塊
Pytho學習筆記：網絡編程：Python網絡編程
Python學習筆記：電子郵件：Python電子郵件1
Python學習筆記：SMTP服務器：PythonSMTP服務器
Python學習筆記：POP3服務器：PythonPOP3服務器

訪問數據庫

程序運行的時候，數據都是在內存中的。當程序終止的時候，通常都需要將數據保存到磁盤上，無論是保存到本地磁盤，還是通過網絡保存到服務器上，最終都會將數據寫入磁盤文件。

而如何定義數據的存儲格式就是一個大問題。如果我們自己來定義存儲格式，比如保存一個班級所有學生的成績單：

名字成績

Michael	99
Bob	85
Bart	59
Lisa	87

你可以用一個文本文件保存，一行保存一個學生，用,隔開：

Michael,99 Bob,85 Bart,59 Lisa,87

你還可以用JSON格式保存，也是文本文件：

[{"name":"Michael","score":99},{"name":"Bob","score":85},{"name":"Bart","score":59},{"name":"Lisa","score":87} ]

你還可以定義各種保存格式，但是問題來了：

存儲和讀取需要自己實現，JSON還是標準格式，自己定義的格式就各式各樣了；

不能做快速查詢，只有把數據全部讀到內存中才能自己遍歷，但有時候數據的大小遠遠超過了內存（比如藍光電影，40GB的數據），根本無法全部讀入內存。

為了便于程序保存和讀取數據，而且，能直接通過條件快速查詢到指定的數據，就出現了數據庫（Database）這種專門用于集中存儲和查詢的軟件。

數據庫軟件誕生的歷史非常久遠，早在1950年數據庫就誕生了。經歷了網狀數據庫，層次數據庫，我們現在廣泛使用的關系數據庫是20世紀70年代基于關系模型的基礎上誕生的。
關系模型有一套復雜的數學理論，但是從概念上是十分容易理解的。舉個學校的例子：
假設某個XX省YY市ZZ縣第一實驗小學有3個年級，要表示出這3個年級，可以在Excel中用一個表格畫出來：

grade

每個年級又有若干個班級，要把所有班級表示出來，可以在Excel中再畫一個表格：

class

這兩個表格有個映射關系，就是根據Grade_ID可以在班級表中查找到對應的所有班級：

grade-classes

也就是Grade表的每一行對應Class表的多行，在關系數據庫中，這種基于表（Table）的一對多的關系就是關系數據庫的基礎。

根據某個年級的ID就可以查找所有班級的行，這種查詢語句在關系數據庫中稱為SQL語句，可以寫成：

SELECT * FROM classes WHERE grade_id = ‘1’;

結果也是一個表：

類似的，Class表的一行記錄又可以關聯到Student表的多行記錄：

由于本教程不涉及到關系數據庫的詳細內容，如果你想從零學習關系數據庫和基本的SQL語句，如果你想從零學習關系數據庫和基本的SQL語句，請自行搜索相關課程。

NoSQL

你也許還聽說過NoSQL數據庫，很多NoSQL宣傳其速度和規模遠遠超過關系數據庫，所以很多同學覺得有了NoSQL是否就不需要SQL了呢？千萬不要被他們忽悠了，連SQL都不明白怎么可能搞明白NoSQL呢？

數據庫類別

既然我們要使用關系數據庫，就必須選擇一個關系數據庫。目前廣泛使用的關系數據庫也就這么幾種：

付費的商用數據庫：

Oracle，典型的高富帥；SQL Server，微軟自家產品，Windows定制專款；DB2，IBM的產品，聽起來挺高端；Sybase，曾經跟微軟是好基友，后來關系破裂，現在家境慘淡。

這些數據庫都是不開源而且付費的，最大的好處是花了錢出了問題可以找廠家解決，不過在Web的世界里，常常需要部署成千上萬的數據庫服務器，當然不能把大把大把的銀子扔給廠家，所以，無論是Google、Facebook，還是國內的BAT，無一例外都選擇了免費的開源數據庫：

MySQL，大家都在用，一般錯不了；PostgreSQL，學術氣息有點重，其實挺不錯，但知名度沒有MySQL高；sqlite，嵌入式數據庫，適合桌面和移動應用。

作為Python開發工程師，選擇哪個免費數據庫呢？當然是MySQL。因為MySQL普及率最高，出了錯，可以很容易找到解決方法。而且，圍繞MySQL有一大堆監控和運維的工具，安裝和使用很方便。

為了能繼續后面的學習，你需要從MySQL官方網站下載并安裝MySQL Community Server 5.6，這個版本是免費的，其他高級版本是要收錢的（請放心，收錢的功能我們用不上）。

使用sqlite

SQLite是一種嵌入式數據庫，它的數據庫就是一個文件。由于SQLite本身是C寫的，而且體積很小，所以，經常被集成到各種應用程序中，甚至在iOS和Android的App中都可以集成。
Python就內置了SQLite3，所以，在Python中使用SQLite，不需要安裝任何東西，直接使用。
在使用SQLite前，我們先要搞清楚幾個概念：
表是數據庫中存放關系數據的集合，一個數據庫里面通常都包含多個表，比如學生的表，班級的表，學校的表，等等。表和表之間通過外鍵關聯。
要操作關系數據庫，首先需要連接到數據庫，一個數據庫連接稱為Connection；
連接到數據庫后，需要打開游標，稱之為Cursor，通過Cursor執行SQL語句，然后，獲得執行結果。
Python定義了一套操作數據庫的API接口，任何數據庫要連接到Python，只需要提供符合Python標準的數據庫驅動即可。
由于SQLite的驅動內置在Python標準庫中，所以我們可以直接來操作SQLite數據庫。
我們在Python交互式命令行實踐一下：

# 導入SQLite驅動: >>> import sqlite3 # 連接到SQLite數據庫 # 數據庫文件是test.db # 如果文件不存在，會自動在當前目錄創建: >>> conn = sqlite3.connect('test.db') # 創建一個Cursor: >>> cursor = conn.cursor() # 執行一條SQL語句，創建user表: >>> cursor.execute('create table user (id varchar(20) primary key, name varchar(20))') <sqlite3.Cursor object at 0x10f8aa260> # 繼續執行一條SQL語句，插入一條記錄: >>> cursor.execute('insert into user (id, name) values (\'1\', \'Michael\')') <sqlite3.Cursor object at 0x10f8aa260> # 通過rowcount獲得插入的行數: >>> cursor.rowcount 1 # 關閉Cursor: >>> cursor.close() # 提交事務: >>> conn.commit() # 關閉Connection: >>> conn.close()

我們再試試查詢記錄：

>>> conn = sqlite3.connect('test.db') >>> cursor = conn.cursor() # 執行查詢語句: >>> cursor.execute('select * from user where id=?', ('1',)) <sqlite3.Cursor object at 0x10f8aa340> # 獲得查詢結果集: >>> values = cursor.fetchall() >>> values [('1', 'Michael')] >>> cursor.close() >>> conn.close()

使用Python的DB-API時，只要搞清楚Connection和Cursor對象，打開后一定記得關閉，就可以放心地使用。
使用Cursor對象執行insert，update，delete語句時，執行結果由rowcount返回影響的行數，就可以拿到執行結果。
使用Cursor對象執行select語句時，通過featchall()可以拿到結果集。結果集是一個list，每個元素都是一個tuple，對應一行記錄。

如果SQL語句帶有參數，那么需要把參數按照位置傳遞給execute()方法，有幾個?占位符就必須對應幾個參數，例如：

cursor.execute('select * from user where name=? and pwd=?', ('abc', 'password'))

SQLite支持常見的標準SQL語句以及幾種常見的數據類型。具體文檔請參閱SQLite官方網站。

小結

在Python中操作數據庫時，要先導入數據庫對應的驅動，然后，通過Connection對象和Cursor對象操作數據。

要確保打開的Connection對象和Cursor對象都正確地被關閉，否則，資源就會泄露。

如何才能確保出錯的情況下也關閉掉Connection對象和Cursor對象呢？請回憶try:…except:…finally:…的用法。

練習

請編寫函數，在Sqlite中根據分數段查找指定的名字：

# -*- coding: utf-8 -*-import os, sqlite3db_file = os.path.join(os.path.dirname(__file__), 'test.db') if os.path.isfile(db_file):os.remove(db_file)# 初始數據: conn = sqlite3.connect(db_file) cursor = conn.cursor() cursor.execute('create table user(id varchar(20) primary key, name varchar(20), score int)') cursor.execute(r"insert into user values ('A-001', 'Adam', 95)") cursor.execute(r"insert into user values ('A-002', 'Bart', 62)") cursor.execute(r"insert into user values ('A-003', 'Lisa', 78)") cursor.close() conn.commit() conn.close()def get_score_in(low, high):' 返回指定分數區間的名字，按分數從低到高排序 ' ----def get_score_in(low, high):try: value = [] conn = sqlite3.connect(db_file)cursor = conn.cursor()cursor.execute("select name from user where score>=? and score<=? order by score ASC", (low,high)) values = cursor.fetchall() for val in values: value.append(val[0])return valuefinally: conn.close() ---- # 測試: assert get_score_in(80, 95) == ['Adam'], get_score_in(80, 95) assert get_score_in(60, 80) == ['Bart', 'Lisa'], get_score_in(60, 80) assert get_score_in(60, 100) == ['Bart', 'Lisa', 'Adam'], get_score_in(60, 100)print('Pass')

總結

以上是生活随笔為你收集整理的Python学习笔记：访问数据库的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。

上一篇： oracle取消备份存放本地,Oracl
下一篇： Python学习笔记：数据库2