MySQL 不用存儲(chǔ)過程循環(huán)插入數(shù)據(jù)的方法
在 MySQL 中,有時(shí)候我們需要向數(shù)據(jù)庫中插入大量數(shù)據(jù),而且這些數(shù)據(jù)可能需要進(jìn)行一些處理或者計(jì)算。一種常見的做法是使用存儲(chǔ)過程,在其中使用循環(huán)來逐條插入數(shù)據(jù)。然而,存儲(chǔ)過程的執(zhí)行效率可能不高,并且對于大批量數(shù)據(jù)的插入,這種方式可能會(huì)導(dǎo)致性能問題。 在本文中,我們將介紹一種不使用存儲(chǔ)過程循環(huán)插入數(shù)據(jù)的方法,而是通過 SQL 語句一次性插入大量數(shù)據(jù),以提高插入效率。
使用 INSERT INTO VALUES 插入多行數(shù)據(jù)
MySQL 提供了 INSERT INTO VALUES 語句,可以一次性插入多行數(shù)據(jù),這種方式比循環(huán)插入數(shù)據(jù)效率更高。 假設(shè)我們有一個(gè)名為 students 的表,包含 id 和 name 兩個(gè)字段,我們想要向這個(gè)表中插入多條數(shù)據(jù),可以使用以下 SQL 語句:
INSERT INTO students (id, name) VALUES (1, 'Alice'), (2, 'Bob'), (3, 'Charlie'), ... (n, 'Zoe');
其中,n 表示要插入的數(shù)據(jù)條數(shù),每一條數(shù)據(jù)用括號(hào)括起來,用逗號(hào)分隔,分別對應(yīng)表中的各個(gè)字段的值。
使用生成器生成插入數(shù)據(jù)的語句
如果需要插入的數(shù)據(jù)量很大,手動(dòng)編寫這樣的 SQL 語句會(huì)非常繁瑣。為了簡化操作,我們可以使用生成器來生成插入數(shù)據(jù)的 SQL 語句。 例如,我們可以使用 Python 中的列表推導(dǎo)式來生成插入數(shù)據(jù)的語句:
values = [(i, f'Student{i}') for i in range(1, 1001)]
sql = "INSERT INTO students (id, name) VALUES " + ", ".join(["(%s, '%s')" % (v[0], v[1]) for v in values])
print(sql)這段代碼將生成一個(gè)包含 1000 條插入數(shù)據(jù)的 SQL 語句,然后我們可以直接將這個(gè) SQL 語句在 MySQL 中執(zhí)行,實(shí)現(xiàn)高效地插入大量數(shù)據(jù)。
當(dāng)實(shí)際應(yīng)用場景中需要向MySQL中插入大量數(shù)據(jù)時(shí),可以使用以下示例代碼:
import pymysql
# 連接MySQL數(shù)據(jù)庫
connection = pymysql.connect(
host='localhost',
user='root',
password='password',
database='test'
)
# 創(chuàng)建游標(biāo)對象
cursor = connection.cursor()
# 準(zhǔn)備要插入的數(shù)據(jù)
data = [
(1, 'Alice'),
(2, 'Bob'),
(3, 'Charlie'),
...
(n, 'Zoe')
]
# 生成插入數(shù)據(jù)的SQL語句
sql = "INSERT INTO students (id, name) VALUES (%s, %s)"
try:
# 執(zhí)行插入操作
cursor.executemany(sql, data)
# 提交事務(wù)
connection.commit()
print("數(shù)據(jù)插入成功!")
except Exception as e:
# 發(fā)生錯(cuò)誤時(shí)回滾
connection.rollback()
print("數(shù)據(jù)插入失??!Error:", e)
# 關(guān)閉連接
cursor.close()
connection.close()上述代碼中,通過pymysql庫連接到MySQL數(shù)據(jù)庫,并創(chuàng)建了游標(biāo)對象。然后,準(zhǔn)備要插入的數(shù)據(jù)列表,其中每個(gè)元組表示一條數(shù)據(jù)。接下來,生成插入數(shù)據(jù)的SQL語句,使用executemany()方法將數(shù)據(jù)批量插入數(shù)據(jù)庫中。最后,通過commit()提交事務(wù),或者在插入失敗時(shí)使用rollback()進(jìn)行回滾操作。最后,關(guān)閉游標(biāo)和數(shù)據(jù)庫連接。 在實(shí)際應(yīng)用中,你可以根據(jù)自己的需求修改代碼,設(shè)置合適的數(shù)據(jù)庫連接信息和表字段信息,以及生成數(shù)據(jù)的方式。
pymysql 是一個(gè)純 Python 實(shí)現(xiàn)的用于連接和操作 MySQL 數(shù)據(jù)庫的庫。它提供了一種簡單而有效的方式來與 MySQL 數(shù)據(jù)庫進(jìn)行交互,并執(zhí)行各種數(shù)據(jù)庫操作,如連接、查詢、插入、更新和刪除等。 以下是 pymysql 庫的一些主要特點(diǎn):
- 純 Python 實(shí)現(xiàn):pymysql 是一個(gè)純 Python 庫,無需額外的編譯和安裝即可在 Python 環(huán)境中使用。這使得它易于安裝和部署。
- 支持 Python 數(shù)據(jù)類型:pymysql 支持將 Python 數(shù)據(jù)類型直接映射到 MySQL 數(shù)據(jù)庫中的相應(yīng)數(shù)據(jù)類型。例如,你可以使用 Python 的字符串、數(shù)字、日期等直接插入數(shù)據(jù)庫,而不需要手動(dòng)轉(zhuǎn)換數(shù)據(jù)類型。
- 支持事務(wù)處理:pymysql 提供了對事務(wù)的支持,可以使用 connection 對象的 commit() 方法提交事務(wù),并使用 rollback() 方法在出現(xiàn)錯(cuò)誤時(shí)進(jìn)行回滾操作,以保證數(shù)據(jù)的一致性和完整性。
- 兼容性與擴(kuò)展性:pymysql 兼容 MySQL 數(shù)據(jù)庫的多個(gè)版本,并支持高級(jí)功能,如復(fù)雜查詢、存儲(chǔ)過程、觸發(fā)器等。此外,pymysql 可以通過插件開發(fā)來擴(kuò)展其功能,以滿足不同的需求。
- 安全可靠:pymysql 庫采用參數(shù)化查詢的方式來執(zhí)行 SQL 語句,從而有效地防止 SQL 注入攻擊。它還提供了連接池功能,可以在多線程環(huán)境下安全地管理數(shù)據(jù)庫連接。 下面是一個(gè)簡單示例,展示了如何使用 pymysql 連接到 MySQL 數(shù)據(jù)庫,并查詢數(shù)據(jù):
import pymysql
# 連接數(shù)據(jù)庫
connection = pymysql.connect(
host='localhost',
user='username',
password='password',
database='databasename'
)
# 創(chuàng)建游標(biāo)對象
cursor = connection.cursor()
# 執(zhí)行查詢
sql = "SELECT * FROM students"
cursor.execute(sql)
# 獲取查詢結(jié)果
results = cursor.fetchall()
for row in results:
id = row[0]
name = row[1]
print(f"ID: {id}, Name: {name}")
# 關(guān)閉游標(biāo)和數(shù)據(jù)庫連接
cursor.close()
connection.close()在這個(gè)示例中,我們使用 pymysql 連接到 MySQL 數(shù)據(jù)庫,然后創(chuàng)建了一個(gè)游標(biāo)對象 cursor。接下來,執(zhí)行了一個(gè)查詢語句,獲取了所有的學(xué)生數(shù)據(jù),并遍歷打印出每一條數(shù)據(jù)的 ID 和 Name。最后,關(guān)閉了游標(biāo)和數(shù)據(jù)庫連接。 總的來說,pymysql 提供了方便易用的 API 來連接和操作 MySQL 數(shù)據(jù)庫,可以幫助你在 Python 中輕松進(jìn)行數(shù)據(jù)庫操作。無論是簡單的查詢還是復(fù)雜的事務(wù)處理,pymysql 都能夠滿足你的需求,并提供安全可靠的數(shù)據(jù)庫訪問方式。
總結(jié)
通過使用一次性插入多行數(shù)據(jù)的 SQL 語句,我們可以避免使用存儲(chǔ)過程循環(huán)插入數(shù)據(jù),從而提高插入效率。當(dāng)需要向 MySQL 中插入大批量數(shù)據(jù)時(shí),這種方法可以有效地減少插入操作的時(shí)間,并且更加簡潔高效。
到此這篇關(guān)于MySQL 不用存儲(chǔ)過程循環(huán)插入數(shù)據(jù)的方法的文章就介紹到這了,更多相關(guān)MySQL 循環(huán)插入數(shù)據(jù)內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Mysql 5.5.56版本(二進(jìn)制包安裝)自定義安裝路徑步驟記錄
這篇文章主要介紹了Mysql 5.5.56版本(二進(jìn)制包安裝)自定義安裝路徑步驟記錄,需要的朋友可以參考下2017-07-07
MySQL中int?(10)?和?int?(11)?的區(qū)別
這篇文章主要介紹了MySQL中int?(10)?和?int?(11)?的區(qū)別,根據(jù)mysql?中整數(shù)數(shù)據(jù)類型、不同類型的取值范圍、不同數(shù)據(jù)類型的默認(rèn)顯示寬度展開對int的介紹,需要的朋友可以參考一下2022-01-01
MySQL數(shù)據(jù)庫中的安全設(shè)置方案
MySQL 是一個(gè)真正的多用戶、多線程SQL數(shù)據(jù)庫服務(wù)器,它是一個(gè)客戶機(jī)/服務(wù)器結(jié)構(gòu)的實(shí)現(xiàn)。MySQL是現(xiàn)在流行的關(guān)系數(shù)據(jù)庫中其中的一種,相比其它的數(shù)據(jù)庫管理系統(tǒng)(DBMS)來說,MySQL具有小巧、功能齊全、查詢迅捷等優(yōu)點(diǎn)。MySQL 主要目標(biāo)是快速、健壯和易用。2015-04-04
MySQL設(shè)置數(shù)據(jù)格為空白或NULL問題及解決
文章主要討論了在處理數(shù)據(jù)庫需求時(shí)將某些字段設(shè)置為空白的問題,初嘗試直接傳遞空字符串,PHPMyAdmin提示需要三個(gè)值,實(shí)際是因第三列數(shù)據(jù)不足導(dǎo)致.后文提出可通過設(shè)置字段默認(rèn)值為NULL或直接寫入空字符串來解決;并指出NULL與空字符串的區(qū)別2026-04-04
與MSSQL對比學(xué)習(xí)MYSQL的心得(八)--插入 更新 刪除
這一篇《與MSSQL對比學(xué)習(xí)MYSQL的心得(八)》將會(huì)講解MYSQL的插入、更新和刪除語句2014-08-08
MySQL中insertOrUpdate的功能實(shí)現(xiàn)方式
文章介紹了MySQL中實(shí)現(xiàn)`insertOrUpdate`功能的`INSERT INTO...ON DUPLICATE KEY UPDATE`語句,并探討了其工作原理、執(zhí)行流程以及潛在的死鎖問題,同時(shí),還提到了類似SQL語句如`REPLACE INTO`和`INSERT IGNORE INTO`的區(qū)別,并討論了主鍵跳躍的現(xiàn)象2025-12-12

