Django bulk_create()、update()與數(shù)據(jù)庫(kù)事務(wù)的效率對(duì)比分析
下面以創(chuàng)建10000個(gè)對(duì)象為例進(jìn)行測(cè)試：
# 用for循環(huán)挨個(gè)創(chuàng)建，共花費(fèi)37秒
for i in range(10000):
name="String number %s"%i
Record.objects.create(name=name)
# 用django事務(wù)只提交一次，共花費(fèi)2.65秒
@transaction.commit_manually
def manual_transaction():
for i in range(10000):
name="String number %s"%i
Record.objects.create(name=name)
transaction.commit()
# 用bulk_create創(chuàng)建,共花費(fèi)0.47秒
def builtin():
insert_list =[]
for i in range(10000):
name="String number %s"%i
insert_list.append(Record(name=name))
Record.objects.bulk_create(insert_list)
# 用for循環(huán)挨個(gè)更新，共花費(fèi)72秒:
def auto_transaction():
for record inRecord.objects.all():
record.name ="String without number"
record.save()
# 用django事務(wù)只提交一次，共花費(fèi)17秒
@transaction.commit_manually
def manual_transaction():
for record inRecord.objects.all():
record.name ="String without number"
record.save()
transaction.commit()
# 用update更新,共花費(fèi)0.33秒
def builtin():
Record.objects.all().update(name="String without number")
補(bǔ)充知識(shí)：django的model使用上容易遇到的坑，default=datetime.now和auto_now、null和blank、save和update、bulk_create
一、django設(shè)置字段動(dòng)態(tài)默認(rèn)時(shí)間的四種方式：
from django.db import models
from datetime import datetime
class User(models.Model):
id = models.BigAutoField('主鍵', primary_key=True)
name = models.CharField('名字', max_length=20, db_index=True, default='')
create_time_one = models.DateTimeField('創(chuàng)建時(shí)間', default=datetime.now())
update_time_one = models.DateTimeField('更新時(shí)間', default=datetime.now)
create_time_tow = models.DateTimeField('創(chuàng)建時(shí)間', auto_now_add=True)
update_time_tow = models.DateTimeField('更新時(shí)間', auto_now=True)
1. default=datetime.now()
model每次初始化，都會(huì)自動(dòng)設(shè)置該字段的默認(rèn)值為初始化時(shí)間。
2. default=datetime.now
model每次進(jìn)行新增或修改操作，都會(huì)自動(dòng)設(shè)置該字段的值為操作時(shí)間。設(shè)置后仍可以使用ORM手動(dòng)修改該字段。
3. auto_now_add=True
默認(rèn)值為False，若設(shè)置為T(mén)rue，model每次進(jìn)行新增操作，都會(huì)自動(dòng)設(shè)置該字段的值為操作時(shí)間。設(shè)置為T(mén)rue后無(wú)法使用ORM手動(dòng)修改該字段，哪怕填充了字段的值也會(huì)被覆蓋。
4. auto_now=True
默認(rèn)值為False，若設(shè)置為T(mén)rue，model每次進(jìn)行新增或修改操作，都會(huì)自動(dòng)設(shè)置該字段的值為操作時(shí)間。設(shè)置為T(mén)rue后無(wú)法使用ORM手動(dòng)修改該字段，哪怕填充了字段的值也會(huì)被覆蓋。
5. 要注意的點(diǎn)
除非想設(shè)置動(dòng)態(tài)默認(rèn)時(shí)間為項(xiàng)目的啟動(dòng)時(shí)間，否則default=datetime.now()這種用法是錯(cuò)誤的，會(huì)得到期望之外的結(jié)果。
使用User.objects.update方法時(shí)，設(shè)置的default=datetime.now和auto_now=True都不會(huì)生效，由于設(shè)置了auto_now=True的字段不能手動(dòng)修改，此時(shí)只能使用save方法修改數(shù)據(jù)，這對(duì)于多個(gè)數(shù)據(jù)的更新是不友好的。
因此如果設(shè)置動(dòng)態(tài)默認(rèn)時(shí)間的字段，應(yīng)該使用default=datetime.now和auto_now_add=True來(lái)實(shí)現(xiàn)。
二、null=True和blank=True的區(qū)別
1. null針對(duì)數(shù)據(jù)庫(kù)，如果null=True，表示數(shù)據(jù)庫(kù)的該字段可以為空。
2. blank針對(duì)表單的，如果blank=True，表示表單填寫(xiě)該字段時(shí)可以不填。
mysql中空值不占用空間，NULL占用空間，而且使用NULL會(huì)使索引的效率下降。因此從性能上來(lái)說(shuō)，不建議使用null=True，最好使用default=''。
三、save和build_create的區(qū)別
1. 使用save方法：
names = ['張三', '李四'] for name in names: user = User(name=name) user.save() print(user.id) # 此時(shí)user對(duì)象有id的值
2. 使用bulk_create方法：
names = ['張三', '李四'] users = [User(name=name) for name in names] users = User.objects.bulk_create(users) print([user.id for user in users]) # 此時(shí)user對(duì)象沒(méi)有id的值
bulk_create的優(yōu)點(diǎn)：
批量操作時(shí)只與數(shù)據(jù)庫(kù)進(jìn)行一次交互，效率高。
bulk_create的缺點(diǎn)：
對(duì)于設(shè)置了自增的字段，返回值中不會(huì)有該字段的值，如上例2中的user對(duì)象。
對(duì)于設(shè)置了動(dòng)態(tài)默認(rèn)時(shí)間的字段，如設(shè)置了auto_now=True，同一批處理的記錄中該字段的時(shí)間將會(huì)相同。
四、上面的知識(shí)點(diǎn)使用的例子
1. 定義模型
from django.db import models
from datetime import datetime
class User(models.Model):
id = models.BigAutoField('主鍵', primary_key=True)
name = models.CharField('名字', max_length=20, db_index=True, blank=False, default='')
create_time = models.DateTimeField('創(chuàng)建時(shí)間', auto_now_add=True)
update_time = models.DateTimeField('更新時(shí)間', default=datetime.now)
2. 插入數(shù)據(jù)
# 方法一 names = ['張三', '李四'] users = [User(name=name) for name in names] users = User.objects.bulk_create(users) # 方法二 names = ['張三', '李四'] users = [User(name=name) for name in names] [user.save() for user in users]
3. 修改數(shù)據(jù)
# 方法一 names = ['張三', '李四'] User.objects.filter(name__in=names).update(name='changed', update_time=datetime.now()) # 這里必須顯式對(duì)update_time賦值 # 方法二 names = ['張三', '李四'] users = User.objects.filter(name__in=names) for use in users: user.name = 'changed' user.save() # 這里會(huì)自動(dòng)更新update_time，但是多次save效率低
以上這篇Django bulk_create()、update()與數(shù)據(jù)庫(kù)事務(wù)的效率對(duì)比分析就是小編分享給大家的全部?jī)?nèi)容了，希望能給大家一個(gè)參考，也希望大家多多支持腳本之家。
相關(guān)文章
python密碼學(xué)周期置換密碼學(xué)習(xí)
這篇文章主要為大家介紹了python密碼學(xué)周期置換密碼的學(xué)習(xí)，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪2022-05-05
Python日期時(shí)間Time模塊實(shí)例詳解
這篇文章主要介紹了Python日期時(shí)間Time模塊,結(jié)合實(shí)例形式詳細(xì)分析了Python日期時(shí)間Time模塊常用函數(shù)及相關(guān)操作技巧,需要的朋友可以參考下2019-04-04
Python實(shí)現(xiàn)數(shù)據(jù)清洗的18種方法
本文主要介紹了Python實(shí)現(xiàn)數(shù)據(jù)清洗的18種方法,文中通過(guò)示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧2025-01-01
利用python3隨機(jī)生成中文字符的實(shí)現(xiàn)方法
最近在學(xué)習(xí)python3，發(fā)現(xiàn)網(wǎng)上關(guān)于ptyhon3隨機(jī)生成中文的資料非常少，所以決定將自己實(shí)現(xiàn)的方法分享下，下面這篇文章主要給大家介紹了關(guān)于利用python3隨機(jī)生成中文字符的實(shí)現(xiàn)方法，需要的朋友可以參考借鑒，下面來(lái)一起看看吧。2017-11-11
本文先簡(jiǎn)單介紹了Python中的類(lèi)，然后是主要內(nèi)容，涉及Metaclass的相關(guān)內(nèi)容，還是不錯(cuò)的，這里分享給大家，供需要的朋友參考。2017-10-10
分解oracle存儲(chǔ)過(guò)程或函數(shù)調(diào)試過(guò)程步驟
這篇文章主要介紹了調(diào)試oracle存儲(chǔ)過(guò)程或函數(shù)過(guò)程步驟，文中附含詳細(xì)的圖文操作步驟，有需要的朋友可以借鑒參考下，希望能夠有所幫助2021-09-09
今天小編就為大家分享一篇python 列表、字典和集合的添加和刪除操作，有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-12-12
這篇文章主要介紹了python批量更改目錄名/文件名的方法,本文給大家介紹的非常詳細(xì)，對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值，需要的朋友可以參考下2021-04-04
命令行傳遞參數(shù)argparse.ArgumentParser的使用解析
這篇文章主要介紹了命令行傳遞參數(shù)argparse.ArgumentParser的使用解析，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2023-02-02
在本篇文章里小編給大家整理的是關(guān)于python做接口測(cè)試的必要性以及相關(guān)知識(shí)點(diǎn)，有興趣的朋友們學(xué)習(xí)下。2019-11-11