Java批量插入數(shù)據(jù)的代碼實(shí)現(xiàn)
前言
日常工作或者學(xué)習(xí)中，可能會(huì)遇到批量插入數(shù)據(jù)的需求，一般情況下數(shù)據(jù)量少的時(shí)候，我們會(huì)直接調(diào)用批量接口插入數(shù)據(jù)即可，當(dāng)數(shù)據(jù)量特別大時(shí)，可能由于數(shù)據(jù)庫限制，插入的數(shù)據(jù)最多不能超過100條(假如限制100條)，就算是數(shù)據(jù)庫支持一次性插入千條也會(huì)耗內(nèi)存，如果使用一條一條的插入數(shù)據(jù)庫中的話，會(huì)特別耗時(shí)間，大概是正常批量插入數(shù)據(jù)所耗時(shí)間的三倍，所以我們就會(huì)用到分批插入數(shù)據(jù)。
思路
- 我們將數(shù)據(jù)查出，放到list里面，然后將數(shù)據(jù)循環(huán)，每次循環(huán)到100條，就調(diào)用批量插入接口。
代碼實(shí)現(xiàn)：
@Override
public void selectData(String statisDate, String eventCode) {
List<FilterLogEntity> filterLogEntity = filterlogMapper.selectData(statisDate, eventCode);
//存儲(chǔ)插入數(shù)據(jù)（100條數(shù)據(jù)）
List<DataLog> dataLogList = new ArrayList<>();
int nums = 100;
for (int i = 0; i < filterLogEntity.size(); i++) {
dataLogList.add(filterLogEntity.get(i));
if (i > 0 && i % nums == 0 || i == filterLogEntity.size() - 1) {
filterOraMapper.insertData(dataLogList);
//每次插入完數(shù)據(jù)，將上次存儲(chǔ)的100條數(shù)據(jù)清空
dataLogList.clear();
}
}
}
xml中sql，此處是給oracle數(shù)據(jù)庫中插入數(shù)據(jù)
<insert id="insertData">
insert into 表名
(
a,
b,
c
)
<foreach collection="dataLogList" item="item" separator="UNION ALL">
select
#{item.a},
#{item.b},
#{item.c}
from dual
</foreach>
</insert>
給其他數(shù)據(jù)庫插入數(shù)據(jù)：
<insert id="insertList" parameterType="java.util.List">
insert into 表名 (a,b,c)
VALUES
<foreach collection="dataLogList" index="index" item="item" separator="," >
(
#{item.a},
#{item.b},
#{item.c}
)
</foreach>
</insert>
后續(xù)新增：
給oracle數(shù)據(jù)庫插入數(shù)據(jù)，也可以用這種方法
begin
<foreach collection="list" item="item" index="index">
insert into masakr.TB_HUMAN_SOCIAL_SECURITY@LINK33
(date_time, province, city, pr_name, pr_lingering_num, city_name, city_lingering_num,
gender_name,gender_num)
values(
#{item.dateTime},
#{item.province},
#{item.city},
#{item.prName},
#{item.prLingeringNum},
#{item.cityName},
#{item.cityLingeringNum},
#{item.genderName},
#{item.genderNum}
);
</foreach>
end;
以上就是Java批量插入數(shù)據(jù)的代碼實(shí)現(xiàn)的詳細(xì)內(nèi)容，更多關(guān)于Java批量插入數(shù)據(jù)的資料請(qǐng)關(guān)注腳本之家其它相關(guān)文章！
相關(guān)文章
Spring自動(dòng)裝配之方法、構(gòu)造器位置的自動(dòng)注入操作
這篇文章主要介紹了Spring自動(dòng)裝配之方法、構(gòu)造器位置的自動(dòng)注入操作，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教2021-08-08
java 日期各種格式之間的相互轉(zhuǎn)換實(shí)例代碼
這篇文章主要介紹了java 日期各種格式之間的相互轉(zhuǎn)換實(shí)例代碼的相關(guān)資料,需要的朋友可以參考下2017-02-02
這篇文章主要介紹了Java反射機(jī)制的相關(guān)內(nèi)容，涉及了class類的動(dòng)態(tài)加載，獲取成員變量、構(gòu)造函數(shù)信息等信息，需要的朋友可以參考下，希望對(duì)你有所幫助2021-07-07
spring aop底層源碼執(zhí)行邏輯剖析(源碼解析)
這篇文章主要介紹了spring aop底層源碼執(zhí)行邏輯剖析,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友參考下吧2024-08-08
java中在多線程的情況下安全的修改list(常見解決方案)
本文給大家介紹java中在多線程的情況下安全的修改list的常見解決方案及實(shí)現(xiàn)方式,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友參考下吧2025-09-09
HashMap原理及手寫實(shí)現(xiàn)部分區(qū)塊鏈特征
這篇文章主要為大家介紹了HashMap原理及手寫實(shí)現(xiàn)部分區(qū)塊鏈特征，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪2022-09-09
SpringBoot自定義HttpMessageConverter操作
