JavaScript 高性能數(shù)組去重的方法
中午和同事吃飯,席間討論到數(shù)組去重這一問題
我立刻就分享了我常用的一個去重方法,隨即被老大指出這個方法效率不高
回家后我自己測試了一下,發(fā)現(xiàn)那個方法確實(shí)很慢
于是就有了這一次的高性能數(shù)組去重研究
一、測試模版
數(shù)組去重是一個老生常談的問題,網(wǎng)上流傳著有各種各樣的解法
為了測試這些解法的性能,我寫了一個測試模版,用來計算數(shù)組去重的耗時
// distinct.js
let arr1 = Array.from(new Array(100000), (x, index)=>{
return index
})
let arr2 = Array.from(new Array(50000), (x, index)=>{
return index+index
})
let start = new Date().getTime()
console.log('開始數(shù)組去重')
function distinct(a, b) {
// 數(shù)組去重
}
console.log('去重后的長度', distinct(arr1, arr2).length)
let end = new Date().getTime()
console.log('耗時', end - start)
這里分別創(chuàng)建了兩個長度為 10W 和 5W 的數(shù)組
然后通過 distinct() 方法合并兩個數(shù)組,并去掉其中的重復(fù)項(xiàng)
數(shù)據(jù)量不大也不小,但已經(jīng)能說明一些問題了
二、Array.filter() + indexOf
這個方法的思路是,將兩個數(shù)組拼接為一個數(shù)組,然后使用 ES6 中的 Array.filter() 遍歷數(shù)組,并結(jié)合 indexOf 來排除重復(fù)項(xiàng)
function distinct(a, b) {
let arr = a.concat(b);
return arr.filter((item, index)=> {
return arr.indexOf(item) === index
})
}
這就是我被吐槽的那個數(shù)組去重方法,看起來非常簡潔,但實(shí)際性能。。。

是的,現(xiàn)實(shí)就是這么殘酷,處理一個長度為 15W 的數(shù)組都需要 8427ms
三、雙重 for 循環(huán)
最容易理解的方法,外層循環(huán)遍歷元素,內(nèi)層循環(huán)檢查是否重復(fù)
當(dāng)有重復(fù)值的時候,可以使用 push(),也可以使用 splice()
function distinct(a, b) {
let arr = a.concat(b);
for (let i=0, len=arr.length; i<len; i++) {
for (let j=i+1; j<len; j++) {
if (arr[i] == arr[j]) {
arr.splice(j, 1);
// splice 會改變數(shù)組長度,所以要將數(shù)組長度 len 和下標(biāo) j 減一
len--;
j--;
}
}
}
return arr
}
但這種方法占用的內(nèi)存較高,效率也是最低的

四、for...of + includes()
雙重for循環(huán)的升級版,外層用 for...of 語句替換 for 循環(huán),把內(nèi)層循環(huán)改為 includes()
先創(chuàng)建一個空數(shù)組,當(dāng) includes() 返回 false 的時候,就將該元素 push 到空數(shù)組中
類似的,還可以用 indexOf() 來替代 includes()
function distinct(a, b) {
let arr = a.concat(b)
let result = []
for (let i of arr) {
!result.includes(i) && result.push(i)
}
return result
}
這種方法和 filter + indexOf 挺類似
只是把 filter() 的內(nèi)部邏輯用 for 循環(huán)實(shí)現(xiàn)出來,再把 indexOf 換為 includes
所以時長上也比較接近

五、Array.sort()
首先使用 sort() 將數(shù)組進(jìn)行排序
然后比較相鄰元素是否相等,從而排除重復(fù)項(xiàng)
function distinct(a, b) {
let arr = a.concat(b)
arr = arr.sort()
let result = [arr[0]]
for (let i=1, len=arr.length; i<len; i++) {
arr[i] !== arr[i-1] && result.push(arr[i])
}
return result
}
這種方法只做了一次排序和一次循環(huán),所以效率會比上面的方法都要高

六、new Set()
ES6 新增了 Set 這一數(shù)據(jù)結(jié)構(gòu),類似于數(shù)組,但 Set 的成員具有唯一性
基于這一特性,就非常適合用來做數(shù)組去重了
function distinct(a, b) {
return Array.from(new Set([...a, ...b]))
}
那使用 Set 又需要多久時間來處理 15W 的數(shù)據(jù)呢?

喵喵喵??? 57ms ??我沒眼花吧??
然后我在兩個數(shù)組長度后面分別加了一個0,在 150W 的數(shù)據(jù)量之下...

居然有如此高性能且簡潔的數(shù)組去重辦法?!
七、for...of + Object
這個方法我只在一些文章里見過,實(shí)際工作中倒沒怎么用
首先創(chuàng)建一個空對象,然后用 for 循環(huán)遍歷
利用對象的屬性不會重復(fù)這一特性,校驗(yàn)數(shù)組元素是否重復(fù)
function distinct(a, b) {
let arr = a.concat(b)
let result = []
let obj = {}
for (let i of arr) {
if (!obj[i]) {
result.push(i)
obj[i] = 1
}
}
return result
}
當(dāng)我看到這個方法的處理時長,我又傻眼了

15W 的數(shù)據(jù)居然只要 16ms ??? 比 Set() 還快???
然后我又試了試 150W 的數(shù)據(jù)量...

總結(jié)
以上所述是小編給大家介紹的JavaScript 高性能數(shù)組去重的方法,希望對大家有所幫助,如果大家有任何疑問請給我留言,小編會及時回復(fù)大家的。在此也非常感謝大家對腳本之家網(wǎng)站的支持!
- js數(shù)組去重的常用方法總結(jié)
- JS實(shí)現(xiàn)數(shù)組去重方法總結(jié)(六種方法)
- js數(shù)組去重的5種算法實(shí)現(xiàn)
- js取兩個數(shù)組的交集|差集|并集|補(bǔ)集|去重示例代碼
- 史上最全JavaScript數(shù)組去重的十種方法(推薦)
- JavaScript數(shù)組去重的兩種方法推薦
- js實(shí)現(xiàn)數(shù)組去重、判斷數(shù)組以及對象中的內(nèi)容是否相同
- js算法中的排序、數(shù)組去重詳細(xì)概述
- JavaScript數(shù)組去重的五種方法
- JS實(shí)現(xiàn)數(shù)組簡單去重及數(shù)組根據(jù)對象中的元素去重操作示例
- javascript數(shù)組去重3種方法的性能測試與比較
- 高性能js數(shù)組去重(12種方法,史上最全)
相關(guān)文章
js報錯 Object doesn''t support this property or method的原因分析
運(yùn)行js是出現(xiàn)Object doesn't support this property or method 錯誤的可能原因分析。2011-03-03
用原生JS實(shí)現(xiàn)愛奇藝首頁導(dǎo)航欄代碼實(shí)例
這篇文章主要介紹了用原生JS實(shí)現(xiàn)愛奇藝首頁導(dǎo)航欄代碼實(shí)例,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友可以參考下2019-09-09
實(shí)現(xiàn)抖音兩個旋轉(zhuǎn)小球的loading技巧實(shí)例
這篇文章主要為大家介紹了實(shí)現(xiàn)抖音兩個旋轉(zhuǎn)小球的loading技巧實(shí)例詳解,有需要的朋友可以借鑒參考下,希望能夠有所幫助,祝大家多多進(jìn)步,早日升職加薪2023-05-05

