快捷導(dǎo)航

Nodejs處理Json文件并將處理后的數(shù)據(jù)寫(xiě)入新文件中

更新時(shí)間：2022年10月21日 15:05:24 作者：@胡海龍

這篇文章主要介紹了Nodejs處理Json文件并將處理后的數(shù)據(jù)寫(xiě)入新文件中，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。如有錯(cuò)誤或未考慮完全的地方，望不吝賜教

處理Json文件并將處理后的數(shù)據(jù)寫(xiě)入新文件

問(wèn)題描述

事情是這樣的，朋友讓我處理一個(gè)json文件并將處理后的數(shù)據(jù)寫(xiě)入新文件。這個(gè)json文件的結(jié)構(gòu)如下：

[
?? ?{
? ? ? ? "head_img": "http://wx.qlogo.cn/mmhead/xxxxxxxxxxx",
? ? ? ? "nick_name": "xxxxxxx",
? ? ? ? "user_name": "",
? ? ? ? "wxid": "wxid_xxxxxxxxxxxx"
? ? },
? ? ...
]

這個(gè)json文件中的這個(gè)json數(shù)組大小是25w條數(shù)據(jù)，現(xiàn)在他只想要wxid這個(gè)屬性的值，并且將它寫(xiě)出到一個(gè)txt的文件中，沒(méi)5000個(gè)為一個(gè)txt文件，每個(gè)值為一行。也就是最后給他50個(gè)txt文件，每個(gè)里面有5000行wxid的值。

實(shí)現(xiàn)過(guò)程

解決問(wèn)題的方法有很多，可以用python、nodejs、Java等任何你熟悉的語(yǔ)言實(shí)現(xiàn)，我這里使用nodejs來(lái)實(shí)現(xiàn)一下，因?yàn)樗?jiǎn)單并且不需要引入第三方的庫(kù)。

這里涉及到了文件的讀取和寫(xiě)入，因此用到nodejs自帶的fs模塊。具體實(shí)現(xiàn)代碼如下：

const fs = require("fs")?? ?//引入fs模塊
const data = fs.readFileSync('test.json','utf8');?? ?//讀取json文件
let temp = JSON.parse(data)?? ?//將數(shù)據(jù)解析為json對(duì)象
let tempIndex = 0;?? ?//臨時(shí)索引，用來(lái)計(jì)數(shù)是否到達(dá)5000條
let tempFileCount = 1?? ?//臨時(shí)文件計(jì)數(shù)，用于計(jì)數(shù)文件名，result1...result50
temp.forEach(element => {?? ?//遍歷json數(shù)組
? ? if(tempIndex<5000){?? ?//判斷是否小于5000，如果是則寫(xiě)入當(dāng)前文件，這里使用的是追加的寫(xiě)入方式
? ? ? ? fs.appendFileSync("result"+tempFileCount+".txt",element.wxid+'\r','utf8',function(err){},tempIndex++)
? ? ? ??
? ? }else{?? ?//當(dāng)tempIndex等于5000時(shí)寫(xiě)入新的文件，并且將文件名計(jì)數(shù)加一
? ? ? ? console.log("create new file")
? ? ? ? tempFileCount++;
? ? ? ? fs.appendFileSync("result"+tempFileCount+".txt",element.wxid+'\r','utf8',function(err){},console.log(tempFileCount+': 開(kāi)始寫(xiě)入'))
? ? ? ? tempIndex = 0;
? ? }
});

用Nodejs解析json數(shù)據(jù)

nodejs是服務(wù)器端的javascript的處理平臺(tái)。json(JavaScript Object Notation) 是一種輕量級(jí)的數(shù)據(jù)交換格式。我們?cè)趯?xiě)服務(wù)端的程序時(shí)往往需要使用json來(lái)處理數(shù)據(jù)。

這里我們用一個(gè)簡(jiǎn)單的例子來(lái)演示如何用nodejs來(lái)處理json數(shù)據(jù)文件。

第一，我們需要在ubuntu14.04上安裝nodejs，我們可以使用如下命令：

$ sudo apt-get install nodejs

安裝完畢, 我們可以使用如下命令進(jìn)行測(cè)試:

$ nodejs -v
v0.10.25

第二，準(zhǔn)備一個(gè)測(cè)試json文件, test.json，內(nèi)容如下:

{
? "person": {
? ? "name": "wanger",
? ? "birth": "1999"
? }
}

第三，創(chuàng)建js腳本來(lái)解析json文件，main.js

#!/usr/bin/nodejs
var cwd = process.argv[1].substring(0, process.argv[1].lastIndexOf("/"));
var fs = require('fs');
?
function load(file, cb) {
? ? ? ? fs.readFile(file, function(err, data) {
? ? ? ? ? ? ? ? if (err)
? ? ? ? ? ? ? ? ? ? ? ? throw err;
? ? ? ? ? ? ? ? cb(JSON.parse(data.toString()));
? ? ? ? });
}
?
(function() {
? ? ? ? if (process.argv.length < 2) {
? ? ? ? ? ? ? ? console.log("usage\n\t" + process.argv[1] + " loadfile");
? ? ? ? ? ? ? ? return;
? ? ? ? }
? ? ? ? load(process.argv[2], function(obj) {
? ? ? ? ? ? ? ? console.log("%s\n", obj.person.name);
? ? ? ? ? ? ? ? console.log("%s\n", obj.person.birth);
? ? ? ? });
})();

第四，測(cè)試和運(yùn)行