利用Node.js批量抓取高清妹子圖片實(shí)例教程
更新時(shí)間：2018年08月02日 10:27:47 作者：ocalhot
這篇文章主要給大家介紹了關(guān)于利用Node.js批量抓取高清妹子圖片的相關(guān)資料，文中通過(guò)示例代碼介紹的非常詳細(xì)，需要的朋友們可以直接將代碼復(fù)制進(jìn)行使用，下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
前言
寫(xiě)了一個(gè)抓取圖片的小玩意，分享一下。
Github地址：https://github.com/focalhot/node.js-crawler （本地下載）
示例代碼
//依賴(lài)模塊
var fs = require('fs');
var request = require("request");
var cheerio = require("cheerio");
var mkdirp = require('mkdirp');
//目標(biāo)網(wǎng)址
var url = 'http://me2-sex.lofter.com/tag/美女?dāng)z影?page=';
//本地存儲(chǔ)目錄
var dir = './images';
//創(chuàng)建目錄
mkdirp(dir, function(err) {
if(err){
console.log(err);
}
});
//發(fā)送請(qǐng)求
request(url, function(error, response, body) {
if(!error && response.statusCode == 200) {
var $ = cheerio.load(body);
$('.img img').each(function() {
var src = $(this).attr('src');
console.log('正在下載' + src);
download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
console.log('下載完成');
});
}
});
//下載方法
var download = function(url, dir, filename){
request.head(url, function(err, res, body){
request(url).pipe(fs.createWriteStream(dir + "/" + filename));
});
};
總結(jié)
以上就是這篇文章的全部?jī)?nèi)容了，希望本文的內(nèi)容對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，如果有疑問(wèn)大家可以留言交流，謝謝大家對(duì)腳本之家的支持。
相關(guān)文章
Node Mongoose用法詳解【Mongoose使用、Schema、對(duì)象、model文檔等】
這篇文章主要介紹了Node Mongoose用法,結(jié)合實(shí)例形式分析了Mongoose使用、Schema、對(duì)象、model文檔等基本原理、用法及操作注意事項(xiàng),需要的朋友可以參考下2020-05-05
我們常使用nvm來(lái)管理node.js的版本,這樣就可以根據(jù)自己的需要來(lái)回切換node.js版本,下面這篇文章主要給大家介紹了關(guān)于node版本過(guò)高該如何將node版本降低的相關(guān)資料,需要的朋友可以參考下2023-01-01
node自定義安裝更改npm全局模塊默認(rèn)安裝路徑的步驟
有段時(shí)間沒(méi)用npm了，新建個(gè)項(xiàng)目，需要改變npm全局包默認(rèn)安裝的路徑，本文就來(lái)介紹一下node自定義安裝更改npm全局模塊默認(rèn)安裝路徑的步驟，感興趣的可以了解下2021-09-09
nodejs redis 發(fā)布訂閱機(jī)制封裝實(shí)現(xiàn)方法及實(shí)例代碼
這篇文章主要介紹了nodejs redis 發(fā)布訂閱機(jī)制封裝的相關(guān)資料，這里提供了實(shí)現(xiàn)方法，及實(shí)例代碼，具有參考價(jià)值，需要的朋友可以參考下2016-12-12
nodejs 使用http進(jìn)行post或get請(qǐng)求的實(shí)例(攜帶cookie)
今天小編就為大家分享一篇nodejs 使用http進(jìn)行post或get請(qǐng)求的實(shí)例(攜帶cookie)，具有很好的參考價(jià)值，希望對(duì)大家有所幫助。一起跟隨小編過(guò)來(lái)看看吧2019-01-01
npm?install?XXX安裝路徑文件夾權(quán)限問(wèn)題的解決過(guò)程
這篇文章主要給大家介紹了關(guān)于npm?install?XXX安裝路徑文件夾權(quán)限問(wèn)題(npm?ERR!?The?operation?was?rejected?by?your?operating?system.errno?-4080)的解決過(guò)程,文中通過(guò)圖文介紹的非常詳細(xì),需要的朋友可以參考下2023-04-04
這篇文章主要介紹了關(guān)于Node.js中的JXcore打包示例,JXcore 是一個(gè)支持多線(xiàn)程的 Node.js 發(fā)行版本，基本不需要對(duì)你現(xiàn)有的代碼做任何改動(dòng)就可以直接線(xiàn)程安全地以多線(xiàn)程運(yùn)行,需要的朋友可以參考下2023-05-05
Postman xmysql不切換環(huán)境緩存數(shù)據(jù)到本地
這篇文章主要為大家介紹了Postman xmysql不切換環(huán)境緩存數(shù)據(jù)到本地示例詳解，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪2023-02-02
Vue+Node實(shí)現(xiàn)的商城用戶(hù)管理功能示例
這篇文章主要介紹了Vue+Node實(shí)現(xiàn)的商城用戶(hù)管理功能,結(jié)合實(shí)例形式詳細(xì)分析了商城用戶(hù)管理的前臺(tái)登錄、校驗(yàn)、跳轉(zhuǎn)、退出等相關(guān)操作技巧,需要的朋友可以參考下2019-12-12
Node中完整的?node?addon?實(shí)現(xiàn)流程
這篇文章主要介紹了Node中完整的node?addon實(shí)現(xiàn)流程，文章圍繞主題展開(kāi)詳細(xì)的內(nèi)容介紹，具有一定的參考價(jià)值，需要的小伙伴可以參考一下2022-09-09