Shell腳本實(shí)現(xiàn)批量下載資源并保留原始路徑
更新時(shí)間：2015年02月09日 09:41:49 投稿：junjie
這篇文章主要介紹了Shell腳本實(shí)現(xiàn)批量下載資源并保留原始路徑,本文直接給出實(shí)現(xiàn)代碼和使用例子,需要的朋友可以參考下
示例資源列表
如url.txt：
復(fù)制代碼 代碼如下:
http://su.bdimg.com/static/superplus/img/logo_white_ee663702.png
http://su.bdimg.com/static/superplus/img/logo_white_ee663703.png
http://su.bdimg.com/static/superplus/img/logo_white_ee663701.png
http://su.bdimg.com/static/superplus/img/logo_white_ee663704.png
http://su.bdimg.com/static/superplus/img/logo_white_ee663705.png
http://su.bdimg.com/static/superplus/img/logo_white_ee663706.png
我們需要下載這些圖片，并保存在各自的文件夾下。
腳本如下
如download.sh
復(fù)制代碼 代碼如下:
#!/bin/bash
# desc: download resource
# author: 十年后的盧哥哥
mydir=`pwd`
while read line
do
{
if [ -n "$line" ]
then
cd $mydir
url=$(echo "$line" | tr -d '\r')
picdir=$(echo $url | sed -r 's/http:\/\///g')
picname=$(echo ${picdir##*/})
picpath=$(echo ${picdir%/*})
mkdir -p $picpath
cd $picpath
wget -O $picname `echo $url`
fi
}
done < $1
exit 0
這里有幾點(diǎn)要注意：
1、為了去掉文本文件中行末的換行符，要進(jìn)行刪除：
復(fù)制代碼 代碼如下:
tr -d '\r'
2、取資源名：
復(fù)制代碼 代碼如下:
${picdir##*/}
3、取資源路徑：
復(fù)制代碼 代碼如下:
${picdir%/*}
運(yùn)行
復(fù)制代碼 代碼如下:
sh download.sh url.txt
相關(guān)文章
Linux?du命令實(shí)現(xiàn)根據(jù)文件或者文件夾大小排序輸出
Linux是一個(gè)強(qiáng)大的操作系統(tǒng),廣泛用于服務(wù)器和個(gè)人計(jì)算機(jī),本文主要來和大家聊聊如何利用du命令實(shí)現(xiàn)根據(jù)文件或者文件夾大小排序輸出,感興趣的可以了解下2023-09-09
解析spark源碼yarn-cluster模式任務(wù)提交
這篇文章主要為大家解析了spark源碼中yarn-cluster模式任務(wù)提交方式，有需要的朋友可以借鑒參考下，希望可以有所幫助，祝大家多多進(jìn)步，早日升職加薪2021-09-09
這篇文章主要介紹了一個(gè)下載網(wǎng)頁圖片的shell腳本,需要的朋友可以參考下2014-03-03
shell進(jìn)程監(jiān)控的實(shí)現(xiàn)(ps、sleep、kill)
本文主要介紹了shell進(jìn)程監(jiān)控的實(shí)現(xiàn)(ps、sleep、kill)，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-06-06
這篇文章主要介紹了linux下忘記mysql密碼的幾種找回方法,需要的朋友可以參考下2017-11-11
本文為大家介紹linux shell中的特殊符號，包括字符串比較、數(shù)字比較與計(jì)算、特殊字符等，學(xué)習(xí)shell的朋友可以看下2013-06-06
檢測網(wǎng)段IP使用情況的shell腳本，有需要的朋友可以參考下2013-02-02
Linux中使用Shell腳本查看Java線程的CPU使用情況
這篇文章主要介紹了Linux中使用Shell腳本查看Java線程的CPU使用情況,需要的朋友可以參考下2014-06-06
Linux makefile 和shell文件相互調(diào)用實(shí)例詳解
這篇文章主要介紹了Linux makefile 和shell文件相互調(diào)用實(shí)例詳解的相關(guān)資料,需要的朋友可以參考下2017-03-03
這篇文章主要介紹了Linux上的文件搜索命令實(shí)例詳解,需要的朋友可以參考下2017-10-10