最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

python 實(shí)現(xiàn)多線程下載m3u8格式視頻并使用fmmpeg合并

 更新時(shí)間:2019年11月15日 14:18:16   作者:s_kangkang_A  
這篇文章主要介紹了python 實(shí)現(xiàn)多線程下載m3u8格式視頻,使用fmmpeg合并的實(shí)例代碼,需要的朋友可以參考下

電影之類的長(zhǎng)視頻好像都用m3u8格式了,這就導(dǎo)致了多線程下載視頻的意義不是很大,都是短視頻,線不線程就沒什么意義了嘛。

我們知道,m3u8的鏈接會(huì)下載一個(gè)文檔,相當(dāng)長(zhǎng),半小時(shí)的視頻,應(yīng)該有接近千行ts鏈接。

這些ts鏈接下載成ts文件,就是碎片化的視頻,加以合并,就成了需要的視頻。

那,即便網(wǎng)速很快,下幾千行視頻,效率也就低了,更何況還要合并。我就琢磨了一下午,怎么樣才能多線程下載m3u8格式的視頻呢?

先上代碼,再說重難點(diǎn):

import datetime
import os
import re
import threading
import requests
from queue import Queue
# 預(yù)下載,獲取m3u8文件,讀出ts鏈接,并寫入文檔
def down():
  # m3u8鏈接
  url = 'https://ali-video.acfun.cn/mediacloud/acfun/acfun_video/segment/3zf_GAW6nFMuDXrTLL89OZYOZ4mwxGoASH6UcZbsj1_6eAxUxtp3xm8wFmGMNOnZ.m3u8?auth_key=1573739375-474267152-0-a5aa2b6df4cb4168381bf8b04d88ddb1'
  # 當(dāng)ts文件鏈接不完整時(shí),需拼湊
  # 大部分網(wǎng)站可使用該方法拼接,部分特殊網(wǎng)站需單獨(dú)拼接
  base_url = re.split(r"[a-zA-Z0-9-_\.]+\.m3u8", url)[0]
  # print(base_url)
  resp = requests.get(url)
  m3u8_text = resp.text
  # print(m3u8_text)
  # 按行拆分m3u8文檔
  ts_queue = Queue(10000)
  lines = m3u8_text.split('\n')
  # 找到文檔中含有ts字段的行
  concatfile = 'cache/' + "s" + '.txt'
  for line in lines:
    if '.ts' in line:
      if 'http' in line:
        # print("ts>>", line)
        ts_queue.put(line)
      else:
        line = base_url + line
        ts_queue.put(line)
        # print('ts>>',line)
      filename = re.search('([a-zA-Z0-9-]+.ts)', line).group(1).strip()
      # 一定要先寫文件,因?yàn)榫€程的下載是無(wú)序的,文件無(wú)法按照
      # 123456。。。去順序排序,而文件中的命名也無(wú)法保證是按順序的
      # 這會(huì)導(dǎo)致下載的ts文件無(wú)序,合并時(shí),就會(huì)順序錯(cuò)誤,導(dǎo)致視頻有問題。
      open(concatfile, 'a+').write("file %s\n" % filename)
  return ts_queue,concatfile
# 線程模式,執(zhí)行線程下載
def run(ts_queue):
  tt_name = threading.current_thread().getName()
  while not ts_queue.empty():
    url = ts_queue.get()
    r = requests.get(url, stream=True)
    filename = re.search('([a-zA-Z0-9-]+.ts)', url).group(1).strip()
    with open('cache/' + filename, 'wb') as fp:
      for chunk in r.iter_content(5242):
        if chunk:
          fp.write(chunk)
    print(tt_name + " " + filename + ' 下載成功')
# 視頻合并方法,使用ffmpeg
def merge(concatfile, name):
  try:
    path = 'cache/' + name + '.mp4'
    command = 'ffmpeg -y -f concat -i %s -crf 18 -ar 48000 -vcodec libx264 -c:a aac -r 25 -g 25 -keyint_min 25 -strict -2 %s' % (concatfile, path)
    os.system(command)
    print('視頻合并完成')
  except:
    print('合并失敗')
if __name__ == '__main__':
  name = input('請(qǐng)輸入視頻名稱:')
  start = datetime.datetime.now().replace(microsecond=0)
  s,concatfile = down()
  # print(s,concatfile)
  threads = []
  for i in range(15):
    t = threading.Thread(target=run, name='th-'+str(i), kwargs={'ts_queue': s})
    threads.append(t)
  for t in threads:
    t.start()
  for t in threads:
    t.join()
  end = datetime.datetime.now().replace(microsecond=0)
  print('下載耗時(shí):' + str(end - start))
  merge(concatfile,name)
  over = datetime.datetime.now().replace(microsecond=0)
  print('合并耗時(shí):' + str(over - end))

效果圖:

代碼開始:自己輸入視頻名稱(也可以去原網(wǎng)站爬名稱)

查看下載耗時(shí),fmmpeg開始合并:

合并耗時(shí):

7分多鐘,90個(gè)ts文件,接近40MB。兩秒下載完成。

更大的文件,開更多的線程。

然后我們畫畫重難點(diǎn):

第一:ts文件命名問題。

我們知道,每一個(gè)線程啟動(dòng),除了隊(duì)列不會(huì)重復(fù),那么代碼里都會(huì)重新跑(線程里的代碼),那么,1.ts,2.ts....這種命名是不可能的了,文件會(huì)被覆蓋。命名我使用了ts鏈接中的部分鏈接。

第二:合并問題。

文件的合并是根據(jù)文檔內(nèi)的順序,也就是,如果邊下載邊合并,那么,線程的無(wú)序性導(dǎo)致下載無(wú)序,文件寫入也就無(wú)序化了,合并時(shí),時(shí)間線會(huì)錯(cuò)誤,合出來(lái)的視頻就無(wú)法看。因此,文件要提前寫好才行,這和命名有很大的關(guān)聯(lián),看代碼即知。

第三:有的m3u8是特殊處理的,代碼具有一定的局限性。

寫的時(shí)候挺難的,腦子都亂了,就這些吧,記錄一下。

對(duì)了,貼一下下載的圖:90個(gè)ts文件,一個(gè)mp4文件,一個(gè)文檔。

總結(jié)

以上所述是小編給大家介紹的python 實(shí)現(xiàn)多線程下載m3u8格式視頻并使用fmmpeg合并,希望對(duì)大家有所幫助,如果大家有任何疑問請(qǐng)給我留言,小編會(huì)及時(shí)回復(fù)大家的。在此也非常感謝大家對(duì)腳本之家網(wǎng)站的支持!
如果你覺得本文對(duì)你有幫助,歡迎轉(zhuǎn)載,煩請(qǐng)注明出處,謝謝!

相關(guān)文章

  • python制作花瓣網(wǎng)美女圖片爬蟲

    python制作花瓣網(wǎng)美女圖片爬蟲

    本文通過python 來(lái)實(shí)現(xiàn)這樣一個(gè)簡(jiǎn)單的爬蟲功能,把我們想要的圖片爬取到本地,需要的朋友可以參考下
    2015-10-10
  • Matplotlib繪圖基礎(chǔ)之文本標(biāo)注詳解

    Matplotlib繪圖基礎(chǔ)之文本標(biāo)注詳解

    Matplotlib?文本和標(biāo)注可以為數(shù)據(jù)和圖形之間提供額外的信息,幫助觀察者更好地理解數(shù)據(jù)和圖形的含義,下面就將通過示例依次介紹文本和標(biāo)注的常用使用方式
    2023-08-08
  • python通過第三方庫(kù)操作PDF文件的幾種常見方法

    python通過第三方庫(kù)操作PDF文件的幾種常見方法

    Python是一種高級(jí)編程語(yǔ)言,主要用于數(shù)據(jù)分析、機(jī)器學(xué)習(xí)、圖像處理等領(lǐng)域,在PDF文件處理方面,Python有許多強(qiáng)大的庫(kù)和工具,這篇文章主要給大家介紹了關(guān)于python通過第三方庫(kù)操作PDF文件的幾種常見方法,需要的朋友可以參考下
    2024-02-02
  • python numpy庫(kù)np.percentile用法說明

    python numpy庫(kù)np.percentile用法說明

    這篇文章主要介紹了python numpy庫(kù)np.percentile用法說明,具有很好的參考價(jià)值,希望對(duì)大家有所幫助。一起跟隨小編過來(lái)看看吧
    2020-06-06
  • Python報(bào)錯(cuò)TypeError: ‘NoneType‘ object is not subscriptable的解決方法匯總

    Python報(bào)錯(cuò)TypeError: ‘NoneType‘ object is 

    在Python編程中,TypeError 是一個(gè)常見的錯(cuò)誤,它表明代碼中存在類型不匹配的問題,TypeError: 'NoneType' object is not subscriptable 是一個(gè)具體的例子,本文將探討這個(gè)錯(cuò)誤的原因,并提供幾種解決方案,需要的朋友可以參考下
    2024-10-10
  • opencv python圖像梯度實(shí)例詳解

    opencv python圖像梯度實(shí)例詳解

    這篇文章主要介紹了opencv python圖像梯度實(shí)例詳解,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
    2020-02-02
  • python 視頻下載神器(you-get)的具體使用

    python 視頻下載神器(you-get)的具體使用

    這篇文章主要介紹了python 視頻下載神器(you-get)的具體使用,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來(lái)一起學(xué)習(xí)學(xué)習(xí)吧
    2021-01-01
  • Pandas DataFrame操作數(shù)據(jù)增刪查改

    Pandas DataFrame操作數(shù)據(jù)增刪查改

    我們?cè)谟?nbsp;pandas 處理數(shù)據(jù)的時(shí)候,經(jīng)常會(huì)遇到用其中一列數(shù)據(jù)替換另一列數(shù)據(jù)的場(chǎng)景。這一類的需求估計(jì)很多人都遇到,當(dāng)然還有其它更復(fù)雜的。解決這類需求的辦法有很多,這里我們來(lái)推薦幾個(gè),這篇文章主要介紹了Pandas DataFrame操作數(shù)據(jù)的增刪查改
    2022-10-10
  • Python模糊查詢本地文件夾去除文件后綴的實(shí)例(7行代碼)

    Python模糊查詢本地文件夾去除文件后綴的實(shí)例(7行代碼)

    下面小編就為大家?guī)?lái)一篇Python模糊查詢本地文件夾去除文件后綴的實(shí)例(7行代碼) 。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來(lái)看看吧
    2017-11-11
  • Python抓取框架Scrapy爬蟲入門:頁(yè)面提取

    Python抓取框架Scrapy爬蟲入門:頁(yè)面提取

    Scrapy吸引人的地方在于它是一個(gè)框架,任何人都可以根據(jù)需求方便的修改,下面這篇文章主要給大家介紹了關(guān)于Python抓取框架Scrapy爬蟲入門之頁(yè)面提取的相關(guān)資料,文中通過示例代碼介紹的非常詳細(xì),需要的朋友可以參考下。
    2017-12-12

最新評(píng)論

新河县| 水城县| 临城县| 南江县| 南皮县| 长子县| 鹿泉市| 霍州市| 乌审旗| 伊金霍洛旗| 正定县| 绥德县| 普格县| 井研县| 岳西县| 景宁| 新宁县| 邛崃市| 江都市| 朝阳区| 开江县| 长海县| 三台县| 宁城县| 洪雅县| 绥芬河市| 时尚| 莒南县| 日喀则市| 永顺县| 青龙| 通化市| 罗甸县| 双鸭山市| 襄樊市| 石家庄市| 禹州市| 宁明县| 积石山| 朔州市| 芮城县|