主頁 > 後端開發 > Python 實作 m3u8 視頻下載

Python 實作 m3u8 視頻下載

2023-05-31 07:49:53 後端開發

Python 實作 m3u8 視頻下載

m3u8 是一種基于文本的媒體播放串列檔案格式,通常用于指定流媒體播放器播放在線媒體流,它是一個簡單的文本檔案,其中包含多個由 URI 參考的媒體資源檔案的 URL,m3u8 檔案通常包含多個 ts 檔案的鏈接,這些 ts 檔案是實際的視頻和音頻資料檔案,通常是通過 HTTP 協議傳輸,

ts 檔案是一種流媒體傳輸格式,是 MPEG-2 傳輸流(MPEG-2 Transport Stream)的縮寫,ts 檔案通常用于存盤視頻、音頻和字幕等媒體資料,是流媒體傳輸的基本單位,在 m3u8 檔案中,ts 檔案通常是通過 URI 參考的方式來指定的,播放器會根據 m3u8 檔案中的 ts 檔案鏈接,依次請求并下載 ts 檔案,然后將其組合成完整的視頻流進行播放,

因此,m3u8 檔案和 ts 檔案在流媒體播放領域密切相關,m3u8 檔案是流媒體的播放串列,而 ts 檔案是實際的媒體資料檔案,m3u8 檔案中包含了多個 ts 檔案的鏈接,播放器會根據 m3u8 檔案中的 ts 檔案鏈接,依次請求并下載 ts 檔案,然后將其組合成完整的視頻流進行播放,這種方式可以充分利用網路帶寬,提高流媒體的播放效率和質量,同時,m3u8 檔案還可以通過定義不同的碼率和解析度等引數,實作適應不同網路環境和設備的自適應流媒體播放,

img

基礎實作

以下是使用 Python 下載 m3u8 視頻并保存為 mp4 的示例代碼:

import requests
import os

def download_m3u8_video(url, file_path):
    r = requests.get(url)
    if r.status_code != 200:
        print('m3u8視頻下載鏈接無效')
        return False

    m3u8_list = r.text.split('\n')
    m3u8_list = [i for i in m3u8_list if i and i[0] != '#']

    ts_list = []
    for ts_url in m3u8_list:
        ts_url = url.rsplit('/', 1)[0] + '/' + ts_url
        ts_list.append(ts_url)

    with open(file_path, 'wb') as f:
        for ts_url in ts_list:
            r = requests.get(ts_url)
            if r.status_code == 200:
                f.write(r.content)
    print('m3u8視頻下載完成')
    return True

def convert_ts_to_mp4(ts_file_path, mp4_file_path):
    os.system(f'ffmpeg -i {ts_file_path} -c copy {mp4_file_path}')

if __name__ == '__main__':
    url = '輸入m3u8視頻下載鏈接'
    ts_file_path = '輸入ts檔案保存路徑'
    mp4_file_path = '輸入mp4檔案保存路徑'

    download_m3u8_video(url, ts_file_path)
    convert_ts_to_mp4(ts_file_path, mp4_file_path)

在這個示例中,download_m3u8_video 函式用于下載 m3u8 視頻,convert_ts_to_mp4 函式用于將下載的 ts 檔案轉換為 mp4 檔案,首先,使用 requests 庫下載 m3u8 檔案,并決議出其中的 ts 檔案鏈接,然后,遍歷 ts 檔案鏈接串列,使用 requests 庫下載每個 ts 檔案,并將其寫入到一個檔案中,最后,使用 ffmpeg 工具將下載的 ts 檔案轉換為 mp4 檔案,需要注意的是,為了使用 ffmpeg 工具,需要在系統中安裝 ffmpeg,并將其添加到環境變數中,

實際應用中,可以根據具體情況對代碼進行調整和優化,例如增加例外處理、優化下載速度等,同時,由于 m3u8 視頻格式的特殊性,下載程序可能會較為耗時,需要耐心等待一段時間,

使用多執行緒來優化下載速度

為了優化下載速度,可以使用多執行緒或異步 IO 的方式來下載 m3u8 視頻,以下是使用多執行緒下載 m3u8 視頻的示例代碼:

import requests
import os
import threading

class Downloader(threading.Thread):
    def __init__(self, url, ts_url, file_path):
        threading.Thread.__init__(self)
        self.url = url
        self.ts_url = ts_url
        self.file_path = file_path

    def run(self):
        r = requests.get(self.ts_url, stream=True)
        if r.status_code == 200:
            with open(self.file_path, 'wb') as f:
                for chunk in r.iter_content(chunk_size=1024):
                    if chunk:
                        f.write(chunk)

def download_m3u8_video(url, file_path):
    r = requests.get(url)
    if r.status_code != 200:
        print('m3u8視頻下載鏈接無效')
        return False

    m3u8_list = r.text.split('\n')
    m3u8_list = [i for i in m3u8_list if i and i[0] != '#']

    ts_list = []
    for ts_url in m3u8_list:
        ts_url = url.rsplit('/', 1)[0] + '/' + ts_url
        ts_list.append(ts_url)

    threads = []
    for i, ts_url in enumerate(ts_list):
        ts_file_path = file_path.rsplit('.', 1)[0] + f'_{i}.ts'
        thread = Downloader(url, ts_url, ts_file_path)
        thread.start()
        threads.append(thread)

    for thread in threads:
        thread.join()

    print('m3u8視頻下載完成')
    return True

def convert_ts_to_mp4(ts_file_path, mp4_file_path):
    os.system(f'ffmpeg -i {ts_file_path} -c copy {mp4_file_path}')

if __name__ == '__main__':
    url = '輸入m3u8視頻下載鏈接'
    ts_file_path = '輸入ts檔案保存路徑'
    mp4_file_path = '輸入mp4檔案保存路徑'

    download_m3u8_video(url, ts_file_path)
    convert_ts_to_mp4(ts_file_path, mp4_file_path)

在這個示例中,定義了一個 Downloader 類,用于下載每個 ts 檔案,在 Downloader 類中,使用 requests 庫的 stream 引數將下載進度分塊,每次下載 1024 個位元組,然后寫入到檔案中,在 download_m3u8_video 函式中,使用多執行緒的方式同時下載多個 ts 檔案,并等待所有執行緒下載完成后再將其合并成一個 mp4 檔案,這樣可以大大縮短下載時間,

需要注意的是,多執行緒下載可能會導致網路瓶頸,從而降低下載速度,因此,在實際應用中,需要根據具體情況選擇合適的下載方式,并進行調整和優化,例如,可以使用異步 IO、協程等技術來優化下載速度,另外,為了提高下載速度,還可以使用 CDN、負載均衡、網路加速等技術來優化下載環節,

使用異步 IO 和協程來優化下載速度

協程(Coroutine)是一種輕量級的執行緒,可以在單執行緒中實作多個任務的并發執行,從而提高程式的效率和性能,Python 中的協程是通過 async/await 關鍵字來實作的,可以使用 asyncio 庫來進行協程編程,

異步 IO(Asynchronous IO)是一種非阻塞式 IO 模型,可以在進行 IO 操作時不會阻塞程式的執行,從而提高程式的效率和回應速度,Python 中的異步 IO 是通過 asyncio 庫來實作的,可以使用 async/await 關鍵字和協程來實作異步 IO 操作,

異步 IO 和協程的結合可以實作高效的并發編程,通過異步 IO 可以充分利用 CPU 和網路帶寬等資源,提高程式的效率和性能;而通過協程可以在單執行緒中實作多個任務的并發執行,避免了執行緒切換的開銷,從而提高程式的回應速度和并發性能,在實際應用中,我們可以根據具體情況選擇和優化異步 IO 和協程的使用方式,以達到最佳的效果和性能,

為了使用異步 IO 和協程來優化下載速度,可以使用 aiohttp 和 asyncio 庫來實作,以下是使用異步 IO 和協程下載 m3u8 視頻的示例代碼:

import aiohttp
import asyncio
import os

async def download_ts_file(ts_url, ts_file_path):
    # 防止ssl報錯:
    # aiohttp.client_exceptions.ClientConnectorCertificateError: Cannot connect to host ***.****.com:443 ssl:True
    # [SSLCertVerificationError: (1, '[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local
    # issuer certificate (_ssl.c:1123)')]
    conn = aiohttp.TCPConnector(ssl=False)
    async with aiohttp.ClientSession(connector=conn) as session:
        async with session.get(ts_url) as response:
            if response.status != 200:
                print(f'{ts_url} 下載失敗')
                return False
            with open(ts_file_path, 'wb') as f:
                while True:
                    chunk = await response.content.read(1024)
                    if not chunk:
                        break
                    f.write(chunk)
    print(f'{ts_url} 下載完成')
    return True

async def download_m3u8_video(url, file_path):
    # 防止ssl報錯
    conn = aiohttp.TCPConnector(ssl=False)
    async with aiohttp.ClientSession(connector=conn) as session:
        async with session.get(url) as response:
            if response.status != 200:
                print('m3u8視頻下載鏈接無效')
                return False

            m3u8_text = await response.text()
            m3u8_list = m3u8_text.split('\n')
            m3u8_list = [i for i in m3u8_list if i and i[0] != '#']

            tasks = []
            for i, ts_url in enumerate(m3u8_list):
                ts_url = url.rsplit('/', 1)[0] + '/' + ts_url
                ts_file_path = file_path.rsplit('.', 1)[0] + f'_{i}.ts'
                task = asyncio.ensure_future(
                    download_ts_file(ts_url, ts_file_path))
                tasks.append(task)

            await asyncio.gather(*tasks)

    print('m3u8視頻下載完成')
    return True

def convert_ts_to_mp4(ts_file_path, mp4_file_path):
    os.system(f'ffmpeg -i {ts_file_path} -c copy {mp4_file_path}')

if __name__ == '__main__':
    url = '輸入m3u8視頻下載鏈接'
    ts_file_path = '輸入ts檔案保存路徑'
    mp4_file_path = '輸入mp4檔案保存路徑'

    loop = asyncio.get_event_loop()
    loop.run_until_complete(download_m3u8_video(url, ts_file_path))
    convert_ts_to_mp4(ts_file_path, mp4_file_path)

在這個示例中,使用了 aiohttp 和 asyncio 庫來實作異步 IO 和協程,定義了兩個協程函式:download_m3u8_videodownload_ts_file,在 download_m3u8_video 函式中,使用 aiohttp 庫的 ClientSession 類異步獲取 m3u8 檔案,并決議出其中的 ts 檔案鏈接,然后,使用協程和異步 IO 的方式異步下載每個 ts 檔案,并將其寫入到本地檔案中,在下載程序中,使用了異步 IO 和協程的方式,可以充分利用網路帶寬,提高下載速度,

download_m3u8_video 函式中,使用了 async for 回圈來遍歷 m3u8 檔案中的 ts 檔案鏈接,并創建了一個任務串列 tasks,用于存盤異步下載的任務,然后,使用 asyncio.ensure_future 方法將每個任務添加到任務串列中,最后,使用 asyncio.gather 方法同時運行所有異步任務,等待所有任務完成后,即可完成整個 m3u8 視頻的下載,

最后,使用 ffmpeg 工具將下載的 ts 檔案轉換為 mp4 格式的視頻檔案,這個步驟并不涉及異步 IO 和協程,只是為了將下載的 ts 檔案轉換為可用的視頻檔案格式,

使用協程可以充分利用網路帶寬,提高下載速度,需要注意的是,在使用協程時,需要考慮到 CPU 和記憶體等資源的占用,避免出現資源耗盡或者死鎖等問題,同時,協程的使用需要掌握一定的異步編程技巧,例如使用 async/await 關鍵字、協程調度等,因此,在實際應用中,需要根據具體情況進行調整和優化,以獲取最佳的性能和效果,

作者:飛仔FeiZai

出處:https://www.cnblogs.com/yuzhihui/p/17443299.html

宣告:歡迎任何形式的轉載,但請務必注明出處!!!

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/553820.html

標籤:其他

上一篇:一文詳解 Sa-Token 中的 SaSession 物件

下一篇:返回列表

標籤雲
其他(159984) Python(38189) JavaScript(25464) Java(18161) C(15234) 區塊鏈(8268) C#(7972) AI(7469) 爪哇(7425) MySQL(7217) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5873) 数组(5741) R(5409) Linux(5344) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4579) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2434) ASP.NET(2403) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1977) 功能(1967) Web開發(1951) HtmlCss(1950) C++(1927) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1878) .NETCore(1862) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • Python 實作 m3u8 視頻下載

    # Python 實作 m3u8 視頻下載 m3u8 是一種**基于文本的媒體播放串列檔案格式**,通常用于指定流媒體播放器播放在線媒體流。它是一個簡單的文本檔案,其中包含多個由 URI 參考的媒體資源檔案的 URL。m3u8 檔案通常包含多個 ts 檔案的鏈接,這些 ts 檔案是實際的視頻和音頻數 ......

    uj5u.com 2023-05-31 07:49:53 more
  • 一文詳解 Sa-Token 中的 SaSession 物件

    Sa-Token 是一個輕量級 java 權限認證框架,主要解決登錄認證、權限認證、單點登錄、OAuth2、微服務網關鑒權 等一系列權限相關問題。 > Gitee 開源地址:[https://gitee.com/dromara/sa-token](https://gitee.com/dromara/ ......

    uj5u.com 2023-05-31 07:49:45 more
  • 如何用ReadWriteLock實作一個通用的快取中心?

    摘要:在并發場景中,Java SDK中提供了ReadWriteLock來滿足讀多寫少的場景。 本文分享自華為云社區《【高并發】基于ReadWriteLock開了個一款高性能快取》,作者:冰 河。 寫在前面 在實際作業中,有一種非常普遍的并發場景:那就是讀多寫少的場景。在這種場景下,為了優化程式的性能 ......

    uj5u.com 2023-05-31 07:49:34 more
  • 【爬蟲+資料清洗+可視化】用Python分析“淄博燒烤“的評論資料

    [toc] # 一、背景介紹 您好,我是[@馬哥python說](https://mp.weixin.qq.com/s/EuOKLq6ZSgQGnijreylSiA) ,一枚10年程式猿。 自從2023.3月以來,"淄博燒烤"現象持續占領熱搜流量,體現了后疫情時代眾多網友對人間煙火氣的美好向往,本現 ......

    uj5u.com 2023-05-31 07:49:02 more
  • c++11: all_of 、 any_of 和 none_of

    242. 有效的字母異位詞 ```cpp class Solution { public: bool isAnagram(string s, string t) { if(s.size()!=t.size()) return false; int ans[26]={0}; for(auto& ch: ......

    uj5u.com 2023-05-31 07:48:43 more
  • 【Haxe】(一)VSCode 搭建 Haxe 開發環境

    前言 咱換作業啦! 新作業這邊需要用到的開發語言是 Haxe,最近大概會寫幾篇筆記。Haxe 的介紹就不寫了,打算記錄點有用的學習內容,先從搭建開發環境開始吧! 當前適用版本: VSCode:Current Latest Version Haxe 版本:4.3.1 文章最近更新日期:2023.05. ......

    uj5u.com 2023-05-31 07:48:28 more
  • (Java)記一次通過API遞回分頁“爬取”網頁資料的開發經歷

    在最近的互聯網專案開發中,需要獲取用戶的訪問ip資訊,并進行后續統計分析。
    這些ip資訊是在第三方的服務中分組存放的,且每個分組都都是分頁(1頁10條)存放的,如果一次性訪問大量的資料,API很有可能會報錯。
    怎樣通過HTTP的方式去獲取到資訊,并且模擬瀏覽器每頁每頁獲取10條的資訊,且持久到資料庫... ......

    uj5u.com 2023-05-31 07:48:12 more
  • 驅動開發:內核讀寫記憶體浮點數

    如前所述,在前幾章內容中筆者簡單介紹了`記憶體讀寫`的基本實作方式,這其中包括了`CR3切換`讀寫,`MDL映射`讀寫,`記憶體拷貝`讀寫,本章將在如前所述的讀寫函式進一步封裝,并以此來實作驅動讀寫記憶體浮點數的目的。記憶體`浮點數`的讀寫依賴于`讀寫記憶體位元組`的實作,因為浮點數本質上也可以看作是一個位元組集... ......

    uj5u.com 2023-05-31 07:42:55 more
  • Python連接es筆記三之es更新操作

    > 本文首發于公眾號:Hunter后端 > 原文鏈接:[Python連接es筆記三之es更新操作](https://mp.weixin.qq.com/s/1cTaVfjLFrmbXajNcayhEA) 這一篇筆記介紹如何使用 Python 對資料進行更新操作。 對于 es 的更新的操作,不用到 Se ......

    uj5u.com 2023-05-31 07:40:48 more
  • np.bincount方法

    [官方檔案](https://numpy.org/doc/stable/reference/generated/numpy.bincount.html#numpy-bincount) `out = np.bincount(x[, weights, minlength])` **該函式用于統計輸入陣列 ......

    uj5u.com 2023-05-31 07:39:38 more