首頁 後端開發 Python教學 透過ffmpeg子進程進行視訊資料IO

透過ffmpeg子進程進行視訊資料IO

Dec 27, 2024 pm 09:30 PM

當我重新開始找工作時(是的,我仍然#OpenToWork,請告訴我!),在一份工作申請中,我被要求實現一個處理視訊資料的原型。在完成該專案的過程中,由於我在該領域相對缺乏經驗,我意外地從生成式 AI 聊天機器人那裡得到了很多幫助。

Video data IO through ffmpeg subprocess

如標題所述,使用ffmpeg進行一些預處理工作。該專案的目標之一是能夠依序播放多個影片檔案。雖然有多種方法可以實現這一目標,但我決定採用最明顯的解決方案,將它們連接在一起。

為了實現這一目標,我首先必須將文件重新編碼為允許的格式。在與 Google Gemini 對此進行「討論」後,聊天機器人建議我使用 MPEG-TS。

MPEG 傳輸流 (MPEG-TS) 透過封裝分組基本流來運作。這些串流包括音訊、視訊和 PSIP 數據,它們被打包成小段。每個流被切成 188 位元組的部分並交織在一起。此過程可確保更短的延遲和更高的容錯能力,使其成為大幀可能導致音訊延遲的視訊會議的理想選擇。

引用自 https://castr.com/blog/mpeg-transport-stream-mp​​eg-ts/

還有其他文件格式可用於此目的,但它們與討論無關。當我將視訊重新編碼為這種格式後,視訊資料將被傳送到佇列,供其他進程中運行的其他模組使用。

定義了輸入(要在線獲取的視訊檔案清單)和輸出(重新編碼的視訊檔案內容)後,是時候弄清楚如何做到這一點了。不幸的是,ffmpeg 是一個非常複雜的實用程序,可以做很多事情。有多次嘗試提供一些介面來幫助用戶使用它(我真的很想嘗試這個,但顯然它現在已經死了)。然而,如今生成式人工智慧的幫助非常大,只需幾個提示即可獲得正確的命令。

它甚至解釋了每個參數的含義,如下面的螢幕截圖所示。

Video data IO through ffmpeg subprocess
Gemini 嘗試解釋 ffmpeg 指令

簡而言之,該命令透過 stdin 接受視訊檔案內容,並將重新編碼的視訊檔案內容輸出為 stdout。

現在是時候編寫實作程式碼了,因為我想同時讀取和寫入 ffmpeg,所以這將是一個非同步應用程式。我們這次使用的http客戶端函式庫是httpx,它有一個小批量取得下載的方法:

我們稍後擔心實際處理,現在我們只需取得將區塊列印到螢幕上的程式碼。

接下來我們寫一個函式來呼叫ffmpeg,透過asyncio.create_subprocess_exec

理想情況下,我們會按照文件中的建議在此處使用process.communicate(file_content) ,不幸的是,如果我們這樣做,我們將不得不首先下載整個文件,這不可避免地會延遲回應,這並不理想。

我們可以使用 process.stdin.write(),讓我們更新原來的 write_input 函數:

每下載一個區塊,

  1. 我們透過 process.stdin.write(chunk) 提供給進程。
  2. 完成後,我們將寫一個 EOF (process.stdin.write_eof()) 來表示檔案輸入的結束,
  3. 後面接著 .close() (和對應的await .wait_angled())

回到video_send函數,我們透過讀取process.stdout來繼續函數。能夠同時進行讀取和寫入正是我們透過 asyncio 執行此操作的原因。以前在同步設定中,我們只能按照固定的順序一個接一個地執行,但現在我們可以讓調度程序來關心順序。現在該函數添加了以下程式碼,用於讀取重新編碼的檔案內容,並將其發佈到佇列中:

在一個循環中,我們

  1. 從 ffmpeg stdout 取得一大塊資料
  2. 如果 chunk 是空字串,則退出循環
  3. 否則,將區塊推送到佇列(透過 asyncio.to_thread,因為我們在這裡使用進程安全版本)
  4. 然後我們透過process.wait()等待指令優雅退出

現在看起來很簡單,但我花了整整一個晚上才真正正確地完成了這件事(而且我在寫這篇文章時仍在修改程式碼)。有一半的時間我會檢查文件以確保沒有遺漏任何內容,其他時間我會讓 Gemini 審查我的程式碼。

希望您覺得本文有用,今天就到此為止,希望我們下週能回到先前承諾的「程式碼降臨」內容。

以上是透過ffmpeg子進程進行視訊資料IO的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

熱門話題

Java教學
1660
14
CakePHP 教程
1417
52
Laravel 教程
1311
25
PHP教程
1261
29
C# 教程
1234
24
Python vs.C:申請和用例 Python vs.C:申請和用例 Apr 12, 2025 am 12:01 AM

Python适合数据科学、Web开发和自动化任务,而C 适用于系统编程、游戏开发和嵌入式系统。Python以简洁和强大的生态系统著称,C 则以高性能和底层控制能力闻名。

Python:遊戲,Guis等 Python:遊戲,Guis等 Apr 13, 2025 am 12:14 AM

Python在遊戲和GUI開發中表現出色。 1)遊戲開發使用Pygame,提供繪圖、音頻等功能,適合創建2D遊戲。 2)GUI開發可選擇Tkinter或PyQt,Tkinter簡單易用,PyQt功能豐富,適合專業開發。

2小時的Python計劃:一種現實的方法 2小時的Python計劃:一種現實的方法 Apr 11, 2025 am 12:04 AM

2小時內可以學會Python的基本編程概念和技能。 1.學習變量和數據類型,2.掌握控制流(條件語句和循環),3.理解函數的定義和使用,4.通過簡單示例和代碼片段快速上手Python編程。

您可以在2小時內學到多少python? 您可以在2小時內學到多少python? Apr 09, 2025 pm 04:33 PM

兩小時內可以學到Python的基礎知識。 1.學習變量和數據類型,2.掌握控制結構如if語句和循環,3.了解函數的定義和使用。這些將幫助你開始編寫簡單的Python程序。

Python與C:學習曲線和易用性 Python與C:學習曲線和易用性 Apr 19, 2025 am 12:20 AM

Python更易學且易用,C 則更強大但複雜。 1.Python語法簡潔,適合初學者,動態類型和自動內存管理使其易用,但可能導致運行時錯誤。 2.C 提供低級控制和高級特性,適合高性能應用,但學習門檻高,需手動管理內存和類型安全。

Python和時間:充分利用您的學習時間 Python和時間:充分利用您的學習時間 Apr 14, 2025 am 12:02 AM

要在有限的時間內最大化學習Python的效率,可以使用Python的datetime、time和schedule模塊。 1.datetime模塊用於記錄和規劃學習時間。 2.time模塊幫助設置學習和休息時間。 3.schedule模塊自動化安排每週學習任務。

Python:探索其主要應用程序 Python:探索其主要應用程序 Apr 10, 2025 am 09:41 AM

Python在web開發、數據科學、機器學習、自動化和腳本編寫等領域有廣泛應用。 1)在web開發中,Django和Flask框架簡化了開發過程。 2)數據科學和機器學習領域,NumPy、Pandas、Scikit-learn和TensorFlow庫提供了強大支持。 3)自動化和腳本編寫方面,Python適用於自動化測試和系統管理等任務。

Python:自動化,腳本和任務管理 Python:自動化,腳本和任務管理 Apr 16, 2025 am 12:14 AM

Python在自動化、腳本編寫和任務管理中表現出色。 1)自動化:通過標準庫如os、shutil實現文件備份。 2)腳本編寫:使用psutil庫監控系統資源。 3)任務管理:利用schedule庫調度任務。 Python的易用性和豐富庫支持使其在這些領域中成為首選工具。

See all articles