透過ffmpeg子進程進行視訊資料IO
當我重新開始找工作時(是的,我仍然#OpenToWork,請告訴我!),在一份工作申請中,我被要求實現一個處理視訊資料的原型。在完成該專案的過程中,由於我在該領域相對缺乏經驗,我意外地從生成式 AI 聊天機器人那裡得到了很多幫助。
如標題所述,使用ffmpeg進行一些預處理工作。該專案的目標之一是能夠依序播放多個影片檔案。雖然有多種方法可以實現這一目標,但我決定採用最明顯的解決方案,將它們連接在一起。
為了實現這一目標,我首先必須將文件重新編碼為允許的格式。在與 Google Gemini 對此進行「討論」後,聊天機器人建議我使用 MPEG-TS。
MPEG 傳輸流 (MPEG-TS) 透過封裝分組基本流來運作。這些串流包括音訊、視訊和 PSIP 數據,它們被打包成小段。每個流被切成 188 位元組的部分並交織在一起。此過程可確保更短的延遲和更高的容錯能力,使其成為大幀可能導致音訊延遲的視訊會議的理想選擇。
引用自 https://castr.com/blog/mpeg-transport-stream-mpeg-ts/
還有其他文件格式可用於此目的,但它們與討論無關。當我將視訊重新編碼為這種格式後,視訊資料將被傳送到佇列,供其他進程中運行的其他模組使用。
定義了輸入(要在線獲取的視訊檔案清單)和輸出(重新編碼的視訊檔案內容)後,是時候弄清楚如何做到這一點了。不幸的是,ffmpeg 是一個非常複雜的實用程序,可以做很多事情。有多次嘗試提供一些介面來幫助用戶使用它(我真的很想嘗試這個,但顯然它現在已經死了)。然而,如今生成式人工智慧的幫助非常大,只需幾個提示即可獲得正確的命令。
它甚至解釋了每個參數的含義,如下面的螢幕截圖所示。
Gemini 嘗試解釋 ffmpeg 指令
簡而言之,該命令透過 stdin 接受視訊檔案內容,並將重新編碼的視訊檔案內容輸出為 stdout。
現在是時候編寫實作程式碼了,因為我想同時讀取和寫入 ffmpeg,所以這將是一個非同步應用程式。我們這次使用的http客戶端函式庫是httpx,它有一個小批量取得下載的方法:
我們稍後擔心實際處理,現在我們只需取得將區塊列印到螢幕上的程式碼。
接下來我們寫一個函式來呼叫ffmpeg,透過asyncio.create_subprocess_exec
理想情況下,我們會按照文件中的建議在此處使用process.communicate(file_content) ,不幸的是,如果我們這樣做,我們將不得不首先下載整個文件,這不可避免地會延遲回應,這並不理想。
我們可以使用 process.stdin.write(),讓我們更新原來的 write_input 函數:
每下載一個區塊,
- 我們透過 process.stdin.write(chunk) 提供給進程。
- 完成後,我們將寫一個 EOF (process.stdin.write_eof()) 來表示檔案輸入的結束,
- 後面接著 .close() (和對應的await .wait_angled())
回到video_send函數,我們透過讀取process.stdout來繼續函數。能夠同時進行讀取和寫入正是我們透過 asyncio 執行此操作的原因。以前在同步設定中,我們只能按照固定的順序一個接一個地執行,但現在我們可以讓調度程序來關心順序。現在該函數添加了以下程式碼,用於讀取重新編碼的檔案內容,並將其發佈到佇列中:
在一個循環中,我們
- 從 ffmpeg stdout 取得一大塊資料
- 如果 chunk 是空字串,則退出循環
- 否則,將區塊推送到佇列(透過 asyncio.to_thread,因為我們在這裡使用進程安全版本)
- 然後我們透過process.wait()等待指令優雅退出
現在看起來很簡單,但我花了整整一個晚上才真正正確地完成了這件事(而且我在寫這篇文章時仍在修改程式碼)。有一半的時間我會檢查文件以確保沒有遺漏任何內容,其他時間我會讓 Gemini 審查我的程式碼。
希望您覺得本文有用,今天就到此為止,希望我們下週能回到先前承諾的「程式碼降臨」內容。
以上是透過ffmpeg子進程進行視訊資料IO的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

Python适合数据科学、Web开发和自动化任务,而C 适用于系统编程、游戏开发和嵌入式系统。Python以简洁和强大的生态系统著称,C 则以高性能和底层控制能力闻名。

Python在遊戲和GUI開發中表現出色。 1)遊戲開發使用Pygame,提供繪圖、音頻等功能,適合創建2D遊戲。 2)GUI開發可選擇Tkinter或PyQt,Tkinter簡單易用,PyQt功能豐富,適合專業開發。

2小時內可以學會Python的基本編程概念和技能。 1.學習變量和數據類型,2.掌握控制流(條件語句和循環),3.理解函數的定義和使用,4.通過簡單示例和代碼片段快速上手Python編程。

兩小時內可以學到Python的基礎知識。 1.學習變量和數據類型,2.掌握控制結構如if語句和循環,3.了解函數的定義和使用。這些將幫助你開始編寫簡單的Python程序。

Python更易學且易用,C 則更強大但複雜。 1.Python語法簡潔,適合初學者,動態類型和自動內存管理使其易用,但可能導致運行時錯誤。 2.C 提供低級控制和高級特性,適合高性能應用,但學習門檻高,需手動管理內存和類型安全。

要在有限的時間內最大化學習Python的效率,可以使用Python的datetime、time和schedule模塊。 1.datetime模塊用於記錄和規劃學習時間。 2.time模塊幫助設置學習和休息時間。 3.schedule模塊自動化安排每週學習任務。

Python在web開發、數據科學、機器學習、自動化和腳本編寫等領域有廣泛應用。 1)在web開發中,Django和Flask框架簡化了開發過程。 2)數據科學和機器學習領域,NumPy、Pandas、Scikit-learn和TensorFlow庫提供了強大支持。 3)自動化和腳本編寫方面,Python適用於自動化測試和系統管理等任務。

Python在自動化、腳本編寫和任務管理中表現出色。 1)自動化:通過標準庫如os、shutil實現文件備份。 2)腳本編寫:使用psutil庫監控系統資源。 3)任務管理:利用schedule庫調度任務。 Python的易用性和豐富庫支持使其在這些領域中成為首選工具。
