📱

Get Our Mobile App

Take your business learning on the go!

Download on the App StoreGet it on Google Play

把剪輯交給 AI:我打造了一個自動剪Aroll的AI Agent 🔧🤖!

ami.moment7:25

Transcription

好,今天沒有什麼打光的,因為我想快速跟大家分享一下,我最近做出來的這個自動粗剪Aroll的AI工具。

先給大家快速展示一下,它具體能做什麼。好,那這個呢,就是我的一個Aroll素材。呢,我把它餵給AI之後呢,這個就是它返還給我的一個EDL時間線。我們要做的呢,這個是達芬奇免費版就可以,把它拖進媒體池(media pool),這個是原素材,拖進媒體池。在文件這邊選擇導入時間線,找到這個EDL文件選擇導入。看到嗎?它就剪出來了,這就剪出來了,這就是一個Aroll的粗剪。你現在看到的這個Aroll呢,也是我用這個AI工具去粗剪,沒有我自己動手直接出來的。

今天呢,我會跟大家分享一下,就是我做這個的思路,就是我等一下會跟大家一步一步拆解,就是我怎麼做出來的。

好,那在此之前,我先帶個頭盔,就因為我是一個技術小白,我只是因為看了我們@用AI發電那個Folder as an app的AI課程,所以才知道了做這樣一個agent的流程,所以我的這個認知非常的淺顯。如果你是個技術大神的話,我說錯了不要diss我。

與此同時,如果你是一個小白的話呢,也不要被我說的這些給嚇退,就是你看完那個Folder as an app課程,也能夠做出來的這樣一個東西,因為我就是一個小白,我也是這樣做出來的。

好,我們現在開始。

這個呢,就是我的這個AI自動粗剪Aroll的工作流,反正我們順一遍,就知道這個底層邏輯是什麼了。

在最初最初,你在錄制Aroll口播的時候,要注意用兩個語音提示詞,去做後續AI剪輯的這個錨點。就像我以前錄制Aroll這種對鏡頭播的時候,如果我講錯了,我就Bia大力拍掌一下,它就會在音軌上,有一個很尖銳的波峰。我在後續剪輯的時候,噢,我看到說OK,這邊有一個很高的波峰,就表示這段講錯了,就可以減掉。

這個其實是一樣的原理,只不過我們用語音的提示詞,去給它做這個切分。像這裡,我用到了兩個。第一個就是「再來」。如果你說錯了,說錯了「再來」,你就這樣講一下。如果你覺得這一整段都說得很順,沒有吃螺絲的話,你就再結尾說一個「這段OK」。這樣子的話就有了兩個語音提示詞。

如果你錄制好了之後呢,你就有這樣子的素材。這個麥拿著不太好操作,我放下來。你把Aroll都拍好之後呢,就可以把它放在一個文件夾裡面,我給它取名叫Aroll。右鍵按住option,把這個路徑拷貝下來,粘貼到這個VS Code(一個代碼編輯器)裡面,我寫幫我粗剪口播,把這個請求發送給它。實際上我做的呢,就是這一整個東西,就是這一整個文件夾,它呢,就可以幫我實現一個AI自動化粗剪Aroll的一個工作流。

現在在等它的這個過程當中,你看它在跑了,我們就可以來看下整個工作流。

好,我們剛才做的呢,就是把視頻素材給到它,那它就接下來就是,它現在在做的這個工作。首先第一步,它就是用這個FFmpeg(一種工具),去提取了一個音頻。有了音頻之後呢,我是用了這個Eleven Labs(一個工具),一個Speech to Text(STT)語音轉文字的這樣一個工具,去把它這個音頻變成了一個文檔。變成的是兩個格式的文檔啊,就一個是JSON的,它是給機器看的,還有一個SRT的字幕,就是給人看的。這個呢,就是平常我們視頻導出來的字幕,就是比較用戶友好。

這個時候呢,我再給它一個規則,就是我告訴它你去閱讀這個文字稿,看到中間如果,有「再來」跟「這段OK」這兩個關鍵詞的話,也就是我們剛才錄制Aroll口播的時候,這個語音提示詞,那你只要保留這兩個詞中間的內容。這樣子的話就其實等於做了一個剪輯。它最後再輸出的這個東西呢,就是已經粗剪好的一個稿子,那也是輸出一個JSON跟一個SRT。你可以看這個啊SRT的文稿,這樣的話就能夠知道,它這個粗剪的是不是準確。

如果說沒有問題的話呢,你就讓它把這個JSON的文件,輸出成一個EDL格式的文檔。這個呢,它全稱我查了叫Edit Decision List,就是可以給到剪輯軟件的一個時間線,我是這麼理解的。你就可以給它輸出,匯入到達芬奇啊。這個匯入達芬奇的一個方法,就是把原始影片給它匯入到媒體庫,再從這個文檔的地方,把這個時間線給它導入。

好,總結呢,就是我們給到它視頻口播的原始素材,它就會給到我們一個這個EDL最終輸出的文檔。

我們來看一下,它這個跑出來的結果。哦,在這裡。我們看到它是這樣子一個東西。我們選擇在Finder里打開。okay,把這個東西給它拷貝到我們那個項目文件夾里。你看在這個Aroll素材里,我給它拷貝過來。

好,這個時候呢,就像你開頭看到的那樣,就是我只要把這個拖到達芬奇,這個免費版也可以哦,就是媒體池裡面,再選擇文件,導入Timeline,把這個EDL給它導進去。這裡默選一下就可以了。

哎,這怎麼截圖這麼醜?我們現在來這個一起聽一下。測試smoke test,呃,就是我會這樣隨便講,隨便講呃好「這段OK」。聽到了嗎?我這裡說了「這段OK」,你看它就已經幫我剪掉了這個。所以實際上它輸出的這個,就是一個已經粗剪好的Aroll版本,你可能只是要進行一個微微的調整,所以非常的酷。

其實這個工具做起來非常的簡單,我是花了一個月的時間,去看那個Folder as an app的課程。那其實瞭解了整個底層邏輯之後,我這個工具只花了一天,就給它做出來了。我覺得非常非常的酷。

我突然想到,就是像我上兩條,像前一條影片,那個Apple Creative Studio,不是裡面有講到iPad,它有那個自帶蒙太奇剪輯嗎?它的底層邏輯,其實就是跟這個很類似。我把素材餵給它,它就是從每個素材里隨機挑5秒,把它放到一個EDL時間線裡面,那其實就可以把這個蒙太奇的功能給復刻出來。所以如果下次我再把這個做出來的話,我再跟大家分享。

其實這兩個內容,就包括Aroll粗剪啊,還有這個蒙太奇,都是我想打造的內容創作Agent中的兩塊拼圖。它應該是一個很完整的,但是我還沒有完全把它拼出來。所以等到時候我把這一整個這個Agent打造完了之後呢,我會再跟大家去仔細的分享,就是我如何用AI去提高我的視頻剪輯創作的效率。

今天就分享那麼多,因為明天我要去放假啦。拜拜,明天見。