用文字產生影片的 AI 黑科技 (Runway Gen-2 Text to Video)

林鼎淵
Jul 30, 2023

--

之前分享了一篇將圖片轉成唯美動畫的文章,裡面用到了 Runway Gen-2 的 AI 技術;而今天這篇文章要分享用文字產生影片的方法,教你用透過簡單的提示語(prompt)來產生實用影片,現在只要註冊 Runway 帳號,就能體驗它的強大,無論是火山爆發的壯闊、日落湖畔的美景,還是機器人喝酒的場景都能一鍵產生!

過去製作影片會需要一個團隊,並學習非常多的技術才有辦法製作(ex:After Effects、Cinema 4D…),但隨著 AI 降臨,這一切正在被改寫。

現在你只要在 Gen-2 輸入想要的內容,然後按下「Enter」就好了,那具體怎麼操作呢?讓我們看下去!

STEP 1:註冊 Runway 帳號

Runway 官網https://runwayml.com/

可以使用 Google 帳號 or 其他方案來註冊,成功後會詢問你是否要訂閱他們的最新資訊。

然後會有彈窗顯示目前的付費方案,我們先選擇「Free」來嘗試看看。

STEP 2:使用 Gen-2 模型,用文字生成影片

這篇文章的目的是用文字生成影片,所以我們選擇左上角的「Text to Video」。

然後在輸入框中輸入你大腦中想要產生的影片,例如:「Robot drinking in the forest in the style of cinematic action, Magic Hour 」,然後點擊「Free Preview」來看看哪個畫面你比較喜歡。

機器人在森林裡喝啤酒,用電影動作風格,魔幻時刻

點擊喜歡的圖片後(我選擇右上角),就會開始生成影片嚕~

不過機器人喝酒的方法有點太神奇惹!?是能量罐的概念嗎 XD

▋一些比較有機會派上用場的案例

  • 絢麗的轉場畫面:如果要人工做出這類型的影片耗時耗力,購買素材還容易跟別人撞倒,現在用 AI 可以在短時間產出非常多個。
colorful paint flying through the air
  • 一些場景素材:如果有影片製作的需求,那應該常常會用到示意場景,但有時找了半天就是沒有自己喜歡的,那不如自己產一個?
sunset lakeside

動物、人類的動作我目前實驗下來結果不如預期;但相信這些技術在不久的將來將會突破(看看隔壁棚的 Midjourney 已經變得多沒強大)。

▋總結

目前體驗下來,筆者認為 Gen-2 的提示語(Prompt)算是可以用「白話文」來撰寫的。

如果你希望我給出一個結構,那大概是 [你想呈現的影片][使用的風格][一些小調整],比如:

  • Volcano eruption in the style of professional cinematography, zoom out(活山噴發,用專業電影風格,縮小)
  • spaceman in cockpit in the style of VHS video, Close-Up(駕駛艙內的太空人,用 VHS 視頻風格,特寫)

隨著 AI 技術發展,影視的製作成本會越來越低,製作團隊也會越來越小;相對的,在未來能說出「好故事」的能力會更加重要!

如果這篇文章有拓展的你知識,可以對文章拍手讓我知道 👏🏻,也歡迎點擊「Follow」來追蹤我~

想將 AI 導入自己的職場與生活嗎?歡迎報名筆者與商周集團合作的線上課程:「AI 高效簡報術|ChatGPT + Gamma 工作簡報

https://smartmonthly.pse.is/5c6q9m
▶︎ 如果這篇文章有幫助到你

1. 可以點擊「Follow」來追蹤我~
2. 可以對文章拍手讓我知道 👏🏻
你們的追蹤與鼓勵是我繼續寫作的動力 🙏🏼

▶︎ 如果你對工程師的職涯感到迷茫

1. 也許我在iT邦幫忙發表的系列文可以給你不一樣的觀點 💡
2. 也歡迎您到書局選購支持,透過豐富的案例來重新檢視自己的職涯

--

--

林鼎淵

職涯中培育過多名工程師,🧰 目前在外商公司擔任 Software Specialist |✍️ 我專注寫 (1)最新技術 (2)團隊合作 (3)工程師職涯的文章,出版過 5 本專業書籍|👏🏻 如果對這些主題感興趣,歡迎點擊「Follow」來關注我~