《Alteration》:這部 VR 電影用上了 Facebook 的風格轉移算法

《Alteration》:這部 VR 電影用上了 Facebook 的風格轉移算法

在 VR 電影《Alteration》中,男主角 Alexandro 志願參與了一個科學實驗。他沒有意識到,研究人員在做一項危險的研究。這些人想操控他的潛意識,用人工智能 Elsa 取代他對妻子的所有記憶。為了在影片中展現人工智能,電影導演 Jerome Blanquet 找到了 Facebook 的人工智能研究員。

Blanquet 想以視覺化的方法展現人工智能操控意識的過程。最初,他想用傳統的動畫工具,但後來,他了解到 Facebook 的人工智能研究員開發了一種風格轉移算法。於是,他開始思考能否將其應用到 VR 電影之上。“通過模仿 Alexandro 妻子的繪畫,Elsa 想要取代她的位置,”Blanquet 對 Fastcompany 網站說,“當你考慮到電影中的情節,風格轉移是最合乎情理的。”

《Alteration》:這部 VR 電影用上了 Facebook 的風格轉移算法

《Alteration》的執行製片人 Yelena Rachitsky 在 Oculus 工作。她解釋說,在展示風格轉移上,VR 是一個很好的媒介,因為 VR 沒有現實世界的各種限制。“如果這是一部傳統電影,效果就會不一樣了,因為你無法沉浸其中。在 VR 中,一切都在變化,但它又能牢牢抓住你的注意力。它完全改變了你的觀影體驗。”

在電影開始拍攝之前,FAIR(Facebook 人工智能研究)實驗室的人員就開始參與其中。FAIR 的科學家 Antoine Bordes 說,“項目一開始,我們就加入了,向他們展示了人工智能的潛力所在。”他還提到了研究人員面臨的一項挑戰。FAIR 開發的風格轉移算法適用於移動設備和 4K 視頻,但研究人員不知道它能否用於 VR 電影。不過,對未知的探索正是樂趣所在。

《Alteration》:這部 VR 電影用上了 Facebook 的風格轉移算法

“如果一開始就有成功的把握,我們或許就不會參與了,”Bordes 說,“通常,在挑選這些項目時,我們考慮的是,能夠從中學到什麼東西。”從這個項目中,Facebook 的研究人員想要了解的是,風格轉移是否適用於 VR 項目。

為取得預想效果,FAIR 團隊重新訓練了他們的神經網絡,以適應專業級 VR 視頻的要求,比如 4K 分辨率和 360 度視頻。同時,為達到 VR 視頻的沉浸感,神經網絡必須要處理更大尺寸的圖片。在這項工作上,計算機花費的時間合計 12 萬小時。“對於電影製作團隊來說,這是一個很大的賭注,”Cayrol 說,“因為這是一個全新的過程。我們把文件發給 FAIR 實驗室,然後他們開始處理。隨後,他們把樣本發給我們。每次,我們都感覺是打開了聖誕節禮物。”

題圖來著 arte

相關推薦

推薦中...