優(yōu)酷×侯明昊：AI與真人實(shí)拍，看進(jìn)去就出不來
AI無疑2023的重要關(guān)鍵詞，而這一次我們在視頻層面，實(shí)踐了Ai風(fēng)格重置與藝人實(shí)拍的無縫融合，感謝優(yōu)酷客戶給予的創(chuàng)意空間，與我們一同進(jìn)行的AI探索。閑話少說，先看片。
優(yōu)酷2023Brand Film “看進(jìn)去就出不來”的優(yōu)酷
原初的Brief是，如何表達(dá)優(yōu)酷有著精彩內(nèi)容，橫跨熱血漫改劇、風(fēng)雅國學(xué)、新國風(fēng)動(dòng)漫、潮酷綜藝。我們很快鎖定“看進(jìn)去就出不來”的想法，主角被“吸入”優(yōu)酷世界后，以AI分身橫穿《異人之下》、《萬卷風(fēng)雅集》、《暗河傳》、《這就是街舞》，各個(gè)有著精彩內(nèi)容的AI世界。幾個(gè)場景中尤以熱播漫改劇《異人之下》為主推，憑一句“武當(dāng)王也拜見老天師”炸裂社交圈的“王也”本也——侯明昊，當(dāng)仁不讓成為了我們推薦的“穿越者”。
第一道難關(guān)：藝人在場景，怎么和素材互動(dòng)
如何讓想法落地，確實(shí)有太多未知X因素。最先遇到的難題是，怎么表現(xiàn)藝人與場景素材的互動(dòng)？
各種劇各種綜藝都已成片，不可能跟著你的腳本轉(zhuǎn)。那，穿越到場景內(nèi)，利用某個(gè)媒介介質(zhì)看AI重置素材？這也太遜了，在內(nèi)部這個(gè)easy solution第一秒也被推翻了。只能和自己死磕了：無論如何，都要實(shí)現(xiàn)ai重置與真人實(shí)拍的無縫融合，這是“死命令”。接下來，就是一番翻找素材，找尋合適角度機(jī)位的苦功夫。
在大段的素材找尋那幾幀的潛力鏡頭，所有為數(shù)不多的空景和大wide景，就成了我們眼中的香餑餑。要“神還原”既有的影視劇/綜藝素材的拍攝角度與攝影機(jī)焦距，拍攝硬件黑科技少不了：在實(shí)拍中Motion Control與Q-Take雙管齊下，配合藝人綠幕前無實(shí)物表演，才達(dá)成了后期AI合成神同步的基礎(chǔ)。
shooting board中，人物與素材須融合的鏡頭節(jié)選
第二道難關(guān)：AI風(fēng)格化，如何平衡藝人和其他素材
攻克了第一道難關(guān)，接下來才是最難過的關(guān)——AI解決素材和真人的融合度。藝人的AI化形象需要有辨識(shí)度，又需要平衡全篇其余鏡頭的AI風(fēng)格化。AI小組和后期團(tuán)隊(duì)緊密配合，在Stable Diffusion中嘗試了不同的預(yù)處理模型，并反復(fù)實(shí)驗(yàn)不同的seed值。多次反復(fù)試驗(yàn)后，采用油畫風(fēng)格SDXL大模型插件，基于v1.5模型的官方升級版，語言模型引入了OpenAI的CLIP使得提示詞更容易被理解。
為更好保證藝人的可辨識(shí)度，依然借助于傳統(tǒng)online的后期方式，為牽涉到藝人的畫面墊了一層底，再融合ai風(fēng)格化重置，完成了虛與實(shí)的平衡融合。這樣，也算一定程度上完成了從傳統(tǒng)后期到AI后期的小跨越。
AI藝人與AI場景的融合demo
第三道難關(guān)：如何防抖
在AI重置中，還有一個(gè)需要對抗的問題就是抖動(dòng)，在許多AI探索的作品中抖動(dòng)感還是非常強(qiáng)烈的。為了解決這個(gè)問題，我們使用了kaiber，一個(gè)基于SD的底層模型，通過添加視頻高級融合算法，以降噪、去模糊、增強(qiáng)、放大、縮小、超分辨率等，使風(fēng)格化加強(qiáng)同時(shí)，減少抖動(dòng)與前后幀不連貫的問題，保證了視頻穩(wěn)定度。
第四道難關(guān)？關(guān)關(guān)都是難關(guān)
在AI的探索過程中，其實(shí)會(huì)隨機(jī)得到許多意想不到的效果，這些過程稿或遺珠未必能出現(xiàn)在成片中，我們也挑選了其中一部分分享出來。
異人之下土河車片段早期嘗試稿
街舞賽博朋克AI方向?qū)ふ腋?/strong>
街舞賽博朋克嘗試稿
暗河傳不同程度重置對比
過場AI自動(dòng)演算過程稿
本片落地于電影院和戶外大屏，取得了不錯(cuò)的反響。
重慶觀音橋
影院
長沙五一廣場國金通道
寫在最后的思考
此番優(yōu)酷2023Brand Film由好旺角創(chuàng)意廠牌H2O操刀，與優(yōu)酷一同攻堅(jiān)克難了素材與實(shí)拍融合的AI制作。算作為2023的AI大潮中，貢獻(xiàn)了一朵別樣的浪花。在過程中，團(tuán)隊(duì)深深地被以天為計(jì)量單位的迭代速度震驚了，一切都在幾何級數(shù)野蠻生長。短短一兩月之間，不斷有新預(yù)處理器及新的“丹藥”Lora產(chǎn)生，真正應(yīng)驗(yàn)了“學(xué)無止境”。
AI在瘋狂生長，而我們的觀點(diǎn)始終是：AI不能代替人類的思考，尤其是創(chuàng)意人的思考。如何善用巧用AI工具，才是我們的學(xué)無止境。
創(chuàng)作人員名單
創(chuàng)意合伙人：Thomas.Li
業(yè)務(wù)總監(jiān)：Serena.Liu
創(chuàng)意總監(jiān)：David.Li
客戶服務(wù)：Lydia Xu、琳子
項(xiàng)目信息
專業(yè)評分
專業(yè)評分已截止
評論
評論
推薦評論
全部評論（5條）