中國(guó)首個(gè)AIGC導(dǎo)演共創(chuàng)計(jì)劃將于12月6日正式上線。該計(jì)劃由快手自研視頻生成大模型產(chǎn)品“可靈AI”，聯(lián)合李少紅、賈樟柯、葉錦添、薛曉路、俞白眉、董潤(rùn)年、張吃魚(yú)、王子川、王卯卯等9位知名導(dǎo)演共同發(fā)起。12月3日，快手發(fā)布了“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的預(yù)告片，并公布了9部AIGC電影短片的片名，題材涵蓋奇幻、志怪、親情、動(dòng)畫(huà)等多元類(lèi)型。
圖 1 可靈AI導(dǎo)演合作計(jì)劃定檔海報(bào)
這9部具有實(shí)驗(yàn)性質(zhì)的電影短片，全部使用可靈AI進(jìn)行視頻生成，電影導(dǎo)演完全依托視頻生成大模型，群體深度參與電影級(jí)內(nèi)容創(chuàng)作，這在中國(guó)尚屬首次。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的上線，不僅是一次新技術(shù)對(duì)影視創(chuàng)作和制作邊界的積極探索，也讓AIGC技術(shù)深度參與影視內(nèi)容生產(chǎn)的路線圖更加清晰。
視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力
隨著視頻生成大模型技術(shù)的發(fā)展，新技術(shù)、新工具有望促進(jìn)產(chǎn)業(yè)融合，重構(gòu)生產(chǎn)流程，推動(dòng)內(nèi)容創(chuàng)意產(chǎn)業(yè)革新，已經(jīng)成為共識(shí)。
可靈AI自6月6日發(fā)布以來(lái)，截至11月20日已累計(jì)服務(wù)超500萬(wàn)用戶，生成5100萬(wàn)個(gè)視頻和1.5億張圖片。國(guó)內(nèi)首部AIGC原創(chuàng)奇幻短劇《山海奇鏡之劈波斬浪》，由可靈AI提供深度技術(shù)支持，7月13日上線后15天內(nèi)就實(shí)現(xiàn)正片5集播放量超過(guò)5200萬(wàn)，全網(wǎng)話題曝光量超4.3億。9月9日，快手聯(lián)合9位知名導(dǎo)演發(fā)起“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”，挑戰(zhàn)全部使用可靈AI生成電影級(jí)視頻內(nèi)容。影視行業(yè)的每一次探索，都在拓寬視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力。
《年會(huì)不能停！》的編劇、導(dǎo)演董潤(rùn)年在加入“可靈AI共創(chuàng)計(jì)劃”后，選擇創(chuàng)作一個(gè)在“新世界”中發(fā)生的奇幻故事，這是他過(guò)往創(chuàng)作生涯中幾乎沒(méi)有嘗試過(guò)的類(lèi)型。“當(dāng)我用各種各樣的語(yǔ)言描述給AI一個(gè)世界以后，AI根據(jù)我的描述呈現(xiàn)世界的方式與我的想象完全不一樣，它有它自己獨(dú)到的邏輯。這鼓勵(lì)我去嘗試我設(shè)想過(guò)但還沒(méi)有表達(dá)過(guò)的故事。我傾向于認(rèn)為這是一種跟AI的合作，而不是簡(jiǎn)單地使用一種工具。”董潤(rùn)年說(shuō)。
《獨(dú)行月球》的導(dǎo)演張吃魚(yú)則從知名科幻小說(shuō)作者天瑞說(shuō)符的作品《保衛(wèi)南山公園》中獲得靈感，以重慶為故事背景創(chuàng)作了科幻電影短片《最后的防線》。在畫(huà)面生成過(guò)程中，主角在巨大的機(jī)器人頭頂擺桌子吃火鍋的鏡頭令人印象深刻。
張吃魚(yú)說(shuō)，傳統(tǒng)電影生產(chǎn)流程中，這樣的鏡頭雖然也能實(shí)現(xiàn)，但要么需要耗資巨大的置景，要么通過(guò)需要借助綠幕完成后期制作。而依托可靈AI的技術(shù)，可以用一種效率更高的工作流迅速將腦中的想法落實(shí)為具體的影像。
產(chǎn)品升級(jí)迭代和產(chǎn)業(yè)應(yīng)用需求同步
作為首個(gè)面向全球公眾開(kāi)放測(cè)試的視頻生成大模型，可靈AI持續(xù)進(jìn)行技術(shù)迭代和產(chǎn)品升級(jí)，在全球視頻生成大模型中持續(xù)保持領(lǐng)先。自6月6日發(fā)布以來(lái)，可靈AI已經(jīng)進(jìn)行了十余次功能升級(jí)，上線了1.5版本基礎(chǔ)模型，并推出了獨(dú)立App。
賈樟柯導(dǎo)演在創(chuàng)作生涯中首次嘗試讓機(jī)器人擔(dān)任影片主角，他面臨的最大技術(shù)挑戰(zhàn)是人物一致性。人物臉部特征難以保持，是視頻生成大模型領(lǐng)域的一個(gè)關(guān)鍵難題。在“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”制作期間，可靈AI推出了視頻人臉訓(xùn)練模型功能。只用極少的視頻素材，就可以訓(xùn)練出專(zhuān)屬的人臉模型，解決了以往AI視頻生成中無(wú)法塑造穩(wěn)定人物的難題?；谶@樣的新功能，導(dǎo)演團(tuán)隊(duì)最終選擇以“長(zhǎng)著人臉”的仿生機(jī)器人作為主角，順利完成了這部時(shí)長(zhǎng)6分鐘的硅基人公路片。
此外，賈樟柯導(dǎo)演還應(yīng)用了可靈AI新推出的“對(duì)口型”功能，并挑戰(zhàn)了“對(duì)口型”功能講方言的能力，該功能支持用戶在生成人物視頻后上傳音頻，并將音頻內(nèi)容與視頻人物嘴型同步，以滿足影視創(chuàng)作中人物對(duì)白的基本需要。自嘲用普通話不會(huì)寫(xiě)劇本的賈樟柯，在自己首部AIGC電影短片《麥?zhǔn)铡分?，成功讓機(jī)器人說(shuō)上了山西汾陽(yáng)話。
人與AI共創(chuàng)將成為新的創(chuàng)作形式
影視文娛領(lǐng)域是AIGC應(yīng)用落地最快的領(lǐng)域之一，包括可靈AI在內(nèi)的技術(shù)革新，正在極大地降低視頻內(nèi)容制作的門(mén)檻，提升內(nèi)容生產(chǎn)的效率。業(yè)內(nèi)人士預(yù)測(cè)，隨著視覺(jué)生成大模型技術(shù)的不斷突破，未來(lái)一至兩年，在AIGC領(lǐng)域有望落地影視工業(yè)級(jí)的生產(chǎn)工具，并規(guī)?；瘧?yīng)用。
以可靈AI為代表的視覺(jué)大模型及產(chǎn)品將逐漸成為視覺(jué)行業(yè)的新基建和新工具。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”，旨在通過(guò)AIGC制作電影級(jí)內(nèi)容的探索，推動(dòng)人文藝術(shù)與AIGC技術(shù)的深度融合，讓人與AI共創(chuàng)成為新的創(chuàng)作形式和趨勢(shì)。
“電影創(chuàng)作的核心始終是人類(lèi)的情感與思想”，參與可靈AI導(dǎo)演共創(chuàng)計(jì)劃的AIGC應(yīng)用師溫維斯認(rèn)為，“AI為我們提供了前所未有的創(chuàng)作工具，讓我們能夠以前所未有的方式去講述故事，去表達(dá)情感”。
李少紅導(dǎo)演在職業(yè)生涯中經(jīng)歷了從膠片時(shí)代向數(shù)字時(shí)代的技術(shù)飛躍，她將“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”稱(chēng)為一場(chǎng)實(shí)驗(yàn)，她希望能通過(guò)這場(chǎng)實(shí)驗(yàn)，找到人類(lèi)作為創(chuàng)作者與不斷突破的AI技術(shù)之間如何共處的答案。“我覺(jué)得AI目前來(lái)講更多地可能是一個(gè)工具，它會(huì)非常有助于我們創(chuàng)作。”李少紅說(shuō)。
快手科技副總裁、大模型團(tuán)隊(duì)負(fù)責(zé)人張迪坦言，作為新技術(shù)、新應(yīng)用，目前用戶對(duì)可靈AI這個(gè)新物種比較包容。未來(lái)快手會(huì)堅(jiān)持在大模型方向的技術(shù)投入與創(chuàng)新，堅(jiān)持在真場(chǎng)景中挖掘真價(jià)值，滿足用戶的真需求。
“在‘可靈AI導(dǎo)演計(jì)劃’中，我們看到了人與AI在共創(chuàng)過(guò)程中的創(chuàng)意激發(fā)，也看到了應(yīng)用瓶頸。希望可靈AI能在未來(lái)一年時(shí)間里真正成為一個(gè)成熟的創(chuàng)作工具，能夠成為更多普通用戶的創(chuàng)意工具，能夠真正在影視級(jí)場(chǎng)景中大規(guī)模應(yīng)用”。張迪還透露，可靈AI還將升級(jí)合作模式，針對(duì)影視行業(yè)提供更加個(gè)性化的企業(yè)級(jí)定制服務(wù)，以更好地服務(wù)于影視行業(yè)的產(chǎn)業(yè)智能化升級(jí)。
圖 1 可靈AI導(dǎo)演合作計(jì)劃定檔海報(bào)
這9部具有實(shí)驗(yàn)性質(zhì)的電影短片，全部使用可靈AI進(jìn)行視頻生成，電影導(dǎo)演完全依托視頻生成大模型，群體深度參與電影級(jí)內(nèi)容創(chuàng)作，這在中國(guó)尚屬首次。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”的上線，不僅是一次新技術(shù)對(duì)影視創(chuàng)作和制作邊界的積極探索，也讓AIGC技術(shù)深度參與影視內(nèi)容生產(chǎn)的路線圖更加清晰。
視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力
隨著視頻生成大模型技術(shù)的發(fā)展，新技術(shù)、新工具有望促進(jìn)產(chǎn)業(yè)融合，重構(gòu)生產(chǎn)流程，推動(dòng)內(nèi)容創(chuàng)意產(chǎn)業(yè)革新，已經(jīng)成為共識(shí)。
可靈AI自6月6日發(fā)布以來(lái)，截至11月20日已累計(jì)服務(wù)超500萬(wàn)用戶，生成5100萬(wàn)個(gè)視頻和1.5億張圖片。國(guó)內(nèi)首部AIGC原創(chuàng)奇幻短劇《山海奇鏡之劈波斬浪》，由可靈AI提供深度技術(shù)支持，7月13日上線后15天內(nèi)就實(shí)現(xiàn)正片5集播放量超過(guò)5200萬(wàn)，全網(wǎng)話題曝光量超4.3億。9月9日，快手聯(lián)合9位知名導(dǎo)演發(fā)起“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”，挑戰(zhàn)全部使用可靈AI生成電影級(jí)視頻內(nèi)容。影視行業(yè)的每一次探索，都在拓寬視頻生成技術(shù)給影視創(chuàng)作帶來(lái)的想象力。
《年會(huì)不能停！》的編劇、導(dǎo)演董潤(rùn)年在加入“可靈AI共創(chuàng)計(jì)劃”后，選擇創(chuàng)作一個(gè)在“新世界”中發(fā)生的奇幻故事，這是他過(guò)往創(chuàng)作生涯中幾乎沒(méi)有嘗試過(guò)的類(lèi)型。“當(dāng)我用各種各樣的語(yǔ)言描述給AI一個(gè)世界以后，AI根據(jù)我的描述呈現(xiàn)世界的方式與我的想象完全不一樣，它有它自己獨(dú)到的邏輯。這鼓勵(lì)我去嘗試我設(shè)想過(guò)但還沒(méi)有表達(dá)過(guò)的故事。我傾向于認(rèn)為這是一種跟AI的合作，而不是簡(jiǎn)單地使用一種工具。”董潤(rùn)年說(shuō)。
《獨(dú)行月球》的導(dǎo)演張吃魚(yú)則從知名科幻小說(shuō)作者天瑞說(shuō)符的作品《保衛(wèi)南山公園》中獲得靈感，以重慶為故事背景創(chuàng)作了科幻電影短片《最后的防線》。在畫(huà)面生成過(guò)程中，主角在巨大的機(jī)器人頭頂擺桌子吃火鍋的鏡頭令人印象深刻。
張吃魚(yú)說(shuō)，傳統(tǒng)電影生產(chǎn)流程中，這樣的鏡頭雖然也能實(shí)現(xiàn)，但要么需要耗資巨大的置景，要么通過(guò)需要借助綠幕完成后期制作。而依托可靈AI的技術(shù)，可以用一種效率更高的工作流迅速將腦中的想法落實(shí)為具體的影像。
產(chǎn)品升級(jí)迭代和產(chǎn)業(yè)應(yīng)用需求同步
作為首個(gè)面向全球公眾開(kāi)放測(cè)試的視頻生成大模型，可靈AI持續(xù)進(jìn)行技術(shù)迭代和產(chǎn)品升級(jí)，在全球視頻生成大模型中持續(xù)保持領(lǐng)先。自6月6日發(fā)布以來(lái)，可靈AI已經(jīng)進(jìn)行了十余次功能升級(jí)，上線了1.5版本基礎(chǔ)模型，并推出了獨(dú)立App。
賈樟柯導(dǎo)演在創(chuàng)作生涯中首次嘗試讓機(jī)器人擔(dān)任影片主角，他面臨的最大技術(shù)挑戰(zhàn)是人物一致性。人物臉部特征難以保持，是視頻生成大模型領(lǐng)域的一個(gè)關(guān)鍵難題。在“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”制作期間，可靈AI推出了視頻人臉訓(xùn)練模型功能。只用極少的視頻素材，就可以訓(xùn)練出專(zhuān)屬的人臉模型，解決了以往AI視頻生成中無(wú)法塑造穩(wěn)定人物的難題?；谶@樣的新功能，導(dǎo)演團(tuán)隊(duì)最終選擇以“長(zhǎng)著人臉”的仿生機(jī)器人作為主角，順利完成了這部時(shí)長(zhǎng)6分鐘的硅基人公路片。
此外，賈樟柯導(dǎo)演還應(yīng)用了可靈AI新推出的“對(duì)口型”功能，并挑戰(zhàn)了“對(duì)口型”功能講方言的能力，該功能支持用戶在生成人物視頻后上傳音頻，并將音頻內(nèi)容與視頻人物嘴型同步，以滿足影視創(chuàng)作中人物對(duì)白的基本需要。自嘲用普通話不會(huì)寫(xiě)劇本的賈樟柯，在自己首部AIGC電影短片《麥?zhǔn)铡分?，成功讓機(jī)器人說(shuō)上了山西汾陽(yáng)話。
人與AI共創(chuàng)將成為新的創(chuàng)作形式
影視文娛領(lǐng)域是AIGC應(yīng)用落地最快的領(lǐng)域之一，包括可靈AI在內(nèi)的技術(shù)革新，正在極大地降低視頻內(nèi)容制作的門(mén)檻，提升內(nèi)容生產(chǎn)的效率。業(yè)內(nèi)人士預(yù)測(cè)，隨著視覺(jué)生成大模型技術(shù)的不斷突破，未來(lái)一至兩年，在AIGC領(lǐng)域有望落地影視工業(yè)級(jí)的生產(chǎn)工具，并規(guī)?；瘧?yīng)用。
以可靈AI為代表的視覺(jué)大模型及產(chǎn)品將逐漸成為視覺(jué)行業(yè)的新基建和新工具。“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”，旨在通過(guò)AIGC制作電影級(jí)內(nèi)容的探索，推動(dòng)人文藝術(shù)與AIGC技術(shù)的深度融合，讓人與AI共創(chuàng)成為新的創(chuàng)作形式和趨勢(shì)。
“電影創(chuàng)作的核心始終是人類(lèi)的情感與思想”，參與可靈AI導(dǎo)演共創(chuàng)計(jì)劃的AIGC應(yīng)用師溫維斯認(rèn)為，“AI為我們提供了前所未有的創(chuàng)作工具，讓我們能夠以前所未有的方式去講述故事，去表達(dá)情感”。
李少紅導(dǎo)演在職業(yè)生涯中經(jīng)歷了從膠片時(shí)代向數(shù)字時(shí)代的技術(shù)飛躍，她將“可靈AI導(dǎo)演共創(chuàng)計(jì)劃”稱(chēng)為一場(chǎng)實(shí)驗(yàn)，她希望能通過(guò)這場(chǎng)實(shí)驗(yàn)，找到人類(lèi)作為創(chuàng)作者與不斷突破的AI技術(shù)之間如何共處的答案。“我覺(jué)得AI目前來(lái)講更多地可能是一個(gè)工具，它會(huì)非常有助于我們創(chuàng)作。”李少紅說(shuō)。
快手科技副總裁、大模型團(tuán)隊(duì)負(fù)責(zé)人張迪坦言，作為新技術(shù)、新應(yīng)用，目前用戶對(duì)可靈AI這個(gè)新物種比較包容。未來(lái)快手會(huì)堅(jiān)持在大模型方向的技術(shù)投入與創(chuàng)新，堅(jiān)持在真場(chǎng)景中挖掘真價(jià)值，滿足用戶的真需求。
“在‘可靈AI導(dǎo)演計(jì)劃’中，我們看到了人與AI在共創(chuàng)過(guò)程中的創(chuàng)意激發(fā)，也看到了應(yīng)用瓶頸。希望可靈AI能在未來(lái)一年時(shí)間里真正成為一個(gè)成熟的創(chuàng)作工具，能夠成為更多普通用戶的創(chuàng)意工具，能夠真正在影視級(jí)場(chǎng)景中大規(guī)模應(yīng)用”。張迪還透露，可靈AI還將升級(jí)合作模式，針對(duì)影視行業(yè)提供更加個(gè)性化的企業(yè)級(jí)定制服務(wù)，以更好地服務(wù)于影視行業(yè)的產(chǎn)業(yè)智能化升級(jí)。