智能视频内容生产中专业视频数据导出工具的研发
點(diǎn)擊上方“LiveVideoStack”關(guān)注我們
隨著智能視頻生產(chǎn)時(shí)代的到來(lái),專(zhuān)業(yè)視頻的制作將會(huì)變得更智能、更簡(jiǎn)單。智能視頻生產(chǎn)中主要包含三大模塊,他們分別是:視頻SDK底層能力、AI能力以及海量視頻預(yù)設(shè)導(dǎo)出能力。本次LiveVideoStackCon 2021北京站,杭州視杏科技有限公司CEO 李志強(qiáng),向我們分享了如何研發(fā)智能視頻預(yù)設(shè)工具來(lái)輔助設(shè)計(jì)師智能導(dǎo)出預(yù)設(shè)內(nèi)容以及一些成功的案例。
文?| 李志強(qiáng)
整理 | LiveVideoStack
大家好,我是來(lái)自杭州視杏科技有限公司的創(chuàng)始人&CEO——李志強(qiáng)(節(jié)子),視杏科技主要關(guān)注的是專(zhuān)業(yè)視頻數(shù)據(jù)的導(dǎo)出。為什么要強(qiáng)調(diào)的是“專(zhuān)業(yè)”,這在我整個(gè)分享的過(guò)程中大家也會(huì)陸續(xù)地感覺(jué)到。
先來(lái)看一下我們今天分享的題目——智能視頻內(nèi)容生產(chǎn)場(chǎng)景中專(zhuān)業(yè)視頻數(shù)據(jù)導(dǎo)出工具的研發(fā)。智能視頻內(nèi)容生產(chǎn)場(chǎng)景的概念,大家可能都已經(jīng)接觸過(guò)。我們嘗試解決設(shè)計(jì)師感性設(shè)計(jì)的一些問(wèn)題,主要針對(duì)的是一些對(duì)視頻內(nèi)容需求量比較大、頻次比較高且對(duì)制作效率要求比較高的場(chǎng)景,這需要利用技術(shù)智能地去實(shí)現(xiàn)內(nèi)容的生產(chǎn)。在這種生產(chǎn)中之所以需要這一些數(shù)據(jù)的導(dǎo)出,是因?yàn)槟壳皝?lái)講,我們的解決方案特別是針對(duì)專(zhuān)業(yè)視頻生產(chǎn)這個(gè)環(huán)節(jié)的方案,是不可能把設(shè)計(jì)師這個(gè)角色排除在外的,因?yàn)閷?zhuān)業(yè)視頻生產(chǎn)本身還是要依靠專(zhuān)業(yè)設(shè)計(jì)師的感性設(shè)計(jì)能力,我們能做的就是把這些感性設(shè)計(jì)的能力數(shù)據(jù)化,變成我們的代碼,變成可以去重復(fù)利用的一些資產(chǎn)。今天我就和大家分享一下我們公司在牽扯到這一方面問(wèn)題的時(shí)候,是如何做操作的。
1.進(jìn)入視頻內(nèi)容生產(chǎn)技術(shù)的現(xiàn)狀
1.1 應(yīng)用場(chǎng)景
1.1.1 自動(dòng)化廣告
首先我們了解一下現(xiàn)狀,這里列舉了幾個(gè)應(yīng)用場(chǎng)景。首先一個(gè)比較大的應(yīng)用場(chǎng)景就是自動(dòng)化的信息流廣告,這個(gè)需求場(chǎng)景的出現(xiàn)就像目前大家熱議的“內(nèi)卷”,是基于這種狀態(tài)下產(chǎn)生的一個(gè)新的需求。
特別是在出海領(lǐng)域我們的一些客戶(hù)在去投放廣告的時(shí)候,比如面對(duì)的客戶(hù)可能是一些東南亞國(guó)家,每個(gè)國(guó)家有自己的語(yǔ)言,如果我們使用以前傳統(tǒng)的低頻次廣告投放,可能一周或者一個(gè)月更新一次廣告內(nèi)容,那么使用人工的手段去制作視頻廣告是沒(méi)有問(wèn)題,但是現(xiàn)在當(dāng)我們需要去提高用戶(hù)對(duì)這些廣告的興趣度、關(guān)注度時(shí),我們不得不去針對(duì)每個(gè)用戶(hù)個(gè)人的用戶(hù)畫(huà)像,為他們提供定制的視頻內(nèi)容。在這個(gè)時(shí)候,自動(dòng)化的視頻廣告內(nèi)容生產(chǎn)便成為一種行業(yè)需求,這方面我們主要是與Facebook中國(guó)區(qū)廣告代理商達(dá)成合作。中國(guó)很多出海的APP、外貿(mào)行業(yè)從業(yè)人員需要通過(guò)代理商去做一些海外社群的信息流推廣。我們主要幫助去解決這種智能信息流視頻廣告生產(chǎn)的問(wèn)題。
1.1.2 模板化視頻制作網(wǎng)站APP
相信在座各位都比較熟悉一些模板化的視頻制作,這也是現(xiàn)在應(yīng)用比較廣泛的一種偏專(zhuān)業(yè)的視頻內(nèi)容生成的方式,也是我們很多移動(dòng)端的產(chǎn)品中目前都具備的能力,同時(shí)也是為了讓我們這些非設(shè)計(jì)師的普通用戶(hù),能夠便捷地通過(guò)一次兩次的點(diǎn)擊的方式生成一個(gè)專(zhuān)業(yè)視頻所采取的一種手段。在這方面移動(dòng)端的客戶(hù)比較多,這里暫時(shí)不一一列舉。
我們選擇的一種方案是希望融入專(zhuān)業(yè)設(shè)計(jì)師的設(shè)計(jì)能力。專(zhuān)業(yè)設(shè)計(jì)師的創(chuàng)意能力培養(yǎng)以及對(duì)一個(gè)工具熟練使用程度本身的成本高、周期長(zhǎng)。為了對(duì)設(shè)計(jì)師友好,我們選擇直接兼容設(shè)計(jì)師目前熟悉的工具鏈AE去設(shè)計(jì)各種復(fù)雜的模板。
1.1.3 直播混剪
一些直播的混剪工作,我們主要和達(dá)摩院合作。因?yàn)橄耠娚踢M(jìn)行直播,他們一條直播素材可能就5、6個(gè)小時(shí),而這些直播素材往往還需要進(jìn)行二次加工,如果我把直播中一些高光片段拆出來(lái)后再進(jìn)行二次剪輯,再去生成一些短視頻,再在其他的短視頻平臺(tái)投放,那么從這里可以看出這個(gè)剪輯的工作就變成一個(gè)勞動(dòng)密集型的工作,人工參與進(jìn)去變得是ROI很低的一個(gè)事了,所以我們也在利用我們?cè)谝曨l剪輯方面的能力去實(shí)現(xiàn)直播視頻的剪輯和包裝工作。
1.1.4 景區(qū)原生素材生產(chǎn)
景區(qū)為了豐富游客的游玩體驗(yàn),或者像一些新能源汽車(chē)根據(jù)車(chē)載攝像頭收集到的視頻素材制作出智能剪輯,他們其實(shí)都是同一類(lèi)型的需求,讓我們的生活體驗(yàn)開(kāi)始升級(jí),利用智能的技術(shù)為我們生活中一些原本需要手工操作的事情提供一種智能化的解決方案。
1.2 智能視頻技術(shù)生產(chǎn)難點(diǎn)
有了許多需求場(chǎng)景做鋪墊,我們現(xiàn)在遇到的問(wèn)題有哪些呢?我們與大家分享一下。
第一個(gè)難點(diǎn)是AI能力,這是我們?cè)谶M(jìn)行智能生產(chǎn)的第一步。我們需要理解用戶(hù)的素材,理解主要是對(duì)語(yǔ)義的理解、多模態(tài)的識(shí)別等技術(shù)手段去對(duì)用戶(hù)的素材進(jìn)行分析。這一方面工作,今天參加LVS的合作伙伴里有一些做的已經(jīng)非常棒了,我們主要關(guān)注的是后面兩個(gè)難點(diǎn)。
第二個(gè)難點(diǎn)是主題模板,它主要指的是一個(gè)比較完整的專(zhuān)業(yè)設(shè)計(jì)本身所包含的整個(gè)流程:從設(shè)計(jì)師這一側(cè)去設(shè)計(jì)形成創(chuàng)意把它變成一個(gè)可視化的作品,到最終把這個(gè)作品變成一個(gè)可編輯的模板投放給的C端用戶(hù)。
第三個(gè)難點(diǎn)是視頻預(yù)設(shè),它主要指的是一些在剪輯過(guò)程中獲取到的視頻模板并不完整,我們需要去把設(shè)計(jì)師的能力進(jìn)行模塊化的拆解,再把這些模塊化的能力再提供給有一定創(chuàng)作能力的小白用戶(hù),使他們可以進(jìn)行二次利用。
1.3 目前現(xiàn)狀
我們認(rèn)為還存在著兩個(gè)比較大的問(wèn)題,這里和大家探討一下。
首先第一個(gè)問(wèn)題是效果比較差,我們?cè)谟懻撘粋€(gè)效果或者一個(gè)模板本身所包含哪些效果,特別是從技術(shù)一側(cè)去討論這個(gè)問(wèn)題時(shí),比如現(xiàn)在比較流行的“靈魂出竅”,這些詞變成了一些行業(yè)術(shù)語(yǔ)了。但是從設(shè)計(jì)師的角度看,他們并不會(huì)去這樣去描述一個(gè)效果本身,因?yàn)樗麄儠?huì)使用一個(gè)他熟悉的工具比如AE,而AE會(huì)把它拆解成圖層的動(dòng)畫(huà),在圖層本身再加上一些特效,或者圖層樣式,或者和其他圖層互動(dòng)產(chǎn)生一些track matte等等,通過(guò)多種工具的組合形成各種各樣的效果,而不是局限在某一種特定的效果如何實(shí)現(xiàn)。如果我們對(duì)設(shè)計(jì)師的工作流程或者他的能力支持的不到位,就會(huì)出現(xiàn)設(shè)計(jì)師的創(chuàng)意沒(méi)辦法施展開(kāi)的問(wèn)題。
不知道各位公司里面有沒(méi)有遇到這種情況:某天你的設(shè)計(jì)師在和技術(shù)區(qū)人員討論時(shí)說(shuō)大腦中有這么一個(gè)效果的技術(shù),而技術(shù)人員聽(tīng)到設(shè)計(jì)師的需求就覺(jué)得這個(gè)想法比較難實(shí)現(xiàn)。其實(shí)在設(shè)計(jì)師的角度看,這個(gè)想法是非常簡(jiǎn)單的,因?yàn)樗呀?jīng)熟練使用AE的工具集,他能很快的去制作出效果,但是針對(duì)這些效果如果技術(shù)側(cè)沒(méi)有對(duì)應(yīng)的技術(shù)解決方案,往往就會(huì)變得非常棘手了。
第二個(gè)問(wèn)題實(shí)際上是由第一個(gè)問(wèn)題造成的,如果我們沒(méi)有給設(shè)計(jì)師一個(gè)稱(chēng)手的工具,那么設(shè)計(jì)師的設(shè)計(jì)能力、進(jìn)行數(shù)據(jù)轉(zhuǎn)化就變得非常困難。在這個(gè)時(shí)候技術(shù)人員就被迫又參與其中:在設(shè)計(jì)師產(chǎn)生的一堆原始數(shù)據(jù)的基礎(chǔ)上,進(jìn)行一些代碼的二次加工,把它形成一套SDK可以處理的模板。
我們的決心是把這兩個(gè)問(wèn)題徹底解決。
2.智能視頻生產(chǎn)時(shí)代需要的預(yù)設(shè)導(dǎo)出工具
2.1 方案介紹
我們這邊給設(shè)計(jì)師的一個(gè)設(shè)計(jì)工具叫做VE Exporter,它是服務(wù)于設(shè)計(jì)師的一款工具,設(shè)計(jì)師能夠利用它去產(chǎn)生數(shù)據(jù)模板、設(shè)計(jì)模板,這個(gè)設(shè)計(jì)模板再配合我們的VE SDK,它可以形成各種功能化的體驗(yàn),比如模板視頻、相冊(cè)、動(dòng)態(tài)模、攝像機(jī)模板、貼紙濾鏡等。而所有功能都來(lái)源于設(shè)計(jì)師的創(chuàng)意。
我是設(shè)計(jì)師出身,所以我對(duì)設(shè)計(jì)師能力在我們技術(shù)行業(yè)的應(yīng)用的事情耿耿于懷。專(zhuān)業(yè)設(shè)計(jì)師本身的創(chuàng)意能力如果不能發(fā)揮出來(lái),那么技術(shù)人員能做的僅僅是一些蹩腳的臨摹工作而已,所以我們會(huì)非常在乎這個(gè)問(wèn)題。這里有一個(gè)視頻,我給大家展示一下。
當(dāng)設(shè)計(jì)師在利用AE設(shè)計(jì)工具自由地創(chuàng)作好一個(gè)作品之后,可以啟動(dòng)VE Exporter,VE Exporter可以一鍵載入它的效果,它可以設(shè)置一些默認(rèn)的背景音樂(lè)。當(dāng)我們從需求場(chǎng)景出發(fā),我們可能還會(huì)遇到一個(gè)問(wèn)題:我們把這個(gè)模板給用戶(hù)之后,用戶(hù)怎么去進(jìn)行修改呢?VE Exporter還提供了一些設(shè)計(jì)工具,可以把模板的編輯界面都設(shè)計(jì)好。設(shè)計(jì)完成后,比如在AE里有100個(gè)素材,但其中有1-10個(gè)素材我們希望用戶(hù)能夠修改,剩下的素材并不希望用戶(hù)去觸碰,而這個(gè)時(shí)候這些素材的可編輯器以及它在界面的哪一個(gè)編輯組能夠呈現(xiàn),都可以在這里通過(guò)拖拽和擺放進(jìn)行比較好的設(shè)計(jì)。最后就可以把它導(dǎo)出成一個(gè)模板包,然后放到SDK里面去編輯使用。
我們現(xiàn)在具體做到了一個(gè)什么程度了?簡(jiǎn)單來(lái)說(shuō)就是我們?cè)诩嫒軦E,但實(shí)際上我們要做的是全是苦功夫。因?yàn)锳E本身不是一款開(kāi)源軟件,它沒(méi)有技術(shù)規(guī)范,我們要做的工作就是倒推它每一個(gè)參數(shù)后面的算法是什么, 然后我們自己再通過(guò)我們的方式把它實(shí)現(xiàn),保證我們得到的結(jié)果是和AE完全一致的。為了這個(gè)工作,我們把以前從設(shè)計(jì)師時(shí)代的經(jīng)驗(yàn)積累到現(xiàn)在我們對(duì)圖形學(xué)的一些理解,進(jìn)行了深入挖掘,最終得到了現(xiàn)在不錯(cuò)的綜合體驗(yàn)。
目前的我們對(duì)AE中除了燈光層以外幾乎所有圖層都進(jìn)行了一個(gè)支持,比如視頻層、圖片層、序列幀、文字層、空層、調(diào)節(jié)層、固態(tài)層、攝像機(jī)層等都有一個(gè)完整的支持,像一些關(guān)鍵的動(dòng)畫(huà)如圖層的動(dòng)畫(huà)、攝像機(jī)動(dòng)畫(huà)、mask形狀動(dòng)畫(huà)、字符動(dòng)畫(huà)、layer style動(dòng)畫(huà)都有完整的支持。為什么AE被大家所廣泛喜歡,其中有一個(gè)非常大的原因在于它有豐富的特效系統(tǒng),為了讓設(shè)計(jì)師能夠比較自由地使用AE,我們也花了很多苦功夫去對(duì)AE里面的特效進(jìn)行二次研發(fā)。如果我們把現(xiàn)有的能力做成一個(gè)新的特效,其實(shí)并不復(fù)雜,但是如果要保證一個(gè)現(xiàn)有的黑核特效,把它完美地還原出來(lái),這個(gè)工作就開(kāi)始變得棘手了。
舉個(gè)例子,我們?cè)谌?shí)現(xiàn)AE里的3D圖層渲染的時(shí)候,從游戲圖形學(xué)的角度去解讀這個(gè)工作與我們從設(shè)計(jì)師的角度去理解這個(gè)工作,它實(shí)際上是完全不同的兩個(gè)難度。再舉個(gè)例子,大家看一個(gè)礦泉水瓶,它本身是個(gè)3D物體且半透明,當(dāng)你把這些礦泉水瓶從前到后疊成一條線,就會(huì)出現(xiàn)多個(gè)半透明的物體前后穿插的光線渲染的問(wèn)題。這個(gè)問(wèn)題在AE里的一個(gè)表現(xiàn)就是半透明的3D物體互相穿插以及應(yīng)用了各種圖層混合模式之后,如何得到一個(gè)正確的結(jié)果。這個(gè)問(wèn)題通常在游戲引擎里面,大家的做法是根據(jù)一個(gè)物體具體攝像機(jī)的位置進(jìn)行排序,把最遠(yuǎn)的物體先渲染,最近的物體依次往后渲染,再使用混合模式。但這個(gè)工作在AE中行不通,因?yàn)锳E里的圖層順序是設(shè)計(jì)師決定的,我們不能去改它的順序,所以為了完成整個(gè)渲染任務(wù),我們不得不去研究這種像這種亂序的3D透明的算法該如何實(shí)現(xiàn)。目前我覺(jué)得這個(gè)問(wèn)題我們解決的不錯(cuò),大家如果感興趣也可以去下載一下VE Exporter結(jié)合AE體驗(yàn)一下我們的效果。
AE本身的插件非常豐富,我們?cè)诩嫒菟牟寮r(shí),不能一步到位把所有的東西都兼容掉,我們的思路是這樣的:先去兼容那些使用量非常高,而且在模板上必要兼容的一些插件。當(dāng)有一些特效并不需要用戶(hù)去修改的時(shí)候,我們并不需要去實(shí)時(shí)渲染它,我們甚至可以提前把它渲染成一些素材來(lái)節(jié)省這個(gè)實(shí)時(shí)操作時(shí)候的一些計(jì)算量,像粒子插件、一些光效插件往往是這種類(lèi)型的,那么這種插件我們沒(méi)必要現(xiàn)在兼容。我們現(xiàn)在兼容的往往是那些需要應(yīng)用在用戶(hù)的素材上,沒(méi)辦法進(jìn)行提前渲染的插件,比如說(shuō)調(diào)色、變形、模糊,包括一些對(duì)背景的處理、轉(zhuǎn)場(chǎng)插件等。
除了對(duì)AE的插件進(jìn)行介入以外,我們還研發(fā)了大量的AE插件。一方面,作為設(shè)計(jì)師可以直接下載安裝到自己的AE中,在日常的設(shè)計(jì)工作中正常的使用它;另一方面,用這些插件做的效果直接放到SDK也可以完美還原,SDK和AE的功能是同步的。
我們自己研發(fā)插件主要有兩個(gè)方向,第一個(gè)主要是AE有些現(xiàn)有的能力,但是如果按照現(xiàn)有AE的使用習(xí)慣使用可能導(dǎo)致渲染效率不高,我們?cè)谝苿?dòng)端去還原這個(gè)效果的時(shí)候,產(chǎn)品體驗(yàn)就不好。所以我們往往會(huì)使用我們自己的一套算法,把這效果做一個(gè)加強(qiáng)來(lái)去優(yōu)化整個(gè)渲染流程。
另外一個(gè)方向就是增加一些AE本身不具備的能力。舉個(gè)常見(jiàn)的例子,像我黨在開(kāi)會(huì)的時(shí)候往往會(huì)有一些金光閃閃的大字,這種大字在我們模板制作中的應(yīng)用是非常廣泛的,而這種效果在AE里面去做非常難實(shí)現(xiàn),而且渲染效率非常低。那么針對(duì)這種特定的使用場(chǎng)景,我們往往會(huì)提供一些非常便捷、一鍵出效果的設(shè)計(jì)工具給到設(shè)計(jì)師,讓他在日常的模板設(shè)計(jì)中能夠做出非常不錯(cuò)的效果。現(xiàn)在插件我們幾乎是每個(gè)月都會(huì)發(fā)兩款左右,而且都是免費(fèi)的,大家都可以去下載使用。
這里有一個(gè)視頻,大家看一下。像視頻里的元素,基本上都是可以修改的,用戶(hù)只用在鍵盤(pán)上輸入一個(gè)新的字,那在保證同樣效果的情況下,原來(lái)的文字的元素都會(huì)被替換掉。后面呢有一些我們的設(shè)計(jì)師用我們的插件做的一些效果,大家可以看一下。剛才的視頻是設(shè)計(jì)師用我們發(fā)布的插件在他日常使用中做模板的一些效果的混剪。
2.2 方案優(yōu)勢(shì)
剛剛給大家介紹的VE Exporter以及我們選用的這一套技術(shù)方案,我們覺(jué)得它本身具有三個(gè)比較大的優(yōu)勢(shì)。
首先第一個(gè)優(yōu)勢(shì)是VE Exporter從它底層的對(duì)AE的解析以及它對(duì)SDK的渲染本身都是我們從0開(kāi)始研發(fā)去完成的,所以我們并不需要拘泥于任何現(xiàn)有的技術(shù)形態(tài)。
第二個(gè)是優(yōu)勢(shì)是,我們非常注重設(shè)計(jì)師的體驗(yàn),VE Exporter的使用流程和AE的操作習(xí)慣都是完美吻合的,而且它可以直接被安裝到AE中,對(duì)設(shè)計(jì)師友好度非常高。
在座的應(yīng)該接觸過(guò)一個(gè)技術(shù)方案,以前他叫做BodyMovin,但現(xiàn)在大家應(yīng)該更多接觸他名字叫Lottie,這個(gè)方案之前是我認(rèn)識(shí)的一個(gè)國(guó)外的開(kāi)發(fā)者好友寫(xiě)的一個(gè)主要是解決UI動(dòng)畫(huà)的一個(gè)數(shù)據(jù)導(dǎo)出,把AE里面的一些UI動(dòng)畫(huà)導(dǎo)出成json格式,后來(lái)被Airbnb提供了一些渲染框架之后,中國(guó)很多廠商都會(huì)利用它來(lái)實(shí)現(xiàn)模板渲染的技術(shù)方案。本身它有很好的用戶(hù)基數(shù),主要原因是它是開(kāi)源、免費(fèi)。為了讓我們的客戶(hù)包括我們的設(shè)計(jì)師能夠有大量的素材,我們的SDK也是直接兼容Lottie的這套方案的,也就是說(shuō)現(xiàn)在市面上的所有的Lottie文件可以直接放到我們SDK,可以有完美的功能還原。
2.3 VE Leap
既然設(shè)計(jì)師對(duì)我們來(lái)說(shuō)那么重要,那我們一定要服務(wù)好他,除了從工具上服務(wù)好他,我們還提供了一個(gè)設(shè)計(jì)師的社區(qū),叫做VE Leap,網(wǎng)址就是veleap.com。
它的功能主要有三個(gè)主要有三個(gè)。第一個(gè)是提供專(zhuān)業(yè)的設(shè)計(jì)工具,主要提供一些AE的插件、增效工具去幫助解決設(shè)計(jì)師在模板設(shè)計(jì)中遇到的所有的這個(gè)痛點(diǎn)問(wèn)題。
第二個(gè)是提供專(zhuān)業(yè)的設(shè)計(jì)教程。
第三個(gè)是這個(gè)模板的交易,最開(kāi)始從一些B端客戶(hù)的需求發(fā)起。因?yàn)楫?dāng)這個(gè)設(shè)計(jì)工具本身足夠開(kāi)放、靈活之后,它會(huì)立刻產(chǎn)生大量的素材需求,這個(gè)時(shí)候市面上的任何一個(gè)設(shè)計(jì)師都可以變成它的這個(gè)素材供給者。因?yàn)閂E Exporter足夠好用,基本上一個(gè)新設(shè)計(jì)師三個(gè)小時(shí)就可以上手產(chǎn)生模板,所以會(huì)有很大量的模板交易的需求在我們平臺(tái)上流轉(zhuǎn)。現(xiàn)在VE Exporter我們還沒(méi)有做一些推廣,目前的用戶(hù)接近1萬(wàn)名設(shè)計(jì)師左右。我們其中很多還在上學(xué)的設(shè)計(jì)專(zhuān)業(yè)的設(shè)計(jì)師,基本在平臺(tái)上都每月能夠有上萬(wàn)元的收入。
2.4 技術(shù)方案生態(tài)
那么VE Exporter、VE Leap和SDK他們?nèi)?#xff0c;SDK今天不是我所講的重點(diǎn),但是它本身是一個(gè)不可或缺的角色。像我剛才提到的它主要解決的問(wèn)題是給我們的模板提供一個(gè)跨平臺(tái)產(chǎn)品化使用的一個(gè)解決方案;VE Exporter主要做的工作是對(duì)我們的設(shè)計(jì)進(jìn)行數(shù)據(jù)化的導(dǎo)出;VE Leap是使用我們工具的設(shè)計(jì)師進(jìn)行交流學(xué)習(xí)、創(chuàng)作變現(xiàn)的一個(gè)社區(qū)。這三者是互相促進(jìn)、相互影響的一個(gè)關(guān)系。
2.5 C端用戶(hù)解決方案
下面我簡(jiǎn)單介紹一下我們現(xiàn)在針對(duì)C端用戶(hù)一側(cè)提供的一些解決方案。
第一個(gè)方案是標(biāo)準(zhǔn)模板。這個(gè)比較容易理解,設(shè)計(jì)師把自己一個(gè)完整的作品作為一個(gè)模板投放出去給普通用戶(hù)去使用。這里有一個(gè)我們的客戶(hù)使用設(shè)計(jì)師的模板,展示了他的編輯界面長(zhǎng)什么樣子、有哪些圖片進(jìn)行編輯,設(shè)計(jì)師把這個(gè)東西設(shè)計(jì)好之后導(dǎo)出,其他用戶(hù)就可以在web端移動(dòng)端進(jìn)行模板本身的編輯,還有渲染輸出。還有一個(gè)移動(dòng)端的編輯。時(shí)間關(guān)系我就不一一視頻展示,等一下我會(huì)把這個(gè)體驗(yàn)的二維碼發(fā)出來(lái),大家可有興趣的可以直接掃碼,在手機(jī)端安裝體驗(yàn)。
動(dòng)態(tài)模板主要是體現(xiàn)在電子相冊(cè),那么不同點(diǎn)在于什么呢?我們是基本上把一個(gè)設(shè)計(jì)師他的模板進(jìn)行一個(gè)模塊化的拆解,比如你做完了一個(gè)作品,我們幫你拆解成不同的動(dòng)畫(huà)片段,當(dāng)用戶(hù)流入一些任意數(shù)量的素材的時(shí)候,我們會(huì)把這個(gè)模板打散重組,保證它的效果。就是根據(jù)用戶(hù)素材的數(shù)量去生成一個(gè)專(zhuān)業(yè)的視頻效果。因?yàn)殡娮酉鄡?cè)的使用場(chǎng)景是以前我們并不知道用戶(hù)大概需要多少?gòu)垐D片,所以對(duì)我們的模板創(chuàng)作也提出了一些新的需求。
攝像機(jī)模板SDK比較容易理解,它結(jié)合攝像機(jī)的一些能力,設(shè)計(jì)師在設(shè)計(jì)模板的時(shí)候可以把自己模板中的某一個(gè)素材設(shè)置為攝像機(jī)輸入源,那么他的模板里面其他的一些特效動(dòng)畫(huà)得以保留,同時(shí)又可以和相機(jī)畫(huà)面進(jìn)行實(shí)時(shí)的互動(dòng)。像一些基礎(chǔ)的美顏、美型的能力也都是很好的,能夠配合模板進(jìn)行使用。
剪輯SDK大家應(yīng)該都很熟悉,比如說(shuō)它提供的一些軌道、轉(zhuǎn)場(chǎng)、特效等,這些元素似乎變成我們現(xiàn)在做視頻處理的一些技術(shù)方案的基本素質(zhì)了。我們?nèi)匀皇前言O(shè)計(jì)師融入到整個(gè)解決方案中。舉個(gè)例子,就像我們?cè)谑褂靡粋€(gè)剪輯過(guò)程中,它的轉(zhuǎn)場(chǎng)、特效,字符的動(dòng)畫(huà)樣式等都源于設(shè)計(jì)師在AE中設(shè)計(jì)好后進(jìn)行模塊化的拆解,導(dǎo)出成不同使用場(chǎng)景下的預(yù)設(shè)包。大家要是感興趣的話,可以直接掃描二維碼去下載我們的demo進(jìn)行體驗(yàn),大家會(huì)看到現(xiàn)在里面大概是提供了兩三百套像轉(zhuǎn)場(chǎng)、特效、濾鏡、預(yù)設(shè),基本上這些花了我們兩個(gè)設(shè)計(jì)師大概兩周的時(shí)間,根本沒(méi)有任何開(kāi)發(fā)的參與。
VE SDK擁有強(qiáng)大的跨平臺(tái)能力,除了移動(dòng)端以外,我們的桌面端包括服務(wù)器、web瀏覽器,我們利用Websambly技術(shù)進(jìn)行了支持。我們?cè)O(shè)計(jì)的VE Exporter接下來(lái)也會(huì)朝web端的方向發(fā)展,主要是為了讓我們的整個(gè)設(shè)計(jì)工具的體驗(yàn)變得便捷,同時(shí)和我們的社區(qū)里面的資產(chǎn)進(jìn)行一個(gè)比較良好的互動(dòng)。
3.客戶(hù)案例
接下來(lái)和大家分享一下典型的客戶(hù)案例。
3.1 電商智能
首先是在電商智能這一個(gè)領(lǐng)域。我們是從去年5月份開(kāi)始和阿里的智能設(shè)計(jì)部門(mén)進(jìn)行合作,阿里現(xiàn)在面臨的一個(gè)問(wèn)題主要是去解決他們整個(gè)電商廣告從圖片向視頻升級(jí)的一個(gè)時(shí)代的變遷。智能設(shè)計(jì)以前一個(gè)非常棒的解決方案就是他們的魯班,大家打開(kāi)淘寶之后能看到一個(gè)平面廣告,這個(gè)平面廣告是千人千面的,在你打開(kāi)的100毫秒以?xún)?nèi),它為你自動(dòng)設(shè)計(jì)了一個(gè)圖片。他們現(xiàn)在接到的新任務(wù)就是開(kāi)始要提供一種智能化視頻的生成了。我們從去年5月份開(kāi)始,利用我們的模板解決方案和他們的需求進(jìn)行對(duì)接,幫他們實(shí)現(xiàn)了目前一些移動(dòng)端還有云端的智能電商視頻制作的一些產(chǎn)品。
AI這一方面我們和達(dá)摩院有一個(gè)比較深入的合作,目前我們跟他合作了一款智能剪輯的產(chǎn)品叫做“橙畫(huà)”。這個(gè)產(chǎn)品現(xiàn)在應(yīng)該是已經(jīng)上線的狀態(tài),大家可以去體驗(yàn)。我們主要是結(jié)合了達(dá)摩院的AI識(shí)別能力加上我們視頻處理以及模板的能力去完成整個(gè)智能剪輯的一鍵操作流程。
3.2 運(yùn)營(yíng)商
運(yùn)營(yíng)商也是一個(gè)目前5G時(shí)代比較活躍的群體,因?yàn)榇蠹叶荚谔剿髟?G的這個(gè)場(chǎng)景中運(yùn)營(yíng)商能夠提出什么新的業(yè)務(wù)。其中有一個(gè)業(yè)務(wù)是視頻彩鈴,其實(shí)視頻彩鈴本身只是對(duì)音頻彩鈴的升級(jí),把音頻的內(nèi)容升級(jí)成視頻,但是一個(gè)新的需求是這個(gè)視頻從哪里來(lái)。以前音頻時(shí)代往往是大家去采購(gòu)一些個(gè)性音頻;那么現(xiàn)在視頻時(shí)代,廠商希望用戶(hù)可以自己去制作這些視頻內(nèi)容,于是這個(gè)視頻內(nèi)容的制作變成了一個(gè)新需求。目前我們和國(guó)內(nèi)的幾個(gè)運(yùn)營(yíng)商保持著良好的合作,為其提供視頻創(chuàng)作平臺(tái)的技術(shù)支撐。
我今天的分享內(nèi)容就這么多,謝謝大家!
講師招募
LiveVideoStackCon 2022 音視頻技術(shù)大會(huì) 上海站,正在面向社會(huì)公開(kāi)招募講師,無(wú)論你所處的公司大小,title高低,老鳥(niǎo)還是菜鳥(niǎo),只要你的內(nèi)容對(duì)技術(shù)人有幫助,其他都是次要的。歡迎通過(guò)?speaker@livevideostack.com?提交個(gè)人資料及議題描述,我們將會(huì)在24小時(shí)內(nèi)給予反饋。
喜歡我們的內(nèi)容就點(diǎn)個(gè)“在看”吧!
超強(qiáng)干貨來(lái)襲 云風(fēng)專(zhuān)訪:近40年碼齡,通宵達(dá)旦的技術(shù)人生總結(jié)
以上是生活随笔為你收集整理的智能视频内容生产中专业视频数据导出工具的研发的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: 理解ABR及其工作原理
- 下一篇: 探讨视频云与边缘云平台的竞争力——基于S