台灣攝錄影器材交流論壇

 找回密碼
 立即註冊
搜索
熱搜: 活動 交友 discuz
查看: 75|回復: 0
打印 上一主題 下一主題

「聚力维度」要以最简单的方式生產影像级数字人

[複製鏈接]

1068

主題

1068

帖子

3220

積分

管理員

Rank: 9Rank: 9Rank: 9

積分
3220
跳轉到指定樓層
樓主
發表於 2024-3-11 16:07:50 | 只看該作者 回帖獎勵 |倒序瀏覽 |閱讀模式
聚力维度的智能化出產流程共有五個步调:真人扫描、智能建模、智能绑定、智能衬着,驱動适配。具有影視和AI两重基因的聚力團队認為,AI可以從底子上解决数字化内容建造問題,数字人也有更遍及的利用場景。

作者|黄泽正

修订|肖   超

這是新声Pro「虚實之間」系列文章第11篇

甚麼样的数字人是真正有價值的?

数字人自带科技属性,是全新的内容载體,在形象開辟和内容創作上具有更强的可塑性,可延续性。使得数字人能按照期間潮水不竭開辟新的爆點,具有流量變現、内容變現等多種價值。

人們之以是延续看好虚拟人,也源自其可以在诸多利用場景完成落地,乃至到達超出真人的表示结果。而非简略蹭上了元宇宙的热度。

在影視行業深耕多年的聚力维度看来,連系AI打造数字人,不但是對傳统影視行業痛點的一種解法,也代表着對下一代数字内容的摸索。

聚力维度CEO赵天奇说:「即使没有元宇宙,数字人所代表的更高質量、加倍别致的内容形態,也會有遍及的受眾。咱們要做的,只是用技能加快這個進程。」

据赵天奇回想,投身数字人建造的原由,源自對傳统影視行業痛點的深度分解。

作為北京邮電大學博士,清華大學博士後,赵天奇曾師從徐大雄、戴琼海两植牙推薦醫師, 位院士,而且是英特尔、高通AI声誉技能大使。具有壮大AI技能布景的他,最先在2012年進入影視行業,操纵AI技能、计较機視觉技能帮忙举行数字内容創作。

影視+AI的两重基因行業内無疑很是稀缺。是以赵天奇也在很初期就發明,傳统影視行業有很多出產流程,必要大量人工完成,這既增长了分外本錢,也致使了對人的過度依靠。用他的话说:「在一個高度發財的互联網信息期間,還用手工期間的方法出產内容,這是一個很是紧张的問題。」

但另外一方面,傳统影視行業固有的出產流程和上下流出產線機制,决议了要想真正晋升效力,讓内容創作變得加倍轻松简略,乃至主動化,只能另辟門路,造一個全新行業。

是以在2017年,聚力维度决议跳脱出傳统影視行業枷锁,對下一代的数字内容举行摸索。

赵天奇果断,将影視内容用在公共財產,将是一個倾覆性的测验考試,而测验考試的切入點應當以「人」為主。

可以必定的是,咱們看到的大大都内容都因此报酬主體,内容的本色也是通报人的所思所想、所感所悟。但不少時辰,文字乃至声音内容的表達仍是偏弱,信息轉達不清楚,效力也不高。

在最抱负的状况下,高品格的数字人内容應當包含肢體動作、说话、脸色、共同上总體演出,以到達面临面扳谈的水平。如许的信息通报量,現有的鼠標、键盘、文字甚至纯真语音都没法到達,但又為市場客觀必要。

赵天奇由此展望,「数字人内容最高效,并且高質量的創作方法,必需用人去演。」而與真人比拟,数字人具有超出真人的美感,同時能超出物理限定,代表着将来的標的目的。是以團队决议對准数字人钻研,将之作為摸索新型数字内容的出力點。

但另外一方面,在風雅向上,若是将数字人归為對下一代数字内容的摸索,早在2017年以前就有大量企業投身此中,虽然顯現情势各有分歧,但方针近乎一致。「低落本錢、提高效力,更高品格」的权衡尺度也已成為行業共鸣。

只不外對大大都企業来讲,要以及時、简便的方法、将更高品格的内容利用到實際糊口的各個場景,存在诸多技能困難。

對此赵天奇則認為,從技能底层来果断,人工智能可以從底子上解决内容建造和数字内容缔造的問題,也有遍及的利用場景,對本身和團队来讲,「技能標的目的没有問題,所必要的不外是時候堆集。」

在肯定了数字人研發的風雅向後,赵天奇很快制订了本身数字人產物必要到達的三個尺度:高档别;及時驱動;普及易用。

為了到達高档此外顯現结果,聚力维度推出了本身的数字人建模體系,可以用智能化的出產流程共同資深美術團队,高效、快速地出產高質量数字人。

详细来讲,聚力维度的智能化出產流程共有五個步调,起首按照原画設計或真人扫描完成信息收集,以後經由過程自研AI算法举行智能建模、智能绑定、智能衬着,最後會举行驱動适配。

在自研AI算法+人工调試的共同下,聚力维度可以将数字人建造周期從傳统的三個月降至三周摆布。

而在最直觀的审美角度,赵天去疣筆, 奇暗示,以前多年的影視從業履历對團队助力很多。在傳统影視行業堆集的對美感的掌控,建模、衬着的履历,即使離開傳统影視行業,利用在全新的数字人范畴,一样合用。

聚力维度数字人的特别性在于,因為團队對峙以AI技能為焦點,而非以傳统的CG手绘方法举行建模,這就请求團队技能美術必需「既懂人工智能,又懂美學表達」。

而具有影視和AI两重基因刚好是聚力摺疊紗門,维度團队最大的上風。

從2012年起頭,團队就在举行人工智能和影視行業的連系。這象徴着在2017年聚焦数字人技能後,AI團队已交融储蓄了好几年。并且据赵天奇流露,團队構成廣泛是影凡士林保濕霜,視專家和人工智能專家,「有好些都是我的師弟,團队组成也很不乱。」

在及時驱動层面,聚力维度一样基于自研AI算法,推出了脸色動作捕获體系,可以實現全身脸色動作手势捕获。在数字人范畴,對微脸色的傳神還原是業界公認的難點,在举行虚拟直播時,主播脸色僵直乃至面瘫的徴象多有產生。

赵天奇則暗示,聚力维度基于自研AI捕获算法,交融计较機視觉、人體力學及人工智能交织學科能力,可對百般高頻脸色動作举行3D驱動,已實現了上千種微脸色還原。經由過程連通自研软件赛博演猿Cybactor,可缔造出影視级数字人,并經由過程脸色、動作通报本身喜怒哀樂。

典范的例子是,在2021年9月的中國科幻大會上,由北京科委與聚力维度联手打造的大會形象大使幻幻表態,在為期一周的直播勾當中,幻幻的脸色多样、神志拟人,取患了杰出的展現结果,并获得了北京市市长的接見。

除提高数字人質量,在普及易用方面,聚力维度團队持久對峙的AI線路,也讓数字人的本錢加倍可控,利用加倍便利。

赵天奇流露,由于聚力维度但愿買通AI技能與傳统影視行業需求之間的邊界,是以從一起頭就没有往傳统路径上走。一方面确切致使團队耗時四年才推出成型產物,前期耗資也很大,乃至必要開創人自掏腰包搞研發。

但另外一方面,在前期技能积淀完成後,產物的主動化水平和可用性無疑會更高,從持久来看也更利于普及。

好比聚力维度推出的「轻量化单個摄像頭」方案,就大幅低落了用户虚拟直播的門坎。用户只必要一個平凡的RGB摄像頭,連系单個软件就可以實現對脸部、肢體及手势動作的捕获,既不必要任何提早练習,也不必要穿動捕服等特别装备,就可以出產影視级数字人,并举行轻量化虚拟直播。

用赵天奇的话说:「讓用户可以很轻松、很低門坎地利用咱們的產物,并到達很好的演出结果,我去黑按摩膏,感觉才算倾覆性测验考試。」举行倾覆性测验考試,而且樂在此中,也是聚力维度團队的一大特點。

聚力维度團队認為,在数字人愈發火热确當下,環抱数字人搭建虚拟世界,供给可延续的内容出產與IP運营情况,才能真正阐扬虚拟人上風,從而晋升数字人的贸易價值,使其真正具有出產力。

好比在虚拟直播場景下,颠末多年积淀,聚力维度具有大量数字資產,包含:2D、3D場景的場景库;支撑多個空間機位的镜頭库;無需動捕可一键触發的動作库,和道具库等等。

這象徴着,聚力维度可以在直播進程中,讓数字人一键上妆、快速換發型和秒換打扮。這些在真人直播中没法想象的事,在虚拟直播中已可以由数字人轻松實現。

赵天奇還暗示,在當前,應用多人同框技能,聚力维度團队已可讓天南地北的人,共處统一虚拟空間,看到位置瓜葛并互相辨認,完成交互。

截至今朝,聚力维度的数字人已有了很多利用案例,包含為中國電信打造001号数字員工小琳;完善世界團體首位数字員工Weta;联通在線首位数字人主播悠然;與凤凰卫視互助打造的虚拟主持;與咪咕視頻互助的虚拟偶像等等。廣泛取患了不错的展現结果。

但赵天奇仍認為,数字人的贸易潜力远不止此。「将来抱负的状况是,每個想創作虚拟内容的企業、小我、MCN機構,都能轻松、低價地具有本身的数字人。」

在本錢方面,据赵天奇流露,若是不去抠一些人工定制的設計细節,小我虚拟主播的本錢已可以低落到万元级别。後续跟着技能延续迭代,算法不竭優化,数字人品格還會继续晋升,主動化、流程化出產也能继续低落本錢。

從2021年技能成型後,除為現有技能拓展利用場景,加快技能迭代也成了聚力维度的首要使命。

好比今朝聚力维度迭代的一個重要事情是:進一步晋升数字人微脸色的傳神度。為了到達抱负的结果,團队會應用片子、電視剧片断举行测試。經由過程把影視剧触及到繁杂脸色變革的片断,交给算法辨認,并举行還原,團队可以较着看到本身数字人的脸色還原存在哪些不足,以後再针對性解决。

從廣义上分,根据現有利用場景,数字人有事情型数字人和文娱型数字人两種。详细可细分為虚拟偶像、虚拟主持人、虚拟客服、虚拟KOL、数字集會、数字展览等等。

除現阶段已知的場景,聚力團队终极但愿到達的结果是:讓几百万影視级虚拟人在更多新場景获得利用,缔造新型数字内容,同時把本錢降到最低。而這一愿景的實現還必要依仗技能迭代。

正如赵天奇所说,数字人的利用場景可所以元宇宙,也能够是其他。其所代表的是一種對下一代数字内容情势的摸索,這已成了業界共鸣。對付技能公司来讲,當前使命應當是經由過程技能迭代,加速實現其贸易落地。
回復

使用道具 舉報

您需要登錄後才可以回帖 登錄 | 立即註冊

本版積分規則

Archiver|手機版|小黑屋|台灣攝錄影器材交流論壇  

新竹借錢, 隆乳手術, 親子溝通, 商務中心, 通馬桶, 鞋工廠, 借款指南回頭車, 日本旅遊, 電子遊戲遊戲直播眼科儀器中醫診所家具品牌創意設計保健食品

GMT+8, 2024-9-24 16:36 , Processed in 0.044374 second(s), 4 queries , File On.

Powered by Discuz! X3.3

© 2001-2017 Comsenz Inc.

快速回復 返回頂部 返回列表