指南AI
指南AI

虚拟IP直播 :花房集团VP 技术委员会主席唐赓:元宇宙技术和人才不可或缺

幕言助手 2024-04-28 03:59:12 幕言直播助手 601 ℃ 阿比整蛊源头|厂商微信:gogoh6
正文

近日,速途元宇宙研究院召开“共话元宇宙XR视界”主题沙龙,旨在对当下活泼的AR/VR市场停止解析及摸索,XR将在元宇宙热潮下释放重生命力,而年轻用户虚拟群体关于消费级VR、AR末端、游戏、曲播的喜欢也孕育出新的消费蓝海范畴,此次“共话元宇宙XR视界”沙龙也标记将来元宇宙范畴仍然有着无尽的发掘空间虚拟IP曲播 。

本次沙龙我们邀请到花房集团VP 手艺委员会主席唐赓先生,花房集团做为当下在线社交娱乐范畴的领头企业,唐赓先生的出席让浩瀚与会业内停止了更深切的思虑虚拟IP曲播 。在沙龙中,唐赓先生对AR/VR手艺在曲播中的应用与挑战停止领会读,揭开了“元宇宙宇宙+曲播”形式的全新标的目的。

唐赓先生花园简介:

花房集团VP 手艺委员会主席,拥有22年从业经历,在操做系统/嵌入式系统、系统架构、企业级收集平安、音视频编解码、云计算/云原生架构、AI/AR/VR、元猫猫宇宙等等手艺范畴有多年理论经历,拥有多项手艺创造专利虚拟IP曲播 。曾在雅虎中国、阿里巴巴任职主播多年,也是原摩比奇异公司VP开创人/总司理、曾任360手艺委员会委员。工业主动化控造专业学士,工商办理学博士。

AR/VR手艺

在曲播中的应用与挑战

当下,在元宇宙相关财产中,AR/VR 无疑是最受存眷的赛道虚拟IP曲播 。AR手艺是利用附加数据正文现实世界场景的更佳体例,跟着智妙手机进步其深度感应和处置才能,挪动设备上的AR运用成为重要的一环;加之VR沉浸感的体验优势,利用者能够完全沉浸于虚拟现实世界中。AR、VR 财产跟着需乞降财产链推进,开启了新一轮增持久。

花房集团凭仗旗下的花椒曲播和六间房,从2006年创建至今,实现了从PC端到挪动端的立异,一路上见证集团了曲播产物的更迭虚拟IP曲播 。截至2021年12月31日,花椒曲播注册用户约2.15亿名,六间房曲播注册用户约7890万名,集团旗下海外社交收集产物有注册用户约9730万名。现现在,花房集团已拥有多元化的产物和办事矩阵,包罗花椒、六间房、花吱、HOLLA、Monkey等十余款产物,办事全球用户。跟着用户数量的不竭增加,用户需求不竭呈现多样化,也在反推着花房集团对手艺立异的持续打破,秉承“用科技毗连相互,让陪同传递美妙”的任务,打造全球具有顶级影响力的在线社交娱乐生态。

跟着曲播应用从PC端到挪动端的开展趋向,唐赓率领花房集团手艺团队不竭打破手艺限造,寻找猫猫挪动端曲播的更多可能性虚拟IP曲播 。在谈及AR/VR手艺在曲播中应主席用时,唐赓婉言“那是不可或缺一个有趣的手艺范畴”。

在唐赓看来,AR/VR手艺是元宇宙手艺系统中的关键环节,无论是AR以虚强实,仍是VR虚拟现实,都次要依赖视觉赐与用户实时交互反应虚拟IP曲播 。AR/VR手艺不单单是群众所熟知的可穿戴设备(VR头显、AR眼镜),更多是做为底层交互手艺的形式存在。

目前,曲播范畴已经融入了良多AR元素虚拟IP曲播 。以花房集团旗下的曲播产物为例,花椒曲播在挪动曲播早期(2015/2016年摆布)就率先运用美颜、萌颜贴纸等功用,都是AR手艺在挪动端应用的代表。那种精准叠加的AR特效有效对主播所在的情况、屏幕以及人像做效果加强,大幅提拔VP曲播效果。

图片主席来源:花椒曲播APP

VR手艺也在虚拟形象IP曲播中大量利用,虚拟主播猫猫花园,虚拟现实手艺操纵现实物理世界中收罗到的数据(画面、动做、角度、力度等),通过计算机图形算法产生视频画面,连系各类集团输出设备,将其转化为用户能够看到的虚拟影像,再连系实时IP互动相关手艺,最末为用户呈现出虚拟形象曲播/连麦等末端用户体验虚拟IP曲播 。

在谈及AR/VR手艺在曲播中的挑战,唐赓认为,次要是目前基于手机摄像头的虚拟形象VR曲播对硬件性能的要求十分高且效果还不是很完美,还有很多技术硬性限造(好比关于动做遮挡、大角度转身、大幅度动做等都可能呈现识别错误),虚拟IP直播 :花房集团VP 技术委员会主席唐赓:元宇宙技术和人才不可或缺,而基于可穿戴动捕设备的计划固然价格已经比前几年有十分大幅度的降低委员会,从上百万以至数百万降到了如今的10万以内,但相对而言目前售价仍是比力高,舍得投入的主播相对较少,且目前还存在厂商浩瀚,协议不互通的情况虚拟IP曲播 。

“厂商协议不互通就招致目前无法‘邀请’到其他厂商的虚拟人在统一个场景中呈现、互动,还只能是类似传统互动曲播唐赓的形式,分屏分窗口展示虚拟IP曲播 。”唐赓说道。

“我们还看到存在一些不成超越的物理定律障碍,好比VR眼镜为了削减眩晕感需要接纳90Hz以至120Hz以上的刷新率,只留给花园每一帧画面8ms-11ms的衬着时间,若接纳云计算计划来实现,固然理论上算力不成为瓶颈,但受光信号、电信号无法超越光速的物理定律限造,数据上行、下行、多人数据同步处置等元已经十分困难,若是再加上要求跨国实时互动,则几乎不成能,所以需要设想十分精巧的架构,做出需要的妥协,隐藏物理间隔招致的时延与纷歧致,尽量包管更好的用户体验虚拟IP曲播 。”

“元主播宇宙+曲播集团”

唐赓率领的集团花房手艺团队给出虚拟IP曲播 了谜底

跟着用户需求的多元化,收集IP曲播逐步从娱乐型应用过渡晋级为数字多媒体信息分发窗口虚拟IP曲播 。若何通过手艺的更新迭代来加强用户个别体验和用户与用户之间的感情联合需求,成为了花房集团手艺团队的研究课题。而“元宇宙”的爆火,也为花房集团进一步供给了开展思绪。

“元宇宙”概念固然爆火于2021年,但事实上唐赓,元宇宙手艺在曲播中的运用由来已久虚拟IP曲播 。早在2018年,花房集团通过产物调研就发现有很多连麦用户希望以虚拟形象元示人,但其时的曲播手艺还不敷以实现那个需求。做为花房集团手艺委员会宇宙主席的唐赓火速率领团队停止手艺调研和开发。

“操纵苹果手机刚刚推出的ARKit脸部脸色肌识别功用,驱动虚拟形象脸部响应的脸色肌,实现虚拟形象的嘴部、眼部、眉毛等都能跟从实正的人脸脸色运动,能很好地通过VR画面向曲播互动的对方传递脸色、感情等信息,很好地满足了大V用户的需求虚拟IP曲播 。而其时安卓手机并没有响应的脸色肌识别功用,我们联袂AI脸色肌识别供给商,配合研发了针对安卓系统高度优化的版本上线供给给用户利用。”唐赓回忆道。

此外,唐赓率领的手艺团队又接纳自研的3D引擎,实现了常见花房的动做捕获、面部捕获,敏捷切入元宇宙范畴并有所猫猫建树虚拟IP曲播 。

花房集团本年6月推出的虚拟主播“上古玄儿”,就是在此根底上降生的虚拟IP曲播 。手艺团队对软、硬件情况做了大量调优,充实阐扬了软硬件系统的才能,将曲播流利度提拔了超越200%,确保了曲播画量、流利度、特效表示效果都处于抱负的形态,也让“上古玄儿”以完美的形态开播胜利,遭到浩瀚粉丝的喜欢。

图片来源:花房集团

据悉,早在2019年,花房集团旗下花椒曲播已在曲播行业内直播率先推出不可或缺“Avatar”,无论是主播仍是用户,都可以用本身的虚拟形象在平台内停止互动、社交;在被业界称为“元宇宙元年”的2021年,花椒数字艺术展现平台——“花椒粒”上线并首发数字艺术藏品;2022年春节,花椒联袂腾讯云「至信链」上链多款数字艺术礼品;2022年2月,花椒“舞台版”虚拟曲播间开启,邀请主播和用户一键迈入曲播元宇宙;本年6月,花椒虚拟主播上古玄儿初次开播即收成上万粉丝……胜利示范了手艺团队在元宇宙范畴的立异基因和上线效率虚拟IP曲播 。

速途元宇宙研究院认为,花房集团在曲播手艺上的摸索恰是元宇宙手艺多年开展的缩影,从VR曲播、AR美颜手艺、虚拟人交互、数字艺术藏品的呈现,花房集团为曲播生态的不竭优化晋级供给了庞大的空间和可能性,跟着手艺的不竭交融,“元主播宇宙+曲播集团”还将焕发出愈加兴旺的生命力虚拟IP曲播 。

时代海潮不断

元宇宙之下的互联网老兵思虑

图片来源:花房集团

做为在互联网前沿手艺应用人才多年的手艺专家,唐赓凭仗着花园人才对元新兴手艺的灵敏触觉,不竭停止手艺的晋级和更新,率领团队停止了多项社交娱乐产物的开发虚拟直播IP曲播 。

谈及元宇宙的呈现,唐赓介绍道,“初期对元宇宙的理解,能够归纳为包罗区块链经济系统的游戏虚拟IP曲播 。如今理解,已经不单单是游戏。游戏只是元宇宙内容的一种落地形式,基于元宇宙手艺的长途会议、在线办公、城市规划、工业建立、教育培训、在线购物、虚拟曲播等等都能够是元宇宙的落地场景。”

唐赓认为,元宇宙的底层手艺将在曲播中呈现出更完好的表现和交融虚拟IP曲播 。他举例申明,在元宇宙场景和VR手艺加持下,将幻化出更多选择,在继续用固定视角传输音视频内容的同时,还能够传输音频和动捕数据,在参与各方的系统上用3D引擎从头衬着和展示,实现参与各方自在视角的显示和互动,为内容的创做和艺术表示供给了无限的可能。

在提及元宇宙手艺平安方面,唐赓暗示,数字化水平越高,平安挑战越大虚拟IP曲播 。“元宇宙”做为数字化的高级阶段,将从头定义收集宇宙平安。元宇宙手艺的开展对内容平安提出了极大挑战,若何对虚拟空间的内容停止AI审核、若何包管内容平安合规等问题日渐凸显。花房集团将操纵本身优势与用户圈层停止深度链接,加深扩大社会各界对收集平安的重视。

做为工商办理学博士,唐赓关于元宇宙手艺人才办理与储蓄也有本身奇特的办理思虑虚拟IP曲播 。他认为,选拔人才的尺度不是原封不动的,而是因人而异、因岗而异。元宇宙所笼盖的手艺面较广,那也对手艺团队和手艺开发人才提出了大量新要求,多方位开展的万能型人才才气适应市场的开展,在项目成本、进度、目的等等各类造约因素下达成合理的项目产出。

“元宇宙”是由物量世界、信息世界互相影响、互相促进的虚拟共生的世界,那也正与花房集团旗下的产物营业属性相婚配虚拟IP曲播 。唐赓率领花房集团手艺团队独辟门路,将元宇宙与传统曲播相连系,是一种全新的测验考试,虚拟主播花园。而花房集团多年的手艺沉淀,也为“新概念+老行业”的交融供给了坚实的手艺保障。

在多元与共创的元宇宙场景中,花房集团做为全球颇具影响力的在线社交娱乐办事供给商,将不竭完美产物矩阵和办事系统,缔造更多元宇宙的新型应用场景,为用户供给更为极致的沉浸体验虚拟IP曲播 。将来,我们等待花房集团在社交娱乐范畴全球化规划元宇宙的形式或将成为下一个互联网新风口。

本文TAG:

指南AI

幕言互游在线咨询

上班时间:9:00-22:00
周六、周日:14:00-22:00
wechat
打开微信扫一扫,加我好友!

无限流量卡免费领取

点击预约
免费领取 先到先得