工业和信息化部主管 中国电子报社主办
收藏本站投稿

AR/VR

VR体积视频赋能教育和元宇宙

(编者:在10月20日,2021世界VR产业大会教育论坛上,威爱科技集团总裁、博士吕云发表了题为《VR体积视频赋能教育元宇宙》的演讲,将VR体积视频技术与教育、影视制作等多个行业的融合前景做了前瞻性演讲,并介绍了已经开发出的数个创新应用,演讲备受好评。本文对演讲内容做了精彩再现。)

元宇宙Mataverse这个词在今年席卷了全球互联网,热度居高不下、人尽皆知。元宇宙是指通过虚拟现实和互联网,构建具有链接感知和共享特征的,平行于现实世界的3D虚拟空间。如果想要有一个直观的认识,推荐大家看一下有由HTC投资好莱坞斯皮尔伯格大导演执导的电影《头号玩家》。

image001.jpg

《头号玩家》剧照

元宇宙是一种可以改变人类生活方式的超前概念:在不远的将来,人们可以随时随地切换身份,自由穿梭于物理世界和数字世界之中,在虚拟空间和时间节点所构成的数字世界中社交、工作、学习、娱乐、购物、旅游等尽情互动。

在普通人还不知道元宇宙是什么的时候,互联网巨头纷纷进军元宇宙:Facebook是元宇宙布局的先驱者,扎克伯格表示Facebook组建了专门的元宇宙部门,未来五年要将Facebook从社交公司变成元宇宙公司。英伟达(NVIDIA)公司推出的Omniverse开发平台,为未来元宇宙建立的基础模拟、协作平台。Roblox游戏被认为是元宇宙的雏形。今年3月上市以后,被认为是元宇宙第一股,市值立即上升达到400亿美元。美国Epic Games在4月获得10亿美元的投资用来构建元宇宙基础。这笔融资创下了元宇宙赛道最高融资纪录。腾讯投资收购一众元宇宙相关公司,旗下的天美工作室正在打造代号为“绿洲”的元宇宙游戏。大玩家字节跳动以1亿元投资了元宇宙概念公司代码乾坤,8月又以90亿元左右的高溢价收购Pico正式入局元宇宙。

巨头们举措印证了元宇宙发展到了新阶段。

小扎与老黄_副本.jpg

两巨头拼一.png

巨头拼二.png

互联网巨头布局元宇宙

而元宇宙与教育有着不同寻常的关系。Universe宇宙,无所不包,有归一的意思;University大学,无所不教,无所不谈;Metaverse是一个触手可及的宇宙, 也是教育发展升级的窗口。元宇宙和教育之间具有天然的平行性和覆盖性,大学是为学习提供最好的条件, 而元宇宙为全天候学习提供了最大空间和最好的技术基础。

著名心理学家马斯洛曾提出,人的最高级欲望之一就是求知,元宇宙更容易让参与者满足他们的求知欲望, 相信元宇宙的开发和探索最终也会落在求知上。最重要的是,元宇宙可以很好的平衡教育资源,是解决教育均衡问题的最有效手段之一。

Jon Radoff 提出了元宇宙的7层价值链  其中最底层最核心的就是基础设施。元宇宙概念的实现对于基础设施的要求极高,需要大量的基础设施提前布局、跟进发展。而作为物理世界中最复杂的“人”,我们自己,应该如何进入教育元宇宙呢?体积视频技术作为现阶段唯一能够完整、真实、高效捕捉写实的“人”在真实的世界中动态数据的方式,也是在三维空间中能够百分百复制人类运动细节的唯一方法,构成了元宇宙基础设施的最重要一环。

image015.jpg

元宇宙的七层价值链

通过球形部署的100多个高端工业相机、激光器、传感器等,我们可以从各个角度捕捉图像,采集全息数据。通过计算机图形学算法拟合成为一序列三维模型和场景。这样拍摄的视频不再是一个二维的图像,而是一个沉浸式的连续3D场景。这就是我们所说的“体积视频”(Volumetric Video)


image017.png

体积视频摄制棚

传统的视频是由每秒30帧的静态画面构成,体积视频是由每秒30帧连续三维模型构成。他能记录三维空间中所有的动作和行为,尤其是写实,并将其存储为一个全角度的立体场景。完全没有固定的观看视角,用户可以自由地穿梭在场景之中,从任意角度、任意距离、任意位置观察场景中的对象,并且与之互动。

image019.png

算法重建体积视频

元宇宙需要与现实高度互通,对现有数字孪生技术提出了沉浸感、交互感等方面的高要求,需要大量写实的动态真人的数字化内容,对于“人”的超写实记录和呈现都是现有技术的最大难题。

现有的CG建模、动捕、面部捕捉等做出来的人物数字模型无法还原动态的真实的人的动作和表情细节,很难做到真实,永远无法做到相同,而且时间和成本极其高昂。

体积视频技术是数字孪生领域中对动态人物精确全面数字化的高效手段,同时解决了时间和成本非常高昂的两个最大的痛点,而且同时实现了高精度,百分之百还原动作与神情。

image021.jpg

体积视频摄制棚拍摄动态真人数字化内容

体积视频非常适合需要在多个角度观看的教学和示范活动的记录,也就是凡是需要动手的教育。我们利用体积视频技术帮助著名京剧大师全息保留他最好的演艺水平并作为教学素材,让最棒表演成为永恒;帮助跆拳道冠军保留标准的技术动作作为他自己的教学工具,节省教练体力与成本,使用上好的高级教练并提升学员兴趣。这样的技术用来全面提升我们的在线教育MOOC平台,再合适不过了。

拼接跆拳.jpg

体积视频制作跆拳道教学课程

体积视频将会有非常多的应用场景,包括但不限于在线教育、电影制作、摄影行业、明星娱乐、新闻报道、时装展览、服装电商、医美整容、文化旅游、广告宣传、体育竞技等。体积视频还会涉及到高校的众多专业,包括计算机、软件工程、虚拟现实、数字媒体、影视、表演、广告传媒、时装设计、电子商务、旅游管理、体育管理等等。

应用图标合图_副本.png

体积视频的创新应用场景

体积视频摄制棚可以是计算机、软件工程、虚拟现实、数字媒体等专业的前沿实验室,探索计算机图形学和数字媒体技术在元宇宙领域的深度应用,体积视频摄制棚还可以成为大学的共享资源平台,服务于包括职业院校在内的大学各个学科。

元宇宙将是教育变革的新窗口,体积视频作为“人”高保真的进入元宇宙的重要基础设施,必将起到关键作用。

image031.jpg

吕云博士在2021世界VR产业大会教育论坛发表关于体积视频与元宇宙的主题演讲

责任编辑:刘晶


声明

1、本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2、本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3、作者投稿可能会经我们编辑修改或补充;4、如本站的文章或图片存在版权,请拨打电话010-88558835进行联系,我们将第一时间处理。

相关链接

视频

专题

2021年上半年中国家电市场报告

8月9日,中国电子信息产业发展研究院(又称赛迪研究院)发布了《2021年上半年中国家电市场报告》(以下简称《报告》)。《报告》显示,2021年上半年,我国家电市场加速回暖,零售额达4293亿元,同比增长16.3%;家电消费进一步向线上迁移,电商渠道对家电零售的贡献率达53.65%;家电产品均价普遍提升,高端家电销售热度不减,有效促进了消费升级...

新思想引领新征程·红色足迹

党的十八大以来,习近平总书记在地方考察调研时多次到访革命纪念地,强调要从中国革命历史、优良传统和精神中汲取养分。追寻红色足迹,感悟初心使命。即日起,本报推出“新思想引领新征程·红色足迹”专栏,跟随习近平总书记的红色足迹,访当事人、忆当年事,重温总书记的重要论述和重要指示精神,生动回顾红色圣地光荣的革命历史、优秀的革命传统...

聚焦2021年全国两会

3月5日,第十三届全国人民代表大会第四次会议在北京人民大会堂开幕。党和国家领导人习近平、李克强、汪洋、王沪宁、赵乐际、韩正、王岐山等出席,栗战书主持大会。初春的北京,处处生机盎然。第十三届全国人民代表大会第四次会议5日上午在人民大会堂开幕。近3000名全国人大代表肩负人民重托出席大会,认真履行宪法和法律赋予的神圣职责。

2021年全国工业和信息化工作会议

12月28-29日,全国工业和信息化工作会议在京召开。会议以习近平新时代中国特色社会主义思想为指导,全面贯彻党的十九大和十九届二中、三中、四中、五中全会精神,认真落实习近平总书记重要指示批示精神和中央经济工作会议部署,总结2020年工业和信息化工作,分析形势,部署2021年重点工作。工业和信息化部党组书记、部长肖亚庆作工作报告。

世界超高清视频(4K/8K)产业发展大会

会议

2021世界VR产业大会云峰会

10月19日—20日,由工业和信息化部和江西省人民政府共同主办的2021世界VR产业大会云峰会在南昌举办。国务委员王勇出席大会开幕式并发表讲话,江西省委书记易炼红,工业和信息化部副部长王志军,江西省委常委、南昌市委书记李红军出席开幕式并致辞。

2021世界显示产业大会

6月17日,由工业和信息化部、安徽省人民政府共同主办的2021世界显示产业大会在合肥市开幕。安徽省委书记李锦斌出席开幕式并宣布大会开幕,安徽省省长王清宪、上海合作组织秘书长弗拉基米尔·诺罗夫、工业和信息化部副部长王志军出席开幕式并先后致辞。

2021世界超高清视频(4K/8K)产业发展大会

5月8日-10日,由工业和信息化部、国家广播电视总局、中央广播电视总台、广东省人民政府共同主办的2021世界超高清视频(4K/8K)产业发展大会在广州召开。5月9日,广东省委书记李希出席开幕式,工业和信息化部部长肖亚庆、广东省省长马兴瑞、国家广播电视总局副局长孟冬、中央广播电视总台编务会议成员姜文波出席开幕式并致辞。

CITE2021第九届中国电子信息博览会开幕论坛

4月9日,第九届中国电子信息博览会(简称CITE2021)在深圳举办。深圳市人民政府市长陈如桂、广东省人民政府副秘书长陈岸明、工业和信息化部电子信息司司长乔跃山出席开幕式并先后致辞。

2020世界显示产业大会

11月20日,由工业和信息化部、安徽省人民政府共同主办的2020世界显示产业大会在合肥市举行。在开幕式上,工业和信息化部部长肖亚庆、韩国驻华大使张夏成发表视频致辞。安徽省委副书记、省长李国英,工业和信息化部副部长王志军出席开幕式并致辞。

2020世界超高清视频(4K/8K)产业发展大会

11月2日,由工业和信息化部、国家广播电视总局、中央广播电视总台、广东省人民政府共同主办的2020世界超高清视频(4K/8K)产业发展大会在广州市召开。广东省委书记李希出席开幕式,省长马兴瑞出席并致辞。国家广播电视总局局长聂辰席、工业和信息化部副部长王志军、中央广播电视总台副台长蒋希伟出席开幕式并致辞。

2020世界VR产业大会云峰会

10月19日—20日,由工业和信息化部、江西省人民政府主办的2020世界VR产业大会云峰会在南昌举行。在10月19日的开幕式上,中共中央政治局委员、国务院副总理刘鹤发来书面致辞。江西省委常委、南昌市委书记吴晓军,工业和信息化部副部长王志军,江西省委书记、省人大常委会主任刘奇先后致辞。开幕式由江西省委副书记、省长易炼红主持。

世界显示产业大会

本周排行