亚美体育

联系电话:

010-85952290

亚美体育

发送邮件:

亚美体育

新闻动态

及时了解亚美体育权威动态

当前位置:首页 > 新闻动态

亚美体育_下一个十年,看影创科技如何开启元宇宙时代

    点击量: 104     作者: 亚美体育     时间: 2022-04-08 01:49:04

亚美体育_下一个十年,看影创科技如何开启元宇宙时代

    点击量: 104     作者: 亚美体育     时间: 2022-04-08 01:49:04
详情

  在10月29日清晨一点(北京时候)的Facebook Connect 2021年夜会上,马克·扎克伯格公布Facebook公司正式更名为Meta,而且描画了很多元宇宙的场景,以表现Meta拥抱元宇宙的决心。

  我们留意到,在近两小时的Keynote环节中,扎克伯格说起了一款将在2022年推出的短焦VR一体机,代号“Project Cambria”,采取Pancake光学方案,具有彩色的透视功能,这意味着VR装备将不再只是一台游戏机,而是酿成出产力东西或说效力东西,其利用场景将扩大至办公、会议,普和水平也随之实现量级晋升。这一方案印证了此前影创猜测的XR产物演进线路,与我们的自研算法与手艺堆集标的目的不约而合。作为国内一家能同时供给VR/AR全栈产物级算法与系统的公司,影创多年以来一向在致力在研发光学、算法等底层手艺的研究,并将这些手艺开放授权给浩繁合作火伴。

  一向以来,VR被看成游戏机为大师普遍熟知。Cambria的呈现,VR与AR的融会,将催生出良多新的利用场景,开启VR新世界。VR装备将成为像电脑和手机一样的出产力东西,融入我们的平常糊口,成为糊口、工作中不成或缺的一部门。佩带上VR装备进行多地多人虚拟会议、又或是替换电脑成为我们的移动式办公东西,不管你身处何地都能实现多屏办公;无聊时还能足不出户和伴侣一路跨空间玩一个线上沉醉式脚本杀轻松一下;假如你很忙没时候去健身房,那还能来一场畅快淋漓的VR活动……

  (多屏办公)

  (虚拟会议)

  (平常社交)

  (活动健身)

  那末,让我们来解析一下,要实现Cambria上述功能和利用场景,需要哪些焦点手艺与算法,和影创在这方面的积累功效又有哪些呢?

  01- 佩带体例

  (左为Cambria衬着模子;右为“骐骥”)

  产物的舒适度,是影响消费者选择的主要身分。VR装备作为头戴式产物,即使很多消费者更习惯寻求超高清画面或是杰出的沉醉感,但长时候佩带后,面部受榨取,肩颈也会遭到来自头部的压力,不适感与怠倦感随之而来,从而致使体验感变差,利用率年夜年夜削减。从Cambria的预告视频中,我们领会到经由过程环形佩带这类体例,将电池至在脑后位置的科学配重,有用分离了佩带VR装备时的面部压力,更合适人体工程学,进而削减VR装备因繁重没法长时候佩带的问题。而这,与我们本年1月展现的6DoF VR公版样机“骐骥”的佩带设计理念不约而合,不能不感慨一句“英雄所见略同”。

  02- Pancake光学方案

  (Cambria Pancake光路示意图)

  Pancake光学方案会使VR装备的体积缩小(前壳厚度从7cm摆布酿成2.5cm摆布)、重量更轻(前壳重量从400g摆布酿成150g摆布)。这是因为Pancake方案采取多镜片折叠光路,可使VR装备内部布局加倍紧凑。可是光路的复杂水平直接致使了光学模组加工工艺难度的爬升,节制良率的难度比拟传统光学的单片菲涅尔透镜更高。轻浮的光学模组加上环形佩带体例,消费者在佩带VR装备时舒适度会较着晋升。

  Pancake光学方案可以实现年夜视野、超卓的图象机能和超紧凑的尺寸,无庸置疑这三点与将来VR装备的需求完善契合。是以,VR装备在体积和重量上都有新的逾越后,可供长时候佩带,而且移动性加强,其利用场景的选择性将更加普遍。将来的VR装备将不但仅只是文娱东西那末单一,而是酿成了出产力东西。影创已结合合作火伴在Pancake光学方面做了多年的研发设计和方案堆集,可以知足多类屏幕和显示参数的需求。

  03- 彩色See through

  (Cambria彩色See-through)

  今朝,VR装备利用空间规模有限,这也是行业一向在霸占的难关之一。VR装备作为沉醉式体验装备,佩带后看不见真实世界,用户在利用时频仍地脱摘很是使人头疼。在本届年夜会上,See-through功能的重年夜改良也是亮点之一,从本来Quest 2的低分辩率单色See-through系统晋升至高清楚度彩色See-through功能,用户可以或许在佩带VR装备时,经由过程开启对外的彩色摄像头看见高清、彩色、无扭曲低延迟的真实世界,如斯看来,VR与AR相融会的时期正在暗暗到临。

  若要实现高清楚度彩色See-through功能,则需要在VR头显上起码装配2个RGB摄像头。摄像头存在着自然物理延迟的问题,因处置的信息量增加,高分辩率RGB摄像头的延迟会比本来的灰度摄像头更高。为了下降高分辩率RGB摄像头的物理延迟,我们经由过程空间扭曲等一系列的手艺对画面进行猜测和三维重构,将真实世界经由过程衬着的体例显现在用户面前,以此弥补失落帧带来的画面缺掉,从而下降物理延迟带给用户的不适感。别的,固然RGB摄像头比灰度摄像头的物理延迟更高,但它能辨认更多色采,是以鲁棒性更好,可以在更复杂的光照情况下利用,更精准地辨认手势追踪,SLAM空间定位功能也会随之晋升。

  当VR装备最主要的一个错误谬误被降服,便意味着其移动性年夜年夜加强。用户不再拘泥在一个规定的空阔情况,也不再需要频仍地摘脱,而是可以或许一键轻松切换虚拟世界与真实世界,VR与AR相连系的装备,确切很是使人神驰。

  可以猜测,将来五年高端AR眼镜将以Cambria的形态呈现。今朝市道上一些价钱昂贵的高端AR眼镜和它们的利用场景都将被具有彩色See-through功能的VR装备代替,由于它同时具有更年夜的视场角、更好的显示结果和更低的价钱,将周全替换今朝传统光学高端AR眼镜涉足的教育、工业、文旅、医疗等行业。不难预感,在不远的未来,全部XR行业会有更年夜的款式转变。

  04- 手柄自追踪

  (Cambria手柄)

  上述我们说到,Cambria将利用RGB摄像头实现高清楚度彩色See-through功能,可以或许让用户在佩带VR装备的环境下仍然可以看见高清彩色真实世界。但RGB摄像头没有灰度摄像头的滤光片,没法很好地辨认红外光,从而致使此刻年夜部门VR装备所利用的红外LED式圆环追踪体例没法实现。那末,问题就来了,当VR头显没法追踪手柄,手柄该何去何从?谜底很简单,手柄实现自追踪。

  我们猜想,Cambria新手柄采取自追踪模式,手柄上安装有3个分歧标的目的的相机,用在视觉VIO跟踪定位。工作道理大要是手柄端及时进行视觉VIO算法,自力解算位姿,并与头显进行视觉标定。利用RGB摄像头后,手柄可以或许360度追踪,不再受限在装备传感器的FOV(视场角)巨细,可以或许取得更年夜自由度的交互体验。手柄自带算力实现自力SLAM空间定位后,本来集中在VR头显的算力承担会分离,削减了负载和功耗,头显可以设计得加倍简便。别的,因为打消了红外LED灯环,头显上的摄像头采取可见光跟踪,可以顺应更复杂的光照情况,改良在室外场景的利用体验。

  而实现手柄自追踪,有必然的难度。起首,它需要在手柄上搭载更复杂的算法和更高算力的芯片。我们持久以来致力在研究高机能、低耗损的SLAM算法,是以能很轻松地在手柄上实现定位追踪。其次,当头手没有及时联系时,头部和手柄的坐标系要做到三点同一需要一系列地图和物体辨认的手艺,而我们一样也有着这方面的雄厚堆集。

  手柄自力意味着,未来它不再是VR产物的固定配件,而是成为一个选配件。那末,当VR装备可以离开手柄后,我们该以其他何种体例交互呢?让我们一路往下看。

  05- 天然手势辨认

  (Cambria手势)

  当VR装备搭载RGB摄像头后,可以辨认更多色采,鲁棒性更好,可以更精准敌手部动作进行辨认。是以,天然手势辨认成为VR装备交互的最好选择。在平常利用场景中,用户可以随时随地戴上VR装备,经由过程天然手势进行一系列的操作,不需要再携带手柄,实现真正意义上的移动式便携。

  影创科技一向致力在天然手势辨认手艺的研发,鲁棒性好、低功耗、低时延、视场角年夜,在行业中属在前沿程度。影创科技的全自由度天然手势基在30个自由度和用户个性化的手掌参数,为用户缔造更“本能”更“真实”的交互体验,可以不受固定姿态的限制,以肆意手姿式与虚拟对象进行交互,进修本钱低。而手势辨认功能的增添,在VR与AR相融会的时期,将晋升用户的交互体验,VR装备的移动性和适用性都将慢慢晋升。

  (影创全自由度天然手势)

  06- 虚拟键盘

  (Horizon Workrooms-虚拟键盘)

  跟着VR装备功能的增添,其将从本来的文娱产物演变成一个集文娱、办公、糊口在一体的新一代通用计较平台。当我们想足不出户玩一个沉醉式年夜型VR游戏的时辰,即可以拿出手柄;当我们想办公、社交时,天然手势则是最好交互体例,今世替鼠标的天然手势实现以后,它的好同伴——键盘,天然也是不成或缺的一项。

  经由过程深度进修算法,将来VR可以把重建好的虚拟键盘模子和现实物关心合叠加,然落后行跟踪,而且对其姿态进行正确估量,从而实现虚拟键盘的利用。虚拟键盘、天然手势,乃至更多虚拟配件的呈现,将帮忙用户实现无空间无时候限制的办公体例,社交天然更是不问可知。

  影创物体锚点系统具有从物体建模到物体跟踪的全流程系统。物体建模操作简单,成功率高,还撑持自建的模子和其他平台成立的模子。物体跟踪高精度高鲁棒性,可以实现精准虚实叠加,精度到达了毫米级,叠加键盘天然也不在话下。

  (影创虚拟键盘)

  别的,将来经由过程摄像头,我们还可以对全部房间拍摄的图象进行深度估量,而且对计较出来的深度点云信息进行融会,终究对房间成立一个完全的几何描写。终究成立全部房间的具体位置的虚拟空间的对应关系,从而将数字信息永远的放置在实际世界中。

  07- 多使命3D屏幕

  (Cambria多使命3D屏幕)

  因为各类缘由,很多人都需要多显示器设置。但因为物理空间的限制和多显示器需斟酌本钱等多种身分,没法实现多屏办公。但是,在虚拟实际的加持下,我们可以坐拥多屏3D交互,办公、社交、不雅影、游戏、音乐等等,你想要的都可以同时进行。最主要的是,它既没有物理空间的限制,也没有本钱预算这类实际问题的考量。陪伴着天然手势与虚拟键盘功能的推出,多使命3D屏幕将成为将来用户的办公选择。不管用户身处何处,只要有一个VR装备,即可以扩大本身的工作空间,实现办公、社交、文娱无缝切换。21世纪的我们,糊口的主力依托着手机与电脑、平板等电子产物。畅想一下将来,以上这些产物都被紧缩成一个便携式装备,是多么便捷?

  就在本年炎天,我们对外预告了新系统Tesseract OS,并推出了体验版,约请浩繁开辟者与用户体验。Tesseract OS采取了多使命窗口,采取全新Dock栏,弧形年夜屏等新气概,与Meta所发布的多使命3D屏幕再一次不约而合。别的我们还插手ASW、PTW等浩繁衬着手艺上的进级,下降延迟和眩晕,晋升用户体验。

  (Tesseract OS 多使命3D屏幕)

  08- 体积视频

  (Cambria体积视频)

  体积视频简单来讲就是将连续串的三维模子毗连在一路,并让他们动起来,可以或许自由视角不雅看。体积视频给视频付与了体积的概念,让二维视频内容成为三维立体。它操纵摄像机收集到的深度色采等数据经由过程算法将实际世界经由过程三维模子揭示出来,可以在任何平台上(手机、电脑、平板、VR装备等)播放,用户可以在肆意时候肆意角度进行不雅看,即付与用户利用 6DoF不雅看视频的权力。

  简单来讲,就是实现全息影象功能。我们可以经由过程VR装备,看到一个身处分歧空间的三维真人影象。在疫情残虐地球确当下,全息影象的功能显得尤其主要。在Meta发布的视频中,我们也看到了将来新健身的模式,在任何场所,城市有全息锻练在用户面前指点用户若何健身。不但如斯,体积视频还能用在长途会议场景。会议是办千米最没法降服空间问题的一项内容,而虚拟会议可以或许完全解决解决空间所带来的没法逾越的鸿沟。

  想必大师对影创全息会议系同一定不生疏。它是一种全新的会议模式,可以或许实现长途合作和跨平台信息分享,到达多人、多地的及时沉醉式会议。影创全息会议可以或许及时传输亚厘米精度的全息真人形象,且撑持天然手势、手柄和语音等多种交互体例,更撑持多种类的虚拟数字形象,可谓是科技赋能新办公模式。如斯一来,VR装备成为出产力东西指日可待。

  (影创全息会议系统)

  综合来说,Tesseract OS集成上述所有自研算法与手艺,从而实现高机能、低延迟、丰硕功能,也是今朝行业内少有可以或许供给一站式解决方案的操作系统。相信就像Windows之在PC,Android之在手机,Tesseract OS将赋能VR成为新出产力东西。趣立科技是影创团体对外输出Turn-Key方案的平台,在底层算法和手艺方面有雄厚堆集,是国内能同时供给VR/AR全栈产物级算法与系统的公司,并将这些手艺开放授权给合作火伴。元宇宙时期的序幕已拉开,一同跨入元宇宙世界的年夜门吧!

亚美体育

北京总部:

地 址:北京市海淀区中关村北一街甲15号
电 话:010-85952290

兰州分部:

地 址:甘肃省兰州市城关区高新技术开发区雁南路陇星总部园区A座21层12号
电 话:0931-8271115

西安分部:

地 址:西安市高新区科技二路清华科技园D座21层
电 话:029-88607920

版权声明:

版权所有  亚美体育教育科技有限公司

京ICP备19006395号-1

亚美体育

亚美体育公众号

亚美体育

亚美体育微博号