Adobe推MR开发工具,未来将重点发展AR及MR软件

电子说

1.2w人已加入

描述

虚幻引擎推出全新虚拟制作工具,VR技术正在重塑电影摄影方式 

实时VR技术是电影制作的未来吗?   虚幻引擎正在改变电影制作者和广告商的创作方式。这种新的虚拟制作工具可以实时添加特效,在LED墙壁上实时创建沉浸式的虚拟环境和活动场景,取代了通过绿幕或后期制作添加特效的传统方法。

场景中,当你移动相机时,虚幻引擎相机也随之移动,这就会产生视差效果,呈现出3D效果。新技术还为场景中的真实物体和人物添加了逼真的灯效。因为所有的场景都是在一个镜头内同时拍摄的,无需再进行复杂的后期制作。

电影《登月第一人》(First Man)和《游侠索罗:星球大战外传》(Solo:AStarWarsStory)中已经应用了这项技术。Jon Favreau在SIGGRAPH向观众透露,他在即将上映的《星球大战》系列电影《曼达洛人》(The Mandalorian)中也使用了虚拟VR LED墙壁。未来几个月内,这部电影将在Disney+上首映。

Epic Games与Magnopus、Lux Machina、Quixel、Profile Studios、ARRI和Cinematography Database的Matt Workman一起,在SIGGRAPH上展示了这项技术,创造出一个无缝的环境,演员和道具都沉浸其中,参与者可以透过镜头观察虚拟现实软件的运行情况。每个元素都会被实时集成到一个场景中。  

图片来源: Epic Games   关于虚幻引擎的VR制作工具,Workman在一篇官方博客文章中谈到,当他第一次走进充满LED的场景,通过摄像头看过去的时候,那种感觉就像是在拍摄外景。

Lux Machina技术副总裁Kris Murray说:“我们可以实时追踪相机在太空中的位置,并呈现出它的视角视图。”又补充到,“也可以强制命令相机,镜头前的一切都不是真的。”  

图片来源:Epic Games   虚幻引擎制作工具,可以实时改变整个场景的现场设置,包括所有特效。比如,有一次拍摄时需要移动场景中的岩石来辅助摄影,电影制作人只需通过iPad等设备虚拟地“拿起并移动”石头就可以达到效果。

创作者也可以通过简单的指尖手势来改变一些设置,比如灯光。手指向上、向下、向左或向右滑动,光线的角度会随之发生变化,从而影响CG环境、演员、道具。只需几个简单的手势,你就可以瞬间把日出变成黑夜。

Workman说:“这就像一个虚拟的射击游乐场。”  

图片来源:Epic Games   虚拟制作简化了协作过程,从摄影导演到电影摄影师,任一部门都可以进入场景中进行更改,不必为后期制作等待数月。   首席技术官Kim Libreri表示:“我的梦想是让电脑图形完全逼真。我很喜欢电子游戏和电影,这项技术让它们完成了最好的结合。”   如果你恰巧和Libreri一样热衷于VR电影制作,可以下载最新的UE4预览版,查看虚幻引擎制作工具。   当然,Epic Games并不是唯一使用虚拟拍摄技术制作游戏的公司。总部位于洛杉矶的科技公司AR wall一直在与生产公司保持合作,为自家开发大型ARFX显示器。AR wall结合了大型LED视频墙和跟踪技术,制作逼真的“虚拟窗口”用于电影场景,这很像新型虚幻引擎VR制作工具。   无论哪种服务可以提供最好的体验,显然VR技术正迅速发展为大型工作室和制作公司的选择。今年初夏,我们了解到导演John Favreau在翻拍真人版《狮子王》(The Lion King)时,大量使用了虚拟现实技术,基本上创造了一个完整的用于拍摄电影的虚拟现实世界。

Adobe推MR开发工具,未来将重点发展AR及MR软件 

到今年年底,设计师们将获得三个新的Adobe应用程序,都是该公司面向下一个创意时代的愿景。Adobe首席技术官Abhay Parasnis表示,下一代应用程序将重点实现现实生活中物理元素与数字元素的结合,强调“玻璃之外”的体验。这些元素将在移动设备或电脑桌面上相互连接,用户可以在任一设备上的应用程序之间切换。  

Parasnis在接受the Verge采访时说:“我们正在开发的每一个应用程序:Aero、Fresco、iPad上的Photoshop,都在推动原生云计算功能,简化协作”。也许Adobe未来设想中最好的例子是另一个仍在开发阶段的项目”Project Glasswing”。这是一个混合现实的显示原型,可以通过Photoshop或After Effects层的形式,把Adobe的所有应用程序带到现实世界中,显示在真实3D对象面前的透明屏幕上。    

  Parasnis顺便向The Verge展示了iPad Pro所有正在开发中的应用程序。首先是即将推出的iPad光栅矢量插画应用Fresco。他在画布上画了几笔,点击保存,然后在iPad的Photoshop中打开了相同的文件,笔迹同步成功。Parasnis说,我们的目标是让应用程序“不仅在UI上感觉相同,在云文档中也相同”。文件看起来是本地生成,但实际操作是在云空间进行的,每一处更改都可以立即同步保存。   Fresco可以模拟水彩画和油画在纸上的表现,是在Adobe Sensei的AI平台上研究了8年的成果。因为首发版本需要高端的GPUs运行,所以大部分时间团队都在研究如何减少笔触对电池寿命和性能的损耗。Parasnis说:“对于一个艺术家,没有什么比感觉自己正在玻璃或数字屏幕上作画更糟糕的了。”对此,Adobe的研究团队必须做出突破,减少延迟并让画笔和颜料实时自然混合。    

  Fresco计划把模拟绘画体验引入数字屏幕,而Project Aero的目标正好相反。增强现实创作工具可以让设计师在不知道如何编码的情况下,通过熟知的Adobe工具创建沉浸式体验。Parasnis称,Aero开始阶段的问题是:“我们能否将Photoshop、Illustrator、InDesign和Dimension的作品数字化输出,并把它们无缝地带到实体3D空间中?”   Aero在去年苹果开发者大会上进行了预演,Adobe宣布将使用苹果和Pixar共同开发的AR文件格式。统一后的USDZ格式目前仅用于iOS,无需下载单独的AR查看器,文件就可以导进iPhone常规应用程序,如iMessage和Safari。   通过Aero app,艺术家可以使用拖放模块创建动画和响应AR体验,APP会自动考虑物理和灯光等因素,这些都需要掌握Unity和苹果的ARKit等程序的操作。艺术家还可以使用3D纹理和material from Substance对增强现实作品进行微调。Substance是Adobe最近收购的纹理算法软件。只有部分艺术家能够访问Aero的封闭测试版,但该应用程序可以接受提前申请。  

  不过,Parasnis也认识到AR的局限性:用户需要设备来绑定屏幕。Parasnis表示:“要想让增强现实和沉浸式体验成为主流,硬件和软件都必须做出改变。”对此,Adobe的解决方案是Project Glasswing,这是一种透明的LCD显示屏,大多用于零售店、酒店、博物馆等公共场所。原型显示器就不可以混合数字和物理环境,不需要眼镜和耳机。“我们期待它成为增强现实的另一种形式”,他这样说。    

  Parasnis强调,Glasswing项目不是硬件产品。恰恰相反,这只是Adobe在实际应用程序中,尤其是在零售领域,演示如何使用该软件。Adobe打算与其他公司合作,以“推动硬件的发展”,因为Parasnis曾表示,“我们并不想从事显示器制造服务。”   Parasnis认为AR技术有可能给正在和亚马逊竞争的零售商带来优势。“如果我能让实体零售环境和空间更具互动性,”他说,“这就会增加用户放下屏幕走进实体空间的可能性。”

华为发布Lab地图导航技术Cyberverse,集成3D建模、AR导航 

日前,HDC2019开发者大会,华为发布一款Lab地图导航技术Cyberverse。该平台为AR实景地图服务平台,可使用手机进行厘米级定位。

华为camera首席工程师罗巍表示,Cyberverse可用于在景点、博物馆、智慧园区、机场高铁站等空间,今年将会在国内5个著名景点进行开发者测试,到2020年年末,将在1000个地点提供服务。

Cyberverse目前已有3D步行导航、虚拟楼宇信息、智慧园区IoT信息等应用场景,覆盖150个国家40种语言。该平台也可作为导航汽车进行左右车道、一二三车道的转换的高精定位导航系统。

该演示展示了:人物3D重建、3D智能助手、虚拟标牌、全息广告、3D步行导航 、lOT信息展示、雕塑识别和全息讲解、室内空间计算、多人互动游戏、夜景空间识别等。

华为消费者业务云服务总裁张平安称,今年10月之前,华为将发布此地图服务给开发者。

“最终消费者需要什么服务体验开发者最知道,华为需要开发者的帮助。”华为消费者云服务首席创新官望岳表示,目前Cyberverse已有开放接口,包括3D Map、数据信息接入等。Cyberverse技术中的AR功能将全面开放,Google的AR Core、苹果的AR Kit都可以纳入。

棱镜光娱宣布完成5000万元A轮融资 

近期,棱镜光娱宣布获得了 5000 万元 A 轮融资,本轮投资方为吉利科技集团。官方表示,本轮融资将用于夯实技术和基于技术的内容能力,推进产品化、商业化落地。       

棱镜光娱成立于 2017 年 8 月,是一家集头部 IP、全息内容创作、出品、市场运营及技术服务为一体的科技文化传媒公司。相比于传统的,以荧幕、水幕等介质为成像载体的成像方式,它以全息技术为基础,融合人工智能、VR/AR等多种前沿科技。棱镜光娱3D 立体空间成像系统以一种全新的形式吸引着C端观众。

此前棱镜光娱曾推出的全息演唱会《邓丽君·传奇》、3D 全息亲子互动秀《超级飞侠·鸟巢总动员》。在内容开发方面,棱镜光娱和环球唱片、数字王国、奥飞娱乐等合作,获取了邓丽君、张国荣、Beyond、超级飞侠等超级 IP 的全息版权。

此外在文旅板块,棱镜光娱已启动《梦回南宋》《梦回敦煌》等复现历史人文景观的全息剧创作项目,即将入驻多个国家级景区。

值得一提得是,此前棱镜光娱曾于 2018 年 4 月完成 3000 万元 Pre-A 轮融资,由荣正资本领投。截至目前,该公司累计融资金额近亿元。

日本DMM VR全息影院将于2020年4月底关闭,原因系租赁合同到期 

DMM.futureworks于8月9日宣布,在日本横滨运营的全息影院“DMM VR THEATER”将于2020年4月底关闭,据悉原因是定期建筑租赁合同到期。  

    DMM VR THEATER于2015年9月开放,是全球首个3D全息娱乐剧场,以各种娱乐作品为中心进行了许多表演,如《海贼王》、稻川淳二的表演等等。2017年,曾在SEGA负责初音未来游戏业务的内海先生被任命为总裁。   目前DMM VR还未确定后续业务和营业规划,DMM VR THEATER是否还能更换地点继续开办还是个未知数。

鸿蒙OS系统:开源框架致力跨终端分布式应用,2022年将用于VR/AR头显 

近日,华为在东莞新总部举办2019年开发者大会(HDC),鸿蒙OS(Harmony OS)作为主角也在本次活动上正式亮相。   鸿蒙 OS是一套基于微内核架构的分布式操作系统,在多设备兼容性、安全性、流畅性等方面有着天然优势,并且对外开源。现场余承东分享了鸿蒙OS的演进路线图,在2017年的时候,鸿蒙内核1.0完成技术验证,去年,鸿蒙内核2.0用于终端TEE,今年,鸿蒙OS 1.0版将首发搭载在智慧屏也就是电视产品上。   据悉,鸿蒙OS 1.0版基于开源框架并在关键模块上实现自研,体系上由分布式架构、方舟编译器、确定时延引擎、TEE微内核形式化验证、多终端开发IDE(Beta)组成。

明年,鸿蒙OS 2.0将推出,其中内核和应用框架实现完全自研,体系上由通用微内核架构、高性能图形栈、支持多语言统一编译、多终端开发IDE并满足车规级标准,落地产品包括创新国产PC、手表/手环、车机。   2021年,鸿蒙OS 3.0将会推出,并用于音箱、耳机,2022年用于VR/AR头显等更多的设备。

余承东表示,鸿蒙OS是华为全场景时代的操作系统,也是全球首个微内核分布式操作系统,可以打通智慧屏、穿戴设备、汽车、智能音箱、手机等诸多终端。鸿蒙OS是未来的操作系统,它的出现可以满足全场将智慧体验高标准链接要求,因此也具有四大不可比拟的技术特性:分布式构架、确定时延引擎和更性能IPC、微内核架构、多终端开发IDE,多语言统一编译。

分布式架构会进一步提高终端的分布式能力调度及分布式数据管理能力,能够像开发统一终端一样开发跨终端分布式应用,最终能够让消费者享受到多终端协同配合的无缝体验。   而确定时延引擎和更性能IPC则有效解决了如今系统性能不足的问题。确定时延引擎可以对任务分配及调度进行合理优化,将应用响应时间降低了25.7%。   微内核构架拥有更好的安全性能,保障多端间的安全,采用形式化数学方法,从源头上保障系统的安全,并大大降低延迟。   凭借近端时间发布的方舟编译器,鸿蒙OS可以实现多终端IDE开发,多语言统一编译,分布式架构Kit还可让屏幕布局控件及交互自动适配,支持控件拖拽,面向预览的可视化变成,真正实现一端开发,多端部署,大大提高开发效率。   对于鸿蒙手机能否短时间内运用至手机的问题,余承东表示:鸿蒙是未来的操作系统,比安卓快6倍,更快更安全,并能随时应用在手机操作系统上,但目前考虑到生态问题,华为仍优先采用安卓系统,如果哪一天安卓无法使用了,华为随时可以启用鸿蒙。  

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分