纽约AR/VR创业真实记录，海量干货来袭

上次我们介绍了纽约目前的ARVR圈子情况，涉及的方面非常广泛，围绕着迅速建立起来的圈子和生态圈，ARVR在各个方向都有着新的尝试。
我们就来直接上点干货

【AR】
AR x 工业

        哥伦比亚大学的 Steven Feiner 教授展示了 AR 在机械组装上已有成效的研究。通过带上Hololens，工人们不用再花时间阅读冗长的组装说明书来确定装置的细节。另外一方面，AR眼镜还可以通过实时传导图像让不在现场的人也可以看见并指导在现场的人进行操作。

图： 摄于NYVR 2017 Feiner教授进行ARVR在工业上的运用

       Feiner教授在视觉领域非常活跃，专攻电脑成像和用户界面方向。其带领的研究室最新发表了AirCode技术，有望使AR中的Marker Tracking有实质性的突破。这种编码将现在的二维码进行隐性化处理，QR的形状将不会被肉眼看到却能被机器识别。这样的研究不仅解决了物品的美观问题，也提升了外观相似的物品（item recognition中的难点）的易识别性和连接的不同信息的可能行，并且对于物品生产来说是实际而易用的。
 

图 AirCode开发和运用

AirCode学术展示原文：

         另外，Feiner教授在EFXR 2017上则提到，目前最难攻克的AR方面的难题是眼球动态（Eye Tracking）。笔者自己也体验了一下现场的眼球追踪仪器，虽然能够大致追踪到位置，但由于眼球本身并不是完全静止的，在屏幕上的现实会发生剧烈的抖动，并且经常会有误判。

AR x 媒介

       要说到近期最夺人眼球的AR x 媒介的范例就是被苹果商店官方推荐的华尔街日报（WSJ）AR版了。该项目的负责人Roger Kenny亲身到展台来和大家交流道琼斯指数在这方面的创新和对未来媒体行业科技运用的想法。
 

图 摄于EFXR 2017右二为Roger Kenny
 

       通过3D可视化的展现，人们能更清楚地看到各个股票的涨跌情况。同时还可以点击进入单个股票查询其更详细的信息。对于那些无数次希望可视化市场数据的人来说这无疑将派上用场。此外，它也有着一个合理的好处，你能够采用新的方式浏览相关信息。可视化能够帮助人们在大量领域发现相关趋势或者利益所在，像为新兴企业和产品所做的市场研究，像投资等等。而新视角则提供给用户洞察市场运作或者股票的表现的能力。
 

AR x 商业

       相比于中国AR借由电商和娱乐大厂搞得风风火火的各种商业活动和运用，纽约的展会上展示的DEMO似乎还在小规模探索中。和商业相关的似乎只看到基于商场的导览功能相比于户外空间店与店的指引，这个导览功能是针对商场内部引导，对于在不熟悉的商场中寻找心仪的店铺是很有帮助的。另外还有一些针对商店内的海报和宣传册的结合，相对来说切入店都显得比较普通。但有一些开发者将AR和VR 360度全景结合在一起，也产生了一些新意。
 

图 摄于EFXR 2017 商店内GPS AR导览
 

图 摄于EFXR 2017 Verizon展台 AR和VR 360度全景的结合

AR x 娱乐

        自从Pokemon Go推行了基于LBS的AR玩法后，更多的研发者开始尝试其他的游戏方式，目前主要的两种方式产生于平面具现化或物体交互。纽约大学Tandon学院的Vhalerie Lee和Subigya Basnet共同研发了冰与火之歌的桌面AR展示，结合了3D模型，特效和音效的呈现，在桌面特征的捕捉上效果不俗。Vhalerie Lee表示后面将加入一些游戏性，向桌面游戏的方向发展。而VllageLive则更专注于城市里建筑的探索上，他们将Nelson在1980年拍摄的视频隐藏在纽约的大街小巷，用户探索纽约的过程中可以看到当时纽约的情景并且探寻Nelson所拍摄的同性恋和性转人历史的记录。Roi Lev则开发了When Things Talk Back，给了不同的物品角色，让他们可以相互对话，甚至抱怨你为什么要吃他们。
 

图：冰与火之歌桌面AR
 

图：VillageLive同性恋历史的城市探寻
 

图 When Things Talk Back 在展会上

吸引了很多刚入门AR的参观者

AR x基础设备

（Motion Tracking/Neuroscience）

        除了AR的直接应用之外，还有一些开发者放了更多精力在提供基础支持上，比如XTH Sense的传感器。它能通过追踪佩戴者的手、手腕及手臂的动作来进行位置确认，并且能够取得用户的体温，肌肉声音，血液流动，心跳来数据化用户的身体情况，从而让设计者能够基于这些数据进行内容开发。例如创作者可以利用XTH Sense用身体发出声音。
 

视频 利用XTH Sense艺术家演出

        纽约大学Tandon学院则带来了建筑神经学的最新研究成果。他们探索神经科学和建筑之间的结合和关系，探测人体在不同建筑空间内的反应和受到的影响来改善建筑和物品摆放设计。展会上展示的只是Eye tracking的部分，而且看得出不太稳定，但可以期待优化后在建筑设计上的运用。
 

图摄于EFXR 2017 Neurosciencefor Architecture, NYC Tandon

 

        在纽约的主要VR厂商玩家仍然集中在HTC，三星和微软身上。而NYC Media Lab和HTC Vive的合作非常的深入。在几次展会上都能看到HTC Vive内容平台的活跃。Jenna Seiden女士作为HTC Vive美区内容发展负责人在NYVR上展示了Go to China的计划，推进VR内容中美之间的交流。之前曾就职于NBA，微软Xbox，她对内容授权和内容生态尤其是游戏内容的打造有非常深厚的经验。

另一方面，由于微软在2017年发布了Mix Reality家族，它在纽约的展会上所展示的仍然围绕友商的Mix Reality体验。
 

图 摄于NYVR 2017 微软的展台主要以和友商

（Dell，HP，Lenovo，Samsung）合作的Mix Reality为主
 

图 摄Nordstrom商场内部

但NYC Media Lab合作的对象仍然主要是HTC Vive。
 

图 在EFXR展会上VR展台大部分是与HTC Vive合作的内容

由于VR的DEMO和产品比较多，这里挑一些比较显著的产品及内容和大家分享。

VR x 医疗

         在此前说纽约在医疗方面的比较下功夫，因此在VR的创企上也不乏看到这样的产品和内容出现。以PIXCORE为例，这是一家主要为美国医疗和医药企业推出营销计划的公司。他们在2017年的时候率先尝试了将VR marketing带入医学领域的整合性内容。通过对患者发病原因和病理的沉浸式展示，医生们有了新的向让患者切身体会到不良习惯所造成的身体伤害。
 

图 Pixacore和医药领域的客户合作推出的Disease Education

VR x 教育/训练

        另外一个就是之前提到的Aquinas Training,一个希望用VR在沉浸式方面的优势来增强记忆曲线的公司。相比于追逐和集中机器学习上，Aquinas Training的CEOHughSeaton更希望用新的科技加速和加强人类学习。机器学习的进步尚且那么快了，而人类获取，理解，运用知识的过程却没有什么实质的变化，而Aquinas Training则希望能专注于这一点。
 

图：Hugh Seaton展示VR在教育上不可替代的促进作用

“和AR相比，VR有其不可替代的独特作用，能帮助人们模拟和完成在现实中很难做到或代价很高的事情，例如几千英尺以上的海底探测，面对恐怖分子的突发状况等。” Hugh Seaton在NYVR的Workshop上讲到。

VR x 基础

      还有一个则是偏基础搭建的，其实AR，VR都用得到。Geopipe通过对卫星图片，地图和激光扫描等成像的大数据收集和读取，运用机器学习和算法理解真实世界的物体结构，从而实现城市真实建筑的抓取和建模，不仅能呈现基本形状，还能模拟出城市的内部构造，周围的树以及窗户位置和大小。这个能提高AR和VR城市模型的建立速度并减少成本。Geopipe是在NYVR创业者大赛中脱引而出成为第一的公司，CEO Christopher Mitchell和CTO Thomas Dickerson是高中同学，他们在学生时期就有了这个想法，现在实现了，并通过纽约AR和VR的平台找寻着客户或者合作伙伴。
 

图：Geopipe通过算法生成的城市样貌还在有序的不断增加

 

对于记录城市发展也很有帮助

彩蛋

        在笔者之前参加的NYVR展中，有一家唯一的中国厂商——小派科技。那是Kickstarter结束众筹的前6天，在纽约做showcase。虽然是仅有的中国厂商，但排队的来尝试的参展人络绎不绝，可以说是排最长队伍的展台之一。虽然展示的内容Demo是一个非常短时间的海底体验，但几乎每一个试玩过的人都被8K画质和200度的FOV所震撼到，这样的拟近人类的市场和高分辨率让参展的人体验到了区别于当次展览的任何一家VR头显厂商。

        我们就是希望拿到国外来经受批评和建议的洗礼，改进后再推出来。美国的用户喜欢交流，评论，批评，有许多建议对我们都是有用的，包括媒体，问的问题也很犀利。”CEO任攀先生总是自己帮助来试玩的人带上小派的头显，回答着他们的一些问题。很多人并不会想到这个人就是在Kickstarter还有6天结束的时候就已经众筹到260万美元的启动资金的小派核心人物之一。

        纽约的许多研发者都对中国AR和VR的进展感兴趣，并且希望能够和中国的厂商进行合作。当笔者和纽约ARVR圈子里的人们分享天猫和腾讯在春节期间的AR红包大战以及一些新奇的ARVR硬件和内容时，他们都认真的听着然后相互讨论着。在EXFR的采访宣讲上Kyle Li也跟大家不断安利Lenovo出的《绝地武士挑战》游戏，称其是最好的AR体验，并希望联想能开放其SDK。

“我们知道中国甚至建立了一个VR公园，但还是鲜少看到AR方面的报道。希望能多了解你们的创业者都在做些什么。