以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR?

2017-09-30 13:15 VR/AR 来源:创头条 查看原文

秋风送爽,阳光变得温暖不再是炙烤,熟透的银杏白果一个劲儿往地上撞,人们也都抑制不住出门溜个弯儿。

前门大栅栏的胡同里人潮涌动,一年一度的“北京国际设计周”正在这里举行。

雷锋网听说一家AR公司“奥本未来”把最新的MR混合现实技术与古旧的胡同进行了一次结合,让人在百年前和百年后的胡同之间来一场穿越。神秘古韵的胡同与现代科技能擦除什么样的火花?雷锋网带着好奇,也来凑了个热闹。

走进杨梅竹斜街,这条胡同狭长深邃,雷锋网正愁不知道从哪儿开始逛展就看见地面上贴着一张醒目提示标。用手机扫描图中二维码后,页面自动跳转,胡同的全部景致都出现在了手机上,其中还有很多悬浮的虚拟指示牌,表示出参展的活动所在的位置和介绍。

以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR?

 有了MR信息导览,参展的人就不再需要使用复杂抽象的纸质地图,MR这样的所见即所得显得非常一目了然。除此之外,雷锋网发现屏幕上还有一个可以滑动的按键,滑动一次,眼前的一栋建筑立马转变成了百年之前的样子,有一种穿越之感。再滑动一次,胡同的样子变得很数字化,有机器人和无人机穿梭其中,还可以进行一些小的互动。

以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR? 

以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR?

雷锋网从奥本未来工作人员那里了解到,此次用AR做胡同穿越有两个主要目的,一个是利用MR所见即所得的特性帮助设计周纷繁的展览活动做导览,其次是展现设计、新技术与城市的理念,还原胡同百年前原貌,畅想胡同百年后的新景。

"胡同穿越“是他们将MR混合现实技术应用到实景导览的一次创新性尝试,据雷锋网了解,也是AR/MR技术运用到大型互动娱乐活动中较早的例子。雷锋网对“奥本未来”进行了专访,与他们深入探讨了AR在各行业领域的应用。

奥本未来成立于2016年初,2016年底获得水木资本提供的数百万元天使轮融资。奥本未来专注于增强现实技术研发和应用,团队的核心技术包括通过深度信息和自然特征点实现三维重建,以及模型SLAM等算法。他们目前已经有一套完善的三维重建及AR制作引擎,“胡同穿越”活动的素材采集,三维合成,AR特效等都是他们自主完成,用时不到一个月。

奥本未来团队多名创始人毕业于哈佛大学,其CEO雷雨是哈佛应用物理博士和科学历史硕士,专注传z和纳米方向应用,有多次创业经验;CTO沈方阳是北航虚拟现实国家重点实验室博士,师从赵沁平院士,曾任职于微软亚洲研究院和美国Mental Cancas公司;COO贾梦是哈佛景观和产品设计硕士,也正是基于她每年都参加设计周活动时,经常迷路的经历感受,才萌发出此次“实景导展览”+“胡同穿越”活动的构思。。

AR的技术和应用广泛,这个年轻、高学历的海龟团队在AR领域也已经有了自己的战略布局。他们会主攻基于“实景导览”、“虚实互动”体验在各行业的应用以及商场消费升级大潮中的“移动新零售”营销解决方案。。

MR引领商场消费升级

在位于太库孵化器的办公室,奥本未来向雷锋网展示了他们做的MR商场消费升级的demo。

他们首先在地面上放置了一个二维码,在扫描之后手机屏幕上就出现了太库的办公室,以及叠加的AR特效。这些特效展示的是一个圣诞节庆的场景,用雪地、圣诞树、白色大熊、水晶装饰把整个空间打造成了一个典型的圣诞节场景,正如各大卖场在圣诞节努力营造的气氛一样。雷锋网发现,点击屏幕的一处,一只小狐狸还会跳出来跑来跑去。

这个Demo对于实际场景的建模比“胡同穿越”项目的清晰度高很多,MR效果的制作也更加的炫酷逼真。雷锋网确实从中感受到了节庆的氛围。

奥本未来CEO雷雨解释到,这个demo所演示的正是他们希望运用在大型卖场的解决方案,用MR引领商场消费升级。“现在的大型卖场越来越多,店铺修建地越来越集中越来越复杂,消费者要去寻找一个店铺是很困难的,同时不进入店家,也不知道店里正在进行的活动。我们习惯了线上的搜索,而当线下没办法搜索的时候,很多人都很苦恼。我们要做的事情就是利用MR,把线上和线下相结合,让逛实体的卖场也同逛网店一样轻松。”

MR作为一种将虚拟信息叠加到现实世界的技术,正是要打破虚拟和现实,线上和线下的区隔。雷锋网也曾报道过过个利用AR标注信息来简化线下流程的例子,例如AR指引逛商场,AR寻找派对中的朋友等,但是这些都只是停留在案例和demo阶段。奥本未来可以说是首先要将MR应用到大型商业场景中去解决问题的。

奥本未来将他们的整套方案称为“Web MR解决方案引擎”,也就是说他们在做这些卖场导航,消费促进的时候不需要用户额外下载APP,用手机扫描二维码,然后就可以通过浏览器看到虚拟融合的效果。对于现有的APP产品,也可以直接接入他们的SDK,不需要二次开发。

消费场景一直都是香饽饽。京东、淘宝早已经试水VR购物,也推出了AR购物产品。但是京东、淘宝这样的在线平台似乎触角并没有伸展到线下大型卖场这样的场景。但是雷锋网也设想,像百度地图、大众点评这些本身就基于线下场景的应用,如果进入这个领域,奥本未来如何应对?

关于这一点,雷雨认为:“几乎所有行业都是这样的,只要有一个大公司决定做一件事情,几乎没有什么创业公司能抵挡得住的。你只有几个办法:一是你要做的快,你要先把市场抢了,我觉得我们就可以先抢占市场,因为我们一旦和商场建立了合作,完成了实景的建模,放了导览用的二维码,商场也不会花精力再让第二家公司做这个事情。”

目前,从技术上面来说,他们是用二维码来提供定位,第二步他们希望学习谷歌的深度学习的方法,用人工智能来认识店面,计算用户相机的姿态和站立的位置。

提倡“创客”思维的AR儿童教育

随后,奥本未来向雷锋网展示了他们目前已经做出产品开始销售的AR儿童教育产品:MuzzBloc。

以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR?

这款AR儿童教育产品主打的是音乐教育,产品由一个实体的积木以及可以在iPad和手机上使用的APP组成。看到这么萌萌哒的设计,雷锋网(公众号:雷锋网)立马动手玩儿了起来。当把一只卡通小牛积木放置到底座上时,iPad屏幕立刻就会冒出一个对应虚拟卡通小牛,并且发出了“哞哞哞”的牛叫声。随后加上其他卡通形象时,就出现了吉他、木琴、小提琴等多种乐器,神奇的是,这些乐器组合起来共同演奏一首曲子。这些曲子风格并不是国内烂俗的小苹果、喜洋洋,而是Flamenco、World Jazz等异域风情十足的曲子。不仅是增加减少乐器,曲风会有变化,变换积木的放置也会带来新的变化。

以MR引领商场消费升级,哈佛海龟创业团队“奥本未来”为何死磕MR?

雷锋网编辑一玩儿就有点停不下来,被这些异域的乐器深深吸引。比如那个马林巴琴,竟然能跟吉他演奏出这么好听的曲子。据称,这些积木的变化带来的乐曲的变化有六万多。

相比于现在世面上能看到的类似点读机的AR早教产品,这款音乐产品的特色在于交互和创造性。雷雨说自己从小就开始学钢琴,但是小时候为了考级而学音乐的过程是很痛苦的,但在不考试的时候反而能真正享受音乐。

将AR与这种互动性的教育结合起来也是摸索中发现的。“奥本未来”其实一开始更多的是一个纯技术的团队,他们一开始专注在AR引擎上面,最开是利用沙盘等坐AR投影,不用佩戴眼镜也能看到。在这个过程中,他们发现AR能提供一种全新的互动方式,这种互动方式现在的孩子很容易接受,能对启蒙教育带来很大的改变。

这款产品目前主要面向的是海外市场,面向家庭用户出售,同时也会与学校合作推出适合学校音乐教育的高阶版本。雷雨在本科毕业后曾经在埃森哲做过咨询,负责IT系统这一块。学校的IT设备都在一个线上系统,学校自行去采购,当时雷雨负责的就是这些渠道的对接,积累了很多资源。雷雨说,“这款产品的第一代功能不复杂,但是它可以添加更多功能,未来就可以把它编程成一个课程,作为教具的方式,把它放在学校里面。”

这款MuzzBloc的技术看起来简单,但是也是很难的。雷雨介绍到:“这个产品本身的技术层面就是识别,iPad的前置摄像头可以识别到面前的积木的变化。这些积木上并没有二维码,因此我们是用了更加符合的计算方法,通过自然图像的认知。由于我们固定了相机姿态,节省了很多机器学习的能耗,但是在这个过程中,我们积累了很多如何把机器学习融入在一个model端去做。在网页上做会比现在这个在APP上做更有挑战性。”因此,除了销售这款MuzzBloc产品,他们同时也为B端客户提供一些AR及MR技术的解决方案。

读哈佛还创业是种什么样的体验

既然奥本未来团队大都是哈佛海龟,雷锋网也不妨来个知乎体式的问题,读哈佛是种什么体验或者创业是种什么样的体验的进阶版本:读哈佛还创业是种什么样的体验。

雷雨说自己在刚进入哈佛的时候,就一心想创业。这位从事应用物理研究的博士通过与麻省理工学院媒体实验室(Media Lab)的一段结缘,让他对于可触碰媒体技术产生了浓厚的兴趣。Media Lab这个实验室在新媒介技术圈的名声响亮(1980年成立时,本着“传播与资讯通讯科技终将汇聚合一”的愿景,研究有形的原子与无形的位元为人类感官、知觉、互动科技整合带来的创新领域)。

由此,雷雨也感受到了学科交叉的重要性,思考角度也从研究层面延伸到用户的感知体验层面。同时,他还开始关注并且深入探索艺术、美学与交互。

目前对于创业,他也是很淡然的,他分享到:“创业本身就是一个苦逼的活,它成功的几率非常低。因为我天天参加各种创业的讨论会,想赚钱就不要创业,这是绝对的。99.99%的人根本赚不到一分钱,你创业之后就成了一个信仰。对于很多人来说,你要想赚钱,你不要做创业。你信仰一个东西,你去做这个东西,不图任何的回报。”

为您推荐: