打造专业级新一代影像 看到科技要做VR全景视频领域的大疆

2017-07-21 02:20 VR/AR 来源:创头条 查看原文

           

2014年VR概念的火爆,带动了一大批VR头盔、VR眼镜、手机盒子等硬件设备的问世,但关键的内容端依然缺乏成熟的解决方案,360度全景相机的出现带来了新的可能性,并受到谷歌、诺基亚、Facebook等主流厂商的青睐。


根据艾瑞数据,2016年VR头戴设备以20.5亿元的规模占据中国VR市场整体份额的59.2%,各种细分领域也将进入蓄力爆发阶段,VR内容市场预计到2021年规模将上升至386.4亿元,年复合增长率达163.4%。内容市场将超过VR头戴设备,成为占比第一的细分市场。


来自深圳的创企看到科技就瞄准了内容市场这一潜在机遇,公司专注于VR视频软硬件一体化研发,能够面向大型直播机构、电视台、视频工作室等专业级用户提供全景直播、VR视频制作端到端的一站式解决方案。


据看到科技COO蔡树焕介绍,公司从2015年年中开始筹备;2016年1月拿到天使轮融资,并正式注册成立;2016年6月,获得奥飞娱乐数千万融资;2016年11月,完成香港上市公司天彩控股4000万战略投资。


WechatIMG21.jpeg

Obsidian R版


最新的成绩是,看到科技的VR相机Obsidian(黑曜石),包括Obsidian R版(高分辨率)和Obsidian S版(高帧率)两款机型,在7月18日启动预售后,将于8月中旬正式发货,首批200台。看到科技自主研发的全景视频处理软件Kandao Studio也将同步上线。在此之前,Obsidian曾在今年CES上,击败三星、索尼等竞争对手,获得数码影像类别唯一的一个“最佳创新奖”,看到科技成为首个获此殊荣的中国公司。


面向专业级市场,提供3D全景内容生产工具


在看到科技进入全景相机领域前,行业已经迎来一个不小的爆发拐点。国外的Google、三星、诺基亚、360 Heros、Jaunt VR、Next VR以及Bubl,国内的暴风魔镜、Wipet、完美幻境、Insta 360、UCVR、小蚁科技纷纷进入该领域,推出硬件产品,部分还开源了硬件设计、软件拼接算法及播放器平台,以“平台生态”的打法高调切入。


面对这一现状,几位创始人在一番调研后,看到科技最终确定了面向专业级市场提供3D全景内容生产工具这样一个差异化的定位。


“我们不认为做平台,又建生态,是一个创业公司撬得动的事情。在分析了观看平台、内容生产方、内容生产工具后,结合从业经验及现有资源,我们认为内容生产工具这个链条所需要的能力,我们基本齐备了,也比较适合创业公司来做。”蔡树焕说道。


方向清晰后,看到科技很快就研发出了产品demo,历经一年打磨,3D全景相机Obsidian先锋版面世,由6个平行鱼眼摄像头组合而成,摄像头之间能够实现像素级同步,可拍摄4Kx4K每秒30fps的360度VR视频,支持在VR设备、手机、平板、电脑及投影仪上观看。


屏幕快照 2017-07-20 下午6.16.19.png

Obsidian荣获CES 2017年度数码影像类“最佳创新奖”


先锋版只是看到科技提供成熟内容生产工具的第一步,简单而言,看到科技需要一款集成平台核心技术的产品,走到实际的市场应用上去,让用户切实体验其功能,并提供反馈意见,这是优化正式版的“养料”。摘得CES 2017年度数码影像类“最佳创新奖”,从一方面也验证了Obsidian的商业价值。


在掌握市场脉络下,看到科技于今年7月正式启动Obsidian正式版预售,包括Obsidian R版和Obsidian S版两款机型,定位于高端影视专业市场,售价均为68000元人民币。两款相机均可在3D模式下,进行全景视频、图片和延时摄影拍摄。


Obsidian R版和Obsidian S版主打不同特色功能,R版是8K超高清画质,能够拍摄8Kx8K每秒30fps,或4Kx4K每秒60fbs的3D全景视频,分辨率是普通单目4kx2K全景视频/照片的8倍。S版主打高帧率,可拍摄高达120帧每秒的3D全景视频,并支持6K/30fps和60fps两种拍摄模式,适用于极限/高速运动等场景,也可用于拍摄慢动作特效。


配置上,两款设备采用高度一体机身设计,镁铝合金外壳,机身总重不足1.5KG,便携性强,两块单反标准电池可支持50分钟视频拍摄,电池可热插拔。


WechatIMG22.jpeg


除SD卡本地保存,两款相机均支持通过一条网线供电、导出文件素材及Wi-fi远程连接,用户可在手机、平板、电脑上安装控制系统,对一组6个镜头或任意镜头的成像进行远程预览和控制,并调整曝光、快门、ISO、白平衡等专业参数。例如因光线分布不均,视频/图片呈现一边明、一边暗的“阴阳脸”现象时,用户通过调整某几个镜头的曝光、白平衡,可让成像看起来更自然。


此外,考虑专业级用户实际使用需求,Obsidian R版和Obsidian S版均可输出最高每秒100M的码流素材(行业普遍是30M-40M),支持flat/standard/log图像风格和DNG原始格式,这意味着图像大量原始信息得以保存,为后期处理预留了更多可发挥空间。


“一键”制作3D全景视频


全景相机的核心竞争力通常来自两方面,一个是硬件,包括结构、散热、体积、电子、电路设计等,另一个则是拼接算法和后处理,拼接算法的好坏,不仅直接影响视频处理的效率和成本,更会影响视频观看效果,比如在视频顶端和底端出现明显的拼接痕迹,割裂感强,影响沉浸感等。


针对拼接这块,看到科技打造的电脑桌面应用软件Kandao Studio,能够帮助快速生成3D全景视频,用户只需将6个镜头的文件夹素材导入进来,光流拼接算法和深度学习图像算法,会自动完成高质量的3D全景无缝拼接。用户可在本地进行编辑和修改,如调整素材片段起止点位置、做曝光补偿、调整画面方向/分辨率、设置中心视野、镜头缩放等,预览、视频文件导出和下载等都在本地完成,大幅降低了生产3D VR全景视频的门槛,减少所需重复劳动,按照一般的使用流程测算,处理成本仅为传统人工处理的不到1/10。


蔡树焕提到一个案例,知名纪录片导演赵奇为生产一条时长5分钟的3D全景视频,前后花费一个月对素材进行拼接,而通过Kandao Studio系统,即使算上人工调整时间也就4-5天。生成的文件格式与国际标准兼容,可以直接导入AE、Premiere等专业视频制作工具中进行渲染、制作特效等。


WechatIMG23.png


为何选择本地安装而非在云端进行拼接?蔡树焕解释,1)专业级场景,码流往往在几十甚至上百GB,上传再下载极其考验网络带宽,仅传输这一项就可能花费十几天,期间素材相当于处于不可控的“黑箱状态”;2)很多素材涉及商业机密或有版权保护,并不适合储存在云端;3)云端会打乱原有的视频处理流程,“视频制作团队一般是出去拍好素材后回到工作室,往电脑里一导,就开始做各种处理,如选材、调试、剪辑、配乐等,整个过程自己是可控的,效果也是实时的。本地化更符合专业团队这样一种工作习惯。”


本地拼接的难度又在哪?


“主要是算法”,蔡树焕表示,如果是云端,设备供应方可实时把控视频状态,发现拼接有问题,可以尝试自己先纠正,问题继续存在,才考虑派遣工程师上门服务。本地化相当于将控制权“拱手让于”用户,用户能第一时间发现问题,设备方被通知前对此则是一无所知,倘若算法处理能力不够强大,可能会被大量投诉。据介绍,目前Kandao Studio的拼接算法处理准确率已达到90%以上,能为用户减少大量重复性工作。


除视频拼接,Kandao Studio另一个核心功能是进行全景VR直播,六个镜头生成的素材实时导入后,系统会以每秒30帧的速度进行拼接处理并推流直播,是目前唯一可以交付使用的3D全景直播方案。Kandao Studio也集成了3D声音采集装置,支持后期全景声制作,并支持调整视频的帧率、分辨率、更改Video格式、比特率等。


“切流、高清、沉浸感”


与VR相机体验核心相关的一个重要工具还有播放器。目前可支持4K分辨率的设备并非市场主流,遑论8K,这与终端显示技术及网络带宽有关系。考虑这一现状,除了对编码进行针对性优化,如采用H.265编码格式(比H.264编码节省将近一半码流),看到科技还利用“切流技术”来降低GPU和带宽的工作负荷。


所谓“切流”,类似于眼球追踪中的“漏斗式渲染”,是对中心视线点这片极小的区域进行4K、6K甚至是8K的高清渲染,其他区域则降低分辨率渲染,比如1080P的分辨率,视线点转移时局部渲染区域会实时调整。由此,可将推送码流从之前的12-20M压缩到4-8M。


为何要推出8K分辨率的全景相机?蔡树焕告诉Xtecher,理论上,3D全景达到16K分辨率时,才能实现人眼看真实世界的效果,但16K在现阶段显然不现实,8K则是技术上能够实现、效果又不错的折中方案,能够创造全沉浸感,改善VR设备成像不清晰,屡遭诟病的问题。


屏幕快照 2017-07-20 下午6.16.33.png


设备维护方面,Obsidian R版和Obsidian S版内置的控制系统可通过下载或拷贝升级包到SD卡中或者联网完成升级,Kandao Studio则支持自动升级;相机出现问题时,APP、相机本身会自动报警,异常情况出现前的大部分视频/图片将自动保存。


考虑VR全景相机会面临各种极端环境的挑战,尤其是一些极限运动场景,蔡树焕透露,看到科技对设备进行过零下20度到80度高低温冲击测试,结合算法矫正及弥补,能够保证镜头热胀冷缩时,成像不会大幅度变形。相机还内置了IMU传感器,能够进行防抖校正。


要做全景视频领域的“大疆”


从模式上看,看到科技主要提供2B服务,客户包括电视台、视频工作室,以及对专业级视频制作有需求的发烧友用户,目前看到科技已与Facebook、华为、NBA、新华网、国务院国资委等企业及机构建立战略伙伴关系。


其中,与Facebook的合作模式是,由看到科技为Facebook的VR生态平台提供内容生产工具,Facebook则向看到科技开放软件接口,直播推流及相关视频能一键分享至Facebook或Facebook旗下的360live平台上。后期双方也会探索更加深入的合作形式。


现阶段,产品销售(即相机+算法)为看到科技主营收入,基于公司技术优势,通过对合作用户现有平台进行升级,如优化服务器及传输码流,提供SDK进行成像修正等,也是一种变现渠道。


屏幕快照 2017-07-20 下午6.16.03.png

看到科技部分团队成员


市场策略上,看到科技选择海内外市场齐头并进,而且专注高端专业级用户,在这一顶层市场实现渗透,建立起专业口碑度后,才会考虑进行横向或纵向的业务拓展,这有点类似大疆当年的打法。


略有差异的是,大疆是首先占据国外市场,才逐渐引发国内市场的重视,目前大疆仍有相当份额的收入由海外市场贡献。对此,蔡树焕表示,VR全景相机和无人机发展情况并不相同,基本是国内国外同步发展,甚至中国的热度在一段时间内要更高,“玩法”应该灵活调整。


VR全景相机专业级市场规模究竟有多大?蔡树焕认为前景十分乐观。他提到Black Magic,Black Magic是一家新锐的传统拍摄器材企业,所服务的市场比VR全景相机还要小众,但它却能以创新者的姿态在近两年实现七八千万美金的年销售额。看到科技之所以选择专业级而非消费级市场,也是因为其有更为成熟的商业变现模式,专业的视频工作室更多考虑产品的实际效果,以及能够提升多少效率,对价格反倒不会那么敏感。


目前,看到科技拥有团队70多人,大部分是研发,创始人及核心团队来自于香港大学、清华大学、香港科技大学、新加坡国立大学等知名学府,以及腾讯、网易、中电等知名企业。股东奥飞娱乐和天彩控股,在内容及硬件供应链上分别拥有强大的资源及品牌优势,能够助推看到科技快速发展。

为您推荐: