36氪首发 | 把三维重建能力拓展到手机端,「叠境数字」获IDG领投亿元级A轮融资

阅读  ·  发布日期 2018-11-13  ·  金人网络
不需要专业设备,手机端拍摄也可以进行物体和人体三维重建

36氪获悉,光场内容技术服务商「叠境数字」近日完成亿元级A轮融资,本轮由IDG领投,老股东赛富基金、金沙江创投跟投。本轮资金将用于扩大产品线与规模。该公司在此前曾获得由阿里巴巴领投、赛富基金与金沙江创投跟投的亿元级Pre-A轮融资,以及上海联合投资的4500万元天使轮融资。

叠境数字在成立于2016年5月,主攻光场采集和智能成像技术研发与产品化。之前的报道中,36氪曾介绍过叠境数字将光场和计算机视觉、机器学习结合,实现低成本、自动化的三维重建。

2018年,叠境数字在产品化方面有了更多动作:传统的三维重建往往要基于专业的显示设备、扫描设备区完成,而叠境数字则将三维重建能力拓展到手机上面,通过手机自带的深度摄像头拍摄就可以实现移动端的三维建模。

叠境数字总经理洪煦告诉36氪:当前,叠境数字已和手机厂商合作,提供三维渲染、成像模块。当用户不断使用手机进行三维建模,随着数据积累,这将形成海量三维模型数据库,不同行业可以基于自身需求进行调用。

以虚拟试衣为例,用户可以通过自拍获得自己的虚拟人体建模,商家则可以进行衣服建模,两者结合能够更直观地呈现服装上身效果。与此同时,整个过程也积累了用户身体数据、搭配偏好等,可以帮助品牌商、平台合作方建立客户画像、进行广告推荐等。

除手机端3D建模外,叠境数字围绕人、物体、环境的重建都进行了场景化探索和落地:

人体重建方面,叠境数字可以在云端十几秒内完成对人体的动态重建,目前主要应用于明星网红视频内容生产、教育、健身等领域。洪煦介绍:叠境数字与数字王国合作在北京搭建的拍摄基地和内容制作中心将于本月底竣工,此外该公司也和上海的电视台合作搭建了演播室,与微博和抖音合作进行明星网红的人体动态3D重建。


叠境与数字王国制作的吉克隽逸真人动态三维重现

此外,洪煦告诉36氪:叠境数字目前可以实现实时三维重建,并由此可完成任务动态全息通话。随着未来5G网络普及,带宽和视频传输速率提升,该技术或将在视频直播领域同样有所应用。

物体重建方面,叠境数字的渲染技术能够真实还原大部分材质,其中包括反光和半透明材质,目前和阿里电商和博物馆合作,进行商品、高端文物的3D重建。

环境重建方面,运用光场采集技术可以重现光影效果,目前叠境数字主要合作方向在城市管理、场馆建设陈列等。

提及商业模式,洪煦介绍:目前叠境数字有两种业务形态,一是为手机厂商提供技术合成模块,从而收取License费用;二是以技术服务方式,为客户提供云端重建、渲染、压缩服务。今年,叠境数字当前营收在数千万元级,主要来自手机端三维建模和动态真人建模。预计在明年,手机端可达到亿元级规模。

叠境数字国内总部在上海,国外总部在硅谷。创始人虞晶怡为加州理工学院学士,MIT博士,现任上海科技大学正教授,之前曾是美国特拉华大学计算机与信息科学系正教授;联合创始人兼总经理洪煦一直在3D成像和显示领域有超过10年的从业经验;CTO Jason Yang也是麻省理工大学计算机与电子工程博士,曾任AMD技术总监,在图形学渲染方面有多年的研发经验;联合创始人、人工智能首席科学家马毅,为UC Berkeley博士,IEEE,ACM fellow,微软首席研究员,现任UC Berkeley教授。