研究方向
  • 物品与人物的三维建模

通过摄像头等传感器快速扫描物体、人物,构建高精度三维模型,以支持高真实感渲染。并对人体或可变形物体建立动画模型,便于后期的动画、仿真。

  • 高真实感渲染

构建高真实感的渲染引擎,实现对各类材质、动画、光影效果的逼真绘制。

  • 自然人机交互

通过摄像头等传感器识别捕捉人物的三维肢体动作、手势,以及表情。并用于驱动虚拟人物动画或是人机交互。

  • 大场景地图与定位

通过摄像头等传感器扫描室内外场景,如商场、街区、博物馆等,构建真实世界的三维数字化模型,并通过摄像头在场景中实现高精度定位,实现虚拟物体叠加显示、AR导航、机器人路径规划等。

  • 机器人抓取操纵

通过摄像头等传感器对物体和其所在环境三维建模并实现对各种物体的抓取和操纵,实现虚拟世界到真实世界的闭环。


产品及应用
  • 全息店铺

    通过自研硬件设备对室内外空间扫描建立VR店铺模型,并在移动端提供VR展现。可基于VR店铺模型叠加各类空间信息和服务,如商品信息、订购导览等,也可以在VR店铺模型中嵌入虚拟人,如虚拟导购员等。

  • AR平行世界

    通过自研硬件设备对室内外空间扫描建立三维高精地图,并通过摄像头在地图中实现高精度定位,实现AR导航、AR信息叠加、AR打卡拍照、AR虚拟客服等能力。同时提供内容生产平台,帮助企业轻松实现各类效果定制化。

  • IDC智能运维机器人

    IDC智能运维机器人是XR LAB自主设计开发的、具备机械臂控制能力的数据机房运维机器人,通过视觉与触觉融合的复杂操作控制算法,具备在数据中心实现“自动更换硬盘、精细化巡检、自动资产盘点”的三大核心业务能力,为数据中心提供无人值守、无人巡检和数据安全的完整解决方案。


研究团队
谭平达摩院XR实验室负责人

曾任加拿大西蒙弗雷泽大学 (SFU) 、新加坡国立大学(NUS)终身教授,研究领域是计算机视觉、计算机图形学。他是计算机视觉领域两大学术期刊TPAMI、IJCV的副主编,并担任多个学术会议领域主席,包括 CVPR 、ICCV、SIGGRAPH、SIGGRAPH Asia、IROS、3DV、AAAI等。


学术成果
论文
  • Zhiwen Fan, Lingjie Zhu, Honghua Li, Xiaohao Chen, Siyu Zhu, Ping Tan. FloorPlanCAD: A Large-Scale CAD Drawing Dataset for Panoptic Symbol Spotting. ICCV 2021.
  • Lizhe Liu, Xiaohao Chen, Siyu Zhu , Ping Tan. CondLaneNet: a Top to down Lane Detection Framework Based on Conditional Convolution. ICCV 2021.
  • Shitao Tang, Chengzhou Tang, Rui Huang, Siyu Zhu , Ping Tan. Learning Camera Localization via Dense Scene Matching. CVPR 2021.
  • Weihao Yuan, Yazhan Zhang, Bingkun Wu, Siyu Zhu, Ping Tan, Michael Yu Wang, Qifeng Chen. Stereo Matching by Self-supervision of Multiscopic Vision. IROS 2021.
  • Chuan Fang, Shuai Ding, Zilong Dong, Honghua Li, Siyu Zhu , Ping Tan. Single Shot is Enough: Panoramic Infrastructure Based Calibration of Multiple Cameras and 3D LiDARs. IROS 2021.
  • Hualie Jiang, Zhe Sheng, Siyu Zhu , Zilong Dong, Rui Huang. UniFuse: Unidirectional Fusion for 360 Panorama Depth Estimation. RAL 2021.
  • Xiaodong Gu, Zhiwen Fan, Zuozhuo Dai, Siyu Zhu , Ping Tan. Cascade Cost Volume for High Resolution Multi View Stereo and Stereo Matching. CVPR 2020 Oral.
  • Sicong Tang, Feitong Tan, Kelvin Cheng, Zhaoyang Li, Siyu Zhu , Ping Tan. A Neural Network for Detailed Human Depth Estimation from a Single Image. ICCV 2019 Oral.
  • Zuozhuo Dai, Mingqiang Chen, Xiaodong Gu, Siyu Zhu , Ping Tan. Batch Feature Erasing for Person Re-identification and Beyond. ICCV 2019.
  • Luwei Yang, Ziqian Bai, Chengzhou Tang, Honghua Li, Yasutaka Furukawa, Ping Tan. SANet: Scene Agnostic Network for Camera Localization. ICCV 2019.
展开更多

扫描二维码
关注阿里技术微信公众号