物理世界中的多源多模态数据融合

报告时间:2025年05月23日10:30-11:30

报告地点:木铎楼A403

主讲人:郑宇 教授

郑宇教授(1979年_)，京东集团副总裁、首席数据科学家，IEEE Fellow、ACM杰出科学家、KDDChina主席，国家“万人计划”科技创新领军人才、享受国务院特殊津贴专家，西南交大人工智能研究院院长，上海交通大学讲席教授。开辟了城市计算领域，论文被引用6万余次，HIndex111，两次获得SIGKDDTest-ofTimeAward(中国唯一)四次获得SIGSPATIAL10-Year-Impact-Awrd(全球唯一)先后担任ACM TIST主编、ICDE2014和CIKM2016的程序委员会主席、国家重点研发计划项目首席科学家、总负责人，受邀在AAAI2019等国际会议作大会主旨报告。2013年被MIT科技评论评为全球TR35，获得计算机学会科技进步一等奖(排1)、中国电子学会优秀博士论文导师奖两次(2022和2024)和首都劳动奖章。

报告摘要:具身智能通过与物理世界的交互和信息融合来解决实际问题。然而，单一维度的信息获取渠道根难全面反应复杂的物理过程，因此，只有融合多源的信息才能真正理解物理世界，从而解决真实世界的问题。由于很难为每一个智能业务单独重新投入资源、花费时间去采集数据，解决某个领城中特定问题时常常遇到数据不足、质量不高等挑战。为此，融合其他领城的已有数据成为解决物理世界中具身智能问题的必由之路。本报告定义了多源多模态数据融合问题，并提出一个包含“领城、连接、模型和数据”的四层计算框架，回答“融合什么”“为什么融合”和“怎么融合”三个关键问题。框架中的领城层帮助选择相关数据，连接层解释数据融合的基本原理模型层提供两大融合范式，数据层完成不同结构、尺度和粒度数据的表征转换。该框架可帮助设计完整的多源多模数据融合方案，支撑具身智能解决物理世界的问题。