我眼中的“世界模型”|SPP第56期
世界模型,是指智能体通过与环境交互,或通过观察物理世界的视觉表观演变,探索和推断内部动力学模型,构建物理世界的可微分模拟器。近十年间,J. Tenenbaum、J. Schmidhuber、Y. LeCun等人分别从贝叶斯认知理论、视觉环境决策、自监督学习的角度给出了世界模型的不同表达形式。然而,如何在复杂的视觉场景中建立有效的世界模型仍然是一项开放课题。本期SPP报告将围绕世界模型的“观察”与“交互”两个方面,分别介绍“3D逆图形学物理推断”和“基于世界模型的强化学习”方法,相关工作分别发表于2022年的ICML和NeurIPS(Spotlight)。前者为流体动力学模拟提供了一种新思路,后者应用于DeepMind Control机械臂视觉控制任务和CARLA自动驾驶任务,为当前最佳基线模型之一。
欢迎参加本期SPP:8月23日(本周三) 19:30-21:00
本期直播你将收获哪些
1、如何学“世界模型”,通过案例了解机器学习物理仿真的几种思路;
2、如何用“世界模型”,了解“世界模型”能帮助到强化学习的哪些放main;
3、了解上述方向上的一些前沿进展。
演讲嘉宾
王韫博
上海交通大学助理教授
王韫博,上海交通大学助理教授,清华大学博士,2020年CCF优博,国家自然科学基金原创探索项目负责人。主要从事机器学习与计算机视觉的研究,专注于可微物理模拟、强化学习等方向,在TPAMI、NeurIPS、ICML、CVPR等CCF-A类期刊和会议上发表论文20余篇,2020年入选上海市青年科技扬帆计划。
开课时间
2023年8月23日(本周三)19:30-21:00