ABAB Pedia

Ishan Misra

Ishan Misra是计算机视觉与机器学习研究科学家,在MetaMetaMeta(Meta Platforms, Inc.)是美国上市科技公司,2021年由 Facebook 公司更名而来,经营社交通信、数字广告、虚拟现实、智能眼镜及人工智能业务。点击查看完整词条从事自监督学习和生成式视频研究,参与PIRL、SEER、ImageBind和Emu Video等工作并任Movie Gen项目技术负责人,现为Meta TBD Labs研究总监。

本页目录15 节
词条资料

就读IIIT Hyderabad

他的父亲退休前任浦那一家研究所遗传学系主任,母亲是化学硕士和教师。2008年他进入IIIT Hyderabad攻读计算机科学学士,后获最高累积绩点金奖。⁠[1]

入选Siebel Scholars

在CMU获机器人学硕士、博士学位

他于2014年和2018年先后获Carnegie Mellon University机器人学硕士和博士学位,导师为Martial Hebert和Abhinav Gupta。⁠[3]

博士论文获奖并加入Facebook纽约

在CVPR发表PIRL

他与Laurens van der Maaten在CVPR 2020发表论文,提出自监督的前置任务不变表示学习方法PIRL,主张语义表示应对图像变换保持不变;论文称PIRL在多项自监督基准上创下新纪录,并在目标检测表示学习上超过监督预训练。⁠[4]

参与SEER自监督模型

2021年3月,他与Priya Goyal、Mathilde Caron等人发表SEER论文:这一拥有13亿参数的RegNetY模型在10亿张随机、未经整理的图像上无监督训练,在ImageNet上取得84.2%的top-1准确率。⁠[5]

做客Lex Fridman Podcast

2021年7月31日,时任FAIR研究科学家的他作为第206期嘉宾做客Lex FridmanLex FridmanLex Fridman 是生于苏联、在美国长大的计算机科学家和播客主持人,任 MIT 研究科学家,研究人机交互与自动驾驶。他主持的 Lex Fridman Podcast 以数小时长篇对话著称,嘉宾包括多国领导人和科技企业领袖。点击查看完整词条 Podcast,节目题为“Self-Supervised Deep Learning in Computer Vision”,话题包括自监督学习、对比学习、数据增强、SwAV、SEER和VISSL库。⁠[6]

入选MIT Technology Review“35岁以下创新者”

2022年,时任Meta AI Research研究科学家的他入选MIT Technology Review的35 Innovators Under 35榜单,其研究表明可仅凭视觉数据训练模型。⁠[7]

合著ImageBind

他是CVPR 2023论文ImageBind的作者之一,该方法在图像、文本、音频、深度、热成像和IMU六种模态间学习联合嵌入,并表明仅用与图像配对的数据即可将各模态绑定在一起。⁠[8]

Emu Video发布

2023年11月,Meta发布Emu Video,可根据文字说明或图片生成四秒动画短片,分辨率为512×512、每秒16帧。⁠[9]

他是Emu Video论文的作者之一;该模型先依据文本生成图像,再依据文本和图像生成视频,论文称人类评估中其视频质量相对Google Imagen Video的偏好率为81%。⁠[10]

获CMU近期校友成就奖

他获Carnegie Mellon University 2024年近期校友成就奖;学校称他的自监督学习研究改变了视觉模型的训练方式,其生成式视频建模工作是Meta生成式视频系统的核心。⁠[3]

Movie Gen发布

2024年10月,Meta团队发表Movie Gen论文,介绍一组可生成带同步音频的1080p高清视频、并支持视频编辑和个性化生成的基础模型,其中最大的视频模型为300亿参数Transformer;他是论文作者之一。⁠[11]

截至2026年10月:Meta TBD Labs研究总监

截至2026年10月,他是Meta超级智能部门TBD Labs研究总监兼研究科学家;此前在Meta GenAI领导视频生成研究,任Movie Gen项目整体技术负责人,并获2025年PAMI青年研究者奖荣誉提名。⁠[12]

关联机构、网站与公开账号

来源

  1. Ishan Misra – Sonic histories to visual futures: Tracing a computer vision researcher's journey -(在新窗口打开)
  2. News Brief: Five SCS Students Named Siebel Scholars - News - Carnegie Mellon University(在新窗口打开)
  3. Ishan Misra (SCS 2014, 2018) | Engage with CMU(在新窗口打开)
  4. CVPR 2020 Open Access Repository(在新窗口打开)
  5. [2103.01988v2] Self-supervised Pretraining of Visual Features in the Wild(在新窗口打开)
  6. #206 - Ishan Misra: Self-Supervised Deep Learning in Computer Vision | Lex Fridman Podcast(在新窗口打开)
  7. SCS Alum Named to MIT Technology Review's Innovators Under 35 List(在新窗口打开)
  8. CVPR 2023 Open Access Repository(在新窗口打开)
  9. Meta brings us a step closer to AI-generated movies | TechCrunch(在新窗口打开)
  10. [2311.10709v1] Emu Video: Factorizing Text-to-Video Generation by Explicit Image Conditioning(在新窗口打开)
  11. [2410.13720] Movie Gen: A Cast of Media Foundation Models(在新窗口打开)
  12. Ishan Misra(在新窗口打开)