ABAB Pedia

Matthias Niessner

Matthias Niessner(Matthias Nießner,1986年生)是德国慕尼黑工业大学计算机科学教授、Visual Computing Lab负责人,以实时人脸重演系统Face2Face和ScanNet等三维重建研究闻名;他是AI视频公司SynthesiaSynthesiaSynthesia 是2017年成立、总部位于英国伦敦的人工智能视频公司,由 Victor Riparbelli、Steffen Tjerrild、Matthias Niessner 和 Lourdes Agapito 共同创办。其平台将脚本与数字人物、语音和视频编辑工具结合,用于企业培训、内部沟通、产品说明及内容本地化,并逐步扩展至实时交互式数字人物。点击查看完整词条的联合创始人,2024年又共同创立三维世界模型公司SpAItial。

本页目录21 节
词条资料

出生

Matthias Nießner(英文常写作Matthias Niessner)生于1986年。⁠[1]

求学FAU

他在埃尔朗根-纽伦堡大学(FAU)学习计算机科学,2010年获Diplom学位,2013年提交博士论文“Subdivision Surface Rendering using Hardware Tessellation”,获最高评价。⁠[1]

他的博士导师为Günther Greiner,2013年毕业。⁠[2]

斯坦福

2013年至2017年,他在斯坦福大学Stanford UniversityStanford University是美国加利福尼亚州的研究型大学,由Leland与Jane Stanford于1885年创立,1891年开学。点击查看完整词条(Stanford University)任客座助理教授,与马克斯·普朗克视觉计算与通信中心合作。⁠[2]

Face2Face

他与Justus Thies、Michael Zollhöfer、Marc Stamminger和Christian Theobalt在CVPR 2016发表Face2Face,用普通网络摄像头实时驱动目标视频中的人脸表情。⁠[3]

论文以口头报告形式发表,Nießner署名单位为斯坦福大学;Wired、The Verge和The Washington Post等对该研究作了报道。⁠[4]

Face2Face现场演示获SIGGRAPH 2016新兴技术奖。⁠[5]

ScanNet

他与Angela Dai等人在CVPR 2017发表ScanNet,为RGB-D场景理解提供带丰富标注的室内场景三维重建数据集。⁠[7]

执教TUM

2017年,他出任慕尼黑工业大学(Technical University of Munich)教授,并建立Visual Computing Group。⁠[8]

共创Synthesia

ERC启动基金

2018年,他获欧洲研究理事会启动基金(150万欧元)和NVIDIANVIDIANVIDIA 是美国半导体与计算技术公司,提供图形处理器、人工智能基础设施、网络互连和计算软件,在纳斯达克以 NVDA 为代码上市。点击查看完整词条教授合作奖。他参与的论文先后获SIGCHI 2014、HPG 2015和SPG 2018最佳论文奖。⁠[10]

Deep Video Portraits

2018年5月29日,他与Hyeongwoo Kim、Christian Theobalt等人公开论文Deep Video Portraits,仅凭输入视频即可对人像视频作照片级重新驱动。⁠[11]

Scan2CAD

2018年11月,他与TUM的Armen Avetisyan、Angela Dai等人公开Scan2CAD论文,研究将CAD模型与RGB-D扫描对齐。⁠[12]

他与Angela Dai还提出Scan2Mesh,把不完整的距离扫描转换为结构化三维网格。⁠[13]

青年研究者奖

2019年,Eurographics授予他青年研究者奖,表彰其基于空间哈希的实时三维重建系统和为实时人脸重演“set new standards”(树立新标准)的Face2Face。⁠[8]

同年,他与Andreas Rössler、Justus Thies等人在ICCV 2019发表FaceForensics++,研究检测被篡改的人脸图像。⁠[14]

Scan2CAD项目

他的ERC项目“Scan2CAD: Learning to Digitize the Real World”由TUM承担,执行期为2019年1月1日至2024年12月31日,欧盟资助150万欧元。⁠[15]

谈研究与创业

2022年,他表示自己的主要热情仍在学术研究,同时在TUM持续支持本地初创企业,并称“Research is the backbone of the economy of the future”(研究是未来经济的支柱)。⁠[16]

校友企业成独角兽

2023年7月,FAU工程学院以“Unicorn status for Synthesia start up”为题介绍这位在该校取得学位和博士学位的校友。⁠[17]

共创SpAItial

2024年,他与Luke Rogers、David Novotny和Ricardo Martin-Brualla共同创立总部位于伦敦的SpAItial,开发空间基础模型。⁠[18]

种子轮

2025年5月,SpAItial获得由Earlybird Venture Capital领投的1300万美元种子轮融资,目标是根据文本提示生成可交互的照片级三维环境。⁠[19]

休假创业

Echo

SpAItial的世界模型Echo可把图像和提示转化为可探索的三维高斯泼溅世界;2026年5月公司推出开发者API和Echo HQ,6月推出Startup Program。⁠[21]

截至2026年10月:现况

截至2026年10月,他是TUM教授并领导Visual Computing & AI Lab,同时是SpAItial联合创始人兼首席执行官、Synthesia联合创始人。⁠[22]

他已发表150余篇论文,其中25篇刊于ACM Transactions on Graphics。⁠[5]

关联机构、网站与公开账号

慕尼黑工业大学:官网:https://www.tum.de/(在新窗口打开)⁠[22]

来源

  1. Prof. Dr. Matthias Nießner(在新窗口打开)
  2. Reconstructing and Understanding 3D Indoor Environments(在新窗口打开)
  3. Face2Face: Real-Time Face Capture and Reenactment of RGB Videos(在新窗口打开)
  4. Face2Face: Real-time Face Capture and Reenactment of RGB Videos(在新窗口打开)
  5. 33 Years - Chair of Visual Computing(在新窗口打开)
  6. TUM Visual Computing & Artificial Intelligence: Prof. Matthias Nießner(在新窗口打开)
  7. ScanNet: Richly-Annotated 3D Reconstructions of Indoor Scenes(在新窗口打开)
  8. Young Researcher Award 2019 – Matthias Niessner(在新窗口打开)
  9. Synthesia, the AI video generation platform, raises $12.5 million Series A(在新窗口打开)
  10. Photo-realistic AI Avatars(在新窗口打开)
  11. Deep Video Portraits(在新窗口打开)
  12. Scan2CAD: Learning CAD Model Alignment in RGB-D Scans(在新窗口打开)
  13. Scan2Mesh: From Unstructured Range Scans to 3D Meshes(在新窗口打开)
  14. FaceForensics++: Learning to Detect Manipulated Facial Images(在新窗口打开)
  15. Scan2CAD: Learning to Digitize the Real World | Scan2CAD | Project | Fact Sheet | H2020 | CORDIS | European Commission(在新窗口打开)
  16. Computer Vision News - September 2022(在新窗口打开)
  17. Unicorn status for Synthesia start up(在新窗口打开)
  18. spAitial Ai(在新窗口打开)
  19. The 'Holy Grail' of AI: Creating Interactive 3D Worlds from Text Just Got $13M(在新窗口打开)
  20. “We are where ChatGPT was five years ago,” says European 3D AI foundation model startup boss(在新窗口打开)
  21. SpAItial — Frontier World Models for 3D Space(在新窗口打开)
  22. Bits & Pretzels(在新窗口打开)
  23. About Synthesia(在新窗口打开)