ABAB Pedia

Matthias Niessner

Matthias Niessner(Matthias Nießner,1986年生)是德國慕尼黑工業大學計算機科學教授、Visual Computing Lab負責人,以實時人臉重演系統Face2Face和ScanNet等三維重建研究聞名;他是AI視頻公司SynthesiaSynthesiaSynthesia 是2017年成立、總部位於英國倫敦的人工智能視頻公司,由 Victor Riparbelli、Steffen Tjerrild、Matthias Niessner 和 Lourdes Agapito 共同創辦。其平臺將腳本與數字人物、語音和視頻編輯工具結合,用於企業培訓、內部溝通、產品說明及內容本地化,並逐步擴展至實時交互式數字人物。點擊查看完整詞條的聯合創始人,2024年又共同創立三維世界模型公司SpAItial。

本頁目錄21 節
詞條資料

出生

Matthias Nießner(英文常寫作Matthias Niessner)生於1986年。⁠[1]

求學FAU

他在埃爾朗根-紐倫堡大學(FAU)學習計算機科學,2010年獲Diplom學位,2013年提交博士論文“Subdivision Surface Rendering using Hardware Tessellation”,獲最高評價。⁠[1]

他的博士導師為Günther Greiner,2013年畢業。⁠[2]

斯坦福

2013年至2017年,他在斯坦福大學Stanford UniversityStanford University是美國加利福尼亞州的研究型大學,由Leland與Jane Stanford於1885年創立,1891年開學。點擊查看完整詞條(Stanford University)任客座助理教授,與馬克斯·普朗克視覺計算與通信中心合作。⁠[2]

Face2Face

他與Justus Thies、Michael Zollhöfer、Marc Stamminger和Christian Theobalt在CVPR 2016發表Face2Face,用普通網絡攝像頭實時驅動目標視頻中的人臉表情。⁠[3]

論文以口頭報告形式發表,Nießner署名單位為斯坦福大學;Wired、The Verge和The Washington Post等對該研究作了報道。⁠[4]

Face2Face現場演示獲SIGGRAPH 2016新興技術獎。⁠[5]

ScanNet

他與Angela Dai等人在CVPR 2017發表ScanNet,為RGB-D場景理解提供帶豐富標註的室內場景三維重建數據集。⁠[7]

執教TUM

2017年,他出任慕尼黑工業大學(Technical University of Munich)教授,並建立Visual Computing Group。⁠[8]

共創Synthesia

ERC啟動基金

2018年,他獲歐洲研究理事會啟動基金(150萬歐元)和NVIDIANVIDIANVIDIA 是美國半導體與計算技術公司,提供圖形處理器、人工智能基礎設施、網絡互連和計算軟件,在納斯達克以 NVDA 為代碼上市。點擊查看完整詞條教授合作獎。他參與的論文先後獲SIGCHI 2014、HPG 2015和SPG 2018最佳論文獎。⁠[10]

Deep Video Portraits

2018年5月29日,他與Hyeongwoo Kim、Christian Theobalt等人公開論文Deep Video Portraits,僅憑輸入視頻即可對人像視頻作照片級重新驅動。⁠[11]

Scan2CAD

2018年11月,他與TUM的Armen Avetisyan、Angela Dai等人公開Scan2CAD論文,研究將CAD模型與RGB-D掃描對齊。⁠[12]

他與Angela Dai還提出Scan2Mesh,把不完整的距離掃描轉換為結構化三維網格。⁠[13]

青年研究者獎

2019年,Eurographics授予他青年研究者獎,表彰其基於空間哈希的實時三維重建系統和為實時人臉重演“set new standards”(樹立新標準)的Face2Face。⁠[8]

同年,他與Andreas Rössler、Justus Thies等人在ICCV 2019發表FaceForensics++,研究檢測被篡改的人臉圖像。⁠[14]

Scan2CAD項目

他的ERC項目“Scan2CAD: Learning to Digitize the Real World”由TUM承擔,執行期為2019年1月1日至2024年12月31日,歐盟資助150萬歐元。⁠[15]

談研究與創業

2022年,他表示自己的主要熱情仍在學術研究,同時在TUM持續支持本地初創企業,並稱“Research is the backbone of the economy of the future”(研究是未來經濟的支柱)。⁠[16]

校友企業成獨角獸

2023年7月,FAU工程學院以“Unicorn status for Synthesia start up”為題介紹這位在該校取得學位和博士學位的校友。⁠[17]

共創SpAItial

2024年,他與Luke Rogers、David Novotny和Ricardo Martin-Brualla共同創立總部位於倫敦的SpAItial,開發空間基礎模型。⁠[18]

種子輪

2025年5月,SpAItial獲得由Earlybird Venture Capital領投的1300萬美元種子輪融資,目標是根據文本提示生成可交互的照片級三維環境。⁠[19]

休假創業

Echo

SpAItial的世界模型Echo可把圖像和提示轉化為可探索的三維高斯潑濺世界;2026年5月公司推出開發者API和Echo HQ,6月推出Startup Program。⁠[21]

截至2026年10月:現況

截至2026年10月,他是TUM教授並領導Visual Computing & AI Lab,同時是SpAItial聯合創始人兼首席執行官、Synthesia聯合創始人。⁠[22]

他已發表150餘篇論文,其中25篇刊於ACM Transactions on Graphics。⁠[5]

關聯機構、網站與公開賬號

慕尼黑工業大學:官網:https://www.tum.de/(在新窗口打開)⁠[22]

來源

  1. Prof. Dr. Matthias Nießner(在新窗口打開)
  2. Reconstructing and Understanding 3D Indoor Environments(在新窗口打開)
  3. Face2Face: Real-Time Face Capture and Reenactment of RGB Videos(在新窗口打開)
  4. Face2Face: Real-time Face Capture and Reenactment of RGB Videos(在新窗口打開)
  5. 33 Years - Chair of Visual Computing(在新窗口打開)
  6. TUM Visual Computing & Artificial Intelligence: Prof. Matthias Nießner(在新窗口打開)
  7. ScanNet: Richly-Annotated 3D Reconstructions of Indoor Scenes(在新窗口打開)
  8. Young Researcher Award 2019 – Matthias Niessner(在新窗口打開)
  9. Synthesia, the AI video generation platform, raises $12.5 million Series A(在新窗口打開)
  10. Photo-realistic AI Avatars(在新窗口打開)
  11. Deep Video Portraits(在新窗口打開)
  12. Scan2CAD: Learning CAD Model Alignment in RGB-D Scans(在新窗口打開)
  13. Scan2Mesh: From Unstructured Range Scans to 3D Meshes(在新窗口打開)
  14. FaceForensics++: Learning to Detect Manipulated Facial Images(在新窗口打開)
  15. Scan2CAD: Learning to Digitize the Real World | Scan2CAD | Project | Fact Sheet | H2020 | CORDIS | European Commission(在新窗口打開)
  16. Computer Vision News - September 2022(在新窗口打開)
  17. Unicorn status for Synthesia start up(在新窗口打開)
  18. spAitial Ai(在新窗口打開)
  19. The 'Holy Grail' of AI: Creating Interactive 3D Worlds from Text Just Got $13M(在新窗口打開)
  20. “We are where ChatGPT was five years ago,” says European 3D AI foundation model startup boss(在新窗口打開)
  21. SpAItial — Frontier World Models for 3D Space(在新窗口打開)
  22. Bits & Pretzels(在新窗口打開)
  23. About Synthesia(在新窗口打開)