World Labs 最近開放了 World API,這是一個允許開發者從文字、圖片或影片生成可探索的 3D 環境的工具。這項技術依賴於其世界模型 Marble,旨在為遊戲開發、機器人訓練以及建築視覺化提供便利。開發者可以透過簡單的輸入,例如一段描述、一張圖片或一段影片,快速生成完整的 3D 空間,並在其中進行探索和互動。這樣的設計使得「造世界」的過程變得更為簡單,並能擴展到多個環境中。
World API 的運作方式是將多種輸入轉化為持久的 3D 環境,這些環境可以在瀏覽器中運行,並能匯出為多種格式,方便整合至遊戲引擎和模擬平台。這一技術的核心在於 3D Gaussian Splatting,這種方法能更有效地捕捉複雜的光影細節,並在消費級 GPU 上實現高效能的渲染。
目前,World API 已經被應用於多個領域,例如 Escape.ai 利用該 API 將 2D 電影轉換為可導航的 3D 環境,並且在機器人訓練方面,研究人員能夠快速生成多樣化的訓練環境,大幅縮短建模時間。這項技術的推出,預示著數位環境創建方式將迎來新的變革。