支持二次編輯、導入虛擬引擎5,Stable Diffusion進化出3D生成功能
說到文生圖大模型,Stability AI 在 2022 年推出的 Stable Diffusion 可謂是其中的翹楚,不斷地為富有創意的故事講述者提供他們所需要的 AI 工具。不過,該模型主要用于 2D 圖像生成。
今天,Stability AI 向我們展示了更多圖像增強功能,生成了更美觀的圖像、同時也更便宜、速度更快。更重要的是,現在有了可以搞定任何類型 3D 內容創建的新工具了。
具體來講,Stability AI 新增了以下幾種新 AI 工具和新功能:
- Sky Replacer 工具:允許用戶更改原始照片中天空的顏色和美學效果。
- Stable 3D:通過選擇一張圖像或插圖,或者編寫一段文本 prompt 來生成 3D 對象。
- Stable FineTuning:幫助企業用戶加速特定用例的圖片、對象和風格微調。
此外,Stability AI 現在正將不可見(隱形)水印和內容憑證集成到其 API 中,tigaoAI 生成內容的透明度。
Sky Replacer
Sky Replacer 允許用戶通過九種替代方案替換原始照片中天空的顏色和美感,以改善圖像的整體外觀。
例如,Sky Replacer 可以讓用戶輕松地用一系列令人驚嘆的日落、風景如畫的晴天來取代原圖像中的陰天:
還可以把天空的顏色替換成夢幻的紫色:
Sky Replacer 在房地產等行業具有廣泛的應用前景,能讓房地產經紀人在最佳條件下展示房源,并避免由于不利天氣而導致房源延遲。
Stable 3D
對于圖像設計師、數字藝術家和游戲開發人員來說,3D 內容創建可能是最復雜和耗時的任務之一,通常需要數小時甚至數天才能創建一個中等復雜的 3D 對象。
Stability AI 推出了 Stable 3D 私人預覽版,能夠自動生成 3D 對象,消除了大部分復雜度,允許非專業人員通過選擇一張圖像或草圖或者編寫一個文本 prompt,在幾分鐘內生成一個草稿質量的 3D 模型。
Stability AI CEO Emad Mostaque 在接受 VentureBeat 獨家采訪中表示, Stable 3D 模型擴展了 Stable Diffusion 中使用的擴散模型,包含了額外的 3D 數據集和矢量化。
Stable 3D 是在 Stable Diffusion 和 Objaverse-XL 數據集的基礎上構建的,后者是世界上最大的開源 3D 數據集之一。
Mostaque 認為,構建和渲染 3D 圖像是一個資源密集型過程,Stable 3D 將比傳統 3D 圖像生成方法更有效。
Stable 3D 創建的對象會設置為「.obj」標準文件格式,并可以在 Blender 和 Maya 等 3D 工具中進一步編輯和改進,或者導入到虛擬引擎 5 或 Unity 游戲引擎中直接使用。
我們了解到,Stable 3D 可以讓設計師、藝術家和開發者以非常小的成本,每天創建數千個 3D 對象。
該場景以及所有的 3D 模型都是根據文本 prompt 創建的,并在幾小時內完成。
私人預覽地址:https://stability.ai/contact
Stable FineTuning
Stable FineTuning 使企業和開發人員能夠以創紀錄的速度微調圖片、對象和樣式,并且可以輕松地集成到用戶自己的應用程序中。
Stable FineTuning 使用戶能夠將他們的圖片定制成現代數字藝術,形成富有想象力的創作。這對于娛樂、游戲、廣告和營銷行業的工作者來說非常有價值。
值得一提的是,為了提高人工智能生成內容的透明度,研究團隊為通過 Stability AI API 生成的圖像添加了「Content Credentials」和隱形水印。