NVIDIA 的新工具可以將3D 場景轉換為AI 影像
NVIDIA 推出了一款新工具,讓開發人員透過先建立3D 影像,然後根據影像來產生AI 影像。這款名為NVIDIA AI Blueprint 的3D 引導生成AI 工具,現已可供配備NVIDIA RTX 4080 或更高版本GPU 的電腦下載使用,其工作原理是將Blender 的3D 建模軟體與Black Forest Lab 的FLUX.1 影像產生器連接起來。
使用者可以在Blender 中使用建築物、植物、動物和車輛等3D 物件繪製場景,然後以此為參考創建2D 影像。其理念是,與單純使用文字描述相比,手動調整觀看位置或某些物件的放置位置,可以在生成2D 影像時更好地控制細節。
例如,如果你心中有一個非常具體的城市形象——建築物的形狀和高度、樹木或汽車的數量,甚至你觀看的角度——接下來就可以使用NVIDIA 的工作流程在Blender 中手動創建一個粗略的版本。然後,FLUX.1 圖像生成器會以此為基礎創建圖像,這比反覆調整基於文字的描述,直到得到與您想要的效果大致相似的圖像要輕鬆得多。 Blender 中繪製的3D 物件甚至不需要非常詳細,因為該工具只是將它們用作佈局指南。

NVIDIA 將其藍圖描述為“預先定義、可自訂的AI 工作流程”,旨在幫助開發人員建立生成式AI 應用程式。 NVIDIA 表示,其3D 引導生成式AI 藍圖提供了逐步文件、範例資源和預先配置環境,以引導使用者使用該工具。
這個工作流程並非獨一無二——Adobe 在10 月的MAX 活動上曾預告過一款類似的工具,名為“Project Concept”,它也允許用戶繪製可用於指導圖像生成的3D 場景。然而,Adobe 的版本仍處於實驗階段,可能不會向公眾發布。