在遊戲行業，生成式AI大模型目前被討論最多的兩個應用方向，一個是將AI運用於NPC的開發（使NPC更像真人），另一個是遊戲引擎AI輔助工具的落地（幫創作者提高生產效率）。針對後者，在6月8日舉辦的Unity技術開放日北京站上，Unity中國首次對外提出了要構建Unity中國版引擎Copilot——U3D Copilot的構想。

Unity中國AI技術負責人暴林超在演講中談到這一構想，

“通過建立大語言模型和用戶交互這樣一個更自然的交互界面，來串聯起我們的3D AIGC模型，以及Unity引擎內部可以提供的一些工具（如程序化生成等）。同時我們會探索將用戶的隱私數據更安全地在本地做管理，在保護用戶隱私的情況下，用戶可以實現在本地部署引擎，並以這樣的方式接入Copilot。”

“Copilot”（直譯為“副駕駛”）的說法目前被廣泛用於GitHub Copilot和Microsoft 365 Copilot等產品，幾乎已經成為AI輔助工具的代稱。

不過從Unity技術開放日當天透露的信息來看，U3D Copilot目前還只停留在構想，Unity中國並沒有在現場進行任何相關演示。

這場活動是Unity時隔兩年之後再次舉辦線下巡迴技術開放日。

“前兩年大家還都在講元宇宙，今年都在講AIGC，幾乎是引爆了整個（遊戲）行業。”Unity中國CEO張俊波在當天的致辭中講到。

不僅是行業，Unity的中國業務也在過去兩年經歷了較大變化。去年8月，Unity中國宣布成立，引入了阿里巴巴、中國移動、吉比特、米哈遊、OPPO、佳都科技和抖音等投資者，成為Unity在中國的合資公司。張俊波的title從“Unity大中華區總經理”變為“Unity中國總裁兼首席執行官”，負責AI技術的暴林超則是在不久前剛加入Unity中國。

“這也是我們關注中國開發者的新起點。”張俊波在致辭中說。

Unity中國關註生成式AI的步調和Unity基本一致。

Unity可以說是最早宣布將投入生成式AI大模型的大型遊戲引擎。今年3月舉辦的GDC開發者大會上，Unity發布了一段名叫“Unity AI”的視頻。視頻以文本框的形式輸入了一系列指令，包括“生成一個女性3D角色”，“生成一片擁有灰暗天空的大型地貌”，“慢慢推進攝像機，並加入戲劇性的光線”等等，暗示這些效果和資產未來都可以跳過繁瑣的代碼與調試，在Unity中通過文字prompt直接生成。

Unity CEO John Riccitiello在接受采訪時同時提到，未來不排除會開放一片AIGC專用的交易市場，供開發者在其中買賣AI工具。

而後在今年5月發布第一季度財報時，Unity在股東信中專門開闢了“Gen-AI（AI時代）”專欄來回答股東提問。比如提到會在今年內推出使用自然語言的UI頁面，而“一鍵生成遊戲”的工具現階段還不太可能，其目前對AI工具的定位更多是草稿的快速生成助手。此外，Unity還計劃將引擎打造為一個供開發商訓練AI模型的工具，幫助開發商“按照自己的需求進行數據創造、模擬和訓練”。

Unity中國頻繁因為AI被關注也是最近一個月的事情。

5月初，Unity中國在採訪中透露已建立了中國本土AI研發團隊，其負責人也開始頻繁出現在各種關於AIGC的活動上，如張俊波“有八成原畫師下崗”和“今後的遊戲公司不一定會像現在那麼集中在幾個大廠等巨頭公司”等言論也頻繁在行業中被提及。

而在6月8日舉辦的北京站技術開放日上，Unity中國引擎技術負責人左瑞文也在介紹中明確提到，Unity中國在今年的首要任務——研發Unity中國版引擎的三大方向之一，就是以生成式AI為主的智能化（其他兩個方向是本地化和雲化）。

當然這其中不乏難點，難點在於3D內容開發的複雜性。

暴林超在當天的AI主題演講中先是回溯了生成式AI在近一年發展的節點性事件，介紹了stable diffusion和ChatGPT兩大熱門生成式AI工具的核心技術原理，以及AI技術從“領域專用AI小模型”到“生成式AI大模型”、生成式AI大模型從“通用”到“專用”的發展趨勢，接著便談到了3D生成式AI的三大技術難點：

第一，3D的數據表示有非常多的選擇，如體素、點雲、Mesh、SDF和隱式場等，儘管經常會有針對不同數據表示的論文發布，但距離達到生產質量都還有一定差距；

第二，3D數據的呈現依賴也非常多，也就是說，要在引擎裡渲染出一個比較好的效果，不但取決於模型本身，還受到貼圖、材質、Shader、光照、動畫和VFX等的影響，這些也給3D的AIGC生產帶來了很多困難；

第三，3D高質量數據相對而言比較稀缺，而1D或2D維度不管是文本還是圖片生成，數據量都是巨大的，目前3D的數據量還遠遠達不到這些量級。

由於Unity引擎主要專注於遊戲中3D技術的應用，這些3D數據的難點也都給其生成式AI工具的開髮帶來了挑戰。

暴林超接著提到了Unity中國3D生成式AI主要的幾個技術方向：分別是3D模型、材質和貼圖、3D場景、3D虛擬人，還有隱式場及神經渲染。

就目前來說，Unity引擎界面依然非常複雜，看上去仍不夠“智能”。未來Unity中國能否將以上存在在PPT和演示視頻中的構想一一實現，將決定它究竟是履行了“幫助開發者更好地應對技術和市場革新的天然使命”，還是只是在取悅投資者。