本文將介紹a16z在該賽道的投資布局。
A16Z最近寫了一篇很有意思的文章,談到他們認為的生成式AI和游戲結合在一起的機會在哪,筆者翻譯后對部分內容進行了注解。文章第一部分已經發出,見:《a16z:生成式AI在游戲領域的觀察與預測》,本篇為第二部分,包括A16Z對游戲+生成式AI領域的市場生態的判斷。
市場生態概述
下圖為整體的市場生態情況,描述了A16Z在各個類別中發現的創業公司,在這些具體的項目中,我們看發現了生成式人工智能對游戲的影響,本篇會對每個類別中最有特點的公司和機會進行介紹。
用文本生成平面圖像
從文本提示中生成2D圖像,已生成式人工智能最為廣泛的應用領域之一。諸如Midjourney、StableDiffusion和Dall-E2這樣的工具,直接可以將文本描述生成高質量的二維圖像,并且它們用在了游戲開發和制作的整個生命周期的多個階段。
概念藝術
,對過去的方式進行革新甚至是顛覆,創造出全新的造型角色或者概念。和插畫有什么區別?插畫家與游戲的關系更多的是幫其繪制海報、包裝封面等。而與影視、游戲開發的工作真正緊密相關的2D藝術工作之一就是我們所說的ConceptArt。和漫畫有什么區別?ConceptArt跟漫畫有很大區別,漫畫是日本一個獨立的體系,更多服務于熱門的輕小說的視覺化。而概念藝術則是服務于游戲,動畫,在風格上表現形式上不受限制,創造出一些超前的,或者是完整的一套設定顯得極為重要。和原畫有什么區別?ConceptArt幾乎包括所有的角色,場景塑造,跟原畫師不同的地方是,概念設計師必須要主動產出一些更有趣的設計。
a16z創始人:比特幣創新“基本上停止發展”,將重點關注以太坊:金色財經報道,a16z 創始人 Marc Andreessen 在最新接受采訪時表示,比特幣雖然是一種技術創新,但“基本上已停止了發展”,他現在將目光投向了以太坊并認為以太坊將會成為轉型核心。Marc Andreessen 解釋說:“現在最大的項目是以太坊,不是比特幣,或者我會說是加密貨幣或 Web3 而不是比特幣。Web3 中可以開展業務、可以獲利、可以進行交易并獲得信任,隨著區塊鏈技術突破,我們現在知道該怎么做,現在已擁有能夠做到這一點的技術基礎。”(blockworks)[2023/2/9 11:57:31]
ConceptArt區別于原畫師,在游戲,動畫項目中扮演一個僅次于主策劃的一個美術向的決策地位,決定這個項目的風格和受眾,因此一個以概念藝術家為目標的畫師,被一種畫風禁錮是不稱職的。)
參考資料:公眾號一沙君:史上最全!ConceptArt專業解析賽德大學ConceptArt專業YufeiZhang的分享–2020-02-0418:00
生成式人工智能工具,在幫助像游戲設計師這樣的角色進行游戲概念探索與靈感啟發都比較有用處。這也是生產過程的一個關鍵環節,例如,某個游戲工作室正在使用上述工具,從根本上加快了他們的概念藝術的開發流程,因為他們只用了一天時間就創造出了一個圖像,而在以前,這個過程需要長達3周的時間,但是具體怎么操作呢?
首先,游戲設計師使用Midjourney來探索不同的靈感,并生成他們認為合適的概念圖像。之后,圖像會被交給專業的概念藝術家,藝術家可以把這些圖像組合在一起,然后創建一個相關主題的連貫圖像,然后將這些圖片輸入StableDiffusion,以形成系列的圖像變化。
大家會共同討論這些風格各異的圖像風格,然后確定一個,用畫筆手動編輯,然后繼續重復以上過程,直到大家對作品結果感到滿意。在這個階段,再把這個圖像最后上傳給StableDiffusion,創造出最后的藝術作品。
NFT組織PROOF完成5000萬美元A輪融資,a16z領投:金色財經報道,NFT組織Proof周二宣布完成5000萬美元A輪融資,a16z領投,其他參與者包括Collab+Currency、Flamingo DAO、SVAngel、Vayner Fund和Seven SevenSix。Seven SevenSix在4月份為Proof領投了1000萬美元的融資。PROOF發布了到今年年底的計劃,包括對CC0系列的支持,即將推出的MoonbirdsDAO的更新,以及PROOF的第三個NFT系列:MoonbirdsMythics。MoonbirdsMythics是一個2萬個PFP系列,預計將于2023年推出。PROOFWeb3社交平臺也即將推出,測試版將使PROOF創作者、Moonbirds和Oddities的持有者能夠創建由收藏家策劃的畫廊。該平臺將整合PROOF生態系統特有的內容和行動,包括研究報告、播客、DAO提案等。[2022/8/31 12:59:29]
2DProductionArt
還有的游戲工作室在嘗試使用類似的人工智能工具來制作游戲中的美術作品。例如,下圖是來自AlbertBozesan,關于如何使用StableDiffusion來創建游戲中的2D資產的教程。
來源:https://www.youtube.com/watch?v=blXnuyVgA_Y
3DArtwork
3D立體模塊,是目前所有現代游戲以及即將到來元宇宙的重要構建源。虛擬世界和游戲關卡,本質上都是一個3D資產的集合,通過不同的組合和放置方法,修改不同的參數來填充游戲環境。而創建3D元素比創建2D平面圖更為復雜,涉及多個步驟,包括需要制作3D模型、添加紋理和效果。而對于動畫人物來說,還涉及到需要創建一個內部「輪廓」,然后在輪廓之上創建動畫。
游戲開發商Regression Games完成420萬美元種子輪融資,a16z參投:金色財經報道,人工智能游戲開發商和電子競技公司Regression Games宣布完成420萬美元種子輪融資,New Enterprise Associates (NEA) 領投,Andreesen Horowitz (a16z)、BBQ Capital、Roosh Ventures 和一批天使投資人參投。Regression Games 正在構建平臺和生態系統,幫助玩家能夠編寫代碼和人工智能來控制角色、實時調試策略、爭奪錦標賽獎品,該公司創始人兼首席執行官 Aaron Vontell表示,他們希望解決涉及元宇宙、線上對戰等游戲中遇到的NPC和AI復雜性問題。(gamespress)[2022/8/16 12:27:31]
我們發現有不同的初創公司,在尋找有關3D資產創建過程的各個階段的機會,包括模型創建、角色動畫和關卡制作等等。然而,這部分的業務和創新尚在探索中。
三維資產
試圖往創建3D模型方向發展的初創公司包括Kaedim、Mirage和Hypothetic。大公司也在關注這個問題,包括Nvidia的Get3D和Autodesk的ClipForge。Kaedim和Get3d專注于圖像到3D模型的轉換;ClipForge和Mirage專注于文本到3D轉換,而Hypothetic公司對文本到3D搜索以及圖像到3D都感興趣。
Kaedim公司:總部在倫敦,主要是通過2D圖像生成3維模型。
社交協議Farcaster完成3000萬美元融資,a16z領投:7月13日消息,去中心化社交協議 Farcaster 完成 3000 萬美元融資,本輪融資由 a16z 領投,Standard Crypto、Elad Gil、1confirmation、Scalar Capital、First Round Capital、Volt Capital、A Capital、Todd and Rahul's Angel Fund、Coinbase Ventures、Mischief、Ansa Capital、Haystack、Ribbit Capital、Chapter One、Multicoin Capital 、Offline Ventures、Archetype、Canonical Crypto、Proof Group、Floodgate、Balaji Srinivsasan、6529、Ray Tonsing 等參投。Farcaster 已發布協議和客戶端初始版本,正在開發 Farcaster v2 中,并計劃在今年晚些時候推出。[2022/7/13 2:09:14]
Mirage:https://www.mirageml.com/
三維紋理
如果在游戲中,三維模型能夠用在基于網格的紋理或材料上,能夠顯得更加真實。例如,一個中世紀的城堡模型上使用不同類型的、帶有青苔的風化石,可以完全改變一個場景的外觀塑造。這里所說的紋理,包含關于光對材料的反應的元數據,藝術家可以根據文本或圖像提示輕松生成紋理,對于提高創作過程中的迭代速度是非常有價值的,像BariumAI、Ponzu和ArmorLab這樣的公司正在在這個領域努力。
Web3及加密通信協議XMTP完成2000萬美元A輪融資,a16z領投,Coinbase Ventures等參投:9月1日,Web3及加密通信協議XMTP宣布完成2000萬美元A輪融資,a16z領投,Coinbase Ventures、Not Boring Capial、SK Ventures、Offline Ventures、StarkWare、Anthony Pompliano、Anthony Sassano (The Daily Gwei)、Kain Warwick (Synthetix)、Kayvon Beykpour (Twitter)、Stani Kulechov (Aave)、Robert Leshner (Compound Labs)、Roham Gharegozlou (Dapper Labs)、Ryan Sean Adams (Bankless)、Ryan Selkis (Messari) 等基金與天使投資人參投。
據悉,這筆資金將用于擴充 XMTP 團隊規模,并將幫助 XMTP 通過其獨立協議和去中心化網絡實現加密錢包間的通信。[2021/9/1 22:51:44]
BariumAI:https://barium.ai/
Ponzu:https://www.ponzu.gg/
動畫
優秀動畫的制作,是游戲創作過程中最耗時、最昂貴和最有技巧的部分之一,降低成本和創造更為真實的動畫的方法之一,是運用動作捕捉,即給演員或舞者穿上動作捕捉服,用專門的設備,記錄他們的動作。
我們發現,當前的生成式人工智能,可以直接從視頻中捕捉動畫。這就更高效了,因為這樣就不需要成本高昂的的動作捕捉設備,也意味著我們可以從現有視頻中捕捉動畫。
人工智能模型的另一個令人興奮的點在于,可以用于過濾現有動畫,加上新的特效,例如讓動畫人物一鍵看起來喝醉了,或者老了,或者高興。這一領域的公司包括Kinetix、DeepMotion、RADiCAL、MoveAi和Plask。
Kinetix
DeepMotion
RADiCAL
關卡設計和游戲世界構建
游戲創作中最耗時的方面之一是構建游戲世界,生成式人工智能可以用于這項任務。像《Minecraft》、《NoMan'sSky》和《Diablo》這樣的游戲,因程序化技術生成關卡而聞名,其中關卡是隨機生成的,每次都不一樣,但都遵循關卡設計者制定的規則。新的ThenewUnreal5游戲引擎的一大賣點在于,它收集了用于開放世界設計的程序化工具,例如葉子的放置。
例如Promethean、MLXAR或Meta的BuilderBot這些公司,都是看到了生成式AI技術的機會。這方面的學術研究已經有一段時間了,包括Minecraft的生成技術或Doom的關卡設計。
為什么生成式人工智能工具具備用于游戲關卡設計的潛力?因為AI具備創造不同風格的關卡和游戲世界的能力。可以想象一下,通過工具迅速生成一個1920年紙醉金迷時代紐約的游戲世界,或者是神秘的反烏托邦銀翼殺手的設計,或者是托爾金派的幻想世界。
下面的概念是由Midjourney使用提示生成的游戲中不同風格關卡:
音頻
聲音和配樂是游戲體驗的重要部分。已經有公司開始使用生成式人工智能生成音頻,以補充圖形方面的工作。
音效
聲音效果是人工智能的另一個有吸引力的領域。已經有學術論文探討了使用人工智能在電影中生成「foley」的想法,不過目前能夠直接在游戲中應用的商業產品還很少。
筆者認為,這只是一個時間問題,因為游戲的互動性使其成為生成式人工智能的一個明顯的應用,既可以創造靜態的聲音效果作為生產的一部分,也可以在運行時創造實時的互動聲音效果。
想象一下,如何給玩家角色生成腳步聲?大多數傳統游戲,會通過少量預先錄制的腳步聲來解決這個問題:例如,在草地上行走、在礫石上行走、在草地上跑步、在礫石上跑步等等。這些聲音的發布和管理都很繁瑣,而且運行的時候聽起來重復且不真實。
更好的方法是實時通過生成式AI的模擬音效,產生合適且更真實的的音效,通過游戲中的參數,如地面、角色、的重量、步態、鞋類等不同的介質,表現出不同的音效。
音樂
配樂對游戲來說很重要,因為它可以幫助故事主題設定感情基調,就像在電影或電視中一樣。但由于游戲持續的時間更長,有的時候能持續數百甚至數千小時,不變的音樂可能很快變得重復或令玩家厭煩。此外,由于游戲具備互動性質,游戲配樂很難完全精確地配合屏幕上隨機發生的場景和動作。
二十多年來,自適應音樂一直是游戲配樂的一個受關注的話題,它可以一直追溯到微軟的「DirectMusic」系統,用于創建互動音樂。不過,DirectMusic并沒有被廣泛采用,主要是因為用這種格式作曲難度較大,只有少數游戲,如Monolith的《無人生還》,創造了真正的互動配樂。
現在,有許多創業公司正在嘗試創造人工智能生成的音樂,如Soundful、Musico、Harmonai、InfiniteAlbum和Aiva,盡管目前的很多工具,如OpenAI的Jukebox,是高度計算密集型的,還不能實時運行,不過,一旦初始模型成功建立,實時運行將成為可能。
對話&語音
很多公司試圖為游戲中的人物創造逼真的聲音,當然,由于計算機的語音合成歷史悠久,這并不少見,這些公司包括Sonantic、Coqui、ReplicaStudios、Resemble.ai、Readspeaker.ai等等。將生成式人工智能用于語音有多種優勢,當然,這個賽道競爭也比較激烈。
即時對話生成。通常情況下,游戲中的語音是由配音演員預先錄制的,但這些都僅限于死板的演講稿。有了生成式人工智能對話,角色可以說任何話,這就意味著可以對玩家的行為做出充分的反應。
角色扮演。許多玩家希望扮演與自己現實世界身份幾乎沒有相似之處的虛擬人物。然而,只要玩家用自己的聲音說話,這種幻想就會破滅,使用與玩家的化身相匹配的生成的聲音可以保持這種幻覺。
控制音效。通過AI生成語音時,我們可以控制聲音的細微差別,比如它的語調、轉折、情感共鳴、音素長度、口音等等。本地化。對話可以翻譯成任何語言,并以同樣的聲音說話,像Deepdub這樣的公司專門專注于這個細分市場。
NPC&玩家角色
很多初創公司在研究使用生成式人工智能來創建可以互動的角色,除了游戲中NPC的市場機會,虛擬助理或接待員也具備很大的增長空間。這種努力可以追溯到人工智能研究初期。
很多公司正在建立通用聊天機器人,其中許多是由類似于GPT-3的語言模型驅動的。少數公司專門試圖建立以娛樂為目的的聊天機器人,如Replika和Anima,試圖建立虛擬陪伴者。電影《Her》中展現的虛擬女友時代,可能很快就會到來。
現在可以看到這些聊天機器人平臺的下一個迭代,如Charisma.ai、Convai.com或Inworld.ai,除了可以渲染3D角色提供動力外,還具備情感呈現,工具可以讓創造者給這些角色設定目標,可以在融入游戲或在推動情節發展中具有敘事性的地位,而不是純粹的擺設。
一體化平臺
像Runwayml.com這樣最成功的生成式人工智能工具,可以將廣泛的創作者工具集于一身。不過,目前游戲領域還沒有這樣的公司,A16Z很想投資具備以下特點的生成式AI游戲解決方案:
涵蓋整個制作過程的全套生成式人工智能工具:(代碼、資產生成、紋理、音頻等)
能夠與流行的游戲引擎如虛幻和Unity結合使用
設計成適合典型的游戲生產的通用場景套件工具
總結
對于游戲創作者來說,這是一個令人難以置信的時代。有一天,我們可以想象會出現專門為玩家定制的個性化的游戲,完全基于玩家的需求。
這種場景在科幻小說中已經存在了很長時間—比如《安德的游戲》中的「人工智能智力游戲」,或者《星際迷航》中的全息甲板,這些都會在將到來的未來真正實現。
參考資料:
https://a16z.com/2022/11/17/the-generative-ai-revolution-in-games/
公眾號一沙君:史上最全!ConceptArt專業解析賽德大學ConceptArt專業YufeiZhang的分享–2020-02-0418:00
原文標題:《TheGenerativeAIRevolutioninGames》
撰文:JamesGwertzman、JackSoslow
編譯:阿法兔
來源:比推
原文來自:ConsenSysConsenSys將從下周開始在內部測試其zkEVM「privateBeta」測試網。外部用戶將在2023年1月開始加入這個L2zk-rollup網絡.
1900/1/1 0:00:00頭條 ▌比特幣市值超越Meta金色財經報道,由于Meta股價下跌,據8marketcap數據顯示,當前比特幣市值已經超越Meta,本文撰寫時比特幣市值約為3201.8億美元.
1900/1/1 0:00:001.金色觀察|Grayscale:回顧比特幣史上的10次大暴跌在這場不可否認的加密動蕩接近尾聲之際,讓我們來回顧這個新興行業在其13年的歷史中經歷過的各種挑戰.
1900/1/1 0:00:00眾所周知,期權交易相比于現貨交易更加復雜,現貨交易的是具體的產品,而期權交易的是一個權利,相比其高杠桿和靈活性的優勢,期權交易的劣勢也非常明顯:成本高、流動性差等.
1900/1/1 0:00:00上海升級 自從以太坊合并完成之后,加密貨幣市場開始期待以太坊的下一次升級——“上海升級”。從技術層面來說,上海升級將提高網絡速度并降低轉移率,以太坊虛擬機也可能受到影響.
1900/1/1 0:00:0012月27日消息,美國緝署的一項調查顯示,一個在美國、墨西哥、歐洲和澳大利亞活動的販團伙通過幣安進行洗錢數百萬美元.
1900/1/1 0:00:00