0
本文作者: 朱可軒 | 2024-08-13 19:33 |
訪談 | 陳彩嫻
撰文丨朱可軒、賴文昕
編輯丨陳彩嫻
本月初,美國知名 AI 芯片創(chuàng)業(yè)公司 Cerebras Systems 官宣,其已經(jīng)向美國證券交易委員會 (“SEC”) 提交了一份有關其普通股首次公開發(fā)行的表格 S-1 登記聲明草案——這一聲明,進一步證實了外界對其今年計劃上市的猜想。
Cerebras Systems 成立于 2015 年,創(chuàng)始人是 Andrew Feldman,是一家以打破英偉達壟斷為目標的美國 AI 芯片創(chuàng)業(yè)公司。它們?yōu)闃I(yè)內(nèi)熟知的標簽有二:一是研發(fā)了世界上最大的芯片,從最初的 WSE-1到今年新發(fā)布的 WSE-3 均體量龐大;二是曾在 2018 年 D 輪獲得 OpenAI CEO Sam Altman 的注資。
在過去的數(shù)年,Sam Altman 一共參與投資了 3 家芯片公司,除了 Cerebras Systems,還有 Rain Neuromorphics 與 Atomic Semi。這三家都是英偉達在 AI 芯片上的有力助手,而其中 Cerebras Systems 在海內(nèi)外知名度最高的一個重要原因是:
在一眾 AI 芯片創(chuàng)業(yè)公司中,Cerebras Systems 是少數(shù)商業(yè)化比較成功的團隊。從公開信息看到自2023 年年底開始,它們的經(jīng)營現(xiàn)金流已經(jīng)能持平;也就是說,現(xiàn)在 Cerebras Systems 這家公司已經(jīng)不怎么燒錢了——這在創(chuàng)業(yè)公司中已屬難得,在硬件芯片行業(yè)則是難上加難。
因此,Cerebras Systems 在資本市場受到熱捧,一票難求,除了Open AI 的 Sam Altman外,硅谷數(shù)得出名字的VC包括Benchmark、Sequoia、Coatue,之類都成為股東,但國內(nèi)的 PE 卻是寥寥無幾。
但不久前,Cerebras Systems 華麗的投資方陣列中出現(xiàn)了一個嶄新的名字——3 Capital Investment(以下簡稱“3Cap”)。值得注意的是,這是一家由華人創(chuàng)立的 AGI 投資基金;更令人詫異的是,這家基金的成立時間不超過一年——2023 年年底籌備、2024 年年初才成立。這是一家開曼注冊的純美元基金,創(chuàng)始人背景相當獨特。
3Cap 的創(chuàng)始人兼首席投資官王康曼是一位“跨界天才”:
王康曼祖籍上海,幼年遷居香港,本科在瑞士攻讀酒店管理專業(yè),后轉向美國攻讀物理與政治經(jīng)濟學,畢業(yè)后在美工作,當過程序員,后進入華爾街投行工作二十年,在嘉誠國際(現(xiàn)摩根大通)、中金公司、巴克萊銀行與交銀國際擔任資本市場部門主管等職務。
2018 年,王康曼加入商湯科技,擔任戰(zhàn)略投資和資本市場負責人,主導了商湯從 B 輪融資到 IPO 的融資過程,這段經(jīng)歷為她積累 AI 技術認知、打磨 AI 產(chǎn)業(yè)經(jīng)驗作出了不可磨滅的貢獻。
王康曼
2023 年 ChatGPT 爆火后,王康曼看到 AI 領域的全球性機會,于是創(chuàng)立了 3Cap,立志做“AGI 時代的投資者”,并在基金創(chuàng)立之初就拿到了開門紅——以跟 Sam Altman 同樣的估值,投資了 Cerebras Systems。
王康曼判斷,AGI 時代的創(chuàng)業(yè)與投資機遇主要在數(shù)據(jù)(Data)、硬件(Hardware)、軟件(Software)與反饋循環(huán)(Feedback loop)這四塊。而據(jù) AI 科技評論了解,3Cap 在起步階段會首先聚焦于硬件層中 AI Infra 領域的投資。
圍繞 AI Infra 的創(chuàng)業(yè)與投資,AI 科技評論與王康曼進行了一次深度訪談。對于 AI Infra,王康曼認為,“目前所有的數(shù)據(jù)中心,其潛在的硬件與軟件、尤其是硬件,在未來都需要進行置換。而在這個市場中,玩家肯定不會只有英偉達?!痹谶@一點上,她與 Andrew Feldman 的觀點一致。
以下是 AI 科技評論與王康曼的對話實錄:
投資 Cerebras Systems 的過程
AI 科技評論:能否談談您投資 Cerebras Systems 的契機?
王康曼:Cerebras 是一個很有趣的案例。大家可能都聽說,它研發(fā)制造了世界上最大的芯片。
我對 Cerebras 的興趣實際始于六年前。2018 年那,我在一次朋友聚會上遇到 Cerebras 的創(chuàng)始人 Andrew Feldman,他跟我展開了深入的交流,讓我印象很深刻。他當時跟我說,他的目標是要挑戰(zhàn)英偉達,因為他并不認為 GPU 是用于訓練 Foundation Model(基礎模型)的最佳方案,而他們的方案(當時已經(jīng)做了兩年)才是最可行。
也就是說,在Transformer架構出來之前,他就已經(jīng)在思考做基礎模型訓練需要有一個圍繞芯片的完整解決方案。Andrew Feldman 是第一個跟我提到「Foundation Model」的人。
那時候我就知道 Cerebras 這個初創(chuàng)企業(yè)在做 AI 芯片相關的事情值得關注。我知道他們發(fā)表了很多論文、特別是在提高計算效率方面(的論文),也知道他們逐漸實現(xiàn)商業(yè)化,疫情幾年他們也沒停下來,他們研發(fā)的芯片被用于美國國家實驗室和 GSK 的疫苗研發(fā)。
后來 2023 年我自己創(chuàng)立基金時,我就聯(lián)系了 Andrew,詢問了他們的商業(yè)化進展。當時他非常興奮地告訴我,他們最近跟中東 G42 簽署了合同,成為世界上最大的人工智能數(shù)據(jù)中心解決方案提供商之一。在那個項目中,他們的卡與英偉達的卡各占一半,相當于平分市場。
然后我替他高興之余,也跟 Andrew 說 3Cap了我們基金的背景(開曼美元基金,海外LP)希望加入他們的投資者行列。當時我去面訪他,跟他和他們團隊都聊了好久。他考慮后同意給我們份額,至于估值,當時宏觀原因,大家對于上市還是有很多不確定性,所以同意了一個現(xiàn)在回頭看來特別理想的數(shù)字,Sam Altman 是在 2018 年投的他們、我也是 2018 年認識他的,我們估值一樣也很合理(笑)。
對創(chuàng)業(yè)者來說,他們其實也很看重投資者是否懂他們、懂 AI。除了經(jīng)濟利益外,他們其實也希望跟投資人在項目上合作。也是機緣巧合,我們基金成立后的第一個投資項目就是 Cerebras Systems。
Cerebras Systems 所研發(fā)的芯片
AI 科技評論:你們大概什么時候開始投的?
王康曼:去年年底,和 3Cap 的成立幾乎同期。
AI 科技評論:那這會是你們回報比較高的一個項目。
王康曼:我相信如果半導體二級市場估值沒有太大變動,Cerebras 的上市將為我們的股東帶來非??捎^的回報。對于我們這樣的新基金來說,能夠投資這樣有潛力并爆發(fā)性強的項目是非常重要的,它可以幫助我們建立聲譽、并吸引更多志同道合的 LP加入我們。
作為 3Cap 的第一個投資項目,尤其相對現(xiàn)在私人市場的成交,我們在半年內(nèi)的浮盈已經(jīng)好幾倍。當然,資本市場變化萬千,一切都要等 IPO 后才能蓋棺定論。Cerebras 上周宣布會在年內(nèi)上市,希望一切順利。
我也希望以后所有的項目都這樣:一是很難拿到額度;二是要真正專家才懂,但一般財務投資人不一定太熟悉;三是資本市場將會非常認可,這樣 3Cap 作為 AGI 時代的一個新基金才能打響名堂。
AI 科技評論:3Cap 是一家比較新的基金,能投到 Cerebras 這樣的明星項目,給外界的反差感還挺大的。
王康曼:我當時跟 LP 說我們有 Cerebras Systems 的額度時,他們也都覺得有點難以置信,第一個反應就是“這樣的公司這樣的估值,怎么可能拿得到”。但Andrew一直特別支持,后來我的一個LP還在硅谷見了Andrew聊了一個下午,這時候大家才反應過來,原來亞洲真的有這么一家新開張的VC有這些獨特資源。
其實我和 Andrew 認識多年,幾乎是見證了他們成長。同時他也很了解我的經(jīng)歷。我們都創(chuàng)過業(yè),都知道創(chuàng)業(yè)背后的辛酸與苦楚,他也知道我對 AI 的算法技術與產(chǎn)業(yè)落地有多年的認知積累,在創(chuàng)業(yè)初期與創(chuàng)業(yè)后期提供的幫助,含金量是不一樣的,我很幸運的是我跟 Cerebras 結緣是在早期。
像Cerebras 這樣的案例不是個案,只是我們投的第一家。希望以后還有這些獨特,有趣的項目帶進來我們基金里面。
AI 科技評論:Cerebras 的投資方里華人背景的機構多嗎?
王康曼:有,但正式在 Cap Table 上面的寥寥可數(shù)。
AI 科技評論: Cerebras Systems 快要上市了,他們的商業(yè)化情況如何?
王康曼:Cerebras 是少數(shù)在AI芯片初創(chuàng)企業(yè)中,商業(yè)化已經(jīng)比較成功的。公開信息里面也提到,他們?nèi)ツ昴甑滓呀?jīng)在經(jīng)營性現(xiàn)金流層面打平,也就是說基本上不燒錢,這點很少創(chuàng)業(yè)公司能做到,更不要說在硬件芯片行業(yè)了。
他們落地案例有很多,包括了各地政府和企業(yè)龍頭,除了歐美還有全球。當中最為有代表性應是他們和中東 G42 的合作,阿聯(lián)酋要打造全世界最大的 AI 智算中心,當中一半用的是英偉達,另一半是 Cerebras 的方案。
他們的集群 Condor Galaxy 一共6個,加起來36個 exaflop,這個是相當可觀的。給大家一個概念,中國預計在 2024 年全年算力大概有 230 個 exaflop,2025 年大概 300 個 exaflop。Cerebras 的產(chǎn)品已經(jīng)投入在線而且大量應用,這些都是類似起跑線競爭對手沒有具備的。所以它們經(jīng)常被外媒號稱“Nvidia challenger”。
其實美國這幾年 IPO 市場都比較安靜,Cerebras 作為 AI 初創(chuàng)芯片公司第一股,也說明了他們的實力。
AI 科技評論:G42 為什么會選擇一半英偉達,一半 Cerebras?
王康曼:原因很簡單,G42一直對前沿科技特別感興趣,建立國家級別云的話,也不能只是用單一系統(tǒng),一定要有后備系統(tǒng)。他們一直和多家芯片公司保持合作,但Cerebras是當中比較突出成功的案例。
我和 G42 當時做評估的人也有聊過。他們覺得,在性能方面,Cerebras 用的方案跟其他幾家完全不一樣,他們做大的晶圓片,所以從冗余的角度來說更加安全、高效。G42 在選擇供應商時其實測試了很多其他芯片廠商,最后選擇了Cerebras。用下來覺得確實不錯,去年他們合作又加深了,這也很能說明 Cerebras 的技術含量。
AI科技評論:那您看好 Cerebras 能和英偉達形成競爭的點主要在哪些方面呢?
王康曼: Cerebras的每個組件都針對 AI 工作進行了優(yōu)化,對軟件框架,如PyTorch 2.0,以及常用的AI大模型和技術,比如Diffusion、多模態(tài)、ViT、MoE等,提供原生支持。因此在做AI大型模型訓練的時候Cerebras 比 H100 快很多也易用很多。舉個例子說明,由于Cerebras 不需要進行parallel programming,在它的機器上訓練 1750 億參數(shù)的 GPT-3大小的模型,用NV GPU 需要 20507 行綜合Python、C/C++、CUDA 和其他代碼,而一片 WSE-3 只需 565 行代碼。
圖片來自網(wǎng)絡
AI 科技評論:Cerebras 以芯片“大”而聞名,就您對 Cerebras 的了解,對于 AI 的發(fā)展而言,這種更“大”的芯片在性能上有什么優(yōu)勢或壁壘嗎?
王康曼:我覺得在大模型時代主要有幾方面的優(yōu)勢:
一是能進行大規(guī)模并行處理,Cerebras 晶圓級大尺寸芯片的內(nèi)核數(shù)量相比H100增加了 52 倍,增強了并行處理能力,非常適合需要大量計算能力的大模型訓練場景;二是大芯片尺寸允許更多的片上內(nèi)存,減少了對外部內(nèi)存訪問的需求,這樣可以加快處理速度。
其余的優(yōu)勢還有簡單高速的架構、高帶寬、在解決 Sparsity 問題上的表現(xiàn)優(yōu)異等。
配備 WSE-3 的 CS-3 計算機理論上可以處理 24 萬億參數(shù)的大型語言模型,這比 OpenAI 的 GPT-4 等頂級生成式 AI 模型的參數(shù)高出一個數(shù)量級(據(jù)傳有 1 萬億參數(shù)),在 CS-3 上訓練 1 萬億參數(shù)模型就像在 GPU 上訓練 10 億參數(shù)模型一樣簡單。
Cerebras 在 AI day 上展示了他們的一個 4 個系統(tǒng)的集群可以在一天內(nèi)微調(diào) Llama 70B,2048 個系統(tǒng)的 cluster 可以在一天內(nèi)從頭開始訓練 Llama 70B。這個的意義就是大模型的迭代可以非???,可以快速試錯和迭代。
AI科技評論:成本這塊 Cerebras 有優(yōu)勢嗎?
王康曼:Cerebras 每個系統(tǒng)比英偉達要高,確實是一筆較大的初始投入。但由于效率的提升,隨著時間的推移,總擁有成本(TCO)會有競爭力。
數(shù)據(jù)中心運營商非常重視高效的電力使用,因為這直接影響到總擁有成本。AI 硬件由于其巨大的計算密度,特別耗電。CS-3 的峰值功耗為 23kW,而 DGX B200 的峰值功耗為 14.3kW。然而,CS-3 的速度顯著更快,可達 125 petaflops,而 DGX B200 則為 36 petaflops,每瓦性能提高2.2倍,這樣一個 CS-3 系統(tǒng)的整個生命周期將電力費用減少一半以上。
Cerebras 的 WSE 可以完成多個 GPU 的工作,能減少所需硬件的總數(shù),那么由于需要管理的單元數(shù)量減少,運營成本如電力消耗和冷卻也可能降低,更不用提構建集群所需的人力物力成本了。
3Cap 如何做 AI 投資?
AI 科技評論:去年 12 月您創(chuàng)立了 3Cap,您為什么會選擇在這個時間點創(chuàng)立一個基金?
王康曼:早些年,AI 是個新領域,大家都在探索產(chǎn)品如何理論變實踐,如何成功落地。而去年是 AI 2.0 的元年,AI 技術開始普及,成為大家都可以使用的工具。
我認為 2.0 時代存在很多機會,我創(chuàng)立 3Cap,其實也是希望通過自己的經(jīng)驗積累,更靈活地捕捉全球 AI 2.0 時代的機會。我相信亞洲有我這類背景的投資人不算多,我90年代幾乎剛畢業(yè)就在華爾街,當時比較少華人在 front office, 所以給到我的機會與挑戰(zhàn)都特別多,同時有幸在資本市場很早就接觸科技項目,對當?shù)刭Y源有比較深厚積累,同時,在過去六年,也就是AI1.0時代,投資了幾十個AI 相關項目,并有幸在AI巨頭里面見證創(chuàng)業(yè)并成功退出。
AI 科技評論:現(xiàn)在你們一共投了多少個項目?
王康曼:暫時只投了兩個,包括 Cerebras 在內(nèi)。另一個是一家運營做得比較好的公司,是華人在西雅圖創(chuàng)立的公司,偏應用層,但是這塊以后不是 3Cap 的投資重點,只是因為團隊非常出色,所以投了他們。
AI 科技評論:在澳門 Beyond Expo 上,您有談到 3Cap 最早是注重 AI Infra 與硬件上。
王康曼:作為一家美元基金,我們的投資視野不局限于國內(nèi)項目,而是擴展到東南亞、日本、美國等地。那我們的首要任務就是確保所有投資項目都能存活下來,因為我們基金的結構是 4+4 模式,即四年投資期加四年退出期。
在互聯(lián)網(wǎng)周期中,有些公司一開始可能估值很高,但一兩年后可能就會迅速衰落。AI 領域的周期可能會更加劇烈。在移動互聯(lián)網(wǎng)時代,比如京東、美團這樣的企業(yè),即使十年不盈利,市場也能接受,但在 AI 時代,投資者可能無法忍受這樣的長期不盈利。因此,從我們基金的角度來看,必須投資那些在未來四五年內(nèi)依然能夠存續(xù)的公司。
每個賽道都有其投資機會,但從我的角度來看,AI Infra 部分的確定性相對較高,因為 AI 行業(yè)真正意義上從 2.0 開始算,實際上發(fā)展才剛剛開始一年半。其實所有的基礎設施都還未完全準備好,這就是為什么英偉達的股價能夠如此快速上漲。我非常認同這樣的觀點——目前所有的數(shù)據(jù)中心,其潛在的硬件和軟件,主要是硬件,都需要進行置換,其中肯定不會只是英偉達。
你可以想象,如果在 150 年前,工業(yè) 1.0 時代到來時,從馬車轉向蒸汽汽車,我們會考慮投資哪些公司,肯定優(yōu)先考慮那些制造發(fā)動機的公司,因為未來將需要大量的發(fā)動機。
那推溯到今天,AI infrastructure 這一層應該有一些未來五年一直在的公司,在芯片上會取代英偉達本身的一些設計,可能不會完全吃掉英偉達,但肯定會降低它的市占率。所以,在投資的角度,我會先聚焦在 infrastructure 這一塊。
其實我最近看了一個特別有趣的數(shù)據(jù),是說對比過去一兩年,今年 AI 的投資是暴漲,亞洲在 AI 這塊投了挺多 Data Center(數(shù)據(jù)中心)。Data Center 在這里的定義是基建,這類投資周期較長,大概十年左右,但比較穩(wěn)定,所以對很多大基金有吸引力。
因為我們的基金剛剛成立,這些動不動幾十億美金的項目不會是我們這個階段的重點,所以我們要投 Data Center 上面有附加值的項目。
AI 科技評論:對比來看,海外的 AI 投資有什么趨勢嗎?
王康曼:海外市場在 AI 領域的投資趨勢顯示,大模型非常受歡迎,例如,OpenAI 獲得了 100 億美元的估值,早陣子xAI 種子輪也相當多知名投資人參與。過去幾周二級市場對AI板塊稍有調(diào)整,我覺得這很正常,也健康。整體一級市場還算相對理性,頭部效應也比較明顯。
此外,海外投資者對能源領域也表現(xiàn)出濃厚興趣,因為 AI 的耗電量巨大。中國擁有眾多核電站,但美國近年來新增的核電站并不多,AI 的耗電量卻在急劇上升。因此,海外市場對如何為 AI 提供綠色能源的項目也表現(xiàn)出了濃厚的興趣,這塊是AI Infra的上游。
AI 科技評論:從 AI 1.0 發(fā)展到 AI 2.0,您有感受到行業(yè)在迅速變快嗎?
王康曼:這個問題很好。其實 PC 時代持續(xù)了幾十年,移動互聯(lián)網(wǎng)時代大約十幾年,而 AI 時代可能只有幾年。行業(yè)的波動變得更加劇烈,高峰和低谷的差距越來越大,這意味著行業(yè)的洗牌可能會更快。
從我們投資人角度來看,這有好處也有壞處,好處就在于不好的企業(yè)可以更快地被淘汰,而能夠在 AI 2.0 浪潮中生存下來的企業(yè),其最終估值可能會比以前的企業(yè)高。如果你錯過了第一波,并不一定意味著為時已晚。
但作為風險投資者,我們更關注早期項目,希望這些公司四年后仍然存在。我們認為,能夠在快速變化中生存的公司,應該還是在 Infra 這一塊。
AI 科技評論:所以您覺得投資的風險會增高嗎?3Cap 怎么規(guī)避風險?
王康曼:會。所以我們就投兩種,一種是非常前期的項目,一種是我們知道可以相對比較快商業(yè)化落地的項目。投資的話,一定要看能不能夠在最快的時間內(nèi)體現(xiàn)價值,而且能在合理商業(yè)條款下退出。
AI 科技評論:AI 投資需要既懂 AI、又懂投融資。您認為您在 AI 產(chǎn)業(yè)的積累對您與 AI 技術創(chuàng)業(yè)者交流有什么幫助?
王康曼:我覺得每一個浪潮都會有一波新的投資人進來。從 80 年代的 PC 浪潮到互聯(lián)網(wǎng)、移動互聯(lián)網(wǎng),每個時代的科技背后都有特別懂它的投資人出現(xiàn),所以我覺得 AI 2.0 時代也會有一波特別懂 AI 的人成為投資人,我希望 3Cap 能成為其中之一。
我年紀大了 (笑)經(jīng)歷了三個大周期,包括互聯(lián)網(wǎng)泡沫、亞洲金融風暴和全球金融危機,對資本市場熟悉之余也有敬畏之心,加上我也親自參與了 AI 行業(yè)的發(fā)展,從企業(yè)的成功和失敗中學到了很多。有這種經(jīng)驗組合的投資人不多,在這方面,3Cap 有自己的優(yōu)勢。
投資其實是很反人性的。所有的投資的熱點一開始的時候都是有一窩蜂的人去做,無論是投資人、創(chuàng)業(yè)者,還是現(xiàn)有的公司,但真正懂得在里面挑的還是少數(shù)。你可以參考一個網(wǎng)頁叫 AI Graveyard,里面都是去年一窩蜂成立現(xiàn)在不能存活下去的公司。
AI Infra 重構正在加速
AI 科技評論:您認為是什么在支撐一個 AI 公司的估值?
王康曼:首先要看是在 AI 的哪一個領域,因為現(xiàn)在很多事物都能和 AI 扯上關系。但在 AI 2.0 時代,我覺得創(chuàng)業(yè)與投資的機會是在四個方面:數(shù)據(jù)、硬件、軟件和反饋循環(huán)(feedback loop)。
第一個是數(shù)據(jù)。數(shù)據(jù)收集和創(chuàng)建是一種藝術和科學的結合,比如 OpenAI 和 Anthropic 在數(shù)據(jù)收集和創(chuàng)建上有不同的方法,所以結果不同。還有就是 Organic 和 Synthetic (人類和機器產(chǎn)生)數(shù)據(jù)的占比,后者可以引致 model collapse 要調(diào)動的函數(shù)很多。
第二是硬件。GPU 本身是用來打游戲而不是做運算的,雖然在訓練和推理中很快,但架構需要優(yōu)化,現(xiàn)在有很多團隊在提高 GPU 效率或開發(fā)新的芯片架構。我相信英偉達的市場占有率會被新的創(chuàng)業(yè)團隊占領、削少,這是很大的一塊市場。
第三個就是軟件層。每個國家最終可能只需要幾個大模型,關鍵在于找到那些能夠存活下來的公司。
反饋循環(huán)也很重要,即看產(chǎn)品應用出來后的效果,能否快速知道并改進。
中國在這方面有優(yōu)勢,可以在半周內(nèi)根據(jù)反饋做出新的原型,而國外公司可能需要三個月。就 AI 這一塊而言,首先中國人多,所以試錯成本低,其次中國在運營方面比很多國外公司都有優(yōu)勢。
因為投資人愛看如何商業(yè)化落地,但如果沒有運營、沒有反饋循環(huán),商業(yè)化是做不好的。
AI 科技評論:Feedback loop 可以理解為應用嗎?還是說要加上運營?
王康曼:應用加運營。比如現(xiàn)在做得很好的抖音、美團,他們有運營的基因,AI 是個幫助他們運營得更好的工具,AI 本身不是一個產(chǎn)品,如何把 AI 用在你的產(chǎn)品上面,讓大家無論是企業(yè)、政府還是個人都離不開它,這就是運營,這個是很重要的。我覺得在這一點上,國內(nèi)會有很多優(yōu)秀的公司出來。
AI 科技評論:像 Etched AI 現(xiàn)在也很熱門,但是有業(yè)內(nèi)觀點認為,這種專門基于 Transformer 設計的 ASIC 芯片不能 make sense,一旦出現(xiàn)新的架構替代 Transformer,他們就會失去存在價值。
王康曼:我們首先要思考:Transformer 是不是一個可持續(xù)的技術浪潮?如果是,這個問題不言自明;如果不是,那么這個團隊有沒有可持續(xù)能力和資源去面對以后新的架構生態(tài)?
Etched 是 ASIC設計,專門針對 Transformer 架構進行了優(yōu)化,目前還是會有較好效果的,但是由于缺乏通用性,一旦新的架構出現(xiàn)并替代了Transformer,它們就會失去競爭力。
而我個人認為新的范式出現(xiàn)只是時間問題??v橫歷史,每 5 到 10 年,人工智能就會有大牛給出新的范式。從專家系統(tǒng)到?jīng)Q策樹,到 SVM (support vector machine),到神經(jīng)網(wǎng)絡、深度學習,都是階段性的技術。十年后我們還用不用 Transformer 真的不好說。
而歷史上,每一個新的范式出現(xiàn),之前的范式都會被拍死。我相信新的芯片范式也可能潛在顛覆人工智能算法。這個回復,我們可以十年回頭看看對不對。但就目前的模型發(fā)展趨勢來看,Transformer 還是比較難撼動的。
我們在研判是否投資這類公司的時候,同時也需要進一步考察公司的研發(fā)團隊背景和實力,了解他們是否具備持續(xù)創(chuàng)新的能力,以及在其他潛在替代架構上的研究和儲備。
AI 科技評論:您覺得在 AI 2.0 時代,硬件計算這塊的創(chuàng)業(yè)公司有出現(xiàn)什么新的機遇嗎?
王康曼:我們接觸了解了幾十家公司,包括大家可能比較熟悉的 Graphcore、Samba Nova、Tenstorrent、Groq、Untether、Mythic 等,它們各有特色。
AI 2.0 Act One 會有更多訓練場景,我們相信 Cerebras 是很好的標的,而 Act Two 會有兩個大主題,一個是會更看重推理,另一個就是相對訓練英偉達壟斷,推理會有更多芯片公司,這塊會百花齊放。
Groq 就是很好的案例,他們在Meta Llama 3.1反饋很好。Samba Nova也很不錯,和Groq一樣也是ASIC 架構,他們存儲用了HBM + SRAM 混合方案。成本比Groq要低不少,產(chǎn)品成熟度也高,Oracle、Stanford、高盛都在用,也值得關注。當然還有很多,譬如腦機芯片等等,到最后都是一個技術、商業(yè)化、回報的平衡。
AI 2.0 無論創(chuàng)業(yè),投資專業(yè)門檻都比之前要高,我們團隊既然有這個背景,那就該利用自己的優(yōu)勢,創(chuàng)造超預期收益。
AI 科技評論:從 Cerebras Systems 的投資來看,感覺您是一個長期主義者。
王康曼:我覺得無論做人做事情都要長期主義,因為信用是需要長年累月積累下來的。真正的長期主義要陪跑,在好的時候要陪跑,在壞的時候更加要陪跑。
投錢是重要的第一步,可以說是馬拉松里面的第一公里,但第一公里不是最辛苦的,第二,三十公里才是。對VC來說,之后更加重要的給到創(chuàng)始人怎么樣的資源、包括招人、對接潛在客戶、投資人,如何退出等等,這些都是不可或缺的過程,當中需要的是耐心,意志力和責任心。這些做好了,給LP的回報才會高。
說到這里,我們基金成立不久,歡迎志同道合的朋友加入我們(有興趣的讀者請?zhí)砑游⑿?nbsp;Fiona190913 交流對接)。我最希望的素質(zhì)是有合作精神的人。聰明很重要但不是最重要,當大家的智商或閱歷都達到某一個水平后,拼的就是認知與格局,而長期主義在其中扮演很重要的角色。雷峰網(wǎng)(公眾號:雷峰網(wǎng))雷峰網(wǎng)
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權禁止轉載。詳情見轉載須知。