今日融資快報(bào)

AI機(jī)器人 Swiss-Mile 籌集 2200 萬美元種子資金，亞馬遜創(chuàng)始人貝佐斯領(lǐng)投，估值超1億美元

Swiss-Mile 是蘇黎世聯(lián)邦理工學(xué)院機(jī)器人系統(tǒng)實(shí)驗(yàn)室的衍生公司，正在開發(fā)自主機(jī)器人，旨在通過人工智能與物理世界的連接，將人類從繁瑣的任務(wù)中解放出來。Swiss-Mile 的機(jī)器人與神經(jīng)網(wǎng)絡(luò)配合使用，它的原型可以在城市交通中導(dǎo)航、避開障礙物和攀爬臺(tái)階。

此輪融資由Jeff Bezos 通過 Bezos Expeditions 和紅杉資本領(lǐng)投，亞馬遜工業(yè)創(chuàng)新基金和 Armada Investment 以及現(xiàn)有投資者 Linear Capital 參與其中。

前小馬智行孫又晗創(chuàng)立 Trans-N.ai，出海日本獲最大種子輪融資

AI科技評(píng)論獲悉，孫又晗，前小馬智行高管，在自動(dòng)駕駛領(lǐng)域的創(chuàng)業(yè)經(jīng)歷后，與那小川共同創(chuàng)立了 Trans-N.ai，并在日本市場(chǎng)取得了顯著成果。Trans-N.ai 在東京大學(xué) IPC 和 Delight Ventures 的支持下籌集了 1.55 億日元（約736萬元）的資金，成為日本最大的種子輪融資之一。

公司專注于 ToB 領(lǐng)域，提供會(huì)議紀(jì)要、協(xié)議分析等 AI 產(chǎn)品，并致力于打造一個(gè)中美工程師的接收平臺(tái)，以吸引全球人才。孫又晗強(qiáng)調(diào)，創(chuàng)業(yè)應(yīng)以生意為本，打造有用且賺錢的產(chǎn)品，而非單純追求技術(shù)。Trans-N.ai 的目標(biāo)是成為一個(gè)平臺(tái)型公司，類似于華為，通過提供實(shí)用的 AI 產(chǎn)品和服務(wù)，實(shí)現(xiàn)商業(yè)化。（AI科技評(píng)論對(duì)孫又晗進(jìn)行了獨(dú)家訪談，更多詳情，鏈接觀看 https://mp.weixin.qq.com/s/OU1tPATh_7LVL9jDoqbfNA）

風(fēng)險(xiǎn)投資公司 Redalpine 完成 2 億美元的 RAC VII，并設(shè)立倫敦辦事處

歐洲領(lǐng)先的風(fēng)險(xiǎn)投資公司Redalpine宣布其有史以來最大的基金 Redalpine Capital VII (RAC VII) 最終完成融資，募集資金為 2 億美元。Redalpine 還在倫敦設(shè)立了新辦事處。

Redalpine于2006年在蘇黎世成立，至今已投資近二十年，是歐洲最有經(jīng)驗(yàn)的風(fēng)險(xiǎn)投資基金之一。 Redalpine 因資助軟件和科學(xué)領(lǐng)域的領(lǐng)導(dǎo)者（從人工智能、軟件、生物技術(shù)和食品到金融科技、醫(yī)療保健和能源）而受到認(rèn)可，并且是 Taxfix 和 N26 等獨(dú)角獸公司的首批支持者。

會(huì)話 AI 公司 BEN 獲 5590 萬美元融資

Brand Engagement Network (BEN)是一家專門從事會(huì)話人工智能公司，通過私募和備用股權(quán)購買協(xié)議籌集了5590萬美元，用于支持其AI技術(shù)的增長(zhǎng)與生產(chǎn)。公司專注于AI驅(qū)動(dòng)的客戶參與，與Vybroo合作，通過廣播和音頻平臺(tái)提升品牌與客戶之間的互動(dòng)。雖然面臨現(xiàn)金消耗和股價(jià)波動(dòng)的挑戰(zhàn)，BEN仍在尋求資本以推動(dòng)其戰(zhàn)略和擴(kuò)展計(jì)劃。

Attio 獲 3300 萬美元融資，為下一代構(gòu)建權(quán)威的 CRM

Attio 的記錄系統(tǒng)采用AI原生的數(shù)據(jù)模型，能夠快速處理大量數(shù)據(jù)。上下文系統(tǒng)能夠自動(dòng)理解和整合結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)，為用戶提供相關(guān)和有用的信息。行動(dòng)系統(tǒng)則是一個(gè)全面的平臺(tái)，用于驅(qū)動(dòng)整個(gè) GTM 策略，利用AI預(yù)測(cè)需求、自動(dòng)化復(fù)雜任務(wù)，并在整個(gè)技術(shù)棧中啟動(dòng)流程。Attio 的目標(biāo)不僅僅是對(duì) CRM 進(jìn)行漸進(jìn)式改進(jìn)，而是要重新定義 CRM，并在未來提供更多創(chuàng)新功能。

這項(xiàng)投資由現(xiàn)有的合作伙伴 Redpoint Ventures、Balderton Capital 和 Point Nine 以及我們的新合作伙伴 01 Advisors 牽頭。

AI 驅(qū)動(dòng)的云優(yōu)化平臺(tái) nOps 獲得 3000 萬美元融資

成立于 2015 年的 nOps 提供了一個(gè)為 AWS 云設(shè)計(jì)的優(yōu)化平臺(tái)，旨在通過自動(dòng)化手段簡(jiǎn)化云資源的跟蹤、分配和優(yōu)化。該平臺(tái)使用人工智能和機(jī)器學(xué)習(xí)技術(shù)，提供見解、識(shí)別效率低下的地方，并通過內(nèi)置自動(dòng)化或單擊更改實(shí)現(xiàn)資源優(yōu)化。Headlight Partners 領(lǐng)投了該公司的 A 輪融資，迄今為止籌集的資金總額達(dá)到 4050 萬美元。

AI 視頻再利用初創(chuàng)公司 OpusClip 籌集 3000 萬美元資金

Opus Clip 將長(zhǎng)視頻轉(zhuǎn)變?yōu)楦哔|(zhì)量的病毒式剪輯，供用戶在 TikTok、YouTube 短片和視頻上分享，以擴(kuò)大社交媒體覆蓋范圍。它的人工智能可以根據(jù)各種寬高比調(diào)整剪輯，檢測(cè)揚(yáng)聲器和移動(dòng)物體以實(shí)現(xiàn)最佳的病毒式展示。它可以識(shí)別最引人注目的亮點(diǎn)，從視頻的不同部分提取亮點(diǎn)，并將它們重新排列成有凝聚力的病毒短視頻。 OpusClip 表現(xiàn)良好的視頻類型包括：視頻播客、教育視頻、評(píng)論視頻、產(chǎn)品評(píng)論、勵(lì)志演講等。

此輪融資由 Millennium New Horizons 領(lǐng)投，Samsung Next、GTMfund 和 DCM Ventures 跟投。

HomeLight推出AI驅(qū)動(dòng)的“先買后賣”產(chǎn)品，融資2000萬美元

HomeLight 推出新的人工智能驅(qū)動(dòng)的產(chǎn)品，這款產(chǎn)品允許用戶在出售現(xiàn)有房產(chǎn)之前購買新房產(chǎn)。這一創(chuàng)新解決方案主要面向貸方和房地產(chǎn)代理商，旨在簡(jiǎn)化房產(chǎn)交易流程。此外，HomeLight 還宣布籌集了 2000 萬美元的額外股權(quán)，由 Zeev Ventures 領(lǐng)投，Stereo Capital 和 Menlo Ventures 等參與。

Bland AI 融資1600萬美元，可偽裝成人類做電話客服

Bland AI 的電話平臺(tái)具有多種功能，企業(yè)可以自定義 AI 代理的聲音和對(duì)話路徑，并處理多種場(chǎng)景。其平臺(tái)還提供詳細(xì)的通話分析和數(shù)據(jù)整合功能，幫助企業(yè)不斷優(yōu)化客戶互動(dòng)。目前，Better 和 Sears 等大型企業(yè)已經(jīng)開始使用 Bland AI 的技術(shù)，來提升電話溝通的效率和效果。

Bland AI 宣布成功完成1600萬美元的 A 輪融資，這一輪融資由 Scale Venture Partners 牽頭。Bland AI 總共已獲得2200萬美元的投資，支持者包括 Y Combinator、PayPal 創(chuàng)始人 Max Levchin、Eleven Labs 首席技術(shù)官 Piotr D?bkowski，以及 Twilio 創(chuàng)始人 Jeff Lawson 等。

LLMOps 平臺(tái) Dify.AI 獲得數(shù)千萬元A輪投資，阿里云入股

Dify.AI基于GPT-4等模型開發(fā)人工智能應(yīng)用，用戶可以對(duì)其進(jìn)行可視化操作。公司日前獲得數(shù)千萬元A輪投資，投資方包括阿里云、深圳風(fēng)投俠基金等。

AI驅(qū)動(dòng)的團(tuán)隊(duì)優(yōu)化公司W(wǎng)ethos AI 籌集 750 萬美元種子資金

Wethos AI 提供人工智能驅(qū)動(dòng)的工作場(chǎng)所解決方案，該解決方案結(jié)合了人工智能和深入的組織心理學(xué)，使企業(yè)能夠深入了解團(tuán)隊(duì)動(dòng)態(tài)。該系統(tǒng)可以量化團(tuán)隊(duì)精神，并利用人工智能驅(qū)動(dòng)的分析來幫助企業(yè)將團(tuán)隊(duì)績(jī)效和個(gè)人潛力釋放到新的水平。

此輪融資由 GFT Ventures 的 Jeff Herbst 領(lǐng)投，Miramar Digital Ventures、UCI Cove Fund 和 Capellas Partners 跟投。

Inventive AI 獲得 400 萬美元以轉(zhuǎn)變 RFP 工作流程

Inventive AI由連續(xù)創(chuàng)業(yè)者 Dhiren Bhatia 和人工智能專家 Gaurav Nemade（Google Brain 項(xiàng)目 LaMDA 前 PM）和斯坦福大學(xué)教授 Vishakh Hegde 共同創(chuàng)立，Dhiren Bhatia 是一位連續(xù)創(chuàng)業(yè)者，在之前的初創(chuàng)公司 Viewics（已被羅氏收購）中親身經(jīng)歷了 RFP 痛點(diǎn)并且是 AI 研究員和《3D 深度學(xué)習(xí)》一書的作者。

Inventive AI平臺(tái)使用生成式 AI 來自動(dòng)化內(nèi)容管理、提高響應(yīng)準(zhǔn)確性并提高生產(chǎn)力，從而減少 70% 以上的手動(dòng)工作量。目前籌集了 400 萬美元的種子資金，由 Sierra Ventures 牽頭，YCombinator、SOMA Capital 和 General Catalyst 跟投。這項(xiàng)投資將加速 Inventive AI 的使命，即通過生成式人工智能增強(qiáng) RFP 流程，使企業(yè)能夠更有效、高效地響應(yīng) RFP 和調(diào)查問卷。

AI支持的表型藥物發(fā)現(xiàn)，PsychoGenics 獲得 300 萬美元 SBIR 資助

PsychoGenics 是一家致力于推進(jìn)藥物發(fā)現(xiàn)的生物技術(shù)公司，致力于將嚙齒類動(dòng)物的行為和生理反應(yīng)轉(zhuǎn)化為高通量和高內(nèi)涵的表型分析。獲得了 NIMH 的 300 萬美元 SBIR 資助。該公司打算利用這筆資金開發(fā) eCube (?) （其專有的人工智能腦電圖平臺(tái)）及其機(jī)器學(xué)習(xí)工具，以確定針對(duì)罕見疾病的現(xiàn)有藥物的新應(yīng)用。

Verofax 獲得 300 萬美元過橋資金，為游客和體育迷部署 AI 和 AR 體驗(yàn)

Verofax完成了由國(guó)際投資者主導(dǎo)的300萬美元橋接融資，旨在擴(kuò)展其在旅游、零售和體育領(lǐng)域的人工智能和增強(qiáng)現(xiàn)實(shí)營(yíng)銷解決方案。資金將用于在中東和歐盟實(shí)施項(xiàng)目，提高客戶體驗(yàn)并推動(dòng)營(yíng)銷效率。Verofax正在使用其專利技術(shù)和云平臺(tái)，與諸多全球品牌如阿聯(lián)酋航空和安海斯-布希合作。

AI代理公司 Agency 獲260 萬美元的種子前資金

Agency 是在舊金山 AI 黑客馬拉松中誕生的一家初創(chuàng)公司，它的核心產(chǎn)品 AgentOps 平臺(tái)能夠讓用戶觀察 AI 代理的具體操作，并及時(shí)發(fā)現(xiàn)問題所在。 平臺(tái)類似于多設(shè)備管理工具，能夠分析 AI 代理的行為，確保它們不會(huì)失控。Agency 與人工智能模型開發(fā)商 Cohere 和 Mistral 合作，提供代理創(chuàng)建服務(wù)，并與流行的 AI 工具集成，如 Microsoft 的 AutoGen、crewAI 和 AutoGPT。Agency 還提供咨詢服務(wù)，幫助企業(yè)構(gòu)建自己的 AI 代理。

該公司已經(jīng)籌集到了 260 萬美元的種子前資金，并由 645 Ventures 和 Afore Capital 領(lǐng)投。

北京具身智能機(jī)器人創(chuàng)新中心將開啟首輪對(duì)外融資

北京具身智能機(jī)器人創(chuàng)新中心（公司曾用名：北京人形機(jī)器人創(chuàng)新中心有限公司）將開啟成立以來的首輪對(duì)外融資。該創(chuàng)新中心成立于2023年11月，創(chuàng)始股東包括小米、優(yōu)必選、京城機(jī)電以及亦莊控股。其中，小米、優(yōu)必選和京城機(jī)電并列為北京具身智能機(jī)器人創(chuàng)新中心的第一大股東，分別占股約28.57%。（鈦媒體）

（歡迎添加微信AIyanxishe2，了解更多AIGC、融資情況，與志同道合的朋友一同暢聊時(shí)新AI產(chǎn)品）

今日大廠風(fēng)聞

Midjourney 宣布進(jìn)軍硬件領(lǐng)域，蘋果前硬件經(jīng)理加盟

Midjourney 將涉足硬件領(lǐng)域，該公司在社交媒體 X 上邀請(qǐng)人才加入其新成立的硬件部門。Midjourney 的創(chuàng)始人兼負(fù)責(zé)人 David Holz 曾是虛擬和增強(qiáng)現(xiàn)實(shí)技術(shù)公司 Leap Motion 的聯(lián)合創(chuàng)始人及首席技術(shù)官，后因資金問題而被迫出售。此外，Midjourney 還聘請(qǐng)了 Ahmand Abbas 作為硬件主管，曾在蘋果負(fù)責(zé) Apple Vision Pro 項(xiàng)目。這些背景信息暗示了 Midjourney 可能正在考慮開發(fā)與 AR 和 VR 相關(guān)的硬件設(shè)備。

公司此前表示將轉(zhuǎn)向 3D、視頻和實(shí)時(shí)生成模型，可能意味著將有生成式 AI 視頻模型被用于生成虛擬現(xiàn)實(shí)體驗(yàn)。Midjourney 回應(yīng)了關(guān)于其新硬件的猜測(cè)，表示正在進(jìn)行多項(xiàng)努力。盡管 Midjourney 2023 年實(shí)現(xiàn)了 2 億美元的收入，但硬件開發(fā)通常需要大量資金，因此公司可能會(huì)考慮籌集風(fēng)險(xiǎn)投資。

零一萬物核心團(tuán)隊(duì)再生變，李先剛已離職

近期大模型創(chuàng)業(yè)企業(yè)零一萬物核心成員頻繁變動(dòng)。知情人士透露，零一萬物核心成員李先剛已經(jīng)離職，并返回房屋交易平臺(tái)貝殼任職。此前零一萬物的另一位核心成員黃文灝被確認(rèn)已加入字節(jié)跳動(dòng)。

李先剛博士畢業(yè)于北京大學(xué)，先后在百度、滴滴擔(dān)任首席算法工程師。離開滴滴后，李先剛加入貝殼，任策略算法中心負(fù)責(zé)人。隨后李先剛加入零一萬物團(tuán)隊(duì)，他曾在2023年7月初擔(dān)任過零一萬物的法定代表人、經(jīng)理/董事、股東，2023年9月初從經(jīng)理/董事職位中退出，2024年1月從股東行列中退出。（新京報(bào)）

谷歌推出首個(gè)AI游戲引擎 GameNGen ，Gemini引入AI助手Gems和Imagen 3

世界上首個(gè)完全由AI驅(qū)動(dòng)的游戲引擎來了。Google DeepMind訓(xùn)練的GameNGen，依靠 AI 而非傳統(tǒng)的編程方式來生成游戲內(nèi)容。以每秒20幀實(shí)時(shí)生成《毀滅戰(zhàn)士》的游戲畫面，畫面逼真到60%的片段都沒讓玩家認(rèn)出是AI。GameNGen 使用的是 Stable Diffusion 1.4 版本的擴(kuò)散模型，通過訓(xùn)練 AI 來模擬游戲邏輯和渲染過程，實(shí)現(xiàn)了游戲引擎的功能。

此外谷歌對(duì)其AI模型Gemini進(jìn)行了首次重大更新，發(fā)布了可定制AI助手“Gems”。Gem支持健身伙伴、烹飪助手、寫作編輯等功能，用戶通過簡(jiǎn)單指令賦予機(jī)器人獨(dú)特人格。Gemini還將直接集成該公司的人工智能圖像生成器Imagen 3。然而，它仍然不能生成人的圖像，此前的一個(gè)版本產(chǎn)生了有問題的圖像，并迫使谷歌將該工具下線。Gems適用于Gemini Advanced、Business和Enterprise用戶。

微軟AI高管Mikhail Parakhin加入Shopify擔(dān)任首席技術(shù)官

Shopify 宣布了 Mikhail Parakhin 的加入，他曾在微軟負(fù)責(zé)重要的人工智能項(xiàng)目。在微軟，Parakhin 擔(dān)任公司的廣告和網(wǎng)絡(luò)服務(wù) CEO，并領(lǐng)導(dǎo)了對(duì) Bing 搜索引擎的重大改進(jìn)，這一改進(jìn)被視為微軟的關(guān)鍵 AI 項(xiàng)目。Parakhin 在微軟的這一角色中負(fù)責(zé)推動(dòng) Bing 搜索引擎的人工智能轉(zhuǎn)型。

英偉達(dá)財(cái)務(wù)公布三個(gè)月凈賺1100億，但市值一夜跌了6.89%

Nvidia 在截至 2023 年 7 月的最近一季度，其收入同比增長(zhǎng)了驚人的 122%，達(dá)到了 300 億美元。凈利潤(rùn)166億美元，同比增長(zhǎng)168%，環(huán)比增長(zhǎng)12%。

然而Nvidia的毛利潤(rùn)在過去超過一年的時(shí)間里首次出現(xiàn)下滑，主要原因是與新型 Blackwell 芯片相關(guān)的成本問題。財(cái)報(bào)公布后，英偉達(dá)股價(jià)在盤后交易中先漲超2%，后跌至6.89%，市值一夜減少了600萬美元，大約相當(dāng)于跌出了1個(gè)中芯國(guó)際A股市值。同時(shí)，Nvidia 證實(shí)了之前報(bào)道的，公司即將發(fā)布的GPU會(huì)面臨延誤。

耶魯大學(xué)豪擲 1.5 億美元支持 AI 研究

耶魯大學(xué)計(jì)劃在未來五年內(nèi)投入超過 1.5 億美元，以促進(jìn)人工智能（AI）領(lǐng)域的研究與應(yīng)用。這一投資將用于計(jì)算基礎(chǔ)設(shè)施的建設(shè)，特別是購買約 450 個(gè)圖形處理器（GPU），以及開發(fā)安全的生成性 AI 工具，如 “Clarity” 平臺(tái)。此外，耶魯大學(xué)還計(jì)劃招聘 20 多名專注于 AI 技術(shù)的教員，以增強(qiáng)其在 AI 研究和教學(xué)方面的能力。

美圖發(fā)布 2024 年中期業(yè)績(jī)，經(jīng)調(diào)整歸母凈利潤(rùn) 2.78 億元，凈利潤(rùn)大漲 80%

美圖發(fā)布 2024 年中期業(yè)績(jī)，2024 年 1 到 6 月美圖收入 16.2 億元人民幣，同比增長(zhǎng) 28.6%，而最亮眼的數(shù)據(jù)則是經(jīng)調(diào)整歸母凈利潤(rùn) 2.78 億元，同比增漲 80.3%。美圖給出的兩個(gè)業(yè)績(jī)?cè)鲩L(zhǎng)的原因，都是與主營(yíng)業(yè)務(wù)相關(guān)。一是 AI 技術(shù)的加持下，2023 年 6 月，美圖一口氣推出/更新了 6 款產(chǎn)品， 面向 B 端用戶的生產(chǎn)力產(chǎn)品，驅(qū)動(dòng)了國(guó)內(nèi)用戶付費(fèi)的增長(zhǎng)。另一個(gè)是全球化，美圖的 App 在多家應(yīng)用商店名列前茅，國(guó)外用戶及付費(fèi)用戶也實(shí)現(xiàn)了雙增長(zhǎng)。

阿里云發(fā)布國(guó)際首個(gè)“月球科學(xué)多模態(tài)專業(yè)大模型”

中國(guó)科學(xué)院地球化學(xué)研究所與阿里云聯(lián)合推出了全球首個(gè) “月球科學(xué)多模態(tài)專業(yè)大模型”。該模型基于阿里云的通用系列模型構(gòu)建，采用了 RAG 檢索增強(qiáng)技術(shù)，并在阿里云百煉專屬版上進(jìn)行了微調(diào)和訓(xùn)練。該模型的最佳應(yīng)用場(chǎng)景是月球撞擊坑的識(shí)別，對(duì)于研究月球地質(zhì)演化具有重要意義。

Kimi推出moonshot-v1-auto模型API，將推出聯(lián)網(wǎng)搜索功能

kimi推出了名為moonshot-v1-auto的新模型API，這一功能能夠根據(jù)上下文所需的Tokens數(shù)量自動(dòng)選擇合適的模型，從而幫助用戶節(jié)省費(fèi)用。同時(shí)，官方預(yù)告了Kimi API新功能：將推出聯(lián)網(wǎng)搜索功能。

書生?天際 3.0 實(shí)景三維大模型發(fā)布：城市級(jí) 100 平方公里全范圍實(shí)時(shí)渲染，VR 設(shè)備可用

據(jù)“書生 Intern”官方公眾號(hào)，書生?天際 3.0 實(shí)景三位大模型現(xiàn)已開源發(fā)布，渲染效率提速近 6 倍，同時(shí)將應(yīng)用方式拓展至 VR 設(shè)備。去年 7 月，上海人工智能實(shí)驗(yàn)室聯(lián)合多家機(jī)構(gòu)發(fā)布了書生?天際（LandMark）實(shí)景三維大模型，號(hào)稱首次實(shí)現(xiàn)城市級(jí) 100 平方公里全范圍實(shí)時(shí)渲染。

今日產(chǎn)品動(dòng)態(tài)

Product Hunt 熱榜，AI Ads Analyzer

GoMarble 的 AI Ads Analyzer 是一個(gè)專注于廣告創(chuàng)意分析的工具，用戶只需上傳廣告并提供一個(gè)落地頁，即可獲得關(guān)于視覺效果、文案和吸引力的詳細(xì)報(bào)告。該工具已分析超過 1150 個(gè)廣告，評(píng)估了 340 多分鐘的內(nèi)容，并為全球 125 多家品牌提供服務(wù)，每次分析不到 30 秒鐘。

AI Ads Analyzer 能夠幫助用戶識(shí)別廣告的優(yōu)勢(shì)與不足，從失敗的廣告中學(xué)習(xí)，分析競(jìng)爭(zhēng)對(duì)手的廣告，并提供具體的改進(jìn)建議，包括文案、視覺和吸引力的優(yōu)化方案。此外，該工具適用于各種廣告格式，包括用戶生成內(nèi)容（UGC）廣告、視頻廣告和靜態(tài)廣告。

? https://adsanalyzer.gomarble.ai/?utm_source=ph&utm_medium=ph&utm_campaign=mainph&ref=producthunt

開發(fā)者推薦

1.賈佳亞團(tuán)隊(duì)新圖像視頻生成控制ControlNeXt

賈佳亞團(tuán)隊(duì)開發(fā)了一款名為 ControlNeXt 的圖像和視頻生成控制工具，該工具在生成速度、精準(zhǔn)控制和用戶友好性上有顯著提升。ControlNeXt 兼容多款 Stable Diffusion 圖像和視頻生成模型，如 SD1.5、SDXL、SD3 和 SVD，實(shí)現(xiàn)了即插即用，且 GitHub 上已獲得 1.1k 星標(biāo)。ControlNeXt 支持多種條件控制，包括 Canny 邊緣、掩模、景深、姿勢(shì)等，能夠生成高質(zhì)量的圖像和視頻，且支持超分辨率和人體姿勢(shì)動(dòng)作的精準(zhǔn)控制。

ControlNeXt 在架構(gòu)上采用了輕量級(jí)卷積模塊，去除了 ControlNet 中的龐大控制分支，減少了訓(xùn)練參數(shù)量、計(jì)算開銷和內(nèi)存占用，同時(shí)通過交叉歸一化技術(shù)優(yōu)化了訓(xùn)練和推理過程。該項(xiàng)目的創(chuàng)新在于實(shí)現(xiàn)了更高效的模型訓(xùn)練和推理，挑戰(zhàn)了 Scaling Law 的傳統(tǒng)做法，即通過增加參數(shù)、數(shù)據(jù)和算力來提升模型性能。

?https://github.com/dvlab-research/ControlNeXt

2.HuggingFace 開源低成本 AI 機(jī)器人解決方案 LeRobot

HuggingFace 推出名為 LeRobot 的開源項(xiàng)目，旨在提供一個(gè)低成本的 AI 機(jī)器人解決方案，讓更多人能夠參與到 AI 機(jī)器人的構(gòu)建和訓(xùn)練中。

LeRobot 項(xiàng)目由前特斯拉工程師 Remi Cadene 領(lǐng)導(dǎo)，提供了詳細(xì)的指南，包括機(jī)器人的組裝、配置以及如何訓(xùn)練控制機(jī)器人的神經(jīng)網(wǎng)絡(luò)。LeRobot 基于開源的 Koch v1.1 機(jī)器人套件，包含兩個(gè)六電機(jī)的機(jī)械臂，并且支持多攝像頭作為視覺傳感器。項(xiàng)目的硬件和軟件資源，包括訓(xùn)練和控制程序、AI 模型和 SolidWorks 文件，均已開源。LeRobot 還計(jì)劃推出一個(gè)定價(jià)為 150 美元的 Moss v1 版本。此外，項(xiàng)目提供了四種模型和 98 個(gè)數(shù)據(jù)集，開發(fā)者可以根據(jù)需要上傳自己的數(shù)據(jù)集進(jìn)行訓(xùn)練。通過 LeRobot，用戶可以從零開始組裝機(jī)械臂，并通過 AI 模型訓(xùn)練機(jī)器人執(zhí)行一系列任務(wù)。

?https://github.com/huggingface/lerobot

特別關(guān)注

a16z：AI將如何融合電影和游戲？

未來世紀(jì)的皮克斯不會(huì)通過傳統(tǒng)的電影或動(dòng)畫產(chǎn)生，而是通過交互視頻。這種新的敘事形式將模糊電子游戲和電視 / 電影之間的界限，將深刻的敘事與觀眾的參與性和 “玩” 性結(jié)合起來，開辟出一個(gè)龐大的新市場(chǎng)。隨著消費(fèi)者對(duì)互動(dòng)媒體的偏好增加，以生成式 AI 的發(fā)展，游戲已經(jīng)成為現(xiàn)代敘事的前沿。

交互式視頻通過將故事講述與玩耍結(jié)合起來，提供了一個(gè)新的媒介格式。與傳統(tǒng)的視頻游戲不同，交互式視頻完全由神經(jīng)網(wǎng)絡(luò)實(shí)時(shí)生成幀。這種格式結(jié)合了電視 / 電影的可訪問性和敘事深度，以及視頻游戲的動(dòng)態(tài)系統(tǒng)和觀眾參與性。盡管以往的嘗試，如 Telltale 的《奔逃僵尸》和 Netflix 的《Bandersnatch》，因?yàn)橹谱鞒杀竞蜁r(shí)間的限制而面臨挑戰(zhàn)，但生成式 AI 模型的進(jìn)步可能是實(shí)現(xiàn)交互式視頻的關(guān)鍵。

近年來，模型蒸餾、圖像生成和視頻生成技術(shù)的顯著進(jìn)步，已經(jīng)使得實(shí)時(shí)生成高質(zhì)量視頻成為可能。研究人員和公司正在探索新的交互式視頻體驗(yàn)，并開發(fā)出能夠生成完整 3D 可玩世界的基礎(chǔ)模型。預(yù)計(jì)，隨著技術(shù)的不斷進(jìn)步，完全可生成的交互式視頻可能在未來兩年內(nèi)實(shí)現(xiàn)商業(yè)化。

未來的交互式皮克斯將需要是一個(gè)世界級(jí)的互動(dòng)敘事工作室和頂尖的技術(shù)公司，能夠?qū)⑹潞陀螒蛟O(shè)計(jì)與技術(shù)創(chuàng)新相結(jié)合。這樣的團(tuán)隊(duì)將需要找到新的方法，讓人類敘事者與 AI 工具協(xié)同工作，同時(shí)解決法律和倫理上的挑戰(zhàn)。長(zhǎng)遠(yuǎn)來看，生成式 AI 可以創(chuàng)造不僅僅是互動(dòng)故事，而是整個(gè)虛擬世界。

?https://a16z.com/the-next-generation-pixar/

敬請(qǐng)期待明日的最新動(dòng)態(tài)！

AI情報(bào)局征集情報(bào)合伙人，匯集獨(dú)家價(jià)值線索！如果您可以提供有關(guān)AI最新融資&行業(yè)內(nèi)幕&獨(dú)特產(chǎn)品，請(qǐng)?zhí)砑舆\(yùn)營(yíng)微信號(hào)：AIyanxishe2備注行業(yè)崗位。

雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))

雷峰網(wǎng)版權(quán)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。