0
雷鋒網(wǎng)「新智造」按:雷鋒網(wǎng)正在啟動“新智造成長榜2017”評選活動,我們將對人工智能與機器人行業(yè)進(jìn)行大規(guī)模報道、梳理和調(diào)研,并聯(lián)合數(shù)十家著名投資機構(gòu)根據(jù)這些創(chuàng)新公司的技術(shù)實力、商業(yè)能力和成長性進(jìn)行深度評選,最終從多個領(lǐng)域分別選出一些極具潛力成長性的創(chuàng)新公司。本文為雷鋒網(wǎng)「新智造」對報名成長榜的企業(yè)“云之夢科技”的報道,講述其如何從人體3D建模和測量入手,發(fā)力虛擬試衣,并積極探索技術(shù)在虛擬換發(fā)型、直播背景實時替換、智能安防落地的故事。如果你想?yún)⑴c我們的評選,可點擊「報名」鏈接,或通過郵箱xinzhizao@leiphone.com聯(lián)系我們!
2011年,思科發(fā)布了一個視頻,一個女生站在一面鏡子前,直接隔空揮手、點擊就能試穿不同系列、款式、顏色的衣服,“試穿”出滿意的衣服后,直接付款就能買下。
深圳云之夢科技創(chuàng)始人董波深知這個視頻給服裝行業(yè)從業(yè)者帶來的震撼和“誘惑”,在走上技術(shù)創(chuàng)業(yè)道路前,他在服裝配飾行業(yè)已經(jīng)有10余年的從業(yè)經(jīng)歷,并為ZARA、沃爾瑪和迪士尼做過貼牌代工,他甚至創(chuàng)立了自己的品牌“卡洛迪”。
不過,2008年的金融危機直接讓董波的公司遭遇重創(chuàng),為了讓企業(yè)轉(zhuǎn)型重新走上正軌,他說自己幾乎嘗試了所有的辦法。而在服裝行業(yè)多年,對于庫存風(fēng)險以及當(dāng)季爆款嚴(yán)重依賴設(shè)計師經(jīng)驗的情況,他有非常深的體會。所以,嘗試“虛擬試衣”,幫助服裝電商企業(yè)增加銷量,減少退換貨,同時,用試衣的數(shù)據(jù)反過來指導(dǎo)設(shè)計,減少新產(chǎn)品的不確定性,也是他非常關(guān)注的點。
董波告訴雷鋒網(wǎng)新智造,早在2012年,他就組建了一個10幾人的技術(shù)團(tuán)隊,研發(fā)虛擬試衣軟件,一開始,他從自己最熟悉的服裝配飾入手,后來又?jǐn)U展到服裝。2014年,云之夢科技正式成立,成為了一家專注于人體感知與大數(shù)據(jù)應(yīng)用的創(chuàng)業(yè)公司。
3D人體測量建模系統(tǒng):5秒鐘完成全維度人體3D建模
云之夢的技術(shù)路線和思科的概念視頻類似,通過深度攝像頭對人的體形、姿態(tài)包括外貌等進(jìn)行識別、理解和恢復(fù),有了人體三維模型,再通過對衣服的數(shù)字建模,用戶就可以在“智能試衣鏡”前進(jìn)行虛擬試衣。
為了讓人體三維模型的創(chuàng)建更快、更準(zhǔn)確,云之夢一開始就著重建立自己的人體數(shù)據(jù)庫,目前,他們已經(jīng)采集了幾千個人體三維模型數(shù)據(jù),這些數(shù)據(jù)可以讓算法迭代更準(zhǔn)確。
2014年,剛剛拿出初代產(chǎn)品,在高交會上展出的云之夢引起了一位從新加坡遠(yuǎn)道而來的計算機視覺領(lǐng)域的博士的關(guān)注,他就是后來加入云之夢并擔(dān)任CTO的呂江波。從浙江大學(xué)畢業(yè)后,呂江波在比利時魯汶大學(xué)獲得了博士學(xué)位,之后成為美國伊利諾伊大學(xué)香檳分校(UIUC)下屬的新加坡高等研究院(ADSC)招募的首位研究人員。他聯(lián)合領(lǐng)導(dǎo)并從事“動態(tài)大場景中的視覺數(shù)據(jù)建模與分析”的研究工作。他還是視頻技術(shù)的著名國際學(xué)術(shù)期刊IEEE TCSVT編委、2012年度榮獲最佳編委獎,同時,他也是IEEE的高級會員。
對于自己研究過的領(lǐng)域,呂江波充滿了興奮,他告訴雷鋒網(wǎng)新智造,“動態(tài)大場景中的視覺數(shù)據(jù)建模與分析”可以應(yīng)用于無人機、機器人等各個領(lǐng)域,讓機器看懂更復(fù)雜的情況。在做研究的過程中,他也一直在關(guān)注怎樣把所研發(fā)的東西應(yīng)用于實際,最終,他在2016年正式加入云之夢,并從新加坡舉家來到深圳。
目前,云之夢的虛擬試衣既有在線版軟件,也有線下的“虛擬試衣鏡”。對于線上試衣,云之夢主要作為技術(shù)提供商為電商平臺提供解決方案;對線下的服裝品牌,云之夢目前已經(jīng)推出了兩款智能硬件:一款是配備了2K分辨率大屏幕和一個深度攝像機的智能試衣鏡,它可以快速感知創(chuàng)建人體的模型,之后就可以試穿其中存儲的衣服數(shù)據(jù)。
另一款是有更高技術(shù)門檻的3D人體測量建模系統(tǒng),它的第一代機型是用多個測量數(shù)據(jù)的Kinect攝像頭,分別分布于被測量人體的前方和后方,可以在3-5秒之內(nèi)建立基于點云關(guān)系的三維人體模型。
雷鋒網(wǎng)新智造分別試用了兩款產(chǎn)品發(fā)現(xiàn),試衣鏡創(chuàng)建的人體模型并不精確,在人臉和身體的連接處還有一點拼接痕跡,但還是能夠基本體驗換裝后的服裝效果,云之夢表示,在新一代產(chǎn)品中,已經(jīng)解決了這個問題;而3D人體測量建模系統(tǒng)創(chuàng)建的人體模型則真實很多,而且是真正的可以拖拽、轉(zhuǎn)動的三維模型,不過,由于是在開放環(huán)境下,復(fù)雜的光線等因素會造成在創(chuàng)建基于點云的三維模型時,一些點“飛出”人體,這就是噪點,表現(xiàn)在人體模型上即一些地方會產(chǎn)生“縫隙”。
云之夢希望快速創(chuàng)建精確的人體三維模型,所以現(xiàn)在他們還開發(fā)了封閉環(huán)境下的3D人體測量建模系統(tǒng),它的外觀是一個太空艙的形狀,而在封閉狀態(tài)下,可以最大程度地建立準(zhǔn)確的三維模型。
這個封閉的系統(tǒng)也將被放置在線下店中,目前已經(jīng)有很多家服裝企業(yè)表達(dá)了購買意愿,其中意愿最強烈的是做服裝定制的企業(yè)。傳統(tǒng)的服裝定制,非常依賴量體師,而后者的培養(yǎng)、薪資都要耗費高昂的時間和金錢成本,精確的3D人體測量建模系統(tǒng),將大大減少量體師的工作,也為企業(yè)降低成本。
應(yīng)用場景延伸:虛擬換發(fā)型、直播背景實時替換、智能安防
采訪中,雷鋒網(wǎng)新智造還和云之夢的產(chǎn)品總監(jiān)強勝軒進(jìn)行了交流,他也展示了云之夢的一款新產(chǎn)品——夠咖,一款基于人像與背景識別分割技術(shù)實現(xiàn)的視頻制作應(yīng)用,它可以幫助視頻主播在直播時實現(xiàn)實時的背景切換。
這個產(chǎn)品可以將人從靜態(tài)甚至動態(tài)的背景中精準(zhǔn)識別并進(jìn)行完美實時的視頻分割,呈現(xiàn)出的分割結(jié)果非常穩(wěn)定,邊緣也很清晰,夠咖可以讓主播瞬間置身于人潮涌動的埃菲爾鐵塔下,抑或是專業(yè)的新聞主播間。
在對人體三維建模研究的過程中,云之夢也積累了人臉識別、人體測量、人像分割、三維重建、視覺跟蹤理解等核心技術(shù),除了試衣,這些技術(shù)還可以應(yīng)用在多個領(lǐng)域,夠咖就是一個實例,目前,它已經(jīng)和一家知名的直播平臺達(dá)成了合作。
董波告訴雷鋒網(wǎng)新智造,云之夢正在和一家全國連鎖的美發(fā)集團(tuán)合作,基于人臉識別、人體測量等技術(shù),開發(fā)虛擬3D換發(fā)應(yīng)用,直接落地美發(fā)店中。在顧客做頭發(fā)前,店員可以用iPad向顧客展示不同發(fā)型的效果,甚至,顧客還可以看自己試穿不同衣服的效果并直接下單購買,美發(fā)店也能獲得相應(yīng)的提成。
另外,因為有對三維人體的感知與數(shù)據(jù)積累,如果應(yīng)用于智能安防,云之夢的技術(shù)也能獲得不一樣的效果,比如,它可以更多維的辨識觀察對象,感知到潛在危險人員的體形和步態(tài)特征等。
回想起自己的創(chuàng)業(yè)歷程,并不懂技術(shù)的董波形容自己是“無知者無畏”,現(xiàn)在,云之夢已經(jīng)獲得了千萬級別的Pre-A輪融資,公司也已經(jīng)發(fā)展到100多人,其中技術(shù)團(tuán)隊占了7成。而對于這樣一家公司,技術(shù)上的投入可能還要在很長一段時間占比較大的比例,對于一個創(chuàng)業(yè)公司來說,這也是很高的要求。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。