0
| 本文作者： 任平 | 2024-03-14 10:00 |
在語(yǔ)言學(xué)的廣闊天地中，手語(yǔ)研究曾是一片未被充分開(kāi)墾的荒地。
上海大學(xué)的倪蘭教授，作為中國(guó)大陸培養(yǎng)的第一位「手語(yǔ)語(yǔ)言學(xué)」方向博士，在談到自己選擇手語(yǔ)方向時(shí)仍忍不住感慨，“往前推二十年，語(yǔ)言學(xué)界幾乎無(wú)人涉足這一領(lǐng)域?！?/p>
然而，時(shí)光流轉(zhuǎn)至今，這一領(lǐng)域的現(xiàn)狀是否得到了改善？
二十年后的今天，盡管在這一領(lǐng)域人們的認(rèn)識(shí)有了很大的進(jìn)步，也有一些研究者開(kāi)始從事手語(yǔ)相關(guān)研究，但比起語(yǔ)言學(xué)的其他方向，手語(yǔ)語(yǔ)言學(xué)仍然面臨著諸多問(wèn)題和挑戰(zhàn)。
在2023年4月天津理工大學(xué)舉辦的手語(yǔ)信息化會(huì)議上，倪蘭教授作為語(yǔ)言學(xué)界的代表之一，感受到了這一領(lǐng)域的發(fā)展與局限。
她指出，在一眾與會(huì)者中，除了極少數(shù)學(xué)者外，大多數(shù)參與者都來(lái)自計(jì)算機(jī)科學(xué)和通信技術(shù)領(lǐng)域。這也意味著，盡管手語(yǔ)技術(shù)的研究取得了一定的進(jìn)展，但對(duì)手語(yǔ)作為一門(mén)語(yǔ)言的深入理解仍然不足。
大多數(shù)的信息科學(xué)的研究人員利用計(jì)算機(jī)視覺(jué)技術(shù)進(jìn)行了多年的手語(yǔ)識(shí)別研究，但遺憾的是，可能很多人并未真正意識(shí)到：手語(yǔ)是一種和有聲語(yǔ)言同樣的自然語(yǔ)言。
最近幾年很多科技公司推出的“手語(yǔ)數(shù)字人”試圖為聽(tīng)障人士提供實(shí)時(shí)信息服務(wù)，但當(dāng)流量盛宴結(jié)束，這些技術(shù)是否能融入日常生活、研發(fā)公司能否保留技術(shù)團(tuán)隊(duì)、聽(tīng)障群體是否真正接受這種翻譯方式、以及這些技術(shù)是否通過(guò)了國(guó)家權(quán)威機(jī)構(gòu)的技術(shù)有效性鑒定，這些深層次問(wèn)題卻鮮有人問(wèn)津。
當(dāng)技術(shù)熱潮逐漸冷卻，人們?cè)俅螌徱暿终Z(yǔ)識(shí)別的核心問(wèn)題。
倪蘭教授認(rèn)為，過(guò)去人們普遍認(rèn)為只要理解單個(gè)手勢(shì)的含義就能解決手語(yǔ)識(shí)別問(wèn)題，但當(dāng)AI和數(shù)字人出現(xiàn)后，機(jī)械地將漢語(yǔ)詞匯翻譯成手語(yǔ)，聽(tīng)障群體卻難以理解機(jī)器自動(dòng)生成的手語(yǔ)。
倪蘭教授比喻說(shuō)：“就像外國(guó)人學(xué)習(xí)中文，如果他們按照英語(yǔ)的句法結(jié)構(gòu)來(lái)組織漢語(yǔ)詞匯，那么他們說(shuō)的漢語(yǔ)可能會(huì)讓人難以理解。同樣，手語(yǔ)也需要遵循其自身的語(yǔ)法結(jié)構(gòu)”。
在技術(shù)開(kāi)發(fā)方面，倪蘭教授認(rèn)為，手語(yǔ)識(shí)別的核心問(wèn)題在于手語(yǔ)的內(nèi)部結(jié)構(gòu)，包括語(yǔ)音構(gòu)造、構(gòu)詞方式和句法結(jié)構(gòu)。
她指出，手語(yǔ)的語(yǔ)法結(jié)構(gòu)問(wèn)題，尤其是如何將手語(yǔ)表達(dá)轉(zhuǎn)換為相同概念的句子結(jié)構(gòu)，是研究的核心。她的研究團(tuán)隊(duì)正在努力解決這些問(wèn)題，以提高手語(yǔ)識(shí)別的準(zhǔn)確性。
在與計(jì)算機(jī)科學(xué)家的合作方面，倪蘭教授提出了兩個(gè)關(guān)鍵問(wèn)題：如何利用技術(shù)手段處理長(zhǎng)篇語(yǔ)料，以及如何實(shí)現(xiàn)標(biāo)準(zhǔn)樣本的標(biāo)注。這樣的合作將有助于提高手語(yǔ)研究的效率，為計(jì)算機(jī)視覺(jué)技術(shù)在手語(yǔ)識(shí)別領(lǐng)域的應(yīng)用提供充足的數(shù)據(jù)支持。
近期在與雷峰網(wǎng)(公眾號(hào)：雷峰網(wǎng))-AI科技評(píng)論的對(duì)話中，倪蘭教授從語(yǔ)言學(xué)視角梳理了手語(yǔ)研究中的關(guān)鍵問(wèn)題，也講述了如何與計(jì)算機(jī)視覺(jué)專家開(kāi)展手語(yǔ)識(shí)別系統(tǒng)的合作開(kāi)發(fā)。
以下為對(duì)話（經(jīng)編輯）：
AI科技評(píng)論：倪教授，如今“手語(yǔ)語(yǔ)言研究者”已經(jīng)成了您的一個(gè)重要身份，但我想知道，您為何選擇做手語(yǔ)研究，最開(kāi)始遇到過(guò)哪些難題？
倪蘭：在2000年左右，國(guó)內(nèi)對(duì)手語(yǔ)語(yǔ)言學(xué)這一邊緣領(lǐng)域的研究認(rèn)可度并不高。當(dāng)時(shí)手語(yǔ)的研究主要是由特殊教育領(lǐng)域的專家進(jìn)行，他們關(guān)注的是如何教授聾生通過(guò)手語(yǔ)學(xué)習(xí)漢語(yǔ)，語(yǔ)言學(xué)界幾乎無(wú)人涉足這一領(lǐng)域。
我的導(dǎo)師龔群虎教授在新加坡做博士后期間，注意到國(guó)外一些大學(xué)語(yǔ)言學(xué)系常常會(huì)有幾位專家專注于手語(yǔ)研究。由于他自己也會(huì)一些手語(yǔ)，他開(kāi)始特別關(guān)注這一領(lǐng)域，并在此期間搜集了大量相關(guān)文獻(xiàn)資料。
2002年，龔群虎教授被引進(jìn)到復(fù)旦大學(xué)時(shí)，將這些資料和想法帶到了國(guó)內(nèi)。
2003年，我開(kāi)始攻讀博士學(xué)位，導(dǎo)師詢問(wèn)我是否愿意從事手語(yǔ)研究。當(dāng)時(shí)我對(duì)此并不熟悉，但我愿意嘗試，所以導(dǎo)師就給了我一本美國(guó)語(yǔ)言學(xué)家寫(xiě)的書(shū)，名為《Sign Language(手語(yǔ))》。
這本書(shū)基于是1970年代加州大學(xué)圣迭戈分校和索爾克研究所一批學(xué)者針對(duì)手語(yǔ)的實(shí)驗(yàn)工作而進(jìn)行的研究，他們?cè)臼窍Ｍ接懨@人在沒(méi)有語(yǔ)言的情況下是否仍具有思維能力。他們以聾人和聽(tīng)人為研究對(duì)象，發(fā)現(xiàn)聾人不僅具有思維，而且擁有自己的語(yǔ)言——手語(yǔ)，這一發(fā)現(xiàn)激發(fā)了一批研究者對(duì)手語(yǔ)的研究興趣。
我在閱讀這本書(shū)后也感到非常興奮，盡管當(dāng)時(shí)國(guó)內(nèi)沒(méi)有這方面的深入研究，中文研究資料也非常匱乏，但我發(fā)現(xiàn)手語(yǔ)研究與我之前從事的現(xiàn)代漢語(yǔ)語(yǔ)法研究有很多相似之處，手語(yǔ)研究中的許多問(wèn)題也是漢語(yǔ)研究需要面臨的問(wèn)題，所以從那時(shí)開(kāi)始我對(duì)手語(yǔ)研究產(chǎn)生了濃厚的興趣。
AI科技評(píng)論：我留意到您是中國(guó)大陸培養(yǎng)的第一位「手語(yǔ)語(yǔ)言學(xué)」方向博士，博士期間在手語(yǔ)領(lǐng)域做了哪些工作？
倪蘭：博士期間我向?qū)煴磉_(dá)了意愿，希望能專注于手語(yǔ)的語(yǔ)法研究。因?yàn)樘亟虒I(yè)已經(jīng)在手語(yǔ)詞匯研究方面做了很多工作，而在語(yǔ)法和手語(yǔ)的“語(yǔ)音”（盡管手語(yǔ)沒(méi)有聲音，但在語(yǔ)言學(xué)意義上可以被視為一種“語(yǔ)音”）方面，研究還相對(duì)較少。
從2003年開(kāi)始，我跟隨導(dǎo)師進(jìn)行研究，直到2007年畢業(yè)時(shí)，完成了中國(guó)大陸第一篇關(guān)于手語(yǔ)動(dòng)詞的博士論文。
當(dāng)時(shí)，香港中文大學(xué)也在進(jìn)行手語(yǔ)研究，鄧慧蘭教授帶領(lǐng)的團(tuán)隊(duì)極大推動(dòng)了香港手語(yǔ)研究的發(fā)展。我2007年從復(fù)旦大學(xué)畢業(yè)時(shí)，國(guó)內(nèi)的手語(yǔ)研究領(lǐng)域爭(zhēng)議還頗多，有人認(rèn)為手語(yǔ)不過(guò)是一種輔助工具，缺乏系統(tǒng)的語(yǔ)法結(jié)構(gòu)，不能算作一種真正的語(yǔ)言。由于懂得手語(yǔ)的學(xué)者寥寥無(wú)幾，這一領(lǐng)域的研究并未得到廣泛認(rèn)可。因此，我并沒(méi)有以手語(yǔ)研究的身份應(yīng)聘任何高校，而是憑借我之前的漢語(yǔ)教學(xué)經(jīng)驗(yàn)，成為了上海大學(xué)國(guó)際交流學(xué)院的一名語(yǔ)言教師。
后來(lái)，我有機(jī)會(huì)被派往國(guó)外工作，發(fā)現(xiàn)很多國(guó)家，包括我所工作的土耳其等國(guó)家，都有專門(mén)的手語(yǔ)研究者。2010年，中國(guó)殘聯(lián)和國(guó)家語(yǔ)委在北京師范大學(xué)成立了國(guó)家盲文和手語(yǔ)研究中心。它標(biāo)志著手語(yǔ)、盲文研究開(kāi)始受到更加廣泛的關(guān)注，這也是我國(guó)手語(yǔ)研究的一個(gè)重要轉(zhuǎn)折點(diǎn)。2012年，我和導(dǎo)師共同申請(qǐng)了一個(gè)國(guó)家社科重大項(xiàng)目，專注于中國(guó)手語(yǔ)數(shù)據(jù)庫(kù)的建設(shè)。作為句法子課題的負(fù)責(zé)人，負(fù)責(zé)長(zhǎng)篇數(shù)據(jù)采集和相關(guān)數(shù)據(jù)分析工作，目前建立的手語(yǔ)數(shù)據(jù)庫(kù)存放在復(fù)旦大學(xué)。
AI科技評(píng)論：后來(lái)是怎么把手語(yǔ)工作帶到了上海大學(xué)？
倪蘭：參與中國(guó)手語(yǔ)數(shù)據(jù)庫(kù)這個(gè)國(guó)家社科重大項(xiàng)目的工作后，我向上海大學(xué)文學(xué)院提出了成立一個(gè)手語(yǔ)研究中心的想法。2017年，“中國(guó)手語(yǔ)及聾人研究中心”在上海大學(xué)成立。這是中國(guó)綜合性大學(xué)中首個(gè)專注于手語(yǔ)研究的校級(jí)研究機(jī)構(gòu)。中心致力于開(kāi)展手語(yǔ)和聾人的科學(xué)研究以及國(guó)家通用手語(yǔ)的推廣工作，我擔(dān)任了研究中心主任。
中國(guó)手語(yǔ)（CSL）是一個(gè)廣泛的概念，它可以包括國(guó)家通用手語(yǔ)和中國(guó)各地方手語(yǔ)。
2018年，經(jīng)上海市語(yǔ)委推薦我們以特殊人群語(yǔ)言文字研究為特色申報(bào)了教育部、國(guó)家語(yǔ)委的“國(guó)家語(yǔ)言文字推廣基地”，2019年底、2020年初，我們獲批成為“上海市語(yǔ)言文字推廣基地”和“國(guó)家語(yǔ)言文字推廣基地”。這個(gè)過(guò)程的每一步都來(lái)之不易，記得我們當(dāng)時(shí)在申報(bào)答辯時(shí)，有專家提問(wèn)為何一定要以國(guó)家語(yǔ)言文字推廣基地的形式來(lái)進(jìn)行相關(guān)研究。我回答，特殊人群的語(yǔ)言文字使用雖然涉及的人群相對(duì)較少，但相關(guān)研究需要得到國(guó)家和社會(huì)各界的認(rèn)可和支持，以及制度、經(jīng)費(fèi)保障，否則難以長(zhǎng)期持續(xù)。
2017年，“中國(guó)手語(yǔ)及聾人研究中心”在上海大學(xué)成立，倪蘭教授（右一）
AI科技評(píng)論：上海大學(xué)對(duì)手語(yǔ)研究是很支持的，這很難得。國(guó)內(nèi)還有哪些手語(yǔ)語(yǔ)言學(xué)研究團(tuán)隊(duì)？
倪蘭：上海大學(xué)對(duì)于一些特色研究方向還是非常支持的，我們的研究中心設(shè)在文學(xué)院中文系，但我們有很多交叉研究，分布在計(jì)算機(jī)工程與科學(xué)學(xué)院、通信學(xué)院、社會(huì)學(xué)院、新聞學(xué)院、電影學(xué)院、外語(yǔ)學(xué)院等。
目前，包括復(fù)旦大學(xué)、華東師范大學(xué)、廈門(mén)大學(xué)等在內(nèi)的許多外語(yǔ)界的老師也開(kāi)始進(jìn)入手語(yǔ)研究這一領(lǐng)域。當(dāng)時(shí)我在復(fù)旦的師弟師妹們畢業(yè)后也分別進(jìn)入不同的學(xué)校，如北京師范大學(xué)、上海外國(guó)語(yǔ)大學(xué)、上海師范大學(xué)、燕山大學(xué)和魯東大學(xué)等，他們?cè)诟髯缘膷徫簧侠^續(xù)著手語(yǔ)研究。
總的來(lái)說(shuō)，在國(guó)外，手語(yǔ)語(yǔ)言學(xué)研究已經(jīng)是一個(gè)相對(duì)成熟的研究領(lǐng)域。在國(guó)內(nèi)，手語(yǔ)研究仍然被視為一個(gè)特殊的研究方向。但我相信，隨著時(shí)間的推移，手語(yǔ)研究將得到更廣泛的認(rèn)可和發(fā)展。
AI科技評(píng)論：手語(yǔ)語(yǔ)言學(xué)研究是一個(gè)方向，但國(guó)內(nèi)關(guān)于手語(yǔ)的研究文章主要集中在計(jì)算機(jī)領(lǐng)域?，F(xiàn)在您會(huì)和計(jì)算機(jī)視覺(jué)專家合作開(kāi)發(fā)手語(yǔ)識(shí)別系統(tǒng)嗎？
倪蘭：確實(shí)存在這樣的現(xiàn)象。從2003年開(kāi)始，我們著手進(jìn)行手語(yǔ)語(yǔ)言學(xué)研究項(xiàng)目時(shí)，發(fā)現(xiàn)計(jì)算機(jī)領(lǐng)域開(kāi)展手語(yǔ)識(shí)別研究有不少機(jī)構(gòu)，如哈爾濱工業(yè)大學(xué)、中國(guó)科學(xué)技術(shù)大學(xué)和中國(guó)科學(xué)院等都有相關(guān)研究團(tuán)隊(duì)，他們的研究主要集中在手語(yǔ)識(shí)別上，特別是孤立手勢(shì)的識(shí)別。
語(yǔ)言數(shù)據(jù)調(diào)查和分析，是語(yǔ)言學(xué)研究的基本方法，也是語(yǔ)言學(xué)理論研究的基礎(chǔ)。手語(yǔ)語(yǔ)言學(xué)者的研究主要是調(diào)查和描寫(xiě)手語(yǔ)的實(shí)際使用情況，研究手語(yǔ)內(nèi)部結(jié)構(gòu)規(guī)律，語(yǔ)言的發(fā)展變化，以及與有聲語(yǔ)言的聯(lián)系和區(qū)別等。
AI科技評(píng)論：實(shí)地調(diào)查，意思是建設(shè)語(yǔ)料庫(kù)嗎？這對(duì)CV學(xué)者來(lái)說(shuō)如獲珍寶吧？
倪蘭：語(yǔ)料庫(kù)建設(shè)是語(yǔ)言學(xué)的一種重要研究方法。對(duì)于語(yǔ)言學(xué)研究者來(lái)說(shuō)，語(yǔ)料庫(kù)是進(jìn)行語(yǔ)言研究的重要基礎(chǔ)，是觀察語(yǔ)言現(xiàn)象的重要來(lái)源。手語(yǔ)語(yǔ)言學(xué)研究的核心目標(biāo)是通過(guò)語(yǔ)料來(lái)分析手語(yǔ)內(nèi)部結(jié)構(gòu)，建設(shè)手語(yǔ)語(yǔ)料庫(kù)是我們進(jìn)行研究的基礎(chǔ)工作。
境外很多研究機(jī)構(gòu)，包括香港、臺(tái)灣地區(qū)都有公開(kāi)發(fā)布的手語(yǔ)數(shù)據(jù)庫(kù)，但中國(guó)大陸目前還沒(méi)有公開(kāi)發(fā)布的相關(guān)手語(yǔ)數(shù)據(jù)庫(kù)。2017年，我們承擔(dān)了國(guó)家語(yǔ)委和上海語(yǔ)委的手語(yǔ)信息化項(xiàng)目，2018年，完成了部分?jǐn)?shù)據(jù)采集和數(shù)據(jù)庫(kù)建設(shè)的初步工作，并在年底舉辦了研討會(huì)。當(dāng)時(shí)我們邀請(qǐng)了國(guó)內(nèi)計(jì)算機(jī)領(lǐng)域做圖像識(shí)別的專家，對(duì)我們的數(shù)據(jù)庫(kù)提出很多建議。目前，我們的語(yǔ)料庫(kù)已經(jīng)收集了8萬(wàn)多條數(shù)據(jù)，其中包括國(guó)家通用手語(yǔ)詞匯，以及許多手勢(shì)的地方變體，即同一個(gè)手勢(shì)的多種打法。未來(lái)我們希望將全國(guó)的地方手語(yǔ)數(shù)據(jù)都納入這個(gè)語(yǔ)料庫(kù)，成為中國(guó)手語(yǔ)研究的一個(gè)重要的數(shù)據(jù)來(lái)源。
在采集手語(yǔ)數(shù)據(jù)時(shí)，國(guó)際上的通行做法是，聽(tīng)人不能直接參與調(diào)查，因?yàn)樗麄兊膮⑴c可能會(huì)影響聾人自然地使用手語(yǔ)。因此，我們需要培養(yǎng)一批懂語(yǔ)言調(diào)查的聾人研究者，讓他們深度參與語(yǔ)料庫(kù)建設(shè)項(xiàng)目。在過(guò)去幾年中，我們?cè)谏虾＝⒘艘恢F(tuán)隊(duì)，包括年輕的和年紀(jì)較大的聾人，他們幫助我們采集數(shù)據(jù)，并參與各類手語(yǔ)項(xiàng)目。
手語(yǔ)語(yǔ)料庫(kù)的建設(shè)是一項(xiàng)社會(huì)性和系統(tǒng)性的工作，它需要各類人員的參與和合作。這個(gè)過(guò)程不僅是為了收集數(shù)據(jù)，也是為了培養(yǎng)聾人社群中的研究者。如果沒(méi)有來(lái)自這個(gè)群體的研究者，很難獲得有價(jià)值的數(shù)據(jù)，也很難得到聾人群體的廣泛認(rèn)同。
AI科技評(píng)論：手語(yǔ)跨學(xué)科合作是合作哪些方面，遇到過(guò)哪些挑戰(zhàn)性問(wèn)題？
倪蘭：與計(jì)算機(jī)專業(yè)背景的專家合作，我們希望通過(guò)語(yǔ)言學(xué)視角觀察到的規(guī)律和原則來(lái)輔助計(jì)算機(jī)視覺(jué)技術(shù)識(shí)別手語(yǔ)動(dòng)作和意義。
目前的圖像識(shí)別和語(yǔ)言識(shí)別技術(shù)可以在不清楚語(yǔ)言內(nèi)部結(jié)構(gòu)的情況下，通過(guò)大量數(shù)據(jù)集訓(xùn)練讓機(jī)器自動(dòng)學(xué)習(xí)并得出結(jié)果。但在小樣本數(shù)據(jù)情況下，提供關(guān)鍵數(shù)據(jù)的標(biāo)注可能會(huì)有助于減少誤差，提高識(shí)別的準(zhǔn)確率。
手語(yǔ)識(shí)別技術(shù)發(fā)展的挑戰(zhàn)可能在于目前我們還無(wú)法提供大規(guī)模的標(biāo)注數(shù)據(jù)。
國(guó)內(nèi)一些科技公司研發(fā)手語(yǔ)數(shù)字人所依據(jù)的數(shù)據(jù)具有很大的同質(zhì)性，缺乏突破。在這一領(lǐng)域要實(shí)現(xiàn)大的突破，需要有規(guī)范化、標(biāo)準(zhǔn)化，并且應(yīng)用場(chǎng)景豐富、準(zhǔn)確性高的標(biāo)注數(shù)據(jù)，這是我們未來(lái)工作的一個(gè)重要方向。
手語(yǔ)數(shù)據(jù)庫(kù)建設(shè)由于肖像權(quán)、知識(shí)產(chǎn)權(quán)保護(hù)等問(wèn)題，對(duì)外公開(kāi)發(fā)布也是一個(gè)巨大挑戰(zhàn)。如何保證數(shù)據(jù)公開(kāi)不會(huì)被他人濫用，如何設(shè)置權(quán)限來(lái)保護(hù)這些數(shù)據(jù)，同時(shí)確保它們能夠廣泛用于科學(xué)研究和教學(xué)。
AI科技評(píng)論：我知道手語(yǔ)作為一種視覺(jué)表現(xiàn)力極強(qiáng)的語(yǔ)言，其面部表情和頭部動(dòng)作對(duì)于整個(gè)意義的表達(dá)至關(guān)重要，但如果涉及到肖像問(wèn)題，會(huì)有合適的數(shù)據(jù)公開(kāi)方式嗎，也就是說(shuō)與“手語(yǔ)計(jì)算”領(lǐng)域的合作是不是更難？
倪蘭：在參加國(guó)際會(huì)議時(shí)，我們了解到一些處理方法，比如對(duì)眼睛部分打馬賽克，但這樣做會(huì)丟失重要的語(yǔ)義信息，如眼睛開(kāi)合、皺眉等，這些都是手語(yǔ)理解中不可或缺的表情要素，一旦這些部分被模糊處理，就很難準(zhǔn)確傳達(dá)手語(yǔ)的意義。
在數(shù)據(jù)采集中，除了基本的手勢(shì)詞匯，我們還采集了長(zhǎng)篇語(yǔ)料，我們的學(xué)生正在對(duì)這些數(shù)據(jù)進(jìn)行標(biāo)注，目前我們使用的是單機(jī)版的標(biāo)注方式。未來(lái)，我們希望能夠?qū)⑵浒l(fā)展為網(wǎng)絡(luò)版，以便更多人可以共同參與標(biāo)注。
AI科技評(píng)論：我們非常關(guān)注這些前沿技術(shù)是否您的手語(yǔ)跨學(xué)科研究有影響，包括去年推出的大型語(yǔ)言模型ChatGPT，以及今年的文生視頻模型Sora。這些人工智能的最新進(jìn)展，您和團(tuán)隊(duì)有接觸嗎？
倪蘭：我們一直在密切關(guān)注信息技術(shù)領(lǐng)域的快速發(fā)展，也鼓勵(lì)學(xué)生嘗試使用這些技術(shù)，了解相關(guān)的性能。這些技術(shù)從有聲語(yǔ)言角度看，在語(yǔ)言結(jié)構(gòu)和精細(xì)度方面已經(jīng)取得了令人難以置信的效果。但在手語(yǔ)領(lǐng)域，我還沒(méi)有看到特別出色的應(yīng)用。
在美國(guó)，除了紐約城市大學(xué)，還有賓夕法尼亞大學(xué)也在進(jìn)行手語(yǔ)識(shí)別方面的相關(guān)研究。圣地亞哥的索爾克研究所、芝加哥大學(xué)、加勞德特大學(xué)等研究機(jī)構(gòu)也是手語(yǔ)語(yǔ)言學(xué)研究的重要陣地，他們?cè)谡Z(yǔ)言本體研究方面做了大量工作。
AI科技評(píng)論：最后想請(qǐng)問(wèn)您，最希望得到計(jì)算機(jī)科學(xué)家的哪些支持？
倪蘭：計(jì)算機(jī)科學(xué)家需要手語(yǔ)語(yǔ)言學(xué)的標(biāo)注語(yǔ)料，同時(shí)語(yǔ)言學(xué)也希望信息科學(xué)能夠?yàn)檎Z(yǔ)言學(xué)研究提供技術(shù)支持，如語(yǔ)料的切分和機(jī)器的自動(dòng)標(biāo)注。除此之外，兩個(gè)領(lǐng)域的研究者需要共同探討哪些標(biāo)注有助于手語(yǔ)識(shí)別和合成技術(shù)的發(fā)展，這些方面有可能也是我們?nèi)祟愖R(shí)別語(yǔ)義、理解語(yǔ)言、使用語(yǔ)言的重要標(biāo)記。
在本次對(duì)話中，倪教授還分享了手語(yǔ)語(yǔ)言學(xué)研究，如何為計(jì)算機(jī)視覺(jué)技術(shù)在捕捉和分析手語(yǔ)動(dòng)作時(shí)提供理論指導(dǎo)。歡迎同道添加本文作者吳彤微信（icedaguniang ）交流。
｜GAIR live 圓桌預(yù)告
3月18日晚8點(diǎn)～10點(diǎn)，雷峰網(wǎng)將舉辦主題為「AI+手語(yǔ)識(shí)別，技術(shù)革新與應(yīng)用前景」的線上圓桌論壇。
本次論壇嘉賓有，美國(guó)紐約城市大學(xué)田英利教授、上海交通大學(xué)自動(dòng)化系蘇劍波教授、上海大學(xué)計(jì)算機(jī)工程與科學(xué)學(xué)院方昱春教授、上海大學(xué)文學(xué)院倪蘭教授，共同分享他們的見(jiàn)解和研究成果。
“全球人工智能與機(jī)器人大會(huì)”（GAIR）始于2016年雷峰網(wǎng)與中國(guó)計(jì)算機(jī)學(xué)會(huì)（CCF）合作創(chuàng)立的CCF-GAIR大會(huì)，旨在打造人工智能浪潮下，連接學(xué)術(shù)界、產(chǎn)業(yè)界、投資界的新平臺(tái)，而雷峰網(wǎng)“連接三界”的全新定位也在此大會(huì)上得以確立。
經(jīng)過(guò)幾年發(fā)展，GAIR大會(huì)已成為行業(yè)標(biāo)桿，是目前為止粵港澳大灣區(qū)人工智能領(lǐng)域規(guī)模最大、規(guī)格最高、跨界最廣的學(xué)術(shù)、工業(yè)和投資領(lǐng)域盛會(huì)。
GAIR Live作為雷峰網(wǎng)旗下視頻直播品牌，旨在輸出新鮮、深度、原創(chuàng)的大咖訪談與對(duì)話內(nèi)容，打造輻射產(chǎn)、學(xué)、研、投的特色線上平臺(tái)。
｜手語(yǔ)相關(guān)資料
1，《專訪紐約城市大學(xué)田英利教授：用多通道、多模態(tài)的方法「看懂」手語(yǔ)》https://mp.weixin.qq.com/s/jgng2-6tiG9HC9C7FEbMLA
2，《Multi-Modal Multi-Channel American Sign Language Recognition https://gairdao.com/doi/10.1142/S2972335324500017
｜IJAIRR正在邀約論文和專題
《國(guó)際人工智能與機(jī)器人研究期刊》（International Journal of Artificial Intelligence and Robotics Research，簡(jiǎn)稱IJAIRR），是由新加坡GAIR研究院與世界科技出版社聯(lián)合出版的國(guó)際學(xué)術(shù)期刊。
作為全球首本專注于人工智能（AI）、機(jī)器人技術(shù)（Robotics）以及基礎(chǔ)科學(xué)交叉研究（Research）的期刊，IJAIRR致力于成為AI與機(jī)器人領(lǐng)域研究的權(quán)威發(fā)布平臺(tái)。
IJAIRR歡迎各類研究論文、評(píng)論文章、短篇論文、書(shū)評(píng)以及專題（Special Issue）形式的投稿。
我們特別關(guān)注那些在頂級(jí)AI會(huì)議上發(fā)表并現(xiàn)場(chǎng)展示，但缺乏長(zhǎng)期沉淀平臺(tái)的優(yōu)秀論文。為了給這些論文及其作者提供一個(gè)更廣泛的發(fā)表和推廣渠道，IJAIRR現(xiàn)正積極邀約相關(guān)論文投稿。
（1）“如果您在本領(lǐng)域頂級(jí)會(huì)議上發(fā)表的文章（或即將發(fā)表）不超過(guò)一年，我們將協(xié)助您稍作修改后在IJAIRR期刊上發(fā)表。
（2）如果您領(lǐng)導(dǎo)的團(tuán)隊(duì)在頂級(jí)會(huì)議上有多篇論文發(fā)表，并希望在IJAIRR上圍繞特定主題策劃一個(gè)專題（Special Issue），我們誠(chéng)摯邀請(qǐng)您深入討論合作事宜。
（3）如果您是頂級(jí)會(huì)議的組織者，并有意與IJAIRR合作，針對(duì)特定會(huì)議策劃一個(gè)專題（Special Issue），我們也期待與您具體商討合作細(xì)節(jié)。
IJAIRR期待與您攜手，共同推動(dòng)人工智能與機(jī)器人研究的發(fā)展。
聯(lián)系人：IJAIRR創(chuàng)刊主編朱曉蕊博士，xiaorui_zhu@gair.sg
關(guān)于期刊創(chuàng)刊主編等更多信息，可點(diǎn)擊:https://mp.weixin.qq.com/s/gEctQolbEqqf2eVwBAkdoA
關(guān)于雷峰網(wǎng)、GAIR大會(huì)、GAIR研究院（期刊和在線社區(qū)）的詳細(xì)介紹，請(qǐng)閱讀朱曉蕊教授的專訪:https://mp.weixin.qq.com/s/Qn7Gc3rVijQhhK0hTSrgxw
IJAIRR期刊的主頁(yè)鏈接為：https://gairdao.com/journals/ijairr
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見(jiàn)轉(zhuǎn)載須知。
