中文語(yǔ)音處理技術(shù)在數(shù)字助聽(tīng)器中的開(kāi)發(fā)和應(yīng)用
掃描二維碼
隨時(shí)隨地手機(jī)看文章
目前國(guó)外對(duì)助聽(tīng)器研究發(fā)展的一個(gè)熱點(diǎn)則是集中在中國(guó),確切地講是基于對(duì)漢語(yǔ)語(yǔ)言和語(yǔ)音研究,開(kāi)發(fā)相關(guān)的語(yǔ)音識(shí)別技術(shù)和產(chǎn)品。為中心的中文聽(tīng)力學(xué)也不例外。我們已經(jīng)知道聽(tīng)覺(jué)科學(xué)是一門(mén)發(fā)展迅速、知識(shí)更新很快的一門(mén)學(xué)科,它所研究的對(duì)象以人的聽(tīng)覺(jué)為中心,現(xiàn)在我們將介紹和討論科學(xué)家和聽(tīng)力學(xué)家更關(guān)心的是怎樣將聽(tīng)覺(jué)科學(xué)運(yùn)用到中國(guó)人的聽(tīng)覺(jué)和言語(yǔ)實(shí)際中去。
漢語(yǔ)是具有特征化的音調(diào)性語(yǔ)言,與其他以拼音字母為主的語(yǔ)系,如斯拉夫語(yǔ)系等具有很明顯的語(yǔ)音學(xué)差別。這種差別不僅僅在語(yǔ)言特征上非常明確,在具體使用時(shí),區(qū)別也很大。是否不同語(yǔ)系的不同語(yǔ)音特征會(huì)影響聽(tīng)覺(jué)受損患者對(duì)言語(yǔ)的理解,尤其是在使用基于不同語(yǔ)系研究成果制作成的助聽(tīng)器時(shí),這種語(yǔ)音的差異是否起到重要作用,最近已成為學(xué)術(shù)和科研的一個(gè)熱門(mén)課題。比如國(guó)內(nèi)研制的人工耳蝸的一個(gè)特點(diǎn)便是在設(shè)計(jì)其算法時(shí)考慮到中文語(yǔ)音特點(diǎn)。國(guó)外助聽(tīng)器廠商將在近期推出以中文語(yǔ)音為特征算法的助聽(tīng)器。加拿大在中國(guó)的一語(yǔ)音實(shí)驗(yàn)室通過(guò)多年的研究和實(shí)驗(yàn),早在 2000 年運(yùn)用領(lǐng)先的數(shù)字信號(hào)處理 (DSP) 技術(shù),在其數(shù)字助聽(tīng)器中加入中文語(yǔ)音算法,并同時(shí)申請(qǐng)了相關(guān)專利。目前他們率先推出的以中文語(yǔ)音處理技術(shù)為核心的全新數(shù)字助聽(tīng)器 —Intelligia ,在臨床試驗(yàn)中得到受試者的認(rèn)可,初步證明這種新型助聽(tīng)器對(duì)說(shuō)以中文為母語(yǔ)的患者有益處。
目前研究的結(jié)果表明,不同的語(yǔ)系,如漢語(yǔ)和英語(yǔ)有各自特點(diǎn),在聽(tīng)覺(jué)感知過(guò)程中有很大差別。英文和漢語(yǔ)在語(yǔ)音和口語(yǔ)上有重要區(qū)別, Ming-Xi Tsai el al ( 2000 )認(rèn)為漢語(yǔ)和英文語(yǔ)音在結(jié)構(gòu)上特征區(qū)別很大。漢語(yǔ)的詞、字、音節(jié)和聲、韻母分節(jié)含有不同層次的信息,并保持復(fù)雜的關(guān)系。在口語(yǔ)中,漢語(yǔ)發(fā)音差異也很大,在不同會(huì)話條件下,受到這些結(jié)構(gòu)中不同層次信息的影響。
對(duì)中文語(yǔ)音識(shí)別和中文語(yǔ)音音調(diào)的研究表現(xiàn)在人工耳蝸的算法上面。言語(yǔ)處理策略是人工耳蝸幫助患者理解語(yǔ)言核心技術(shù),已有大量研究。但對(duì)于言語(yǔ)聲尤其是聲調(diào)、語(yǔ)調(diào)的研究,比如對(duì)以語(yǔ)調(diào)為基礎(chǔ)的漢語(yǔ)研究還是很少。在最近的一個(gè)試驗(yàn)中,他們用澳大利亞人工耳蝸來(lái)觀察對(duì)漢語(yǔ)語(yǔ)音理解的影響。結(jié)果表明在某些言語(yǔ)處理策略中漢語(yǔ)的使用的理解度要高于其他時(shí)間策略。如果能提高刺激率,加強(qiáng)對(duì)語(yǔ)音和音調(diào)的理解,他們也認(rèn)為不同的言語(yǔ)處理策略對(duì)漢語(yǔ)說(shuō)法也有理解。研究再次證明,漢語(yǔ)應(yīng)該有一定的語(yǔ)音系統(tǒng)處理自己的語(yǔ)言,尤其是對(duì)聽(tīng)障人士尤為重要。
美國(guó)麻省理工學(xué)院研究者 Michael Qin 在其《在噪音背景發(fā)音和音調(diào)的辨認(rèn)》的試驗(yàn)中,對(duì)漢語(yǔ)普通話音調(diào)的辨認(rèn)和噪音的關(guān)系進(jìn)行了研究。他認(rèn)為不同的語(yǔ)言利用不同類型的聲調(diào)使我們口語(yǔ)富于不同的意義,在噪音環(huán)境下這些有意義的聲調(diào)會(huì)受到影響,因此他需要發(fā)現(xiàn)說(shuō)普通話的中國(guó)人怎樣在噪音環(huán)境里辨認(rèn)不同的聲調(diào)。在試驗(yàn)中他使用 6 個(gè)輔元音的音位,同時(shí)使用 4 個(gè)聲調(diào):陰陽(yáng)上去。其結(jié)果表明在信噪比降低的情況下,對(duì)漢語(yǔ)聲調(diào)和元音的識(shí)別受到很大影響,從而影響降低言語(yǔ)的理解能力。因此信噪比影響理解中文很重要的因素。這個(gè)試驗(yàn)對(duì)聽(tīng)覺(jué)康復(fù)和設(shè)計(jì)有針對(duì)性的助聽(tīng)器具有重要意義。
同時(shí),最近美國(guó)成立了一個(gè)綜合性專家研究小組,開(kāi)始研制適合中文語(yǔ)音的助聽(tīng)器。該小組成員包括世界聞名的豪斯耳研究院、香港中文大學(xué)耳鼻喉科等。與上述研究類似。他們認(rèn)為在聆聽(tīng)以聲調(diào)作為識(shí)別語(yǔ)音和語(yǔ)義的語(yǔ)言時(shí),如普通話、廣東話和泰國(guó)語(yǔ)等,可能聽(tīng)覺(jué)更重要的是依靠基頻相關(guān)的信息來(lái)理解語(yǔ)言,這是與別的語(yǔ)言不同的。因此,在研制助聽(tīng)器時(shí),我們應(yīng)該考慮到這些患者的語(yǔ)言特點(diǎn)。
當(dāng)然,筆者最感興趣的是最近由威耳康研究基金 (Wellcome Trust) 贊助的一項(xiàng)題為《中文普通話會(huì)話者在理解語(yǔ)言時(shí)比英文會(huì)話者用腦更多》的試驗(yàn),其目的是使用影像技術(shù)來(lái)觀察和研究中文母語(yǔ)和英文母語(yǔ)說(shuō)話者大腦出現(xiàn)的不同活動(dòng)。主持該項(xiàng)研究的心理學(xué)家索菲斯高特博士發(fā)現(xiàn),當(dāng)英語(yǔ)的受試者聽(tīng)到英文時(shí),其左顳葉變得異常活躍,研究者認(rèn)為這個(gè)區(qū)是把言語(yǔ)聲組合在一起形成獨(dú)立的字詞。但是當(dāng)中文受試者聽(tīng)到普通話時(shí),其左右顳葉同時(shí)活躍起來(lái)。顯然,由于說(shuō)不同語(yǔ)言的受試者用他們大腦的不同區(qū)域?qū)Σ煌Z(yǔ)言的刺激進(jìn)行解碼。這對(duì)我們理解這些理論產(chǎn)生了很大的影響。他們進(jìn)一步認(rèn)為中文受試者的左顳葉處理語(yǔ)音信號(hào),而他們的右顳葉則處理聲調(diào),同時(shí)產(chǎn)生意義。言語(yǔ)聲是非常復(fù)雜的聲音,而正確理解言語(yǔ)傳遞的意思,在這種情況下,大腦會(huì)充分利用說(shuō)話者抑揚(yáng)頓挫的聲調(diào)來(lái)對(duì)其言語(yǔ)進(jìn)行解碼,從而將口語(yǔ)變成有意義的信號(hào)。
大腦聽(tīng)覺(jué)區(qū)域很容易受外部影響,而改變對(duì)聲音的分辯能力。一旦聽(tīng)覺(jué)受到損傷,必需進(jìn)行康復(fù),大腦需要重新連接和編碼。大腦的可塑性是很強(qiáng)的。了解大腦對(duì)不同語(yǔ)言的反應(yīng),可以有效地幫助聽(tīng)覺(jué)患者重新恢復(fù)對(duì)語(yǔ)言的理解。重要的是基于這些研究,我們可以清楚地看到研制出具有中文語(yǔ)音特征的聽(tīng)力康復(fù)設(shè)備。記得在 2002 年北京大學(xué)和中國(guó)殘聯(lián)成立言語(yǔ)聽(tīng)覺(jué)中心的開(kāi)幕式上,鄧樸方先生在發(fā)言中專門(mén)談到:他第一次聽(tīng)說(shuō)中文語(yǔ)音處理特征對(duì)助聽(tīng)器使用者的影響,他認(rèn)為這是一個(gè)重要課題,需做大量工作,而研制出以中文語(yǔ)音為特征的聽(tīng)覺(jué)康復(fù)設(shè)備將會(huì)有重要的意義。根據(jù)國(guó)際確認(rèn)的聽(tīng)損發(fā)病率,中國(guó)有 10 %的人口,即一億三千萬(wàn)人有不同程度聽(tīng)力損失,因此,利用中文語(yǔ)音處理技術(shù)更有效地幫助聽(tīng)殘患者具有非常重要的作用。
更多醫(yī)療電子信息請(qǐng)關(guān)注:21ic醫(yī)療電子