本發明專利技術涉及語言互譯信息處理技術領域,且公開了基于手語的實時互譯裝置、設備及存儲介質,包括手語實時互譯系統,所述手語實時互譯系統包括輔助單元、采集單元、預處理單元、傳輸單元、處理單元、數據庫和輸出單元,輔助單元的輸出端與采集單元的輸入端連接,采集單元的輸出軸與預處理單元的輸入端連接,本發明專利技術通過輔助單元輔助用戶輸入手語動作,并通過輔助單元向用戶展示文字、語音及手語語言信息,便于用戶在手語不精通的狀況下輸入想要表達的內容,且便于不同語言表達或其它語音障礙人員進行手語等語言輸入,方便不同人群使用,提高適用性,并便于將用戶所處的背景環境模糊化,保證用戶動作采集的精準度,從而保證語言轉換的精準度。準度。準度。
【技術實現步驟摘要】
基于手語的實時互譯方法、裝置、設備及存儲介質
[0001]本專利技術涉及語言互譯信息處理
,具體為基于手語的實時互譯方法、裝置、設備及存儲介質。
技術介紹
[0002]語言就廣義而言,是采用一套具有共同處理規則來進行表達的溝通指令,指令會以視覺、聲音或者觸覺方式來傳遞。嚴格來說,語言是指人類溝通所使用的指令-自然語言,所有人都是通過學習從而獲得的語言能力,語言的目的是交流觀念、意見、思想等。語言學就是從人類研究語言分類與規則而發展出來的。研究語言的專家被稱為語言學家,當人類發現了某些動物能夠以某種方式溝通,就誕生了動物語言的概念,到了電腦的誕生,人類需要給予電腦指令,這種“單向溝通”就成了電腦語言,手語是用手勢比量動作,根據手勢的變化模擬形象或者音節以構成的一定意思或詞語,它是聽力障礙或者無法言語的人互相交際和交流思想的一種手的語言,它是“有聲語言的重要輔助工具”,而對于聽力障礙的人來說,它則是主要的交際工具,手語與語言的差別則主要在于語音這個問題上和聾啞人是否以手勢進行思維。
[0003]申請號為201910293198.X公開了一種基于手語的實時互譯方法、裝置、設備及存儲介質,其
技術介紹
中解決的問題為;有語言障礙人士對有語言障礙人士進行交流時常常無法實時進行翻譯,但是其在用戶實際使用時,不便于根據不同類型的語言障礙認識提供不同的語言輔助,以使用戶快速準確輸入想要的內容,存在一定的缺陷。
技術實現思路
[0004]本專利技術提供如下技術方案:基于手語的實時互譯裝置、設備及存儲介質,包括手語實時互譯系統,所述手語實時互譯系統包括輔助單元、采集單元、預處理單元、傳輸單元、處理單元、數據庫和輸出單元,輔助單元的輸出端與采集單元的輸入端連接,采集單元的輸出軸與預處理單元的輸入端連接,預處理單元的輸出端與傳輸單元的輸入端連接,傳輸單元的輸出端與處理單元的輸入端連接,處理單元的輸出端輸出單元的輸入端連接,數據庫的輸出端與處理單元的輸入端連接。
[0005]通過采用上述技術方案;通過輔助單元輔助用戶輸入手語動作,并通過輔助單元向用戶展示文字、語音及手語語言信息,便于用戶在手語不精通的狀況下輸入想要表達的內容,且便于不同語言表達或其它語音障礙人員進行手語等語言輸入,方便不同人群使用,提高適用性,并便于將用戶所處的背景環境模糊化,保證用戶動作采集的精準度,從而保證語言轉換的精準度,通過預處理單元便于對用戶的手語動作輸入過程中產生的無用信息進行篩選,從而使用戶手語動作輸入的更加準確,進而對用戶的手語動作進行優化。
[0006]優選的,所述輔助單元包括背景處理、輔助顯示、智能提示和輔助播報,輔助單元用于用戶在進行手語互譯時輔助用戶手語輸入的規范性和準確性,所述背景處理用于對用戶在進行手語動作輸入時對用戶所述的環境背景進行模糊處理,所述輔助顯示用于采集用
戶手語動作時顯示用戶手語動作及文字信息進行輔助,所述輔助播報用于通過語音播報對部分用戶進行語音提示,所述智能提示用于用戶手動輸入文字,中央處理器自動生成手語動作等其它形式的語言表達形式輔助用戶進行手語互譯。
[0007]通過采用上述技術方案;對用戶輸入手語動作時所述的環境進行馬賽克等模糊處理,避免外部環境雜亂導致手語動作輸入失誤或輸入不正確,便于用戶使用,且對用戶在進行手語動作輸入時對用戶進行文字、語言等輔助提示,以便于用戶快速準確輸入準確的指令,并對用戶進行智能提示,便于用戶實際操作。
[0008]優選的,所述采集單元包括攝像器和動作輔助器,采集單元用于通過攝像器和動作捕捉其對用戶進行手語互譯時的手語動作、環境和文字、語言信息進行采集。
[0009]通過采用上述技術方案;通過采集單元便于采集用戶在輸入手語動作時的手語動作信息、環境信息和文字信息等,便于全面掌握用戶的輸入等周圍信息,保證信息采集的全面性和準確性,通過動作捕捉器保證用戶動作輸入的準確性。
[0010]優選的,所述預處理單元包括信息篩選和動作優化,預處理單元用于對采集單元采集的不全或模糊等信息進行篩選過濾,保留有用動作,使用戶的手語動作得到優化。
[0011]通過采用上述技術方案;通過預處理單元對多余或環境的雜亂信息進行篩選,并保留用戶輸入的有用指令動作,從而對用戶輸入的指令進行優化。
[0012]優選的,所述傳輸單元包括無線局域網或蜂窩網絡等數據傳輸方式,傳輸單元用于對預處理單元處理后的信息數據進行傳輸。
[0013]通過采用上述技術方案;通過多種信息數據傳輸方式對預處理的信息進行傳輸,保證傳輸的穩定性和效率。
[0014]優選的,所述處理單元包括中央處理器,處理單元用于通過中央處理器根據傳輸的信息數據建立手語信息模型,并將建立的手語信息模型與數據庫的手語信息進行對比,并將手語信息根據用戶的實際需求進行語言轉換。
[0015]通過采用上述技術方案;通過處理單元建立用戶手語動作輸入的信息模型,并使建立的模型與數據庫內的信息進行對比,從而明確用戶表達的手語含義,并通過數據庫內的語音儲備知識將用戶輸入的手語信息轉換為用戶需求的語言形式。
[0016]優選的,所述輸出單元包括揚聲器和顯示器,輸出單元用于通過揚聲器和顯示器對轉換的語言信息進行展示。
[0017]通過采用上述技術方案;通過輸出單元對轉換的語音進行文字、語音等語言表達形式,并展示,以便于滿足用戶需求。
[0018]優選的,所述數據庫包括手語信息庫,數據庫用于提供海量手語及多語言信息知識,并向處理單元提供信息知識。
[0019]通過采用上述技術方案;數據庫向處理單元提供海量的語音信息,便于與建立的用戶手語信息進行對比,從而找到用戶用于動作的含義,便于轉換為其它語言形式。
[0020]優選的,基于手語的實時互譯方法,其主要步驟為;
[0021]S1:采集用戶的手語動作及其所處的背景環境;
[0022]S2:采集過程中,通過輔助單元對用戶的手語動作進行校正和優化;
[0023]S3:手語動作校正優化完成后,對用戶輸入手語動作時所處的環境進行馬賽克等模糊處理;
[0024]S4:對采集的用戶手語動作進行預處理,處理用戶的多余動作,對用戶的手語動作進行優化;
[0025]S5:預處理完成后,將預處理完成的用戶手語動作信息進行傳輸;
[0026]S6:手語動作信息傳輸至處理單元,建立用戶手語動作信息模型,并將建立的用戶手語動作信息與數據庫內的手語信息進行對比,并將其轉換為用戶需要的語言表達信息;
[0027]S7:處理單元處理完成后,對轉換的語言表達信息根據用戶需求對其進行多形式及多語言的表達展示。
[0028]有益效果
[0029]與現有技術相比,本專利技術提供了基于手語的實時互譯方法、裝置、設備及存儲介質,具備以下有益效果:
[0030]本專利技術通過輔助單元輔助用戶輸入手語動作,并通過輔助單元向用戶展示文字、語音及手語語言信息,便于用戶在手語不精通的狀況下輸入想要表達的內容,且便于本文檔來自技高網...
【技術保護點】
【技術特征摘要】
1.基于手語的實時互譯裝置、設備及存儲介質,包括手語實時互譯系統,其特征在于:所述手語實時互譯系統包括輔助單元、采集單元、預處理單元、傳輸單元、處理單元、數據庫和輸出單元,輔助單元的輸出端與采集單元的輸入端連接,采集單元的輸出軸與預處理單元的輸入端連接,預處理單元的輸出端與傳輸單元的輸入端連接,傳輸單元的輸出端與處理單元的輸入端連接,處理單元的輸出端輸出單元的輸入端連接,數據庫的輸出端與處理單元的輸入端連接。2.根據權利要求1所述的基于手語的實時互譯裝置、設備及存儲介質,其特征在于:所述輔助單元包括背景處理、輔助顯示、智能提示和輔助播報,輔助單元用于用戶在進行手語互譯時輔助用戶手語輸入的規范性和準確性,所述背景處理用于對用戶在進行手語動作輸入時對用戶所述的環境背景進行模糊處理,所述輔助顯示用于采集用戶手語動作時顯示用戶手語動作及文字信息進行輔助,所述輔助播報用于通過語音播報對部分用戶進行語音提示,所述智能提示用于用戶手動輸入文字,中央處理器自動生成手語動作等其它形式的語言表達形式輔助用戶進行手語互譯。3.根據權利要求1所述的基于手語的實時互譯裝置、設備及存儲介質,其特征在于:所述采集單元包括攝像器和動作輔助器,采集單元用于通過攝像器和動作捕捉其對用戶進行手語互譯時的手語動作、環境和文字、語言信息進行采集。4.根據權利要求1所述的基于手語的實時互譯裝置、設備及存儲介質,其特征在于:所述預處理單元包括信息篩選和動作優化,預處理單元用于對采集單元采集的不全或模糊等信息進行篩選過濾,保留有用動作,使用戶的手語動作得到優化。5.根據權利要求1所述的基于手語的實時互譯裝置、設備及存儲介質,其特...
【專利技術屬性】
技術研發人員:熊鵬航,
申請(專利權)人:武漢灝存科技有限公司,
類型:發明
國別省市:
還沒有人留言評論。發表了對其他瀏覽者有用的留言會獲得科技券。