交流支援裝置以及交流支援方法制造方法及圖紙

本發明專利技術的實施方式涉及交流支援裝置以及交流支援方法。實施方式的交流支援裝置具備事件檢測部、單詞提取部以及單詞選擇部。事件檢測部對從會議參加者的發言的聲音轉換的句子進行解析，而檢測表示基于會話的信息傳遞失敗的事件。單詞提取部從由事件檢測部檢測出事件的句子中提取單詞。單詞選擇部根據傳遞失敗指標來選擇由單詞提取部(15)提取的單詞中成為信息傳遞的失敗原因的單詞，上述傳遞失敗指標根據從包含單詞的句子中檢測出的事件來計算。

【技術實現步驟摘要】
【專利說明】本申請享受2013年12月20在先提出的日本專利申請號2013-264127的優先權，并且將其全部內容引入本申請。
本專利技術的實施方式涉及。
技術介紹
已知如下技術:通過聲音識別將用戶間的會話轉換成文本，并根據需要通過機器翻譯轉換成其他國家語言的文本，而顯示于用戶所使用的終端裝置。該技術例如作為在遠程會議系統等中對參加會議的用戶彼此的交流進行支援的技術是有用的。另外，如果利用該技術，則能夠將轉換成文本的會話的內容例如作為會議的會議記錄進行保存，以后也能夠進行參考。在上述技術中，存在以下情況:當用戶的發言中含有未登記在聲音識別、機器翻譯所使用的辭典中的單詞時，會產生錯誤識別、誤譯，而無法適當地支援用戶彼此的交流。因此，要求適當地檢測出產生錯誤識別、誤譯的單詞，并將正確的單詞登記在辭典中。并且，要求例如從被保存為會議的會議記錄的文本中適當地檢測出產生錯誤識別、誤譯的單詞，并修正為正確的單詞。對于從文本中提取應登記在辭典中的單詞、成為修正對象的單詞的方法進行了各種研究，但現有的方法未將基于會話的信息傳遞的成功與否作為判斷材料，因此難以從交流支援的觀點出發來進行適當的單詞的提取。
技術實現思路
實施方式的交流支援裝置為，使用辭典將用戶間的會話轉換成文本而顯示于終端裝置，該交流支援裝置具備檢測部、提取部以及選擇部。檢測部對與用戶的一次發言相對應的文本單位即句子進行解析，而檢測表示基于會話的信息傳遞失敗的事件。提取部從檢測出上述事件的句子中提取單詞。選擇部根據傳遞失敗指標來選擇由上述提取部提取的單詞中、成為信息傳遞的失敗原因的單詞，上述傳遞失敗指標根據從包含上述單詞的句子中檢測出的上述事件來計算。【附圖說明】圖1是遠程會議系統的概略構成圖。圖2是表示交流支援裝置的功能性構成例的框圖。圖3是示意地表示轉換部所使用的辭典的一例的圖。圖4是表不句子表的一例的圖。圖5是表不句子顯不用UI畫面的一例的圖。圖6是表示事件種類表的一例的圖。圖7是表不事件表的一例的圖。圖8是表不單詞表的一例的圖。圖9是表示單詞修正用UI畫面的一例的圖。圖10是表示交流支援裝置的動作的一例的流程圖。圖11是表示在會議結束后顯示的句子顯示用UI畫面的一例的圖。圖12是表示在變形例中追加的事件種類表的一例的圖。圖13是表示變形例的交流支援裝置的動作的一例的流程圖。圖14是概略地表示交流支援裝置的硬件構成的一例的框圖。【具體實施方式】以下，參照附圖對實施方式的交流支援裝置、交流支援方法以及程序進行詳細說明。以下所示的實施方式是向遠程會議系統的應用例，但能夠應用本專利技術的系統不限于此。(遠程會議系統)圖1是具備實施方式的交流支援裝置的遠程會議系統的概略構成圖。如圖1所示，遠程會議系統構成為，本實施方式的交流支援裝置10、會議參加者所使用的終端裝置20、以及系統管理者所使用的終端裝置30經由通信網絡40連接。交流支援裝置10典型地是實現為具備作為通常的計算機系統的硬件構成(處理器、主存儲部、輔助存儲部、通信接口)的服務器裝置。但是，交流支援裝置10的實現方法不限于該例，也可以實現為在云系統上工作的虛擬機，還可以實現為在終端裝置20、30上工作的應用程序。在本實施方式中，交流支援裝置10實現為經由通信網絡40在終端裝置20,30之間進行基于Web的通信的、具有Web服務器的功能的服務器裝置。會議參加者所使用的終端裝置20例如具備作為軟件而搭載了 Web瀏覽器的PC(個人計算機)主體21、通過內置或者外置而與PC主體21連接的顯示部22、麥克風23以及揚聲器24。除此之外，作為終端裝置20，例如能夠利用平板終端、便攜電話等作為硬件而具備顯示部22、麥克風23以及揚聲器24、作為軟件而搭載了 Web瀏覽器的各種信息處理終端。系統管理者所使用的終端裝置30與會議參加者所使用的終端裝置20為同樣的構成。在本實施方式中，假定為:在將不同語言作為母語的會議參加者之間實施的遠程會議中，利用遠程會議系統。在遠程會議系統中，使用終端裝置20的麥克風23來取得會議參加者的發言。交流支援裝置10通過聲音識別將該發言轉換成文本。并且，將從聲音轉換的文本通過機器翻譯轉換成其他會議參加者的母語的文本。此外，在會議中使用的語言可以是會議參加者各自的母語，也可以構成為，將預先確定的語言作為使用語言、僅使將與該使用語言不同的語言作為母語的會議參加者的發言翻譯成使用語言。在交流支援裝置10中通過聲音識別、機器翻譯而轉換的文本，通過會議參加者所使用的終端裝置20的Web瀏覽器的功能而顯示于顯示部22。在本實施方式中，將與會議參加者的一次發言相對應的文本單位稱為句子。在會議參加者各自使用的終端裝置20的顯示部22上，在會議進行的期間顯示句子顯示用Π畫面。并且，在句子顯示用Π畫面上，每當存在會議參加者的發言時，與該發言相對應的句子被依次顯示。并且，會議參加者的發言被從會議參加者各自使用的終端裝置20的揚聲器24輸出聲音。此外,聲音的共有,可以作為交流支援裝置10的一個功能來實現，也可以利用視頻會議裝置等其他裝置、或者在終端裝置20上工作的應用程序來實現。交流支援裝置10具有將與會議參加者的發言相對應的句子例如與發言的聲音建立關聯地保存的功能。在會議結束后，例如能夠使終端裝置20的顯示部22在句子顯示用UI畫面上顯示被保存的句子，能夠將其利用于會議的回看等。交流支援裝置10對與會議參加者的發言相對應的句子進行解析，并檢測發言的重說、重聽等、推測為基于會話的信息傳遞失敗的狀況。在本實施方式中將這種狀況稱為事件。在信息傳遞失敗時可能產生的幾個發言模式被預先確定為事件，對各個事件賦予傳遞失敗指標，該傳遞失敗指標表示在信息傳遞失敗的情況下該事件發生的程度。之后，交流支援裝置10對于檢測出事件的句子進行語態素分析等而提取單詞，并根據傳遞失敗指標來選擇所提取的單詞中、成為信息傳遞的失敗原因的單詞。并且，交流支援裝置10使單詞修正用UI畫面顯示于會議參加者所使用的終端裝置20、系統管理者所使用的終端裝置30的顯示部22，該單詞修正用UI畫面用于將所選擇的單詞修正為正確的單詞。當從該單詞修正用UI畫面輸入正確的單詞時，交流支援裝置10將該所輸入的單詞登記到聲音識別、機器翻譯所使用的辭典中，或者進行句子的修正。從檢測出事件的句子提取單詞、并選擇成為信息傳遞的失敗原因的單詞而使終端裝置20、30的顯示部22顯示單詞修正用Π畫面的定時，可以是會議中、也可以是會議結束后。(交流支援裝置)接著，關于本實施方式的交流支援裝置10的詳細情況，舉出具體例子來進行說明。圖2是表示交流支援裝置10的功能性構成例的框圖。如圖2所示，交流支援裝置10具備轉換部11、句子管理部12、Π控制部13、事件檢測部14、單詞提取部15以及單詞選擇部16。轉換部11為，對于使用終端裝置20的麥克風23取得的會議參加者的發言，使用辭典D進行聲音識別以及根據需要進行機器翻譯而轉換成文本。聲音識別可以構成為，從由麥克風23輸入的聲音中自動地檢測發聲區間并將其作為單個句子進行聲音識別，也可以構成為，會議參加者例如從句子顯示用UI畫面明示地輸入發聲開始和結束定時并將該區間作為單個句子進行聲音識別。圖3是示意地表示轉換部11所使用的辭典D本文檔來自技高網...

【技術保護點】
一種交流支援裝置，使用辭典將用戶間的會話轉換成文本而顯示于終端裝置，其具備：檢測部，對與用戶的一次發言相對應的文本單位即句子進行解析，而檢測表示基于會話的信息傳遞失敗的事件；提取部，從檢測出上述事件的句子中提取單詞；以及選擇部，根據傳遞失敗指標來選擇由上述提取部提取的單詞中、成為信息傳遞的失敗原因的單詞，上述傳遞失敗指標根據從包含上述單詞的句子中檢測出的上述事件來計算。

【技術特征摘要】
...

【專利技術屬性】
技術研發人員：長健太，加納敏行，
申請(專利權)人：株式會社東芝，東芝解決方案株式會社，
類型：發明
國別省市：日本;JP