聽力判定系統、其方法及其程序的製作方法

2023-05-07 07:37:06

專利名稱：聽力判定系統、其方法及其程序的製作方法
技術領域：
本發明涉及用於判定是否聽清了語音，並且判定是否舒適地聽到了語音的技術。更具體來說，本發明涉及一種聽力判定系統，其用於在助聽器等中對聲音的每個頻率的放大量等進行調整來得到對於各個用戶來說合適大小的聲音的調試(fitting)，同時判定語音清晰度和舒適性。
背景技術：
近年來，伴隨社會的老齡化，老年性的重聽者不斷增加。 而且在年輕人中，由於長時間聽大音量的音樂的機會增加等的影響，音響性的重聽者也不斷增加。此外，伴隨助聽器的小型化/高性能化，用戶對助聽器的佩戴使用的抗拒越來越少。以這些為背景，利用助聽器的用戶不斷增加。助聽器是使用戶難以聽覺辨別的頻率的聲音放大的裝置。佩戴使用助聽器的目的在於，通過對用戶的下降了的聽力進行彌補，使會話的聽覺辨別能力提高。用戶對助聽器所要求的聲音的放大量，根據每個用戶的聽力下降的程度而不同。因此，在開始助聽器的利用之前，首先需要進行每個用戶的聽力判定。在為了利用助聽器而進行的聽力判定中，語音清晰度判定也很重要。「語音清晰度判定」是指，是否聽清了語音的判定。具體來說，是與是否聽清了單音節的語音相關的聽覺辨別能力的判定。「單音節的語音」表示一個元音或輔音與元音的組合(例如
「*，，/ 「憶」 I 「 L·」)。根據非專利文獻1，現有的語音清晰度判定按照以下這樣的步驟進行。首先，利用日本聽覺醫學會所制定的57S式語言表(50個單音節)，或者67S式語言表(20個單音節)，通過一個一個地口頭或⑶再現來讓用戶聽單音節的聲音。接著，讓用戶用講話或記述等方法來回答將所呈現的語音聽取為哪個語音。然後，判定者對語言表和回答進行對照，並計算所有的單音節中被正確地聽取的單音節的比例即正確回答率。該正確回答率是語音清晰度。此外，關於語音清晰度的判定方法，已知專利文獻1、2那樣的技術。在先技術文獻專利文獻專利文獻I JP特開平9-038069號公報專利文獻2 JP特開平6-114038號公報非專利文獻非專利文獻I 助聽器調試的見解」，小寺一興，診斷和治療社，1999年，166頁

發明內容
發明要解決的課題在上述的判定方法中，用戶需要通過講話或記述來進行回答，而且判定者需要通過人工作業來判定用戶的回答的正誤。因此，上述的判定方法無論對於用戶來說還是對於判定者來說都負擔較大，且花費時間。另一方面，若估計長時間使用助聽器，則不僅需要判定語音清晰度，還需要判定佩戴使用時的舒適性。「舒適性判定」是指用戶聽得是否舒適的判定。以往所進行的與舒適性相關的判定是從用戶是否處於不適狀態這樣的角度進行的。例如，在嘈雜得無法忍受的情況下、或聲音小得無法聽見的情況下，用戶口頭向判定者申訴該情況。或者，進行決定最大輸出聲壓水平的不適程度檢查。這難以客觀地判定用戶以怎樣的舒適程度聽到聲音。本發明的目的在於，提供一種用於在短時間內判定語音的聽覺的舒適性的聽力判定系統。並且，本發明的目的在於，提供一種用於同時並在短時間內判定語音清晰度和舒適性的聽力判定系統。解決課題的手段 本發明的聽力判定系統具備生物體信號測量部，其測量用戶的腦波信號；呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音；聽覺刺激呈現部，其用聲音將所決定的所述語音呈現給所述用戶；視覺刺激呈現部，其用文字將所決定的所述語音呈現給所述用戶；按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算；舒適性判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果；和清晰度判定部，其根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果。所述舒適性判定部，也可以基於按照每個所述組進行加法運算而得到的所述事件相關電位，以從所述聽覺刺激呈現部呈現了所述語音的聲音的時刻為起點，在600ms到900ms的範圍內是否具有規定的陽性分量，以及在IOOms到300ms的範圍內是否具有規定的陰性分量，按照每個所述組來判定所述舒適性。所述舒適性判定部，也可以具備陽性分量判定部，其判定按照每個所述組進行加法運算而得到的所述事件相關電位，以從所述聽覺刺激呈現部呈現了所述語音的聲音的時刻為起點，在600ms到900ms的範圍內是否具有規定的陽性分量；陰性分量判定部，其基於在IOOms到300ms的範圍內是否具有規定的陰性分量，來判定所述用戶是否舒適地聽到所述語音；和判定部，其基於所述陽性分量判定部的判定結果、以及所述陰性分量判定部的判定結果，按照每個所述組來判定所述舒適性。所述清晰度判定部，也可以基於按照每個所述語音進行加法運算而得到的所述事件相關電位，以從所述視覺刺激呈現部呈現了所述語音的文字的時刻為起點，在200ms到400ms的範圍內或者約400ms到600ms的範圍內是否具有規定的陽性分量,按照每個語音來判定所述清晰性。在所述語音資料庫中，所述多個語音的每一個，也可以基於預先規定的規則，被分類到所述至少I個組。所述至少I個組也可以是元音的組、有聲輔音的組、無聲輔音的組。在所述語音資料庫中，所述多個語音的每一個，也可以基於誤聽產生概率的大小，被分類到所述至少I個組。
所述呈現語音控制部，也可以決定呈現給所述用戶的語音的呈現次數，在所述語音資料庫中，所述多個語音的每一個，基於語音數被分類到所述多個組，所述呈現語音控制部，根據所述多個組的語音數，來決定所述聽覺刺激呈現部所呈現的聲音的呈現次數、以及所述視覺刺激呈現部所呈現的文字的呈現次數。所述呈現語音控制部，也可以決定呈現給所述用戶的語音的呈現次數，所述聽覺刺激呈現部以及所述視覺刺激呈現部，持續呈現所述語音的聲音以及文字，直到達到由所述呈現語音控制部決定的所述聲音的呈現次數、以及所述文字的呈現次數為止。所述呈現語音控制部，也可以決定呈現給所述用戶的語音的呈現次數，所述呈現語音控制部，也可以決定將呈現給所述用戶的特定的語音呈現多次。所述呈現語音控制部，也可以根據所述用戶的腦波信號的大小來決定呈現次數。所述聽力判定系統也可以還具備聽力判定結果資料庫，該聽力判定結果資料庫保 存從所述舒適性判定部、以及所述清晰度判定部分別輸出的判定結果。所述聽力判定系統，也可以還具備按語音加法運算部，該按語音加法運算部參照所述語音資料庫，按照每個語音對所述事件相關電位進行加法運算，所述清晰度判定部，根據按照每個所述語音進行加法運算而得到的所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性。本發明的其他的聽力判定系統具備生物體信號測量部，其測量用戶的腦波信號；呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音；聽覺刺激呈現部，其用聲音將所決定的所述語音呈現給所述用戶；按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算；和舒適性判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果。本發明的另一個其他的聽力判定系統具備呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音，並且，按照由聽覺刺激呈現部用聲音將所決定的所述語音呈現給所述用戶，由視覺刺激提示部用文字將所決定的所述語音呈現給所述用戶的方式來進行控制；按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組來對生物體信號測量部所測量出的腦波信號的事件相關電位進行加法運算；舒適性判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果；和清晰度判定部，其根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果。本發明的聽力判定方法包含如下步驟測量用戶的腦波信號的步驟；參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音的步驟；用聲音將所決定的所述語音呈現給所述用戶的步驟；用文字將所決定的所述語音呈現給所述用戶的步驟；參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算的步驟；根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果的步驟；和根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果的步驟。本發明的電腦程式，是由設置在聽力判定系統中的計算機執行的電腦程式，所述電腦程式使安裝在所述聽力判定系統中的計算機執行如下步驟接受測量出的用戶的腦波信號的步驟；參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音的步驟；用聲音將所決定的所述語音呈現給所述用戶的步驟；用文字將所決定的所述語音呈現給所述用戶的步驟；參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算的步驟；根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果的步驟；和根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果的步驟。發明的效果
根據本發明，對於測量了針對單音節的語音的聲音呈現的事件相關電位、和針對文字呈現的事件相關電位時的腦波波形，選擇按照語音清晰度和舒適性判定的每次判定進行加法運算的波形，從而能夠減少聲音和文字的呈現次數。由此，能夠在短時間內進行基於腦波的聽力判定，因此能夠實現對於用戶來說負擔較少的聽力判定。此外，根據本發明，利用針對單音節的語音的聲音呈現的事件相關電位來進行舒適性的判定。通過不進行語音清晰度的判定，能夠在更短時間內進行聽力判定(特別是舒適性判定)。


圖I是表示在本發明的聽力判定系統中，在進行舒適性判定以及清晰度判定時所利用的腦波和聲音呈現以及文字呈現的定時的圖。圖2(a)是表示聲音和變形的6個條件的圖，(b)是表示每個頻率的增益調整量的圖。圖3(a)是表示國際10-20法的電極位置的圖，(b)是表示在本實驗中安裝了電極的電極配置的圖。圖4是表示腦波測量實驗的實驗步驟的概要的圖。圖5是表不一次試行的步驟的流程圖。圖6是表示與努力性相關的每個參加者的主觀判定的結果的圖。圖7是表示與嘈雜度相關的每個參加者的主觀判定的結果的圖。圖8(a)是基於與努力性相關的主觀判定對頭頂部(Pz)的以聲音呈現為起點的事件相關電位進行了總加法平均而得到的波形圖，(b)是表示計算每次抽樣的P值而得到的結果的圖。圖9是基於與嘈雜度相關的主觀判定對在頭頂部(Pz)以聲音刺激為起點的事件相關電位進行了總加法平均而得到的波形圖。圖10是表示實驗步驟的概要的圖。圖11是表示條件(I) (3)的每一個條件下的每個頻率的增益調整量的圖。圖12是表示一次試行的步驟的流程圖。圖13是表示按照絕對不一致/絕對一致的每個主觀判定來對頭頂部的電極位置(Pz)上的事件相關電位進行總加法平均而得到的結果的圖。圖14是表示針對3個判定項目，使加法運算次數變化時的識別率的變化的圖。圖15是對針對頻率的每個音素的聽力水平進行繪製而得到的圖。圖16是表示按照上述方式將67S式語言表的20個語音分組後的例子的圖。圖17是表示本申請發明者們所總結的判定方法的關係的圖。圖18是表示實施方式I的聽力判定系統100的構成以及利用環境的圖。圖19是表示實施方式I的聽力判定裝置I的硬體構成的圖。圖20是實施方式I的聽力判定系統100的方框構成圖。 圖21是表示保存在語音DB12中的資料庫的一例的圖。圖22是表示清晰度判定部8的構成的圖。圖23是表示舒適性判定部9的構成的圖。圖24是表示在聽力判定系統100中進行的處理的步驟的流程圖。圖25是表示圖24的步驟S18的詳細的處理步驟的流程圖。圖26是表示圖24的步驟S19的詳細的處理步驟的流程圖。圖27是表示關於清晰度的判定結果、以及將語音分組時的每個組的舒適性的判定結果的一例的圖。圖28是表示重複特定的組的語音(元音的「 7 」)來將語音分組時的每個組的舒適性的判定結果的一例的圖。圖29是表示按照每個單音節的單詞，對努力性、嘈雜度以及清晰度進行判定而得到的結果的一例的圖。圖30是實施方式2的聽力判定系統101的方框構成圖。圖31是表示在實施方式2的聽力判定系統101中進行的整體的處理步驟的流程圖。圖32是表示實施方式3的助聽器調整系統103的構成的圖。圖33是表示存儲在調整量DB301中的數據的例子的圖。圖34是表示存儲在調整量DB301中的、用於對助聽處理進行調整的信息的例子的圖。圖35是表示在助聽器調整系統103中進行的整體的處理步驟的流程圖。
具體實施例方式以下，參照附圖，對本發明的聽力判定系統的實施方式進行說明。本發明的聽力判定系統，用於將語音聽取時的用戶狀態分為是否聽覺辨別出了語音、和用戶以怎樣的舒適程度聽取了語音，並根據腦波來判定該用戶狀態。例如，如圖I所示，聽力判定系統是組合了舒適性判定和語音清晰度判定的系統。不過，也可以不進行語音清晰度判定，只進行舒適性判定。舒適性判定，通過用聲音呈現單音節的語音並讓用戶對聲音進行聽覺辨別的設定，將以聲音呈現為起點的用戶的腦波信號的事件相關電位作為指標來進行舒適性判定。語音清晰度判定，通過在用聲音呈現了單音節的語音之後呈現文字並讓用戶判斷聲音呈現與文字呈現是否一致的設定，將以文字呈現為起點的用戶的腦波信號的事件相關電位作為指標來進行語音清晰度判定。在此「事件相關電位」是指，作為腦波的一部分的、在時間上與外在或者內在的事件相關聯而產生的腦的一時性的電位變動。在本說明書中，說明舒適性和語音清晰度能夠根據腦波的事件相關電位來進行判定。首先，說明為了驗證舒適性判定和語音清晰度判定分別能夠根據怎樣的腦波分量來實現，而由本申請發明者們實施的腦波測量實驗的詳細情況，之後，說明實施方式。I.本申請發明者們所實施的實驗本申請發明者們認為除了語音清晰度判定以外還需要舒適性判定。後述的實驗的結果，本申請發明者們想到，舒適性判定能夠分離為如下兩個要素(I)表示進行多大的努力來聽覺辨別出了語音的「努力性」；以及⑵表示感到語音有多嘈雜的「嘈雜度」。這是對後述的語音清晰度曲線的測定時的用戶狀態進行詳細分析後的結果，而首次得到的結論。以下，具體地進行說明。
在語音清晰度判定中，按照每個語音用〇/X來判定是否聽覺辨別出了聲音，並將聽覺辨別出的語音的數量除以判定對照的語音數(67S式語言表的情況下為20)來求出。前述的「語音清晰度曲線」是針對多個聽力水平，對該語音清晰度進行測定，並表示了其結果的曲線。語音清晰度判定所得到的判定結果是聽覺辨別的正確回答率，因此反映了是否聽覺辨別出了聲音，但沒有反映在語音聽取時用戶處於怎樣的狀態。但是，在聽覺辨別出了聲音的狀況下，存在舒適地實現了聽覺辨別的情況、和雖然實現了聽覺辨別但不適的情況。語音清晰度判定是在助聽器銷售店實施的短時間的判定。因此，判定中的用戶，最大限度地努力想要聽覺辨別出語音聲音。此外，因為用戶是否感覺到嘈雜不是判定對象，所以只要不是無法忍受的嘈雜度，即使稍微感到嘈雜，用戶也會忍耐來完成判定課題。在日常性地佩戴使用助聽器的情況下，總是維持最大限的努力來聽取會話是很困難的。而且，因為助聽器的佩戴使用會持續很長時間，所以需要長時間地忍受嘈雜，對於用戶來說成為負擔。鑑於這些狀況，本申請發明者們認為，作為語音聽取時的用戶狀態，應區分不需要努力或者忍耐嘈雜的情況、和需要努力或者忍耐嘈雜的情況來進行判定。並且，這些特定為語音聽取時的舒適性的要素。努力性和嘈雜度是完全不同的腦內處理，因此存在通過腦波的測定能夠對各自進行區分來判定的可能性。因此，本申請發明者們，為了特定實現語音清晰度判定和舒適性判定的腦波的特徵分量而實施了以下的兩種實驗。首先，實施了如下腦波測量實驗(腦波測量實驗I):通過用聲音呈現單音節的語音並讓用戶想像與聲音對應的語音的設定，以聲音呈現為起點對事件相關電位進行測量，之後作為針對語音的舒適性，進行與「努力性」和「嘈雜度」相關的主觀報告。並且，實施了如下腦波測量實驗(腦波測量實驗2):通過用聲音和文字依次呈現單音節的語音的設定，以文字呈現為起點來測量事件相關電位。在腦波測量實驗I中，基於與努力性/嘈雜度相關的主觀報告，分別對事件相關電位進行了加法平均。在腦波測量實驗2中，基於在實驗的前後所取得的與嘈雜度相關的主觀報告，對事件相關電位進行了加法平均。在腦波測量實驗2中，基於在實驗中所取得的聲音與文字的一致/不一致，對事件相關電位進行了加法平均。以下總結上述兩種事件相關電位實驗的結果。腦波測量實驗I的結果，發現了 在以聲音刺激為起點的事件相關電位中，與對聲音聽覺辨別的自信度高的情況相比，在自信度低的情況下，在頭頂部引起了潛伏期約750ms的陽性分量。此外，發現了 與上述陽性分量相獨立，伴隨刺激聲音的聲壓水平的增加，潛伏期約200ms的陰性分量的振幅增大。腦波測量實驗2的結果，發現了 在以文字刺激為起點的事件相關電位中，與聲音的聽覺辨別度高的情況相比，在聽覺辨別度低的情況下，在頭頂部引起潛伏期約500ms的陽性分量，與聲音的聽覺辨別度低的情況相比，在聽覺辨別度高的情況下，在頭頂部引起潛伏期約300ms的陽性分量。在此的「潛伏期」是表示以呈現了聲音刺激的時刻為起點，到出現陽性分量或陰性分量為止的時間。 根據這些確認以及發現，看出了 (1)努力性的判定，能夠根據與聲音的聽覺辨別自信度的對應，通過以呈現了聲音的時刻為起點的事件相關電位的潛伏期約750ms的陽性分量的有無來判定，(2)嘈雜度的判定，能夠根據潛伏期約200ms的陰性分量的有無來判定，(3)語音清晰度，能夠根據以呈現了文字的時刻為起點的事件相關電位的潛伏期約300ms的陽性分量、和潛伏期約500ms的陽性分量的有無來判定。通過本方法，能夠在語音清晰度判定的同時，客觀、定量地實現關於在該語音聽取時是否進行了努力/是否感到了嘈雜的判定。以下，對本申請發明者們為了實現聽力判定而實施的腦波測量實驗的詳細情況進行說明。1.1.腦波測量實驗I (與舒適性相關的實驗)在腦波測量實驗I中，調查了在聲音呈現後所取得的與努力性以及嘈雜度相關的主觀報告、和以聲音為起點的事件相關電位之間的關係。以下，參照圖2至圖9，說明腦波測量實驗的實驗設定以及實驗結果。實驗參加者是具有正常的聽力的大學生/研究生15名。作為刺激而呈現的語音聲音，從容易聽錯的無聲輔音中採用了日本聽覺醫學會所制定的67S式語言表的8個音('>、m夕、^、卜、〃)。為了對具有正常的聽力的參加者操作作為舒適性的要素的「努力性」和「嘈雜度」，使用了調整了頻率增益的語音聲音。「頻率增益」意味著多個頻帶的每一個的增益(電路的增益、放大率)。在頻率增益的調整中，設定了 3種聲壓(大Large、中Middle、小Small) X2種變形(無Flat、有Distorted)的共計6個條件。具體來說,如以下的(I) (6)所示。關於條件的記載，在本說明書中，例如聲壓大且無變形，取Large和Flat的首字母，記述為LF條件等。(I)LF(Large Flat)條件作為聲壓大且容易聽覺辨別的聲音，在所有的頻帶中使增益提高了 20dB。(2)LD(Large Distorted)條件作為聲壓大但難以聽覺辨別的聲音，以MD條件為基礎整體提高了 20dB。(3)MF(Middle Flat)條件作為聲壓大且容易聽覺辨別的聲音，沒有進行頻率增益的加工。(4)MD(Middle Distorted)條件作為難以聽覺辨別的聲音，對LF條件的聲音將250Hz-16kHz的頻率的增益逐漸調整(降低)至_30dB。(5)SF(SmalI Flat)條件作為聲壓小但容易聽覺辨別的聲音，在所有的頻帶中將增益降低了20dB。(6)SD(Small Distorted)條件作為聲壓小且難以聽覺辨別的聲音，以MD條件為基礎整體降低了 20dB。
圖2 (a)表示聲音和變形的6個條件。此外，在圖2(b)中，示出每個頻率的增益調整量。使高頻的頻率增益降低的理由是為了模擬作為高齡重聽的典型的模式的高音重聽型。聲音刺激從頻率特性平緩(flat)的揚聲器呈現。腦波從頭皮上的？2、02、？2、03、(4(國際10-20法)、左右太陽穴、右眼上下開始，以右乳突骨為基準進行了記錄。「乳突骨」是指·，耳朵背面的耳根下部的頭蓋骨的乳樣突起。圖3 (a)表示國際10-20法(10-20System)的電極位置，圖3(b)表示在本實驗中安裝了電極的電極配置。抽樣頻率為200Hz，時間常數為I秒。脫機的情況下施以l-6Hz的數字帶通濾波器。作為針對聲音呈現的事件相關電位，以呈現了聲音的時刻為起點提取了 -200ms到IOOOms的波形。在此，「-200毫秒」是指，呈現聲音的時刻的200毫秒前的時間點。圖4表示腦波測量實驗的實驗步驟的概要。首先，在步驟A中呈現了將頻率增益調整為6個條件的單音節的聲音。所呈現的聲音的詳細情況見後述。接著在步驟B中，讓參加者聽聲音，並記錄與聽取的聲音相對應的文字。不改變呈現聲音的條件，僅使語音的種類變化。將步驟A和B反覆試行5次。然後在步驟C中，讓參加者進行針對在步驟A中所呈現的聲音的、與努力性/嘈雜度等相關的主觀判定。主觀判定利用觸摸面板，通過視覺模擬量表(visual analog scale) (100個等級判定)進行。將上述的步驟A到步驟C作為I個模塊，反覆了 12個模塊(共計60次試行)。按照每個模塊使呈現聲音的聲壓和變形的條件以隨機的順序變化。圖5是表不一次試行的步驟的流程圖。在步驟Sll中，將單音節的聲音呈現給實驗參加者。在步驟S12中，參加者聽單音節的聲音並想像相對應的文字。在步驟S13中，參加者記錄針對所聽取的聲音的文字。在步驟S14中，對聲音被呈現的次數進行計數。呈現次數到4次為止返回S11。當呈現次數為5次時進入S15，並將呈現次數復位。在步驟S15中參加者對在步驟Sll中聽取的聲音進行主觀的回答。以下，對主觀判定結果的分布和閾值的設定進行說明。首先，示出主觀判定的結果。基於主觀判定結果，對通過後述的方法決定的每個參加者基於閾值進行了努力性/嘈雜度的有無的標籤設定。以下，將該主觀判定的標籤作為參加者的狀態。圖6是與努力性相關的每個參加者的主觀判定的結果。示出了相對於全部試行的比例。圖6中的實線是主觀判定結果的分布，虛線表示對主觀判定(努力性高、努力性低)進行了分割的閾值。由於主觀判定的個體差異較大，因此基於每個人的判定結果(視覺模擬量表的I 100)的次序而決定了閾值。具體來說，將個人內的判定結果的次序位於中央的值作為閾值。其中，判定結果相同的判定作為相同的主觀判定(努力性高、努力性低)來處理。圖7是與嘈雜度相關的每個參加者的主觀判定的結果。顯示了相對於全部試行的比例。圖7中的實線表示主觀判定結果的分布，虛線表示對主觀判定(嘈雜、不嘈雜)進行了分割的閾值。與努力性相同，由於主觀判定的個體差異較大，因此本申請發明者們按照每個人基於判定結果(視覺模擬量表的I 100)的次序而決定了閾值。具體來說，個人內的判定結果的次序，從判定結果較大的一方將3分之I作為嘈雜，將除此之外作為不嘈雜，而設定了閾值。其中，判定結果相同的判定作為相同的主觀判定(嗜雜/不嗜雜)來處理。接著，說明與努力性相關的實驗結果。以下，說明事件相關電位的結果。首先，示出基於努力性的有無進行了加法平均後的結果。圖8(a)是基於與努力性相關的主觀判定，對頭頂部(Pz)的以聲音呈現為起點的事件相關電位進行總加法平均後的波形。加法平均基於上述測量實驗的全部6個條件下的每個模塊的與努力性相關的主觀判定而進行。圖8 (a)的橫軸為時間，單位是ms，縱軸為電位，單位是μ V。從圖8(a)所示的量表(scale)可知，曲線的下方向與正(陽性)相對應，上方向與負(陰性)相對應。圖8(a)所示的虛線是判定為努力性低的情況下的加法平均波形，實線是判定為努力性高的情況下的加法平均波形。根據圖8(a)可知，與語音聽取時的努力性低的情況(虛線)相比，在努力性 高的情況(實線)下，在潛伏期600-900ms出現了陽性分量。試著觀察每個主觀判定的600-900ms的區間平均電位，在努力性低的情況下為L 99 μ V，在努力性高的情況下為2. 73 μ V0對區間平均電位進行t檢定後的結果，存在10%的水平的顯著差異。圖8(b)是對每次抽樣的P值進行計算而得到的結果。根據圖8(b)可知，在以聲音刺激為起點約600-900ms的時間帶中，與其他時間帶相比，P值較小。因此，可以說，語音聽取的努力性，存在反映到以聲音呈現為起點潛伏期約600-900ms的陽性電位中的可能性。對從Oms到IOOOms的所有的抽樣的每一個實施了 t檢定的結果，主觀判定的差異所導致的顯著差異持續了 15ms 以上的時間帶為 420-445ms、655-670ms、730-745ms、775-830ms(p < · 05)。接著，說明與嘈雜度相關的實驗結果。首先，示出基於嘈雜度的有無進行了加法平均的結果。圖9是基於與嘈雜度相關的主觀判定對在頭頂部(Pz)以聲音刺激為起點的事件相關電位進行了總加法平均的波形。加法平均基於上述測量實驗的全部6個條件下的、每個模塊的與嘈雜度相關的主觀判定而進行。圖9的橫軸為時間，單位是ms，縱軸為電位，單位是μ V。從圖9中所示的量表可知，曲線的下方向與正(陽性)相對應，上方向與負(陰性)相對應。圖9中所示的實線是用戶通過主觀判定感覺到「嘈雜」的情況下的總加法平均波形，虛線是用戶通過主觀判定感覺到「不嘈雜」的情況下的加法平均波形。根據圖9可知，與判定為不嘈雜的虛線相比，在判定為嘈雜的實線中，在潛伏期約200ms所引起的陰性分量(NI分量)的潛伏期較短。每個參加者的NI分量的潛伏期，在嘈雜情況下為195ms，在不嘈雜情況下為240ms。對潛伏期進行了 t檢定的結果，看到了顯著差異(P < . 05)。此外，每個參加者的潛伏期200ms-300ms的區間平均電位，在嘈雜情況下為O. 14 μ V，在不嘈雜情況下為-I. 38 μ V。對潛伏期200ms-300ms的區間平均電位進行了 t檢定的結果，嘈雜的情況下的區間平均電位非常大(P < . 05)。因此，以聲音呈現為起點的NI分量的潛伏期、和以聲音呈現為起點約200-300ms的陰性分量的平均電位反映嘈雜度，存在能夠作為語音聽取時的嘈雜度的指標來利用的可能性。對Oms-lOOOms的所有的抽樣的每一個實施了 t檢定的結果，主觀判定的差異所導致的顯著差異持續了 15ms以上的時間帶為 50_70ms、155-175ms、225-290ms、920_935ms。I. 2.腦波測量實驗2 (與語音清晰度相關的實驗)在腦波測量實驗2中，本申請發明者們調查了語音清晰度與文字呈現後的事件相關電位之間的關係。以下，參照圖10至圖13，對腦波測量實驗2的實驗設定以及實驗結果進行說明。實驗參加者是具有正常的聽力的大學生/研究生5名。腦波從圖3(a)所示的頭皮上的？2、(^、？2、03、(4(國際10-20法)開始以右乳突骨為基準進行了記錄。抽樣頻率為200Hz，時間常數為I秒。脫機的情況下施以O. I-6Hz的數字帶通濾波器。作為針對文字呈現的事件相關電位，以呈現了文字的時刻為起點提取了從-IOOms到IOOOms的波形。事件相關電位的加法平均，基於在腦波測量實驗3中取得的按下按鈕的結果(絕對一致/絕對不一致)而進行。圖10是表示實驗步驟的概要的圖。首先，在步驟E中呈現了單音節的聲音。語音從容易聽錯的少行/ 7行、9行/ Y行、力行/々行中選擇。按照語音聽取時的聽取容易度變化的方式，呈現了將頻率增益變為 3個等級的下述3個條件的聲音。(I)無增益調整的條件呈現了無頻率增益調整的聲音。(2)增益小的條件呈現了將250Hz-16kHz的頻率的增益逐漸調整(降低)至-25dB的聲音。(3)增益大的條件呈現了將250Hz-16kHz的頻率的增益逐漸調整(降低)至-50dB的聲音。預先指示實驗參加者聽聲音並想像相對應的文字。圖11表示條件(I) (3)的每個條件下的每個頻率的增益調整量。使高頻的頻率增益降低的理由，是為了再現高齡者的重聽的典型模式，對聽力正常者也模擬與高齡重聽者的聽覺難度同等的聽覺。接著在圖10的步驟F中讓實驗參加者按下鍵盤的空格鍵。通過由參加者按下按鈕，從而步驟進入到下一個步驟G。該步驟F是為了按照參加者的步調來呈現步驟G的文字刺激而附加的。在步驟G中在顯示器上呈現了一個文字。按照使具有正常的聽力的參加者感到不一致的方式，以50%的概率呈現了與在步驟E中呈現的聲音不一致的文字。不一致的文字，將容易聽錯的於行和7行、9行和Y行、力行和夕行作為對，選擇了元音一致但發音不同的行的文字。例如，在步驟E中呈現了「々」的情況下，在步驟G中作為一致條件呈現了「令」，作為不一致條件呈現了 「主」。在此情況下，若參加者正確地聽取了聲音，則對於「々」的呈現將會感到符合預期，對於「主」的呈現將會感到不符合預期。步驟H為了確認參加者對於在步驟E中呈現的聲音和在步驟G中呈現的文字感到了多大的不一致而設置。在感到絕對一致的情況下使其按下鍵盤的數字5，在感到大概一致的情況下使其按下4，在不知道的情況下使其按下3，在感到大概不一致的情況下使其按下2，在感到絕對不一致的情況下使其按下I。本申請發明者們，進行了將步驟E到步驟H反覆試行108次的實驗。在本實驗中，呈現語音使用^ · f / Y · 9 /力·夕行的各3個音，針對這些語音分3個等級進行了增益調整(共計54種)。圖12是表示一次試行的步驟的流程圖。在該流程圖中，為了說明的方便，記載了裝置的動作和實驗參加者的動作這兩者。在步驟S21中將單音節的聲音呈現給實驗參加者。
在步驟S22中參加者聽單音節的聲音並想像相對應的文字。在步驟S23中參加者按下作為「下一步」按鈕的空格鍵。步驟S24是以步驟S23為起點將與聲音一致或不一致的文字呈現於顯示器的步驟。聲音和文字一致的概率為50%。因此，聲音和文字不一致的概率也為50%。在步驟S25中參加者確認在步驟S22中想像的文字與在步驟S24中呈現的文字是
否一致。在步驟S26中參加者用I到5的數字鍵來回答在步驟S26中感到了多大的一致/ 不一致。圖13表示按照絕對不一致/絕對一致的每個主觀判定對頭頂部的電極位置(Pz)上的事件相關電位進行了總加法平均而得到的結果。將作為刺激而呈現了文字的時刻設為Oms,將-100到IOOOms的事件相關電位用於計算。圖13的橫軸為時間，單位是ms,縱軸為電位，單位是μν。曲線的下方向對應於正(陽性)，上方向對應於負(陰性)。使-IOOms到Oms的平均電位與O相一致來進行了基線校正。圖13所示的實線，是參加者感到不一致的情況下的事件相關電位的加法平均波形，虛線是參加者感到一致的情況下的事件相關電位的加法平均波形。根據圖13可知(1)與參加者感到不一致的實線相比，在呈現參加者感到一致的虛線中，在以潛伏期200ms到400ms為中心的範圍內出現了陽性分量；以及⑵與參加者感到一致的虛線相比，在呈現參加者感到不一致的實線中，在以潛伏期500ms到600ms為中心的範圍內出現了陽性分量。對Oms到IOOOms的所有抽樣的每一個實施了 t檢定的結果，上述語音清晰度的差異所導致的顯著差異(P < . 05)持續了 20ms以上的時間帶，為270ms-390ms和450ms-540sms。根據這些腦波測量實驗的結果，示出了存在通過觀察特定的潛伏期的事件相關電位分量能夠判定(I)努力性、(2)嘈雜度、(3)語音清晰度的可能性。接著，說明識別率與加法運算次數之間的關係。本申請發明者們為了將基於上述實驗而發現的分量用於判定，進行了用於確定必要的加法運算次數的腦波數據的分析。對針對用於進行各判定的3種事件相關電位使加法運算次數依次增加時的識別率進行了調查的結果，發現了在將一定的識別率(例如80% )的達成作為前提條件時(I)每個判定項目所需要的加法運算次數有很大不同；(2)語音清晰度判定用比現有腦波所需要的加法運算次數(20次)少的加法運算次數即可；(3)在舒適性判定中，需要比現有腦波所需要的加法運算次數(20次)更多的加法運算次數。以下，說明對3種判定項目(努力性、嘈雜度、語音清晰度)進行的分析的詳細情況。關於努力性，利用在腦波測量實驗I中測量出的事件相關電位，對主觀報告的「努力性高/努力性低」進行了識別。首先，從各「努力性高/努力性低」條件下的全部試行的波形中隨機取出加法運算次數個波形，並進行了加法平均。本申請發明者們針對各條件作成了 20個波形的該加法運算波形。接著，根據加法運算波形來計算在上述實驗中判定為存在顯著差異的區間(600ms-900ms)的平均電位，並作為特徵量。此外，在各「努力性高/努力性低」條件下的總加法平均波形中也計算同樣的區間的平均電位，並將該平均值作為閾值。然後，在對特徵量進行計算而得到的結果比閾值大時識別為「努力性高」、比閾值小時識別為「努力性低」。將此時的針對全部波形的識別結果的正解數的比例作為識別率。關於嘈雜度，利用在腦波測量實驗I中測量出的事件相關電位，對主觀報告的「嘈雜/不嘈雜」進行了識別。首先，從各「嘈雜/不嘈雜」條件下的全部試行的波形中隨機取出加法運算次數個波形，並進行了加法平均。本申請發明者們針對各條件作成了 20個波形的該加法運算波形。接著，根據加法運算波形來計算在上述實驗中判定為存在顯著差異的區間(200ms 300ms)的平均電位和NI潛伏期，並將它們作為特徵量(二維)。在此，說明針對這些特徵量區分「嘈雜/不嘈雜」的識別界線。在識別界線的計算中，使用了總加法平均波形。針對與特徵量作成時同樣的區間計算了各「嘈雜/不嘈雜」條件下的總加法平均波形的平均電位和NI潛伏期。像這樣在「嘈雜/不嘈雜」條件下計算出·的平均電位和NI潛伏期，在電位-時間的曲線中被繪製為「點」。此時，考慮通過這2點的直線，將通過該直線的中點的垂線作為識別界線。並且，在對特徵量進行計算而得到的結果位於識別界線的上方時識別為「嘈雜」，位於下方時識別為「不嘈雜」。將此時的針對全部波形的識別結果的正解數的比例作為識別率。接著，說明語音清晰度的判定處理。關於語音清晰度，利用在腦波測量實驗2中測量出的事件相關電位，對主觀報告的「絕對一致/絕對不一致」進行了識別。首先，從各「絕對一致/絕對不一致」條件下的全部試行的波形中隨機取出加法運算次數個波形，並進行了加法平均。針對各條件作成了 20個波形的該加法運算波形。接著，根據加法運算波形計算在上述實驗中判定為存在顯著差異的區間(270ms-390ms、450ms-540ms)的平均電位，並將其差作為特徵量。此外，在各「絕對一致/絕對不一致」條件下的總加法平均波形中也對同樣的區間的平均電位差進行計算，並將其平均值作為閾值。在識別中利用前述的閾值，在對特徵量進行計算而得到的結果比閾值大時識別為「絕對一致」，比閾值小時識別為「絕對不一致」。將此時的針對全部波形的識別結果的正解數的比例作為識別率。實驗的結果，本申請發明者們，得到了與加法運算次數和識別率的關係相關的以下這樣的數據。圖14表示針對以上的3個判定項目，使加法運算次數變化時的識別率的變化。圖14的識別率是重複了 100次上述計算時的平均值。根據圖14，雖然由於被實驗者數較少因此能夠看到稍微的變動，但基本上在所有的判定項目中若橫軸的加法運算次數增力口，則識別率提高。不過，努力性可以說即使增加次數，識別率也難以上升。另一方面，若關注每個判定項目的識別率，則可以看出各自的加法運算次數與識別率的關係不同。語音清晰度在加法運算次數為5次時識別精度達到80%，與此相對，嘈雜度在加法運算次數為20次時識別精度為70%。並且，關於努力性的識別精度，可以說即使加法運算次數更多也不會達到語音清晰度和嘈雜度的識別精度。實驗的結果，本申請發明者們發現了這樣的特性。作為能夠看到該特性的理由，可以考慮腦波分量的大小的差異。在圖13所示的語音清晰度的識別中使用的區間的電位差(圖13中的表示為「約6 μ V」、「約2. 5 μ V」的電位差)、與圖8和圖9所示的為了識別舒適性而使用的區間的電位差(在各個圖中表示為「約I μ V」的電位差)存在很大不同。
作為其理由，可以列舉以下2個理由。首先，作為第一個理由，可以考慮刺激的種類的差異。因為語音清晰度的判定是對視覺刺激的反應，所以一般來說容易做出比對聽覺刺激的反應更大的反應且腦波分量變大。與此相對，舒適性(「努力性」以及「嘈雜度」)是對聽覺刺激的反應，因此可以認為腦波分量的大小與對視覺刺激的反應相比變小。作為另一個理由，可以考慮判定內容的差異。語音清晰度是聽覺辨別出的語音與所呈現的文字是否一致這種能夠明確地判斷的判定內容。與此相對，舒適性是是否舒適這種曖昧的判定。因此，可以認為語音清晰度判定與舒適性判定相比腦波分量變大。因此，存在本次實驗所得到的識別精度根據識別方法等而波動的可能性。但是，可以認為語音清晰度和舒適性的識別精度的順序關係不會因為刺激的種類和腦波分量而發生變化。在此，考慮每個判定項目的必要加法運算次數。必要加法運算次數根據加法運算次數與識別率的關係來決定。例如，若假設在語音清晰度判定中需要80%的識別精度，則此時的必要加法運算次數為5次。這樣，必要加法運算次數由每個判定項目所需的識別精度來決定。因此，必要加法運算次數在上述識別精度發生了變化的情況下變動，且根據所實施 的聽力判定內容不同，也存在所需的精度發生變化的可能性，因此預想會發生變動。以下，為了對必要加法運算次數進行記述，作為一例，假設語音清晰度判定中所需的精度為80%，舒適性中所需的精度為70%來進行說明。總結以上，如圖14所示，可知為了達成一定的識別率(本次為語音清晰度80%、舒適性70%)，關於清晰度可以比現有技術所需的加法運算次數(20次)少，關於舒適性需要與現有技術相同程度或者現有技術以上的加法運算次數。不過，雖然在清晰度與舒適性之間必要加法運算次數存在差異，但由於這些作為對一連串的聲音呈現和文字呈現的反應而被判定，因此在一次試行中，清晰度和舒適性的反應僅能分別得到I次。為了保持舒適性的識別精度，需要使加法運算次數成為現有的20次或者20次以上。但是，若增加了加法運算次數，則花費很長的呈現時間。例如，在為了判定語音清晰度而使用了 67S語言表的20個語音的情況下，在將20個語音各呈現了 20次的情況下，合計需要呈現400次。因此，被實驗者需要在400次的呈現中集中於聲音的聽覺辨別，可以認為對於被實驗者來說成為很大的負擔。此外，關於選擇所需的時間，若呈現聲音的聲壓為3種，聲音刺激間的間隔為3秒，對裸耳時/佩戴使用時進行聽力判定，則推斷400次的呈現最低花費2個小時。關於加法運算次數與呈現時間的關係，本申請發明者們著眼於語音清晰度和舒適性的必要加法運算次數的差異、以及語音清晰度和舒適性的判定所需的細緻度不同這一情況。在本說明書中所說的判定的「細緻度」是表示最終所使用的判定結果的輸出是每個語音的輸出還是匯總了幾個語音後的輸出的概念。語音清晰度判定，是對是否聽覺辨別出了語音進行判定，因此需要按照每個語音來判定正解/非正解。另一方面，舒適性判定中的、嘈雜度或努力性的判定不需要按照每個語音來判定舒適/不適，可以認為在相同的聲壓等條件下可將聽起來相同的語音匯總來進行判定。該想法可以說是對舒適性判定時的用戶的聽覺進行分析後的結果，由本申請發明者們所初次想到的。以下，具體地進行說明。首先,關於舒適性判定時的用戶的聽覺，分別說明努力性判定和嗜雜度判定。如前所述，努力性是表示用戶盡了多大的努力來對語音進行了聽覺辨別的指標。在此，考慮用戶沒能聽覺辨別出語音的狀況，推測與所呈現的聲壓的大小相比，在語音的頻率接近的情況下，變得無法區分。因此，可以認為努力性能夠以頻率為基準進行匯總來判定。圖15是對針對頻率的每個音素的聽力水平進行繪製後的圖。根據圖15可以看出，在音素的分布中存在偏重(頻率的偏重)。因此，在對努力性進行匯總來判定的情況下，只要按照圖15中的每種分布或每種接近的語音來分組即可。另一方面，關於嘈雜度，即使聲音的頻帶不同，其影響也較小，聲音的振幅的大小成為直接的要素。因此，認為可以根據主宰語音的振幅大小的元音的種類來分組。如上所述，可以認為即使將相同的聲音振幅或相同的頻帶的聲音進行匯總來判定，與按照每個語音來判定舒適性而得到的結果的差異也很少。即，可以說語音清晰度判定更需要細緻的判定。圖16表示按照上述方式將67S式語言表的20個語音分組後的例子。並且，圖16(a)是針對努力性，根據圖15的分布，將67S式語言表的20個語音分組後的例子。 例如圖16(a)的「'> 」以及「>」，被分類到圖15的位於頻率約6000Hz附近的「s」的組。此外，圖16(a)的「今「夕「夕「 r 」以及「卜』』，被分類到圖15的位於頻率約3500Hz附近的「k」以及「t」的組。圖16(a)的」、」以及「力」，被分類到圖15的位於頻率約1800Hz附近的「h」以及「g」的組。另一方面，圖16(b)是針對嘈雜度，按照每個元音將67S式語言表的20個語音分組後的例子。根據這些情況，本申請發明者們發現，若對必要的判定的細緻度和必要的加法運算次數進行綜合，則關於需要細緻的判定的清晰度判定，加法運算次數可以較少，以及，關於需要多次加法運算的舒適性判定，可以將多個語音匯總來進行判定。圖17表示本申請發明者們所總結的判定方法的關係。根據該見解，本申請發明者們想出了以下的構思針對必要加法運算次數不同的聽力判定項目，通過根據判定項目來切換進行加法平均的波形，能夠實現作為整體的聲音和文字的呈現次數的削減。以下，關於基於該構思而構成的本發明的實施方式的詳細情況和本發明的效果，以作為舒適性判定而進行了嘈雜度判定的情況為例，參照附圖進行說明。在本申請說明書中，為了對事件相關電位的分量進行定義，將從某時間點起算的規定時間經過後的時刻表現為例如「潛伏期約750ms」。這意味著可能包含以750ms這一特定的時刻為中心的範圍。根據「事件相關電位(ERP)指南-以P300為中心」(加我君孝等編輯，筱原出版新社，1995)的30頁中記載的表1，一般來說，在事件相關電位的波形中，按照每個人而產生30ms到50ms的差異(偏差)。因此，「約Xms」或「Xms附近」這種語句意味著以Xms為中心，在其前後可能存在30到50ms的幅度(例如，300ms±30ms、750ms±50ms)。另外，上述的「30ms到50ms的幅度」是P300分量的一般的個體差異的例子，但由於上述潛伏期約750ms的陽性分量比P300潛伏期晚，因此用戶的個體差異更大地顯現。因此，優選作為更寬的幅度、例如在前後各IOOms到150ms程度的幅度來處理。因此，在本實施方式中，「潛伏期約750ms」表示潛伏期600ms到900ms。潛伏期600ms到900ms意味著潛伏期600m以上900ms以下。此外，關於「潛伏期200ms附近」或「潛伏期約200ms」，既可以當作對於潛伏期200ms在前後各具有30到50ms的幅度，也可以當作比其寬一些的幅度，例如在前後各具有50ms到100ms的幅度。此外，一般來說，「陽性分量」意味著比0μ V大的電位。但是，在本申請說明書中「陽性分量」不需要絕對為陽性(比Ομν大)。在本申請說明書中，為了識別聽覺辨別自信度是高還是低而識別「陽性分量」的有無，只要能夠辨別聽覺辨別自信度的明顯的高低，則區間平均電位等也可以為OyV以下。另外，一般來說「陰性分量」意味著比Ομν小的電位。但是在本申請說明書中「陰性分量」不需要絕對為陰性(比Ομν小)。在本申請說明書中，為了識別是否感覺到了嘈雜而識別「陰性分量」的有無，只要能夠識別是否感覺到了嘈雜，則區間平均電位等也可以為Ομν以上。在能夠判定陰性分量的大小的情況下，記述為陰性分量的有無。2.實施方式I圖18表示本實施方式的聽力判定系統100的構成以及利用環境。 聽力判定系統100具備聽力判定裝置I、生物體信號測量部3、視覺刺激部4、和聽覺刺激部5。生物體信號測量部3至少與2個電極A以及B連接。例如，電極A粘貼於用戶5的乳突骨，電極B粘貼於用戶5的頭皮上的位置(所謂的Pz)。聽力判定系統100按照聲音和文字的順序將單音節的語音呈現給用戶2。基於以聲音呈現時刻為起點而測量出的用戶2的腦波(事件相關電位)，來進行舒適性判定。此夕卜，基於以文字呈現時刻為起點而測量出的用戶2的腦波(事件相關電位)，來進行語音清晰度判定。通過生物體信號測量部3來取得與電極A和電極B的電位差相對應的用戶2的腦波。生物體信號測量部3，將與電位差相對應的信息(腦波信號)通過無線或有線方式發送到聽力判定裝置I。在圖18中，示出了生物體信號測量部3通過無線方式將該信息發送到聽力判定裝置I的例子。聽力判定裝置I進行用於聽力判定的聲音的聲壓控制、和聲音以及文字的提示定時的控制，對用戶2經由聽覺刺激部5 (例如揚聲器)呈現聲音，並經由視覺刺激部4 (例如顯示器)呈現文字。圖19表示本實施方式的聽力判定裝置I的硬體構成。聽力判定裝置I具有CPU30、存儲器31、音頻控制器32、和圖形控制器33。它們通過總線34相互連接，並能夠相互進行數據的交換。CPU30執行保存在存儲器31中的電腦程式35。在電腦程式35中，記述有後述的流程圖所示的處理步驟。聽力判定裝置1，按照該電腦程式35，利用保存在相同的存儲器31中的語音DB12，來進行對聽力判定系統100的整體進行控制的處理。此外，聽力判定裝置I所產生的判定結果，被保存在存儲器31內的聽力判定結果DBlO中。該處理在後面詳述。音頻控制器32按照CPU30的命令，分別生成應呈現的聲音，並將所生成的聲音信號以指定的聲壓輸出到聽覺刺激呈現部5。圖形控制器33按照CPU30的命令，分別生成應呈現的文字，並輸出到視覺刺激呈現部4。後述的聽力判定裝置I的各功能模塊(除了語音DB12之外)，分別與通過執行圖19所示的程序35，由CPU30、存儲器31、音頻控制器32、圖形控制器33作為整體在其各個時刻所實現的功能相對應。圖20表示本實施方式的聽力判定系統100的方框構成圖。聽力判定系統100具備聽力判定裝置I、生物體信號測量部3、視覺刺激呈現部4、和聽覺刺激呈現部5。為了說明的方便而示出用戶2的方框。聽力判定系統100在利用用戶2的腦波信號來進行聽力判定時使用。聽力判定由聽力判定裝置I執行。以下，對聽力判定系統100的構成要素的功能的概要進行說明。詳細的功能以及構成在後面詳述。生物體信號測量部3，對用戶的腦波進行測量，並提取分別以聲音和文字的刺激為·起點的事件相關電位。視覺刺激呈現部4根據來自聽力判定裝置I的指示，將表示語音的文字呈現為用戶。所呈現的文字成為對用戶2的視覺的刺激。聽覺刺激呈現部5，根據來自聽力判定裝置I的指示，將語音的聲音呈現給用戶。所呈現的聲音成為對用戶2的聽覺的刺激。聽力判定裝置I具備按語音加法運算部6、按組加法運算部7、清晰度判定部8、舒適性判定部9、聽力判定結果資料庫(DB) 10、呈現語音控制部11、和語音資料庫(DB) 12。按組加法運算部7，利用多個語音的組的數據，按組對以聲音呈現為起點的事件相關電位進行加法運算。該組只要至少存在I個即可。各組基於預先規定的規則被分類。例如為元音的組、無聲輔音的組、有聲輔音的組。其中，根據規則也可以存在作為要素的語音所不屬於的組。清晰度判定部8根據按語音進行了加法運算的腦波波形來判定每個語音的語音清晰度。舒適性判定部9根據按組進行了加法運算的腦波波形來判定每個組的舒適性。聽力判定結果DBlO保存判定結果。呈現語音控制部11參照語音並決定應呈現給用戶的語音。按語音加法運算部6利用語音的信息，按語音對以文字刺激呈現為起點的事件相關電位進行加法運算。語音DB12保存語音和語音的分組的數據。以下，詳細地說明各模塊。生物體信號檢測部3是對安裝在用戶2的頭部的電極上的電位變化進行測量的設備，例如，是腦波計等。將探測電極放在例如頭頂部的Pz，將基準電極放在左右某一方的乳突骨，並對作為探測電極與基準電極的電位差的腦波進行測量。生物體信號測量部3，對用戶2的腦波進行測量，並以從呈現語音控制部11接受的觸發為起點來提取規定區間(例如從-200ms到IOOOms的區間)的事件相關電位。此時，將以與聽覺刺激相對應的觸發為起點的事件相關電位發送到按組加法運算部7，將以與視覺刺激相對應的觸發為起點的事件相關電位發送到按語音加法運算部6。另外，在本實施方式的說明中，生物體信號測量部3，以來自呈現語音控制部70的觸發為起點來提取預先規定的範圍的事件相關電位，進行基線校正並將電位波形的數據發送到事件相關電位處理部55。但是，該處理是一例。作為其他處理，例如，生物體信號測量部50也可以持續測量腦波，並由事件相關電位處理部55來進行必要的事件相關電位的提取以及基線校正。若為該構成，則呈現語音決定部70不需要將觸發發送到生物體信號測量部50，只要將觸發發送到事件相關電位處理部55即可。視覺刺激呈現部4是對用戶2呈現用於語音清晰度判定的文字的設備。視覺刺激呈現部4例如是電視機或顯示器。視覺刺激呈現部4將由呈現語音控制部11決定的語音的文字呈現在顯示面上。聽覺刺激提示部4是對用戶呈現用於舒適性判定的聲音的設備。聽覺刺激提示部4例如是揚聲器或耳機。聽覺刺激提示部4的種類任意。但是，為了進行正確的判定，需要按照能夠以指定的聲壓正確地呈現聲音的方式進行調整。由此，聽覺刺激提示部4，能夠正確地呈現由呈現語音控制部11決定的單音節的聲音。語音DB12是用於聽力判定的語音的資料庫。圖21表示保存在語音DB12中的資料庫的一例。在圖21所示的語音DB12中，按照每個語音，保存有所呈現的聲音文件、輔音標籤的語音信息。被保存的聲音，根據預先測定出的重聽者的聽力圖基於調試手法完成了每個頻率的增益調整。被保存的語音的種類，也可以是在57S語言表、67S語言表中列舉出 的語音。輔音標籤在判定用戶2在哪個輔音上產生誤聽的概率較高時利用。此外，語音DB12具有多個語音的組的數據。與誤聽產生可能性(誤聽的產生容易度、或者誤聽產生的概率)相應的分組後的數據，在判定用戶2在哪個組中產生誤聽的概率較高時利用。分組採用例如大分類、中分類、小分類。大分類根據元音、無聲輔音、有聲輔音的分類分別記載為0、1、2。中分類為無聲輔音內、有聲輔音內的分類。無聲輔音內可以分類為^■行(中分類1)和々 力· 〃行(中分類2)，有聲輔音內可以分類為9 · Y · >7行(中分類1)和f · ^ ·力' ·籲·夕'' · K行(中分類2)。小分類可以分類為於· 7行(小分類1)和〒·力' ·夕'' · 〃行(小分類2)。關於誤聽產生可能性，參照了「助聽器調試的見解」(小寺一興，診斷和治療社，1999年，172頁)。此外，語音DB12具有用於按組進行加法運算的按舒適性判定的加法運算組的數據。加法運算組的數據，在對在按組加法運算部7中進行加法運算的事件相關電位進行切換時利用。加法運算組例如是嘈雜度、努力性。嘈雜度按判定語音的振幅分別記載為0、1、2、3、4、5。努力性按判定語音的頻率分別記載為0、1、2、3、4、5。呈現語音控制部11參照語音DB12決定呈現的語音，並將與所決定的語音相關的信息發送到視覺刺激呈現部4和聽覺刺激呈現部5。此外，與聲音和文字各自的呈現時刻相一致地，將觸發發送到生物體信號測量部3。此外，將所呈現的語音的信息發送到按語音加法運算部6，並將所呈現的語音信息和該語音所具有的分組的數據發送到按組加法運算部7。此外，也可以控制由視覺刺激呈現部4以及聽覺刺激呈現部5呈現所決定的語音。在本實施方式中，假定呈現語音控制部11向視覺刺激呈現部4以及聽覺刺激呈現部5發送相同的語音信息來進行說明。按語音加法運算部6以及按組加法運算部7，根據從呈現語音控制部11接受的呈現語音信息的內容，關於從生物體信號測量部3接受的事件相關電位的波形，切換進行加法平均的波形。按語音加法運算部6從生物體信號測量部3接受以與視覺刺激相對應的觸發為起點的事件相關電位。此時，利用從呈現語音控制部11接受的呈現語音信息，僅選擇通過相同的語音的呈現而得到的事件相關電位來進行加法平均。然後，將按照每個語音執行了規定次數的加法平均的腦波數據發送到清晰度判定部8。在僅用相同的語音進行了加法平均的情況下，能夠進行每個語音的聽覺辨別判定。按組加法運算部7從生物體信號測量部3接受以與聽覺刺激相對應的觸發為起點的事件相關電位。此時，利用從呈現語音控制部11接受的呈現語音信息和語音所具有的分組的數據，選擇通過相同的組內的語音的呈現而得到的事件相關電位來進行加法平均。然後，將按照每個組執行了規定次數的加法平均的腦波數據發送到舒適性判定部9。例如，按組加法運算部7選擇通過屬於相同的聲音組(圖21中的大分類等)的語音的呈現而得到的事件相關電位來進行加法平均。清晰度判定部8對從按語音加法運算部6接受的加法平均後的腦波波形進行識另IJ，並按照每個語音判定語音清晰度的有無。將語音清晰度的判定結果發送到聽力判定結果 DB10。 圖22表示清晰度判定部8的構成。如圖22所示，清晰度判定部8具備陽性分量判定部51和判定部52。陽性分量判定部51接受從按語音加法運算部6接受的加法平均後的腦波波形，根據加法運算波形來判定潛伏期約300ms或約500ms的陽性分量的有無。陽性分量的有無通過以下方法來識別。例如，陽性分量判定部51將潛伏期200ms到400ms的最大振幅或潛伏期200ms到400ms的區間平均電位與規定的閾值進行比較。並且，在潛伏期200ms到400ms的範圍內、或者潛伏期400ms到600ms的範圍內的最大振幅或區間平均電位大於閾值的情況下識別為「存在陽性分量」，將小於閾值的情況識別為「不存在陽性分量」。判定部52從陽性分量判定部51接受陽性分量的有無，根據陽性分量的有無來判定清晰度，並將判定結果發送到聽力判定結果DB10。舒適性判定部9對從按組加法運算部7接受的加法平均後的腦波(事件相關電位)的波形進行識別，判定每個組的舒適性的有無。舒適性判定部9將舒適性的判定結果發送到聽力判定結果DB10。圖23表示舒適性判定部9的構成。如圖23所示，舒適性判定部8具有特徵分量判定部41、判定部42、和基準資料庫(DB)43。特徵分量判定部41，從按組加法運算部7接受加法平均後的腦波(事件相關電位)的波形，從基準DB43接受用於分別檢測陰性分量以及陽性分量的潛伏期以及閾值的數據。特徵分量判定部41具備陽性分量判定部41a、和陰性分量判定部41b。在判定努力性的情況下，陽性分量判定部41a根據加法運算波形來判定在潛伏期約750ms是否存在陽性分量。陽性分量的有無通過以下方法來識別。例如，陽性分量判定部41a將潛伏期600ms到900ms的最大振幅或潛伏期600ms到900ms的區間平均電位與規定的閾值進行比較。使用區間平均電位的情況下的「規定的閾值」，作為一般的用戶的陽性分量的有無的閾值，也可以設為通過上述實驗而得到的「努力性高」和「努力性低」的區間平均電位的中央值即2. 36 μ V0然後，陽性分量判定部41a，在區間平均電位大於閾值的情況下識別為「存在陽性分量」，將小於閾值的情況識別為「不存在陽性分量」。上述的「潛伏期約750ms」以及閾值基於從基準DB43接受的數據來設定。在判定嘈雜度的情況下，陰性分量判定部41b根據加法運算波形來判定潛伏期約200ms的陰性分量的有無。陰性分量的有無通過以下方法來識別。例如，陰性分量判定部41b將潛伏期IOOms到300ms的最大振幅或潛伏期IOOms到300ms的區間平均電位與規定的閾值進行比較。然後，在區間平均電位大於閾值的情況下識別為「存在陰性分量」，將小於閾值的情況識別為「不存在陰性分量」。此外，陰性分量判定部41b也可以將潛伏期IOOms到300ms的陰性電位的峰值的潛伏期與規定的閾值進行比較。然後，陰性分量判定部41b，在陰性電位的峰值潛伏期比規定的閾值短的情況下識別為「存在陰性分量」，將峰值潛伏期比規定的閾值小的情況識別為「不存在陰性分量」。「規定的閾值」，作為一般的用戶的陰性分量的有無的閾值，也可以設為通過上述實驗而得到的「嘈雜」和「不嘈雜」的陰性分量的潛伏期的中央值即218ms。或者，陰性分量判定部41b也可以根據 與根據潛伏期約200ms的典型的陰性分量信號的波形而作成的規定的模板的類似度(例如相關係數)，將類似的情況識別為「存在陰性分量」，將不類似的情況識別為「不存在陰性分量」。規定的閾值或模板也可以根據預先保持的一般的用戶的陰性分量的波形來算出/作成。上述的潛伏期(「約200ms」等)以及閾值，基於從基準DB43接受的數據來設定。判定部42從特徵分量判定部41接受陽性分量以及陰性分量的有無，根據陽性分量以及陰性分量的有無來判定舒適性，並將判定結果發送到聽力判定結果DB10。聽力判定結果DBlO是保存聽力判定結果的資料庫。從清晰度判定部8和舒適性判定部9分別接受判定結果，並作為聽力判定結果而保存。以下，參照圖24 圖26，詳細地說明上述聽力判定系統100的處理步驟。首先，參照圖24對在圖16的聽力判定系統100中進行的整體的處理步驟進行說明。圖24是表示在聽力判定系統100中進行的處理的步驟的流程圖。在步驟SlO中，生物體信號測量部3開始進行用戶2的腦波的測量。在以後的步驟中，腦波測量連續地進行。在步驟Sll中，呈現語音控制部11參照語音DB12來決定呈現的單音節的語音。聽覺刺激呈現部5將所決定的語音的聲音呈現給用戶2。呈現語音控制部11在呈現聲音的同時，對生物體信號測量部3發送聲音刺激呈現觸發，並向按組加法運算部7發送呈現語音信息和語音所具有的分組的數據。此時，在圖21所示的輔音標籤、大分類、中分類、小分類中，與各語音相對應的標籤或編號參照分組的數據。例如，在將分組設為「大分類」，並呈現了語音「 A 」的情況下，呈現語音控制部11向按組加法運算部7發送分組的數據「O」。在步驟S12中，呈現語音控制部11參照語音DB12來決定與在步驟Sll中呈現的聽覺刺激相對應的單音節的語音。視覺刺激呈現部4對用戶2呈現所決定的文字。例如，在聽覺刺激呈現的I秒後(1000ms後)，進行視覺刺激呈現。呈現語音控制部11在呈現文字的同時，對生物體信號測量部3發送視覺刺激呈現觸發，並對按語音加法運算部6發送所呈現的語首的/[目息。在步驟S13中，生物體信號測量部3從呈現語音控制部11接受觸發，從測量出的腦波中，以觸發為起點提取例如-200ms到IOOOms的事件相關電位。然後，求出-200ms到Oms的平均電位，按照該平均電位成為OyV的方式，來對所得到的事件相關電位進行基線校正。此時，將以與聽覺刺激相對應的觸發為起點的事件相關電位發送到按組加法運算部7，將以與視覺刺激相對應的觸發為起點的事件相關電位發送到按語音加法運算部6。在步驟S14中，按組加法運算部7，基於從呈現語音控制部11接受的呈現語音和語音所具有的分組的數據，按照每個組對在步驟S13中提取出的事件相關電位進行加法平均。例如，圖21所示的輔音標籤、大分類、中分類、小分類、嘈雜度、努力性相當於分組。當將分組設為「大分類」，呈現了語音「 * 」時，從呈現語音控制部11發送語音「 * 」和分組的數據「O」。按組加法運算部7參照分組的數據「0」，並存儲其波形。之後，當呈現了分組的數據相同的語音(時，按組加法運算部7對這些波形進行加法平均。在步驟S15中，按語音加法運算部6，基於從呈現語音控制部11接受的呈現語音的信息，按語音對在步驟S13中提取出的事件相關電位進行加法平均。步驟S16是是否對預定進行聽力判定的I套語音結束了呈現的分支，在沒有完成的情況下返回到步驟S11，在完成了的情況下進入到步驟S17。步驟S17是是否對判定所需的語音套數結束了呈現的分支，在沒有完成的情況下 返回到步驟S11，在完成了的情況下進入到步驟S18。在步驟S18中，舒適性判定部9從按組加法運算部7接受按照每個組進行了加法平均的腦波數據，並判定每個組的舒適性的有無。然後，將舒適性的判定結果發送到聽力判定結果DB12。以下，參照圖25說明步驟S18的詳細情況。圖25是表示圖24的步驟S18的詳細的處理步驟的流程圖。在步驟S40中，特徵分量判定部41判定將判定項目設為「嘈雜度」還是設為「努力性」。即特徵分量判定部41從按組加法運算部7接受對判定項目進行特定的數據，在判定項目為嘈雜度的情況下進入到步驟S41的處理，在判定項目為努力性的情況下進入到步驟S47的處理。在步驟S41中，特徵分量判定部41從基準DB43接受用於檢測陰性分量的潛伏期數據。在步驟S42中，特徵分量判定部41接受按照每個組進行了加法平均的腦波數據。在步驟S43中，陰性分量判定部41b判定是否存在潛伏期約200ms的陰性分量。在通過陰性分量判定部41b沒有檢測出陰性分量的情況下，處理進入到步驟S44，在檢測出了陰性分量的情況下，處理進入到步驟S45。在步驟S44中，判定部42針對在步驟Sll中呈現的語音從陰性分量判定部41b接受不存在潛伏期約200ms的陰性分量這一情況，判定為「舒適」，並對判定結果進行儲存。在步驟S45中，判定部42針對在步驟Sll中呈現的語音從陰性分量判定部41b接受存在潛伏期約200ms的陰性分量這一情況，判定為「不適」，並對判定結果進行儲存。在步驟S46中，判定部42判定是否對預定進行舒適性判定的所有的組完成了舒適性判定。在沒有完成舒適性判定的情況下處理返回步驟S41，在完成了的情況下處理結束。接著，說明將努力性作為判定項目的處理。在步驟S47中，特徵分量判定部41從基準DB43接受用於檢測陽性分量的潛伏期數據。在步驟S48中，特徵分量判定部41接受按照每個組進行了加法平均的腦波數據。在步驟S49中，陽性分量判定部41a判定是否存在潛伏期約200ms的陽性分量。在通過陽性分量判定部41a沒有檢測出陽性分量的情況下處理進入到步驟S50，在檢測出了陽性分量的情況下處理進入到步驟S51。在步驟S50中，判定部42針對在步驟Sll中呈現的語音從陽性分量判定部41a接受不存在潛伏期約750ms的陽性分量這一情況，判定為「舒適」，並對判定結果進行儲存。在步驟S51中，判定部42針對在步驟Sll中呈現的語音從陰性分量判定部41a接受存在潛伏期約750ms的陽性分量這一情況，判定為「不適」，並對判定結果進行儲存。在步驟S52中，判定部42判定是否對預定進行舒適性判定的所有的組完成了舒適性判定。在沒有完成的情況下處理返回到步驟S47，在完成了的情況下處理結束。再次參照圖24。在步驟S18中，清晰度判定部8從按語音加法運算部6接受按照每個語音進行了 加法平均的腦波數據，並判定每個語音的語音清晰度的有無。然後，將語音清晰度的判定結果發送到聽力判定結果DB12。以下，參照圖26說明步驟S19的詳細情況。在步驟S53中，陽性分量判定部51接受按照每個組進行了加法平均的腦波數據。步驟S54為基於在陽性分量判定部51中是否檢測出了潛伏期約300ms的陽性分量的分支，在沒有檢測出陽性分量的情況下進入到步驟S53，在檢測出了陽性分量的情況下進入到步驟S54。在步驟S55中，判定部52針對在步驟Sll中從呈現語音控制部11接受的組，從陽性分量判定部41接受存在潛伏期約300ms的陽性分量這一情況，判定為舒適，並對判定結果進行儲存。在步驟S56中，判定部52針對在步驟Sll中從呈現語音控制部11接受的組，從陽性分量判定部41接受不存在潛伏期300ms的陽性分量這一情況，判定為不清晰，並對判定結果進行儲存。步驟S57是是否對預定進行清晰度判定的所有的語音完成了清晰度判定的分支，在沒有完成的情況下返回到步驟S53，在完成了的情況下結束語音清晰度判定。在步驟S20中，聽力判定結果DBlO從清晰度判定部8接受按照每個語音判定了清晰/不清晰而得到的判定結果，從舒適性判定部9接受按照每個組判定了舒適/不適而得到的判定結果。然後，將這些結果儲存在資料庫中。對在此前說明的聽力判定系統100中，根據判定項目來切換進行加法運算的波形的效果進行說明。以下，在考慮到聲音和文字的呈現次數的基礎上，將呈現次數分為語音套和必要套數來表現。「語音套」匯集了進行判定的語音，例如，在呈現67S語言表的20個語音的情況下，該20個語音相當於I套語音，其呈現次數為20次。通過將該語音套重複必要套數次，能夠實現腦波的加法平均。另一方面，「必要套數」是指為了達成語音清晰度判定和舒適性判定這兩者所需的加法運算次數的語音套的個數。以不切換上述波形的情況為例，必要套數為20次。此外，合計的呈現次數為語音套的語音X必要套數。圖27表示針對清晰度的判定結果、以及將語音分組時的每個組的舒適性的判定結果的一例。關於本發明中的波形的切換效果，以如下情況為例進行說明如圖27所示，語音套(20個語音、67S語言表)，針對20個語音進行語音清晰度判定，並匯總為圖21所示的大分類來進行舒適性判定。如前所述，大分類為元音、無聲輔音、有聲輔音的分類。此時67S語言表的20個語音分別在元音組中包含3個語音，在有聲輔音組中包含9個語音，在無聲輔音組中包含8個語音。在此，設按語音進行判定所需的加法運算次數為5次，舒適性判定所需的加法運算次數為20次，來計算必要套數。在計算必要套數時，需要分別針對語音清晰度判定、舒適性判定來考慮必要的套數。語音清晰度判定對20個語音進行判定，因此若呈現5套的語音套(20個語音)，則加法運算次數成為5次，能夠實現語音清晰度判定。20個語音I個語音X 5套=加法運算次數5次另一方面，舒適性判定對3個組進行判定，因此若針對3個組分別考慮必要套數，則成為 元音3個語音X 7套=加法運算次數21次有聲輔音9個語音X 3套=加法運算次數27次無聲輔音8個語音X 3套=加法運算次數24次元音為7套，有聲輔音為3套，無聲輔音為3套，能夠達成舒適性判定所需的加法運算次數20次。在此，為了達成兩方的判定所需的加法運算次數，需要與必要套數最大的一方一致。因此，在本例的情況下，根據組內的語音數最少的元音組來決定必要的套數，其必要套數為7次。根據該結果，能夠將必要的套數從20次大幅削減到7次。而且，此時的判定結果，如圖27所示，清晰度能夠按照每個語音得到清晰/不清晰的判定結果，舒適性能夠按照每個聲音組得到舒適/不適的判定結果。在此，圖27的判定結果(O、X)是指，對加法運算波形檢測分量，並對其有無進行判定後的結果。例如，在語音清晰度判定中，判定陽性分量的有無，將判定為無的語音設為O (清晰)，將判定為有的語音設為X (不清晰)。同樣，在舒適性判定中，對分量的有無進行判定，將判定為無的組設為〇(舒適)，將判定為有的組設為X (不適)。在上述的例子中，將呈現語音設為20個語音，將呈現聲音的聲壓設為3種，將聲音刺激間的間隔設為3秒，對裸耳時/佩戴使用時考慮聽力判定時間。使用本方法前的必要套數為20次，判定時間為20個語音X 3種X 3秒X 2個模式X 20套=7200秒(2時間)。與此相對，若使用本方法，則成為20個語音X 3種X 3秒X 2個模式X 7套=2520秒(42分)。因此，判定時間從2個小時變為42分鐘，能夠實現大幅的時間縮短。根據本實施方式的聽力判定系統100，聲音/文字的呈現次數被削減，聽力判定在短時間內實現。由此，例如在助聽器銷售店中的聽力判定中，判定所需的時間被削減，節省了助聽器用戶的時間。另外，在本次的實施例中，嘈雜度的判定結果表示舒適性。在對舒適性進行判定時，既可以由腦波測量實驗時所記述的、努力性的判定結果來表示舒適性，也可以由嘈雜度和努力性這兩者的判定結果來表示舒適性。在生物體信號測量部3中，測量出的事件相關電位的特徵分量的電平或極性，存在根據安裝腦波測量用電極的部位、或基準電極以及探測電極的設定的方式而改變的可能性。但是，基於以下的說明，本領域技術人員能夠根據此時的基準電極以及探測電極的設定方式進行適當改變，來對事件相關電位的特徵分量進行檢測，並進行聽力判定。這樣的改變例屬於本發明的範疇。另外，在本次的實施例中，分組的數據由語音資料庫來保持，但該數據也可以保持於按組加法運算部7。另外，在按組加法運算部7中，按組進行加法運算時的聲音組，既可以將具有相同的輔音的語音作為一組，也可以將誤聽產生可能性(圖21所示的組的大分類/中分類/小分類)相同的語音作為一組。在用具有相同的輔音的語音進行了加法平均的情況下，能夠·判定在哪個輔音上舒適性較低。此外，在按照每個誤聽產生可能性組進行了加法平均的情況下，例如在有聲輔音和無聲輔音的分組中，能夠如下這樣進行每個組的判定針對有聲輔音舒適性較高，而針對無聲輔音舒適性較低。在每個輔音、每個組的加法平均中，能夠分別得到確保了屬於組內的語音數次的加法運算次數的加法運算波形。因此，針對必要加法運算次數較多的舒適性判定，能夠用較少的聲音/文字呈現次數來進行判定。另外，所呈現的語音在從語音DB12中進行選擇時，也可以僅呈現必要加法運算次數個。例如，與之前同樣，以匯總為3個聲音組(元音3個語音、有聲輔音9個語音、無聲輔音8個語音)的情況為例，必要套數為7套。此時，雖然有聲輔音組和無聲輔音組的必要套數為3套，但仍然呈現了 7套，因此判定時間變長。像這樣，在相對於每組的必要套數，整體的套數較多的情況下，可以減少其套數。不過，在此情況下，因為語音清晰度的必要套數為5套，所以為了實現兩個判定，無法減少到小於5套。因此，有聲輔音組和無聲輔音組的必要套數為5次。因此，也可以按照元音組為7套、有聲輔音組和無聲輔音組為5套而結束呈現的方式，在按照每個組達到了必要加法運算次數的時間點結束呈現。如上所述，在僅呈現了必要加法運算次數個的情況下，本發明中的時間縮短的效果更大。另外，所呈現的語音既可以從語音DB12中隨機地選擇，也可以集中地選擇特定的輔音或組的語音。與之前同樣，以匯總為3個聲音組(兀音3個語音、有聲輔音9個語音、無聲輔音8個語音)的情況為例。此時，如圖28所示，考慮重複特定的組的語音(元音的「7」)的情況。在此情況下，根據前述的必要套數的計算方法，能夠用5套達成加法運算次數20次。因此，全部的判定所需的套數為5套(set)。像這樣，若對組內的語音進行調整，則本發明中的時間縮短的效果更大。另外，所呈現的語音從語音DB12中隨機地選擇的方法、集中地選擇特定的輔音或組的語音的方法、和僅呈現必要加法運算次數個的方法也可以進行組合。通過對兩個方法進行組合，能夠以必要最小套數進行判定，能夠以本系統中的最短的判定時間結束聽力判定。另外，在呈現語音控制部11中，也可以根據由生物體信號測量部3測量出的用戶2的腦波信號分量的大小，來決定各個判定項目所需的套數。通過根據信號分量的大小來決定套數，能夠在達成了希望的精度的狀態下，以對於用戶來說最短的判定時間來實現聽力判定。另外，在呈現語音控制部11中，也可以從聽力判定系統100接受未判定/再判定的語音的信息來決定語音。另外，在清晰度判定部8和舒適性判定部9中，陽性分量或陰性分量的識別，既可以通過與閾值的比較來進行，也可以通過與模板的比較來進行。另外，聽力判定裝置I也可以作為在I個半導體電路中安裝了電腦程式的DSP等硬體來實現。這種DSP能夠用I個集成電路來實現上述的CPU30、存儲器31、音頻控制器32、圖形控制器33的所有功能。上述的電腦程式35可以記錄在⑶-ROM等記錄介質中並作為產品在市場上流通，或者，可以通過網際網路等電氣通信線路來傳輸。具備圖19所示的硬體的設備(例如PC)，通過讀入該電腦程式35，能夠發揮本實施方式的聽力判定裝置I的作用。另外，語音DB12也可以不保持在存儲器31中，而保持在例如與總線34連接的硬碟(未圖示)中。 另外，因為本實施方式中的聽力判定裝置I能夠攜帶，所以例如可以實際將助聽器和聽力判定裝置I帶到家裡或職場等用戶利用助聽器的聲音環境中來進行聽力判定。由此，能夠更加正確地判定日常生活中的聽覺。另外，在圖18中視覺刺激呈現部4為顯示器，但視覺刺激呈現部4也可以為電視機。通過採用與電視機連接的構成，聽力判定裝置I只要具備生成用於在電視機中顯示影像的影像信號的公知的電路、以及輸出該影像信號的端子即可。由此，能夠得到簡化了構成的、容易攜帶的聽力判定裝置1，能夠在用戶進行利用的環境中進行聽力判定。此時，進而，聽覺刺激呈現部5也可以為通常設置於電視機中的揚聲器。由此，僅具備向電視機的影像信號以及聲音信號的生成電路以及輸出端子，能夠實現構成的簡化。另外，在圖18中聽覺刺激呈現部5為揚聲器，但聽覺刺激呈現部5也可以為耳機。通過使用耳機，攜帶變得簡單，能夠在用戶進行利用的環境中進行聽力判定。此外，在本實施方式中，舒適性判定的結果以及清晰度判定的結果，儲存在聽力結果積累DBlO中，但也可以不進行儲存。例如，在將結果積累DB80設置在舒適性判定裝置I的外部的情況下，只要輸出陽性分量判定部60以及陰性分量判定部65的各判定結果即可。各判定結果可以作為與語音聽取的舒適性相關的信息來利用。另外在本說明書中，出於確認在事件相關電位中出現反映了與清晰度相關的主觀判定的分量的情況的用意，而對事件相關電位的波形進行了加法運算或加法平均。但是，這是一例。通過想辦法利用特徵量提取的方法(例如波形的小波變換)或識別方法(例如支持向量機學習)，通過非加法運算或者數次程度的少次加法運算也能夠識別陽性分量/陰性分量。例如也可以省略按語音加法運算部6。由此，在用戶利用助聽器的聲音環境中也能夠實現聽力判定。另外，在本實施方式中假定日本語的聽力判定而進行了說明。但是，只要為單音節的語音則既可以為英語也可以為中國語。例如在英語的情況下，只要呈現單音節的單詞，並進行每個單詞的判定即可。圖29示出了按照每個單音節的單詞，對努力性、嘈雜度以及清晰度進行判定而得到的結果的一例。3.實施方式2在實施方式I中，說明了同時對語音清晰度和舒適性進行判定的例子。
在本實施方式中，對雖然判定舒適性但不進行語音清晰度判定的聽力判定系統進行說明。圖30表示本實施方式的聽力判定系統101的方框構成圖。聽力判定系統101與實施方式I的聽力判定系統100的不同點在於聽力判定裝置102的構成。具體來說，從本實施方式所涉及的聽力判定裝置102中，省略了實施方式I所涉及的聽力判定裝置I的視覺刺激呈現部4、按語音加法運算部6以及清晰度判定部8。伴隨該構成的差異，呈現語音控制部11不輸出用於將語音的文字作為視覺刺激而輸出的指示，而且，也不需要將以視覺刺激為起點的觸發發送到生物體信號測量部3。其他與實施方式I的聽力判定系統100相同。
圖31是表示在圖30的聽力判定系統101中進行的整體的處理步驟的流程圖。該流程圖與實施方式I的聽力判定系統100的流程圖(圖24)的不同點在於，省略了圖24的步驟S12、S15以及S19。關於公共的構成以及處理動作，援用實施方式I的說明。根據本實施方式所涉及的聽力判定系統101以及聽力判定裝置102，由於省略了與清晰度相關的判定，從而不需要進行語音的區分，只要進行與舒適性相關的判定即可，因此能夠在更短時間內得到判定結果。4.實施方式I以及2的變形例在上述的實施方式的聽力判定系統100中，在清晰度判定部8(圖22)內的陽性分量判定部51、以及舒適性判定部9(圖23)內的陽性分量判定部41a以及陰性分量判定部41b中，利用根據一般的用戶的陽性分量/陰性分量而算出的閾值、或一般的用戶的陽性分量/陰性分量的模板，分別判定了陽性分量的有無和陰性分量的有無。但是，事件相關電位的波形的個體差異較大，因此在以這些波形為基準的識別中，難以高精度地判定努力性/嘈雜度。因此，也可以在語音聽取的舒適性判定之前進行用於測定每個用戶的潛伏期約750ms的陽性分量和潛伏期約200ms的陰性分量的特徵的校準，並基於每個人的分量特徵來判定舒適性。是否進行校準也可以由用戶來選擇。校準的方法例如如下所述。呈現語音控制部11參照語音DB12來決定語音的種類。然後，呈現語音控制部11針對單音節的聲音呈現來設定(I)雖然用戶不努力就能夠聽見但感到「嘈雜」的聲壓水平、或者(2)雖然需要努力但感到「不嘈雜」的聲壓水平。然後，經由聽覺刺激呈現部5向用戶
2呈現聲音。然後，按語音加法運算部6以及按組加法運算部7按照每個聲壓水平對由生物體信號測量部50測量出的事件相關電位進行加法平均。最後，按語音加法運算部6以及按組加法運算部7保存每個聲壓水平的特徵量。更具體來說，按語音加法運算部6以及按組加法運算部7，根據加法平均波形，分別算出在上述的陽性分量判定部51、以及陽性分量判定部41a和陰性分量判定部41b中用於識別的特徵量。例如，在特徵量為區間平均電位的情況下，算出規定區間的平均電位。然後，將分別的閾值保存在基準DB43等中。這樣得到的平均值可以說表示了該用戶固有的特徵。若使用這樣得到的閾值，則能夠進行考慮了各個用戶的個體差異的更正確的判定。5.實施方式3圖32表示實施方式3的助聽器調整系統103的構成。助聽器調整系統103具備聽力判定系統104、調整量DB301、和調整部303。助聽器調整系統103中包含的構成要素相互通過有線方式或無線方式連接，進行信息的收發。並且，調整部303通過有線方式或無線方式與未圖示的助聽器進行信息的收發。助聽器調整系統103中含有的聽力判定系統104與實施方式I的構成相同。聽覺判定系統104中含有的呈現語音控制部302與呈現語音控制部11不同，參照調整量DB301，來調整所決定的語音。調整量DB301存儲有與助聽器的調整量相關的多個值。例如，圖33表示存儲在調整量DB301中的數據的例子。圖33所示的調整量表示了按照每5dB而變大的聲壓的值。調整量DB301也可以具有每小於5dB的值的放大量。調整量DB301優選具有用於助聽器調整·的放大量的值。此外，調整量DB301也可以具有指向性強度、輔音強調、降噪等與助聽處理相關的值，更詳細來說，也可以具有用於調整助聽處理的信息。例如，圖34表示存儲在調整量DB301中的、用於調整助聽處理的信息的例子。在具有助聽處理作為與聲音處理相關的附加功能的情況下，如圖34所示，也可以具有表示指向性強度、輔音強調、降噪的各功能的開啟(ON)/關閉(OFF)的信息。在此所說的⑴指向性強度、(2)輔音強調、(3)降噪具有以下的功能。(I)指向性強度清晰度本身不發生變化。另一方面，因為音源不同的噪聲被降低，所以舒適性提高。(2)輔音強調因為增加輔音的頻帶的增益調整量，所以清晰度提高。另一方面，因為聲音本身的頻率特性發生變化，所以舒適性降低。(3)降噪因為聲音信息也與噪聲一起被降低，所以清晰度下降。另一方面，嘈雜度降低。另外，在圖34中示出了「開啟」或「關閉」這樣的文字，但這是一例。調整量DB301也可以保持與「開啟」以及「關閉」相對應的數值。例如調整量DB301也可以保持與「開啟」相對應的數值「 I」、以及與「關閉」相對應的數值「O」。呈現語音控制部302，參照語音DB12，決定提示給用戶2的語音。呈現語音控制部302與呈現語音控制部11不同，對所決定的語音進行調整。具體來說，呈現語音控制部302參照調整量DB301，對所決定的語音進行調整。而且，呈現語音控制部302將與調整後的語音相關的信息發送到聽覺刺激提示部5。聽覺刺激呈現部5將呈現語音控制部302所調整後的語音呈現給用戶2。調整部303從呈現語音控制部302接收所呈現的語音的信息。在語音的信息中，含有所決定的語音和調整量。調整部303基於存儲在聽力測量結果DBlO中的結果，來判定是否為合適的調整量。在判定為不是合適的調整量的情況下，調整部303參照調整量DB301，指示呈現語音控制部302以不同的調整量進行調整。在得到了表示嘈雜度高的判定結果的情況下，呈現語音控制部302，例如，以比上次的放大量小的放大量進行調整。圖35是表示在圖32的助聽器調整系統103中進行的整體的處理步驟的流程圖。圖35所示的流程圖，與實施方式I的聽力判定系統100的流程圖(圖24)不同，具有步驟S31以及S32。關於公共的構成以及處理動作，援用實施方式I的說明。在步驟S31中，調整部303參照在步驟S20中保存的結果，來對舒適性以及清晰度進行判定。調整部303在判定為舒適性以及清晰度處於規定的範圍內的情況下，判定呈現語音控制部302的調整是合適的並結束處理。另外，此時調整部303，基於被判定為合適的調整量，來對助聽器進行調整，或者，也可以將被判定為合適的調整量的信息發送到助聽器。另一方面，在調整部303判定為舒適性以及清晰度的至少任意一方為規定的範圍外的情況下，處理進入到步驟S32。調整部303將用於變更調整量的指示輸出到呈現語音控制部302。在步驟S32中，呈現語音控制部302接受來自調整部303的指示，參照調整量DB301，讀出不同的調整量的信息並變更調整量。在上述的步驟S32中，在得到了表示嘈雜度高的判定結果的情況下，呈現語音控制部302，例如從調整量DB301讀入表示比上次的放大量小的放大量的信息，或者，將降噪 設為「開啟」。在得到了表示努力性高的判定結果的情況下，呈現語音控制部302，例如從調整量DB301讀入比上次的放大量大的放大量的信息，或者，將指向性強度處理設為「開啟」。在得到了表示清晰度低的判定結果的情況下，呈現語音控制部302，例如從調整量DB301讀入比上次的放大量大的放大量的信息，或者，將輔音強調處理設為「開啟」。之後，處理返回步驟SS11，再次進行測定。通過以上說明了的構成以及動作，能夠調整所決定的語音來進行再次的測定。工業實用性根據本發明的聽力判定裝置以及安裝了聽力判定裝置的聽力判定系統，聽力判定能夠在短時間內進行，因此不僅在對身體不自如的用戶等長時間的拘束成為很大負擔的用戶的聽力判定中能夠利用，而且在對所有人的聽力判定中都能夠利用。符號說明I、102聽力判定裝置2 用戶3生物體信號測量部4聽覺刺激呈現部5視覺刺激呈現部6按語音加法運算部7按組加法運算部8清晰度判定部9舒適性判定部10聽力判定結果DB11,302呈現語音控制部12 語音 DB41特徵分量判定部41a陽性分量判定部41b陰性分量判定部
42判定部43 基準 DB51陽性分量判定部52判定部100、101聽力判定系統103助聽器調整系統
104聽力判定系統301 調整量 DB303 調整部 30權利要求
1.一種判定系統，具備 生物體信號測量部，其測量用戶的腦波信號； 呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音； 聽覺刺激呈現部，其用聲音將所決定的所述語音呈現給所述用戶； 視覺刺激呈現部，其用文字將所決定的所述語音呈現給所述用戶； 按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算； 第I判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，至少判定所述用戶是否努力聽到所述語音、或者所述用戶是否對所述語音感覺到嘈雜；和 第2判定部，其根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性。
2.根據權利要求I所述的判定系統，其中， 所述舒適性判定部，基於按照每個所述組進行加法運算而得到的所述事件相關電位，在以從所述聽覺刺激呈現部呈現了所述語音的聲音的時刻為起點600ms以上900ms以下的範圍內是否具有規定的陽性分量，以及在IOOms以上300ms以下的範圍內是否具有規定的陰性分量，按照每個所述組來判定所述舒適性。
3.根據權利要求2所述的判定系統，其中， 所述舒適性判定部具備 陽性分量判定部，其判定按照每個所述組進行加法運算而得到的所述事件相關電位，在以從所述聽覺刺激呈現部呈現了所述語音的聲音的時刻為起點600ms以上900ms以下的範圍內是否具有規定的陽性分量； 陰性分量判定部，其基於在IOOms以上300ms以下的範圍內是否具有規定的陰性分量，來判定所述用戶是否舒適地聽到所述語音；和 判定部，其根據所述陽性分量判定部的判定結果、以及所述陰性分量判定部的判定結果，按照每個所述組來判定所述舒適性。
4.根據權利要求I或2所述的判定系統，其中， 所述清晰度判定部，基於按照所述每個語音進行加法運算而得到的所述事件相關電位，以從所述視覺刺激呈現部呈現了所述語音的文字的時刻為起點，在200ms以上400ms以下的範圍內或者約400ms以上600ms以下的範圍內是否具有規定的陽性分量,按照每個語音來判定所述清晰性。
5.根據權利要求I所述的判定系統,其中， 在所述語音資料庫中，所述多個語音的每一個，基於預先規定的規則，被分類到所述至少I個組。
6.根據權利要求5所述的判定系統，其中， 所述至少I個組，是元音的組、有聲輔音的組、無聲輔音的組。
7.根據權利要求5所述的判定系統，其中， 在所述語音資料庫中，所述多個語音的每一個，基於誤聽產生概率的大小，被分類到所述至少I個組。
8.根據權利要求5所述的判定系統，其中， 在所述第I判定部判定所述用戶是否努力聽到所述語音的情況下，所述至少I個組基於所述語音的頻率而被分組。
9.根據權利要求5所述的判定系統，其中， 在所述第I判定部判定所述用戶是否對所述語音感覺到嘈雜的情況下，所述至少I個組基於所述語音的種類而被分組。
10.根據權利要求5所述的判定系統，其中， 所述呈現語音控制部決定呈現給所述用戶的語音的呈現次數， 在所述語音資料庫中，所述多個語音的每一個，基於語音數被分類到所述多個組， 所述呈現語音控制部，根據所述多個組的語音數，決定所述聽覺刺激呈現部所呈現的聲音的呈現次數、以及所述視覺刺激呈現部所呈現的文字的呈現次數。
11.根據權利要求I所述的判定系統，其中， 所述呈現語音控制部決定呈現給所述用戶的語音的呈現次數， 所述聽覺刺激呈現部以及所述視覺刺激呈現部，持續呈現所述語音的聲音以及文字，直到達到由所述呈現語音控制部決定的所述聲音的呈現次數、以及所述文字的呈現次數為止。
12.根據權利要求I或11所述的判定系統，其中， 所述呈現語音控制部，決定呈現給所述用戶的語音的呈現次數， 所述呈現語音控制部，決定對呈現給所述用戶的特定的語音進行多次呈現。
13.根據權利要求12所述的判定系統，其中， 所述呈現語音控制部，根據所述用戶的腦波信號的大小來決定呈現次數。
14.根據權利要求I所述的判定系統,其中， 還具備聽力判定結果資料庫，所述聽力判定結果資料庫保存從所述舒適性判定部、以及所述清晰度判定部分別輸出的判定結果。
15.根據權利要求I所述的判定系統,其中， 還具備按語音加法運算部，所述按語音加法運算部參照所述語音資料庫，按照每個語音對所述事件相關電位進行加法運算， 所述清晰度判定部，根據按照每個所述語音進行了加法運算而得到的所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性。
16.—種判定系統,具備 生物體信號測量部，其測量用戶的腦波信號； 呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音； 聽覺刺激呈現部，其用聲音將所決定的所述語音呈現給所述用戶； 按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算；和 舒適性判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果。
17.一種判定系統，具備 呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音，並且，按照由聽覺刺激呈現部用聲音將所決定的所述語音呈現給所述用戶，由視覺刺激提示部用文字將所決定的所述語音呈現給所述用戶的方式進行控制； 按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組對生物體信號測量部所測量出的腦波信號的事件相關電位進行加法運算； 舒適性判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果；和清晰度判定部，其根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地 聽到所述語音的清晰性，並輸出判定結果。
18.—種助聽器調整系統，具備 生物體信號測量部，其測量用戶的腦波信號； 呈現語音控制部，其參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音，並參照包含語音的放大量或用於對助聽處理進行調整的信息的調整量資料庫，來對所決定的所述語音進行調整； 聽覺刺激呈現部，其用聲音將調整後的所述語音呈現給所述用戶； 視覺刺激呈現部，其用文字將調整後的所述語音呈現給所述用戶； 按組加法運算部，其參照所述語音資料庫，按照每個所述語音的組來對所述腦波信號的事件相關電位進行加法運算； 第I判定部，其根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到調整後的所述語音的舒適性，至少判定所述用戶是否努力聽到調整後的所述語音、或者所述用戶是否對調整後的所述語音感到嘈雜； 第2判定部，其根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到調整後的所述語音的清晰性；和 調整部，其在所述第I判定部判定出所述用戶沒有努力聽到調整後的所述語音、或者所述用戶對調整後的所述語音不感到嘈雜，並且所述第2判定部判定出所述用戶清晰地聽到調整後的所述語音的情況下，判定為所述調整量合適。
19.一種判定方法，包含如下步驟 測量用戶的腦波信號的步驟； 參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音的步驟； 用聲音將所決定的所述語音呈現給所述用戶的步驟； 用文字將所決定的所述語音呈現給所述用戶的步驟； 參照所述語音資料庫，按照每個所述語音的組對所述腦波信號的事件相關電位進行加法運算的步驟； 根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果的步驟；和 根據所述事件相關電位，按照每個語音來判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果的步驟。
20.一種電腦程式，其由設置在聽力判定系統中的計算機來執行， 所述電腦程式，使安裝在所述聽力判定系統中的計算機執行如下步驟 接受測量出的用戶的腦波信號的步驟； 參照保存多個語音的數據以及所述多個語音的至少I個組的數據的語音資料庫，來決定呈現給所述用戶的語音的步 驟； 用聲音將所決定的所述語音呈現給所述用戶的步驟； 用文字將所決定的所述語音呈現給所述用戶的步驟； 參照所述語音資料庫，按照每個所述語音的組來對所述腦波信號的事件相關電位進行加法運算的步驟； 根據按照每個所述組進行加法運算而得到的所述事件相關電位，按照每個所述組來判定所述用戶是否舒適地聽到所述語音的舒適性，並輸出判定結果的步驟；和 根據所述事件相關電位，按照每個語音判定所述用戶是否清晰地聽到所述語音的清晰性，並輸出判定結果的步驟。
全文摘要
提供一種用於同時且在短時間內對語音清晰度和舒適性進行判定的判定系統。判定系統具備呈現語音控制部，其參照保存多個語音的數據以及多個語音的至少1個組的數據的語音資料庫，來決定呈現給用戶的語音；聽覺刺激呈現部，其用聲音將所決定的語音呈現給用戶；視覺刺激呈現部，其用文字將所決定的語音呈現給用戶；按組加法運算部，其參照語音資料庫，按照每個語音的組對用戶的腦波信號的事件相關電位進行加法運算；第1判定部，其根據按照每個組進行加法運算而得到的事件相關電位，按照每個組來判定用戶是否舒適地聽到語音的舒適性，至少判定用戶是否努力聽到語音、或者用戶是否對語音感到嘈雜；和第2判定部，其根據事件相關電位，按照每個語音來判定用戶是否清晰地聽到語音的清晰性。
文檔編號H04R25/00GK102781321SQ20118001148
公開日2012年11月14日 申請日期2011年6月8日 優先權日2010年6月11日
發明者小塚和紀, 森川幸治, 足立信夫 申請人:松下電器產業株式會社