修改多個音頻信號的空間圖像的製作方法

2023-07-04 16:17:21 3

專利名稱：修改多個音頻信號的空間圖像的製作方法
技術領域：
本發明涉及音頻處理，更具體涉及修改多個音頻信號的空間圖像。
背景技術：
人類聽覺系統非常適於根據聲源的位置關注聲源。這有時候被稱為「雞尾酒會效應在嘈雜擁擠的房間中可以進行會談，因為聽者可以排除大部分的來自除其正在交談的人之外的方向的幹擾聲音。
對於聽者來說，分離來自相同方向的聲音難得多。例如，當通過耳機聽立體音樂時，聲音並不是表現為來自單個位置而是在寬的聲場上掃描。在該情況中，如果將語音重疊在音樂上而沒有任何將二者空間分離的措施，將難於理解對話。這在使用例如行動電話時可能存在問題。現代的移動終端包括允許通過耳機收聽高質量音樂再現的特徵。然而，如果在音樂再現期間接聽電話呼叫，或者關閉音樂或者在音樂上疊加電話呼叫。從而，無法將電話呼叫或語音消息與立體音樂音軌混合而不降低可理解性。從而希望能夠空間修改音頻流，從而在仍播放音軌時容易理解對話。

發明內容
本發明提出了ー種改善的方法和實施該方法的技術設備，通過本發明在對話或其它音頻信號與另ー個音頻信號混合時增加了對話或其它音頻信號的可理解性。本發明內容包括ー種方法、設備和電腦程式，其特徵在於獨立權利要求中的陳述。在從屬權利要求中公開了本發明各個實施例。根據第一方面，根據本發明的方法基於這樣的構思修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於ー個或多個附加聲源釋放(relieve)空間空位(spatial room);以及將所述ー個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放空間空位中，而不引入與輸入音頻信號的修改聲場的空間幹渉。根據實施例，輸入音頻信號包括兩信道立體信號，所述方法還包括通過對輸入音頻信號施加幅度平移(panning)處理而窄化通過兩信道立體信號產生的聲場；以及在窄化的聲場的至少任ー側插入一個附加聲源。根據實施例，根據以下對所述兩信道立體信號的輸入信號分量施加幅度平移處理
. .. Pぐ)
UJ..I.. I- JuJ*其中L入、R入和Ra分別是左和右側立體信道的輸入和輸出信號分量，並且O << 0.5。根據實施例，如果ー個或多個附加聲源基於語音信號，則□的值被調節為約O. 3或更高。根據實施例，其中輸入音頻信號包括兩信道立體信號，所述方法還包括基於立體信號共有的音頻分量確定中心信道音頻分量；通過除去中心信道音頻分量而窄化通過兩信道立體信號產生的聲場；以及在聲場的極值之間的非幹涉空間中插入附加聲源。根據實施例，分別根據因子l-α和α相互成比例地進行所述除去中心信道音頻分量和所述插入附加聲源。根據實施例，α的值被隨時間變化地調節。根據實施例，一旦確定附加聲源應包括在由兩信道立體信號產生的聲場中，該方法還包括在第一預定時段(例如一秒)中將α的值逐漸増加到預定值，諸如其最大值。根據實施例，該方法還包括延遲對附加聲源的饋給所述第一預定時段。根據實施例，一旦確定在第二預定時段中未檢測到產生所述附加聲源的活躍附加信號，該方法還包括將α的值逐漸減小到零。 根據實施例，輸入音頻信號包括雙耳線索編碼下混信號，所述方法還包括通過選擇信道間時間差參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬聲源到達的音頻信號；以及在所述雙耳線索編碼下混信號中插入所述ー個或多個附加聲源代替所述抑制的
音頻信號。根據實施例，輸入音頻信號包括定向音頻編碼信號，所述方法還包括通過選擇方位角和/或高度參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬音源到達的音頻信號；以及在所述定向音頻編碼信號中插入ー個或多個附加聲源代替所述抑制的音頻信號。根據實施例，輸入音頻信號包括定向音頻編碼(DirAC)信號或雙耳線索編碼(BCC)下混信號，所述方法還包括對所述輸入音頻信號施加重新平移處理，以將ー個或多個預定DirAC或BCC信號的能量重新分配到新的空間位置；以及將所述ー個或多個附加聲源插入在由所述ー個或多個預定DirAC或BCC信號釋放的空間位置中。根據本發明的配置提供多個優點。它使得在由原始輸入音頻信號產生的聲場中能夠包括基於音頻信號(例如語音信號)的一個或多個附加聲源，使得即使屬於聲場的原始音頻信號(例如立體音樂)仍在被再現，附加聲源也是可理解的。尤其在立體聲場的情況中，提供了直接的方法，針對有待可理解地與底層聲場混合的ー個或兩個語音信號，釋放非幹渉空間空位。這對於例如社會音樂服務提供了令人愉悅的特徵，其中在「現在收聽」頁面上可獲得「ー鍵通」特徵，從而用戶的朋友可以立即評論聽到的音樂。根據第二方面，提供了一種設備，其包括至少ー個處理器和至少ー個存儲電腦程式代碼的存儲器，其中所述至少一個存儲器和存儲的電腦程式代碼被配置為，通過所述至少一個處理器，使得所述設備至少修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於ー個或多個附加聲源釋放空間空位；以及在不引入與輸入音頻信號的修改聲場空間幹渉的情況下，將所述一個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放空間空位中。根據第三方面，提供了ー種用於處理音頻信號的電腦程式產品，其被存儲在計算機可讀介質中並可在數據處理裝置中被執行，該電腦程式產品包括用於修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於ー個或多個附加聲源釋放空間空位的電腦程式代碼部分；以及用於將所述ー個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放空間中而不引入與輸入音頻信號的修改聲場空間幹渉的電腦程式代碼部分。通過對下面的實施例的詳細公開，本發明的這些和其它方面以及與其相關的實施例將變得顯而易見。


在下文中，將參考附圖更詳細地描述本發明的各個實施例，其中圖la、lb示出分別在沒有空間處理和有空間處理的情況下，聽者在通過耳機播放立體音樂時可以感知到的立體音樂的空間特性；圖2a示出立體拓寬的聲場；圖2b示出圖2a的立體拓寬聲場如何被窄化以對附加信號提供空位；

圖3示出根據實施例的用於產生圖2b的空間效應所需的處理部件的簡化框圖；圖4a示出用於立體信號的中心信道共用音頻分量的特徵；圖4b示出圖4a的聲場如何通過除去中心信道共用音頻分量而被窄化，以為附加信號提供空位；圖5示出根據實施例的用於產生圖4b的空間效應所需的處理部件的簡化框圖；圖6a、6b示出基於重新平移的實施例，其用於釋放多個虛擬音源之間的空間空位；以及圖7示出根據實施例的設備的簡化框圖。
具體實施例方式下面，通過以(立體)音樂作為源材料說明本發明，其中形成用於插入基於語音信號的附加聲源的空間空位。然而，應注意，本發明不僅限於作為源材料的音樂，而是可以在任何類型的具有空間內容的多信道音頻中實施，所述多信道音頻包括電影音軌、電視廣播以及遊戲。另外，可由其他類型的材料代替語音信號，所述材料具有相比於空間音軌的優先權，例如UI聲音和警報。基於兩信道(立體)輸入音頻信號描述第一實施例，但是基本方面還可以應用於多信道輸入音頻信號，如在之後的實施例中所述。通常已知的是，可以這樣修改立體信號所形成的聲場，使得聽者將聲場感知為在兩側延伸超過揚聲器的位置。該處理通常被稱為立體拓寬，其中通常通過從左側輸入向右側擴音器引入串音、且從右側輸入向左側擴音器引入串音而形成該拓寬效應。已知用於擴音器播放和耳機播放的立體拓寬方案。下面，使用耳機播放作為實例，然而在使用兩個近距離隔開的擴音器的情況中，原理是相同的。在兩種情況中，可以假設聲源的位置沿直線或弧線分布，以與在坐在傳統立體設備(其中，擴音器展開相對於聽者的60度角)前的經歷類似地，繞子午面對稱地，相對於聽者從左側延伸到右側。在附圖中，從上方繪製聽者的頭部，三角形表示聽者的鼻子，兩個半球形表示聽者的耳朵，並且通過橢圓區域繪製由聽者感知的聲場。圖la、lb示出聽者在通過耳機播放立體音樂時可以感知到的立體音樂的空間特性。在沒有空間處理的情況下(圖la)，聲場的所有聲源穿過頭部中心從左耳延伸到右耳。在存在通過立體拓寬產生的空間效應的情況下(圖lb)，聲場的極值被外部化，從而ー些聲源表現為從頭部的外部聽到。無論是否使用空間處理，典型立體音軌的聲場(即空間圖像)是密集的，沒有用於塞入附加聲源的間隙。這通過實線橢圓區域繪製出。現在根據尤其應用於立體信號的實施例，原始立體輸入信號的空間圖像被修改，使得基於例如一個或多個附加信號為ー個或多個附加音頻聲源釋放空間空位，從而可以在不引入與原始立體信號的修改的空間圖像的空間幹涉的情況下在釋放的空間空位中插入一個或多個附加聲源。從而，通過從原始聲場(包括，例如音樂)釋放空間空位，可以在原始兩信道立體信號的聲場中包括ー個或多個例如語音信號的附加音頻信號的內容作為附加聲源，從而即使仍在再現例如音樂的立體信號，附加聲源也是可理解的。根據實施例，聲場被窄化，從而在空間圖像中在兩側存在用於附加(例如語音)信號的空間。當左信道L的音頻與右信道R的相同時，立體拓寬對立體信號具有較少或沒有影響。因此，通過將左信道與右信道混合在一起，從而使得輸入到立體拓寬網絡的立體信號的兩個信道比在原始記錄中更加相似，可以人為地窄化聲場。這是通常稱為幅度平移的標準操作。當根據以下公式對兩個信道應用幅度平移吋，實現對聲場寬度的控制
YLΛ (I)
、及IH J V a I八及入J其中α為在0-0. 5之間變化的參數。如公式(I)中所示，當α =0，對立體輸入沒有影響；即L出=L入，且R出=R入。冋樣，當α = 0.5時，使得兩個輸出イ目號相冋；即，L出=R出=O. 5*L入+O. 5*R入。實驗示出，當α的值變為大於約O. 3時，平均立體信號的聲場被充分窄化以在聽者的左側和右側都增加語音信號。這使得例如兩個呼叫者或語音消息被同時聽到，並且在存在聲場的底層音頻信號時仍可被理解。這在圖2a和2b中示出，其中圖2a的(立體拓寬)聲場被窄化，以在聽者兩側為語音信號SI和S2提供空位。應注意，根據將作為聲源被添加到聲場的附加音頻信號(例如非語音信號)的特性，可以利用顯著小於O. 3的α在聽者的ー側或兩側添加一個或多個附加聲源。對於ー些類型的附加音頻信號，例如各種警報或用戶界面聲音，即使小於O. I的α值可以是足夠的。圖3示出用於產生圖2b的空間效應所需的處理部件的示例框圖的實施例。首先，在幅度平移単元300中饋給兩個立體輸入信道L入和R入，所述幅度平移単元300如上所述地通過α的值控制幅度平移處理。利用合適的α值，從幅度平移単元300輸出的聲場被充分窄化，使得可以在窄化聲場的ー側或兩側插入基於音頻信號SI、S2的附加聲源。然後將從兩個立體輸入信道La和R入產生的窄化聲場和基於音頻信號S1、S2的一個或兩個附加聲源饋給到空間處理単元302中。空間處理単元302然後產生將經由耳機播放再現的通過左側L和右側R音頻信號表示的3D空間音頻圖像。根據另ー個實施例，通過在聲場中間提供空位可以窄化聲場。通過在立體輸入中減去兩個信道共有的分量，可以在聲場的中間而不是兩側中的ー側添加基於例如語音信號的聲源。圖4a示出這樣的實例，其中已經根據中心信道提取算法確定聲場的共同分量C。已知很多可用於中心信道提取的算法，並且其通常依賴於使用的環境聲處理。在聲場中，左耳分量L-C/2和右耳分量R-C/2與中心信道(共同分量)C至少部分重疊。通常，不能完全提取中心信道，以避免處理偽像，優選通過適當調節中心信道提取算法的參數允許共同分量相對較寬(如圖4a所示)。如圖4a所示，應用中心信道提取算法的結果為，如果將中心信道(共同)分量C除去，左耳分量L-C/2與右耳分量R-C/2彼此不空間幹渉，而是在它們之間存在空間空位。這在圖4b中示出，其中通過將聲場分割為之間具有空間空位的兩個部分L-C/2和R-C/2而窄化該聲場，從而可將附加音頻信號S作為附加聲源插入聲場而不與原始立體信號的修改空間圖像空間幹涉，同時仍允許所 述附加音頻信號被可理解地聽到。根據實施例，優選將同時出現的聲源的數目限制為一，因為通常在聲場的中心僅存在用於僅僅單個附加聲源的空間空位。例如在附加聲源基於語音信號的情況中，如果幾個人同時說話，則難於識別活躍的說話者，即與常規的具有單聲道播放的遠程電信會議設備類似的現象。圖5示出用於產生圖4b的空間效應所需的處理部件的示例框圖的實施例。首先，將兩個立體輸入信道L入和1 入饋入中心信道提取單元500，其產生基本表示圖4a所示的聲場的輸出信號分量Lc、C和Re。相互非幹涉的左耳分量Lc和右耳分量Re被這樣饋入空間處理單元504，但是在將中心信道(共同)分量C和附加音頻信號S饋入求和単元502之前，將中心信道(共同)分量C乘以l-α，並將附加音頻信號S乘以α。從而，通過調節α的值，可以確定中心信道分量C，基於音頻信號S的附加聲源或所述信號C和S的混合是否被饋入空間處理単元504。空間處理単元504然後產生將經由耳機播放再現的通過左側L和右側R音頻信號表示的3D空間音頻圖像。本領域技術人員容易理解，通過圖3中的空間處理單元302和圖5中的空間處理単元504施加的空間處理方法可以根據使用的應用而變化。而且，由於基本方面還可以應用於擴音器播放，在擴音器播放中施加的空間處理方法優選與耳機播放不同。從而，如此應用的空間處理方法與這裡描述的實施例不是相關的。在上述窄化聲場的實施例中，如果沒有有待包括的基於音頻信號S的附加聲源，聽者以簡化的從而不滿意的方式感知例如音樂的原始音頻信號的空間內容。從而，有利的是，僅當存在具有可聽內容的附加信號時修改聲場並為附加聲源提供空位，例如，在有待引入的附加聲源所基於的附加信號是語音信號的情況中，僅當在各個信號中存在語音活動時，可以修改聲場以對附加聲源提供空位。根據實施例，這通過使得參數α隨時間變化而實施。在參考圖3和5描述的實施例中，當α=ο時，在聲場中沒有用於附加聲源的空位，並且有待引入的附加聲源所基於的語音信道S被靜音。根據實施例,一旦確定應該在聲場中包括附加聲源,在例如一秒的第一預定時段內α的值被逐漸增加到預定值，提供用於原始音頻信號的希望寬度的聲場。從而，獲得舒適和愉悅的空間效應。應注意，α的最大值為用於窄化聲場的O. 5和用於除去中心信道的I。根據另ー個實施例，將基於信號S的附加聲源的饋給延遲(第一)預定時段，該時段與將α増加到預定值花費的時長相同。這允許可以在例如語音的附加聲源被聽到之前修改聲場。根據實施例，當在第二預定時段(例如5秒衝已經沒有活躍的附加信號吋，則使用與増加α時相同的逐漸更新方案但是當然以相反地方式將α的值減小到零。已經結合兩信道(立體)輸入音頻信號描述了上述實施例，但是如上所述，基本方面也可應用於多信道輸入音頻信號。本領域技術人員可以了解，可以使用不同方法進行空間處理，並且例如可以將立體拓寬僅僅看作對兩信道輸入起作用的特定例子。從而，所述實施例的基本方面可以概括為修改包括兩個或更多個音頻信道的輸入音頻信號的空間圖像，使得對於基於例如ー個或多個附加音頻信號的一個或多個附加聲源釋放空間空位，從而可以將所述ー個或多個附加聲源插入到釋放的空間空位中，而不引入與原始輸入信號的修改空間圖像的空間幹渉，並在輸入音頻信號的修改空間圖像的釋放空間空位中插入所述ー個或多個附加聲源。從而，在具有兩個以上信道的多信道輸入音頻的情況中，同樣，可以將ー個或多個附加聲源插入聲場，使得即使在仍然再現所述多信道音頻信號的情況下，仍可理解所述附加聲源。多個稱為「虛擬環繞」的音頻處理算法利用人類聽覺系統的特性產生由多於實際存在的聲源所產生的聲場的感覺。這些算法可以基於對以下各項的使用頭相關傳輸函數(HRTF)、參數音頻編碼技術(如雙耳線索編碼(BCC))、反射或散射聲源或其組合。這些算法 中的多個至少在ー些處理階段可以包括兩個以上的信道信號。在雙耳線索編碼(BCC)中，編碼器利用例如傅立葉變換或QMF過濾帶技術將輸入信號變換為頻域，並且然後進行空間分析。對於每個輸入幀中的每個頻率子帶估計信道間級別差(ILD)和時間差(ITD)參數以及附加參數。與通過組合輸入信號產生的下混音頻信號一起，這些參數被傳輸為邊信息(side information)ο在定向音頻編碼(DirAC)中，通過將輸入信號分割到頻帶中而分析來自空間傳聲器系統(諸如B格式聲場傳聲器)的信號。對於每個時刻和頻帶獨立地估計到達方向和擴散。以全方向傳聲器信號傳輸由每個頻帶的方位角、高度和擴散值構成的空間邊信息。 根據實施例，如果音頻信號已經被BCC或DirAC編碼，有可能抑制來自特定(虛擬)空間方向的聲音。例如，從N個空間方向，可以抑制一個或多個空間方向以對將混合在其中的一個或多個附加聲源提供空間空位，然後可以插入基於例如附加音頻信號的附加聲源代替所抑制的虛擬聲源。在實踐中，這可以通過在參數域中處理邊信息而實施。例如，在BCC編碼信號中，可以抑制具有處於特定範圍的ITD的子帯。在DirAC編碼信號中，可以抑制具有特定方位角和/或高度值的子帯。重新平移是ー種基本應用於立體音軌的音頻處理方法，其將特定空間位置中的能量映射到新的空間位置。根據實施例，對BCC或DirAC編碼信號施加重新平移。從而，通過將特定BCC或DirAC編碼信號的能量重新分配到新的空間位置，可以從聲場釋放空間空位，以允許在聲場中包括一個或多個附加聲源，同時仍可以理解原始信號中的基本全部內容。圖6a和6b示出該實施例的原理。在圖6a中，在聲場中等距地分布以數字I至7表示的聲場的虛擬音源。在圖6b中，作為重新平移處理的結果，將虛擬音源I至3和4至7分別擠壓到一起並分開放入兩組中，從而為位於聽者的略靠左的附加音頻信號S提供空位。在專利申請公開US2008/0298610 「Parameter Space Re-Panning for SpatialAudio」中更詳細地描述了用於通過重新平移提供空間空位的處理，其整體內容在此引入作為參考。根據實施例，聲場不限於位於聽者的前方/側面，如果使用例如頭部跟蹤的高級渲染技術，聲場也可以延伸到聽者的後方。
本領域技術人員可以理解，上述任一實施例可以與ー個或多個其他實施例組合地實施，除非清楚地或明確地陳述特定實施例僅是相互可替換的。圖7示出設備(即數據處理裝置(TE))的簡化結構，其中可以實施根據實施例的聲場修改方法。該數據處理裝置(TE)例如可以是移動終端、PDA裝置或個人計算機(PC)。數據處理單元(TE)包括I/O裝置(I/O)、中央處理單元(CPU)和存儲器(MEM)。存儲器(MEM)包括只讀存儲器ROM部分和可重寫部分，諸如隨機存取存儲器RAM和快閃記憶體。通過I/O裝置(I/O)向/從中央處理單元(CPU)傳輸用於與不同的外部方(例如⑶-ROM、附加裝置和用戶)通信的信息。如果數據處理裝置被實施為移動站，其通常包括收發器Tx/Rx，該收發器Tx/Rx通常通過天線(ANT)與無線網絡(通常與收發器基站(BTS))通信。用戶界面(UI)設備通常包括顯示器、鍵盤、傳聲器和用於耳機的連接裝置。數據處理裝置還可以包括連接裝置MMC,諸如標準形式插槽，用於各個硬體模塊或集成電路1C，其可以提供將在數據處理裝置中運行的各個應用。·因此，可以在中央處理單元CPU或數據處理裝置的專用數位訊號處理器DSP (參數編碼處理器)、以及存儲電腦程式代碼的至少ー個存儲器MEM中執行根據實施例的聲場修改方法，其中所述至少一個存儲器和存儲的電腦程式代碼被配置為，通過至少ー個處理器，使得所述設備至少修改兩個或更多個音頻信號的空間圖像，使得對於ー個或多個附加音頻信號釋放空間空位，所述空間空位在所述兩個或更多個音頻信號之間沒有空間幹渉，然後將所述ー個或多個附加音頻信號插入到兩個或更多個音頻信號的空間圖像的釋放空間空位中。從而，可以在諸如移動站的設備中將實施例的功能實施為電腦程式，所述電腦程式當在中央處理單元CPU或專用數位訊號處理器DSP中被執行吋，使得終端裝置進行本發明的過程。電腦程式SW的功能可以被分布到彼此連接的幾個分離的程序構件中。計算機軟體可以被存儲到任何存儲器裝置中，諸如PC的硬碟或CD-ROM盤，從該存儲器裝置可以將計算機軟體裝載到移動終端的存儲器中。還可以通過網絡，例如利用TCP/IP協議棧裝載計算機軟體。還可以使用硬體方案或硬體和軟體方案的組合來實現本發明裝置。相應地，上述電腦程式產品可以在硬體模塊中至少部分被實現為硬體方案，例如ASIC或FPGA電路，所述硬體模塊包括用於將該模塊連接到電子裝置的連接裝置，或者被至少部分地實現為ー個或多個集成電路1C，該硬體模塊或IC還包括用於進行所述程序代碼任務的各個裝置，所述裝置被實現為硬體和/或軟體。顯然，本發明不僅僅限於上述實施例，而是可以在所附權利要求的範圍內修改。
權利要求
1.一種方法，包括 修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於一個或多個附加聲源釋放空間空位；以及 在不引入與輸入音頻信號的修改聲場空間幹涉的情況下，將所述一個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放的空間空位中。
2.根據權利要求I所述的方法，其中所述輸入音頻信號包括兩信道立體信號，所述方法還包括 通過對輸入音頻信號施加幅度平移處理而窄化兩信道立體信號所產生的聲場；以及 在所窄化的聲場的至少任一側插入一個附加聲源。
3.根據權利要求2的方法，其中根據以下公式對所述兩信道立體信號的輸入信號分量施加幅度平移處理
4.根據權利要求3所述的方法，其中如果一個或多個附加聲源基於語音信號，則α的值被調節為約O. 3或更高。
5.根據權利要求I所述的方法，其中輸入音頻信號包括兩信道立體信號，所述方法還包括 基於立體信號共有的音頻分量確定中心信道音頻分量； 通過除去中心信道音頻分量而窄化所述兩信道立體信號所產生的聲場；以及 在聲場的極值之間的非幹涉空間中插入附加聲源。
6.根據權利要求5所述的方法，其中分別根據因子l-α和α相互成比例地進行所述除去中心信道音頻分量和所述插入附加聲源。
7.根據權利要求3或6所述的方法，其中α的值被隨時間變化地調節。
8.根據權利要求7所述的方法,其中一旦確定應該在兩信道立體信號產生的聲場中包括附加聲源，該方法還包括 在第一預定時段，例如一秒，中將α的值逐漸增加到預定值，諸如其最大值。
9.根據權利要求8所述的方法，還包括 將附加聲源的饋給延遲所述第一預定時段。
10.根據權利要求8或9所述的方法，其中一旦確定在第二預定時段中未檢測到產生所述附加聲源的活躍附加信號，該方法還包括 將α的值逐漸減小到零。
11.根據權利要求I的方法，其中輸入音頻信號包括雙耳線索編碼下混信號，所述方法還包括 通過選擇信道間時間差參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬音源到達的音頻信號；以及 在所述雙耳線索編碼下混信號中插入所述一個或多個附加聲源代替所述抑制的音頻信號。
12.根據權利要求I所述的方法，其中所述輸入音頻信號包括定向音頻編碼信號，所述方法還包括 通過選擇方位角和/或高度參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬音源到達的音頻信號；以及 在所述定向音頻編碼信號中插入所述一個或多個附加聲源代替所述抑制的音頻信號。
13.根據權利要求I所述的方法，其中輸入音頻信號包括定向音頻編碼(DirAC)信號或雙耳線索編碼(BCC)下混信號，所述方法還包括 對所述輸入音頻信號施加重新平移處理，以將一個或多個預定DirAC或BCC信號的能量重新分配到新的空間位置；以及 在由所述一個或多個預定DirAC或BCC信號釋放的空間位置中插入所述一個或多個附加聲源。
14.一種設備，其包括至少一個處理器和至少一個存儲電腦程式代碼的存儲器，其中所述至少一個存儲器和存儲的電腦程式代碼被配置為，通過所述至少一個處理器，使得所述設備至少 修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於一個或多個附加聲源釋放空間空位；以及 在不引入與輸入音頻信號的修改聲場空間幹涉的情況下，將所述一個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放的空間空位中。
15.根據權利要求14所述的設備，其中所述輸入音頻信號包括兩信道立體信號，其中所述至少一個存儲器和存儲的電腦程式代碼還被配置為，通過所述至少一個處理器，使得所述設備至少 通過對輸入音頻信號施加幅度平移處理而窄化所述兩信道立體信號所產生的聲場；以及 在所窄化的聲場的至少任一側插入一個附加聲源。
16.根據權利要求15所述的設備，其中所述幅度平移處理被配置為根據以下公式被施加到所述兩信道立體信號的輸入信號分量
17.根據權利要求16所述的設備，其中如果一個或多個附加聲源基於語音信號，則α的值被設置為被調節為約O. 3或更高。
18.根據權利要求14所述的設備，其中所述輸入音頻信號包括兩信道立體信號，其中所述至少一個存儲器和存儲的電腦程式代碼還被配置為，通過所述至少一個處理器，使得所述設備至少 基於立體信號共有的音頻分量確定中心信道音頻分量； 通過除去中心信道音頻分量而窄化兩信道立體信號產生的聲場；以及 在聲場的極值之間的非幹涉空間中插入附加聲源。
19.根據權利要求18所述的設備，其中所述除去中心信道音頻分量和所述插入附加聲源被配置為分別根據因子I-α和α相互成比例地進行。
20.根據權利要求16或19所述的設備，其中α的值被配置為隨時間變化地被調節。
21.根據權利要求20所述的設備,其中一旦確定應該在兩信道立體信號產生的聲場中包括附加聲源，所述至少一個存儲器和存儲的電腦程式代碼進一步配置為，經由至少一個處理器，使得所述設備至少 在第一預定時段，例如一秒，中將α的值逐漸增加到預定值，諸如其最大值。
22.根據權利要求21所述的設備，還包括 將附加聲源的饋給延遲所述第一預定時段。
23.根據權利要求21或22所述的設備，其中一旦確定在第二預定時段中未檢測到產生所述附加聲源的活躍附加信號，所述至少一個存儲器和存儲的電腦程式代碼被進一步配置為，經由至少一個處理器，使得所述設備至少 將α的值逐漸減小到零。
24.根據權利要求14所述的設備，其中所述輸入音頻信號包括雙耳線索編碼下混信號，所述至少一個存儲器和存儲的電腦程式代碼進一步配置為，經由至少一個處理器，使得所述設備至少 通過選擇信道間時間差參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬音源到達的音頻信號；以及 在所述雙耳線索編碼下混信號中插入所述一個或多個附加聲源代替所述抑制的音頻信號。
25.根據權利要求14所述的設備，其中所述輸入音頻信號包括定向音頻編碼信號，所述至少一個存儲器和存儲的電腦程式代碼進一步配置為，經由至少一個處理器，使得所述設備至少 通過選擇方位角和/或高度參數在將抑制的預定範圍內的子帶，抑制從至少一個虛擬音源到達的音頻信號；以及 在所述定向音頻編碼信號中插入所述一個或多個附加聲源代替所述抑制的音頻信號。
26.根據權利要求14所述的設備，其中所述輸入音頻信號包括定向音頻編碼(DirAC)信號或雙耳線索編碼(BCC)下混信號，所述至少一個存儲器和存儲的電腦程式代碼進一步配置為，經由至少一個處理器，使得所述設備至少 對所述輸入音頻信號施加重新平移處理，以將一個或多個預定DirAC或BCC信號的能量重新分配到新的空間位置；以及 在由所述一個或多個預定DirAC或BCC信號釋放的空間位置中插入所述一個或多個附加聲源。
27.一種用於處理音頻信號的電腦程式產品，其被存儲在計算機可讀介質中並可在數據處理裝置中被執行，該電腦程式產品包括 用於修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於一個或多個附加聲源釋放空間空位的電腦程式代碼部分；以及 用於在不引入與輸入音頻信號的修改聲場空間幹涉的情況下，將所述一個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放的空間空位中的電腦程式代碼部分。
全文摘要
一種方法，包括修改包括兩個或更多個音頻信道的輸入音頻信號所產生的聲場，使得對於一個或多個附加聲源釋放空間空位；以及在不引入與輸入的音頻信號的修改聲場空間幹涉的情況下，將所述一個或多個附加聲源插入到所述輸入音頻信號的修改聲場的釋放空間空位中。
文檔編號H04S7/00GK102860048SQ201080064811
公開日2013年1月2日 申請日期2010年2月26日 優先權日2010年2月26日
發明者O·柯克比, J·維羅萊寧 申請人:諾基亞公司