輸入命令的裝置和方法，顯示媒體信號的用戶界面的方法及其實現裝置，處理混合信號的...的製作方法

2023-06-10 22:10:41 2

專利名稱：輸入命令的裝置和方法，顯示媒體信號的用戶界面的方法及其實現裝置，處理混合信號的 ...的製作方法
技術領域：
本發明涉及輸入裝置及其方法，且更具體地涉及輸入控制混合信號所需命 令的裝置及其方法。本發明涉及用於顯示混合信號的界面的裝置及其方法。盡 管本發明適用於廣泛範圍的應用，但尤其適用於向用戶提供用於諸如音頻信號 和視頻信號等混合信號的界面。並且，本發明涉及用於處理混合信號的裝置及 其方法。
背景技術：
一般而言，用戶最頻繁且廣泛地生成並使用立體聲信號。近來，多聲道信 號傾向於被普遍使用。然而，對不是由源信號單元處理而是由聲道信號單元處 理的混合信號設置有限制。所以，在由聲道信號單元處理混合信號的情形中， 不能獨立地處理構成混合信號的特定源信號。例如，在觀看電影時不可能在演 員語音的音量保持不變的同時僅提高背景音樂的音量。
此外，為了按照源——即按照特定源信號——獨立地處理和再混合混合信 號(或合成對象信號)，用戶必需按照源信號提高或降低音量級(或通過將級 別設為0來靜音)或調節源信號的相對位置
發明內容
技術問題
然而，根據相關技術的遙控器僅能夠調節混合信號的總音量級，但不能調 節混合信號或其周圍環境中包括的源信號的音量級。
此外，為了按照源——即按照源信號一一再混合混合信號(或合成對象信 號)，用戶必需知曉對應的混合信號中包括哪類源信號。例如，在混合信號包 括音樂文件的情形中，用戶必需知曉與音樂文件相關聯的源信號是否對應於鋼
8琴、小提琴、長笛等。然而，在相關技術中，僅顯示關於混合信號(或合成對 象信號)的信息。所以，出現的問題是不顯示指示與混合信號相關聯的源信號 的信息的內容的信息。
技術方案
因此，本發明涉及一種基本上消除了一個或多個由於相關技術的局限和缺 點引起的問題的輸入控制混合信號所需的命令的裝置及其方法，顯示混合信號 的界面的裝置及其方法，以及處理混合信號的裝置及其方法。
本發明的一個目的是提供一種輸入裝置及其方法，通過它可按照包括在諸 如視頻信號、音頻信號等的混合信號中的源信號調節音量級，或者通過它可調 節周圍環境(相對位置)。
本發明的另一個目的是提供一種用於顯示混合信號的界面的裝置及其方 法，通過它可顯示關於與混合信號(或合成對象信號)相關聯的源信號(或對 象信號的信息，以使用戶能夠時刻檢査該信息。
本發明的另一個目的是提供一種用於顯示混合信號的界面的裝置及其方
法，通過它可經由圖形用戶界面(GUI)提供關於與混合信號(或合成對象信 號)相關聯的源信號(或對象信號)的信息。
本發明的另一個目的是提供用於顯示混合信號的界面的裝置及其方法，通 過它表示與混合信號(或合成對象信號)相關聯的源信號的圖像可通過在再現 諸如音頻信號、視頻信號等混合信號(或合成對象信號)過程中按時間不同地 改變而被顯示。
本發明的另一個目的是提供一種在包括在混合信號中的源信號不單獨存 在的情形中利用類似源信號的信號生成按照源信號的輔助信息的方法。
本發明的另一個目的是提供一種利用混合信號在解碼器中生成輔助信息 的方法及其裝置，其中該輔助信息用於再混合該混合信號。
本發明的另一個目的是提供一種用於由用戶提供的源信號替換混合信號 中所包括的特定源信號的裝置及其方法。
本發明的另一個目的是提供一種用於處理信號的裝置及其方法，通過它用 戶能夠利用源信號修改混合信號。本發明的另一個目的是提供一種用於處理信號的裝置及其方法，通過它用 戶能夠通過源信號單元控制混合信號。
本發明的另一個目的是提供一種用於處理信號的裝置及其方法，通過它用 戶能夠接收通過再混合信息提供伺服器傳送的特定的再混合信息。
本發明的另 一個目的是提供一種用於處理信號的裝置及其方法，通過它由 用戶生成的再混合信息能夠被上傳到再混合信息提供伺服器。
本發明的又一個目的是提供一種用於處理信號的裝置及其方法，通過它可 接收或生成部分源信號從其排除的混合信號。
本發明的其它特徵和優點將在以下的描述中闡述，並且部分地將從描述中
顯而易見，或者可從本發明的實踐中獲知。本發明的目的和其它優點可由書面 說明書及其權利要求書和附圖中具體指出的結構來實現並獲得。
為了實現這些目的和其它優點並根據本發明的目的，如本文具體體現 並廣泛描述的，根據本發明的輸入裝置包括輸入單元；控制單元，其將 經由輸入單元接收的輸入信號轉換成按照源的菜單顯示命令，該控制單元 根據按照源的菜單顯示命令基於對應於混合信號的源信息控制要輸出的按 照源的菜單顯示圖像；以及用於輸出按照源的菜單顯示的顯示器。
優選地，該輸入裝置還包括定位設備，且控制單元將經由定位設備接收 的輸入信號轉換成按照源的能級調節命令。
優選地，該輸入裝置還包括方向鍵，且控制單元將經由方向鍵接收的輸入 信號轉換成按照源的能級調節命令。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發 明的輸入裝置包括輸入單元；控制單元，其將經由輸入單元接收的輸入 信號轉換成按照源的菜單顯示命令；以及無線通信單元，其將控制單元轉 換的命令發送到外部設備。
優選地，該無線通信單元從外部設備接收關於按照源的菜單圖像的數據， 且還可包括用於顯示按照源的菜單圖像的顯示器。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發 明的輸入裝置包括輸入單元；以及控制單元，其將經由輸入單元接收的 輸入信號轉換成語音靜音命令或語音能級調節命令，控制單元基於所述語音靜音命令或語音能級調節命令輸出關於混合信號的控制信息。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的輸入裝置包括輸入單元；控制單元，其將經由輸入單元接收的輸入信號 轉換成環境圖像顯示命令，控制單元根據環境圖像單顯示命令基於對應於 混合信號的源信息控制要輸出的環境圖像；以及顯示器，所述環境圖像被 輸出到顯示器。
優選地該輸入裝置還包括定位設備或方向鍵，且控制單元將經由定位設備 或方向鍵接收的輸入信號轉換成環境調節命令，然後基於環境調節命令輸出關 於混合信號的控制信息。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的輸入裝置包括輸入單元；控制單元，其將經由輸入單元接收的輸入信號 轉換成源聲音靜音命令，控制單元基於源聲音靜音命令輸出關於混合信號 的控制信息，其中源聲音靜音命令使混合信號中所包括的特定源信號不被 回放。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的輸入方法包括接收快捷鍵寄存命令；選擇多個鍵中的一個、多個源中的 一個和至少一個或多個功能中的一個；以及通過將針對所選源的所選功能
匹配到所選鍵來存儲，其中多個所述源包括音頻信號源和視頻信號源中的 至少一個，其中至少一個功能包括聲音靜音、環境調節和能級調節中的至
少一個。
優選地，在選擇時，選擇多個數字鍵中的一個。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的輸入裝置包括輸入單元，用於選擇多個鍵中的一個、多個源中的一個和 至少一個或多個功能中的一個；存儲單元，用於存儲關於多個鍵中的每一 個的命令信息；以及控制單元，其將針對所選源的所選功能匹配到所選鍵， 控制單元在存儲單元中存儲匹配的結果，其中多個源包括音頻信號對象和 視頻信號對象中的至少一個，其中至少一個功能包括聲音靜音、環境調節 和能級調節中的至少一個。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的顯示混合信號的接口的方法包括選擇特定混合信號；以及通過詢問有關 對應於混合信號的源信號的信息顯示源信號的列表，其中在選擇混合信號 時維持顯示。
優選地，關於源信號的信息可從對應於混合信號的輔助信息提取。
優選地，源信號的列表包括樂器名稱、演奏者名和混合信號所包括的源信 號的特性中的至少一個。
優選地，該方法可進一步包括從源信號列表中選擇單個源；以及進一 步顯示針對所選源的元數據。
更優選地，元數據從對應於混合信號的輔助信息中提取，且可包括源信號 的樂器、演奏者名和出品數據中的至少一個。
優選地，該方法還可包括從源信號列表選擇單個源；以及進一步顯示針對 所選源的音量級調節圖像。
優選地，該方法還可包括從源信號列表選擇單個源；以及顯示針對所選源 的均衡器調節圖像。
優選地，該方法還可包括從源信號列表選擇單個源；以及顯示針對所選源 的環境調節圖像。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的一種用於顯示混合信號的界面的裝置，包括用於選擇多個混合信號之 一的輸入單元；控制單元，其通過詢問關於對應於混合信號的源信號的信 息顯示源信號的列表；以及用於顯示源信號的列表的顯示器，其中在選擇 混合信號時維持顯示。
優選地，裝置還包括第二顯示器，其中輸入單元從源信號的列表選擇 單個源並且控制單元在第二顯示器上顯示針對所選源的元數據、音量級調 節圖像、均衡器調節圖像和環境調節圖像中的至少一個。
優選地，顯示器可通過多個發光器件的閃爍存在與否來顯示源信號的列表。
更優選地，顯示器和第二顯示器可用單個面板來構造。 為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的一種顯示混合信號的界面的方法包括選擇特定混合信號；以及通過詢
12問關於對應於混合信號的源信號的信息基於關於源信號的信息顯示對應於 源信號的圖標。
優選地，關於源信號的信息是從對應於混合信號的輔助信息提取的。
優選地，該方法還可包括提取對應於混合信號的元數據。並且，該圖標可 包括匹配元數據的圖像。
更優選地，元數據是從對應於混合信號的輔助信息中提取的，且可包括源 信號的樂器演奏者名、歌手名中的至少一個。
優選地，該方法還可包括如果接收到關於圖標之一的執行命令，則顯示對 應於所選圖標的源信號的能級調節圖像。
優選地，該方法還可包括如果接收到關於能級調節的命令，則根據經調節 的能級改變所選圖標的形狀。並且，所選圖標的形狀包括大小、顏色、亮度和 圖像內的位置中的至少一個。
優選地，該方法還可包括如果選擇圖標之一，則顯示對應於所選圖標的源 信號的均衡器圖像。
更優選地，該方法還可包括如果接收到按照子頻帶的能級調節命令，則通 過調節對應於所選圖標的源信號的子頻帶能級來再混合該混合信號。
優選地，該方法還可包括如果選擇圖標之一，則顯示對應於所選圖標的源 信號的環境調節圖像。並且，環境調節圖像顯示按照源的信號相對位置。
優選地，該方法還可包括如果接收到關於環境調節的命令，則改變所選圖 標的形狀。並且，所選圖標的形狀可包括大小、顏色和亮度中至少一個。
優選地，該方法還可包括如果接收到關於環境調節命令的信號，則通過調 節對應於所選圖標的源信號的相對位置來再混合該混合信號。並且，可根據另 一個源的位置和虛擬用戶位置確定相對位置。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的一種用於顯示混合信號的界面的裝置，包括用於選擇多個混合信號之一 的輸入單元；控制單元，其基於關於與輸入單元所選擇的混合信號相對應
的源信號的信息顯示對應於源信號的圖標；以及顯示單元，用於顯示對應 於源信號的圖標。
優選地，該裝置還可包括存儲按照圖標的圖像數據的存儲單元。並且，該圖標可包括存儲在存儲單元中的圖像數據。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明 的顯示混合信號的界面的方法，包括接收關於混合信號的回放命令；以 及如果對應於混合信號的源信號的能級按時間改變，則通過按時間改變形 狀顯示源信號的圖像的形狀，其中圖像的形狀包括大小、顏色、亮度和圖 像內的位置中的至少一個。
優選地，源信號的能級包括源信號的按照子頻帶的能級。並且，顯示可包 括部分地改變源信號的圖像的形狀。
優選地，顯示包括將除在特定定時點具有最高能級的源信號外的源信號的 圖像大小設置為0。
優選地，圖像可匹配對應於混合信號的元數據。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的 顯示混合信號的界面的裝置，包括用於輸入混合信號的回放命令的輸入單 元；控制單元，如果對應於混合信號的源信號的能級按時間改變，則控制 單元通過按時間改變形狀來控制要顯示的源信號的圖像的形狀；以及顯示 單元，用於顯示對應於源信號的圖像，其中圖像的形狀包括大小、顏色、 亮度和圖像內的位置中的至少一個。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的 由經由通信網絡連接到用戶終端的再混合信息提供伺服器實施的處理信號 方法，包括由用戶終端請求再混合信息；以及將所請求的再混合信息發 送到用戶終端，其中再混合信息包括混合信號、混合信號中所包括的源信 號、用於按照源信號控制混合信號的混合參數、用於擴展混合混合信號的 擴展混合信號以及用於表示源信號的圖標或圖示中的至少一個。
優選地，再混合信息包括通過從混合信號所包括的源信號中排除部分源信 號生成的經修改的混合信號。
更優選地，如果用戶終端請求發送經修改的混合信號，則方法還包括 使用戶能夠選擇要從混合信號排除的源信號；以及生成排除了所選源信號 的經修改的混合信號，其中在發射時，經修改的混合信號被發送到用戶終 端。
14優選地，發送包括如果對再混合信息進行支付，則將再混合信息發送 到用戶終端。
更優選地，再混合信息提供伺服器經由通信網絡連接到銀行機構或移 動通信服務提供商，並且支付以以下方式進行向用戶終端請求用戶終端 認證信息，通過將用戶終端輸入的認證信息發送到銀行機構或移動通信服 務提供商來請求認證，且如果用戶終端認證完成，則通過將支付信息發送 到銀行機構或移動通信服務提供商來請求支付。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的 由經由通信網絡連接到再混合信息提供伺服器的用戶終端實施的處理信號 方法，包括通過訪問再混合信息提供伺服器來請求再混合信息；將由再 混合信息提供伺服器請求的支付信息發送到再混合信息提供伺服器；以及 如果進行支付，則從再混合信息提供伺服器接收再混合信息，其中再混合 信息包括混合信號、混合信號中包括的源信號、用於按照源信號控制混合 信號的混合參數、用於擴展混合混合信號的擴展混合信號以及用於表示源 信號的圖標或圖示中的至少一個。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的 經由通信網絡連接到用戶終端的再混合信息提供伺服器，包括收發單元，
其具有用戶終端請求的再混合信息，該收發單元將所請求的再混合信息發 送到用戶終端；資料庫單元，其響應於用戶終端的請求提取所請求的再混
合信息；支付處理單元，如果再混合信息的使用要付費，則支付處理單元 處理關於再混合信息使用的支付；以及控制單元，其控制由用戶終端請求 的要發送到用戶終端的再混合信息，其中再混合信息包括混合信號、混合 信號中包括的源信號、用於按照源信號控制混合信號的混合參數、用於擴 展混合該混合信號的擴展混合信號以及用於表示源信號的圖標或圖示中的 至少一個。
為了進一步實現這些目的和其它優點並根據本發明的目的，根據本發明的 通過通信網絡連接到再混合信息提供伺服器的用戶終端，包括通信單元， 其向再混合信息提供伺服器請求再混合信息，該通信單元接收所請求的再 混合信息；用於接收控制信息的用戶界面；再混合渲染單元，其利用再混
15合信息和控制信息再混合包括在混合信號中的源信號；以及控制單元，其 通過全面地控制用戶終端控制混合信號中包括的要再混合的源信號，其中 再混合信息包括混合信號、混合信號中包括的源信號、用於按照源信號控 制混合信號的混合參數、用於擴展混合混合信號的擴展混合信號以及用於 表示源信號的圖標或圖示中的至少一個。
應理解，以上的一般描述和以下的詳細描述是示例性和說明性的，並且旨 在提供對如所要求保護的本發明的進一步解釋。
有益效果
根據本發明的一個實施例，可按照包括在諸如視頻信號、音頻信號等混合 信號中的源信號調節音量級，或者可調節周圍環境。因此，用戶便於再混合混 合信號。
根據本發明的另一個實施例，能夠從混合信號中包括的源中僅去除人類語 音或僅調節語音的音量級。因此，用戶能夠在回放音樂文件的過程中僅通過利 用輸入設備(遙控器)簡單地去除歌手的語音來聽伴奏音樂。
根據本發明的另一個實施例，在用戶已經將用戶頻繁再混合的源登記為特 定鍵(例如，數字鍵#1)的快捷鍵後，當用戶利用快捷鍵按照源調節能級或調 節環境時，用戶便於利用輸入設備(例如遙控器)執行設置成適合用戶口味的 再混合。
根據本發明的另一個實施例，因為有關與混合信號(或合成對象信號)相 關聯的源信號(或對象信號)的信息被保持顯示在屏幕上，所以用戶能夠在再 現或再混合該混合信號的過程中檢査哪種源被包括在混合信號中。
根據本發明的另一個實施例，因為用戶總是能夠在再現或再混合該混合信 號的過程中檢査哪種源(按照樂器的音頻信號等)被包括在混合信號中，所以 在按照源調節能級或調節環境之前沒有必要執行確認哪種源被包括在混合信 號中的過程。
根據本發明的另一個實施例，因為有關與混合信號(或合成對象信號)相 關聯的源信號(或對象信號)的信息被保持顯示在屏幕上，所以用戶能夠在再 現或再混合該混合信號的過程中檢査哪種源被包括在混合信號中。
16根據本發明的另一個實施例，因為用戶總是能夠在再現或再混合該混合信 號的過程中檢査哪種源(按照樂器的音頻信號等)被包括在混合信號中，所以 在按照源調節能級或調節環境之前沒有必要執行確認哪種源包括在相應混合 信號中的過程。
並且，在根據本發明的信號處理方法中，用戶接收從再混合信息提供服務 器發送的再混合信息並使用它。
此外，在根據本發明的信號處理方法和裝置中，提供並使用其中排除了特 定源信號的經修改的混合信號。
此外，在根據本發明的信號處理方法中，用戶生成或修改再混合信息然後 能夠將對應的再混合信息上傳到再混合信息提供伺服器。
附圖描述
包括於此以提供對本發明的進一步理解、並被結合在本申請中且構成其一 部分的附圖示出本發明的實施方式，其與說明書一起可用來解釋本發明的原理。
在附圖中


圖1是根據本發明的一個實施例的第一信號處理裝置的框圖2是在使用立體聲信號的情形中圖1所示的第一信號處理裝置的詳細框
圖3是根據本發明的一個實施例的用於處理媒體信號的域圖； 圖4是根據本發明的一個實施例的第二信號處理裝置的框圖； 圖5是根據本發明的一個實施例的第三信號處理裝置的框圖； 圖6是在使用立體聲信號的情形中圖5所示的第三信號處理裝置的詳細框
圖7是根據本發明的一個實施例的第四信號處理裝置的框圖； 圖8是根據本發明的一個實施例的一般編碼設備和信號處理裝置的組合 配置的框圖9是根據本發明的一個實施例的一般解碼設備和信號處理裝置的組合 配置的框圖；圖10是根據本發明的一個實施例的第五信號處理裝置的框圖11是根據本發明的一個實施例的輸入裝置的框圖12是根據本發明的一個實施例的輸入裝置的示例圖13是在已經輸入第一輸入單元(源菜單鍵)之後顯示的圖像的示例圖14是在已經輸入第二輸入單元(語音靜音鍵)之後顯示的圖像的示例
圖15是在己經輸入第三輸入單元(語音調節鍵)之後顯示的圖像的示例
圖16是在已經輸入第四輸入單元(環境調節鍵)之後顯示的圖像的示例
圖17是在已經輸入第五輸入單元的第一源鍵(鋼琴鍵)之後顯示的圖像 的示例圖18是在已經輸入第五輸入單元的第二源鍵(小提琴鍵)之後顯示的圖 像的示例圖19是根據本發明的另一個實施例的輸入裝置的框圖； 圖20是根據本發明的一個實施例的互連至輸入裝置的第一再混合信號解 碼設備的框圖21是根據本發明的另一個實施例的互連至輸入裝置的第二再混合信號 解碼設備和第二界面設備的框圖22是根據本發明實施例的輸入方法的流程圖23是在已經輸入快捷鍵登記命令之後顯示的圖像的示例圖24是根據本發明的一個實施例的界面顯示裝置的框圖25A和圖25B是根據本發明的一個實施例的界面顯示裝置的實現的示
例圖26是在選擇特定源時在第一顯示器和第二顯示器上顯示的圖像的示例
圖27是在選擇特定源時在第一顯示器和第二顯示器上顯示的圖像的另一 個示例圖28是在選擇特定源時在第一顯示器和第二顯示器上顯示的圖像的又一
18個示例圖；圖29是在選擇特定源時在第一顯示器和第二顯示器上顯示的圖像的再一 個示例圖；圖30是根據本發明的另一個實施例的界面顯示裝置的框圖；圖31是根據本發明實施例的界面顯示方法的流程圖；圖32是根據本發明的一個實施例的界面顯示裝置的框圖；圖33A至圖33D是根據本發明的一個實施例的界面顯示裝置的實現的示例圖；圖34是根據本發明的另一個實施例的界面顯示裝置的框圖； 圖35A和圖35B是根據本發明的一個實施例的界面顯示方法的流程圖； 圖36A是其上顯示按照特定混合信號的源信號的圖標的屏幕的示例圖； 圖36B是其中按照特定混合信號的源信號的圖標表示元數據的圖像的示例圖；圖37A是能級調節圖像的示例圖；圖37B是其上根據經調節的能級修改圖標的形狀的圖像的示例圖；圖38是均衡器圖像(按照子頻帶能級調節圖像)的示例圖；圖39是環境調節圖像(相對位置調節圖像)的示例圖；圖40是根據本發明的又一個實施例的界面顯示裝置的框圖；圖41是根據本發明的再一個實施例的界面顯示裝置的框圖；圖42是根據本發明的另一個實施例的界面顯示方法的流程圖；圖43是其上圖像的大小與源信號的能級成比例地變化的屏幕的示例圖；圖44是其上圖像的亮度與源信號的能級成比例地變化的屏幕的示例圖；圖45和圖46是其上僅顯示源信號中具有最高能級的圖像的屏幕的示例圖；圖47是根據本發明實施例的再混合信息提供系統的示意圖； 圖48是根據本發明實施例的再混合信息提供伺服器的框圖； 圖49是根據本發明實施例的再混合信息提供伺服器的模塊的框圖； 圖50是根據本發明實施例的從再混合信息提供伺服器提供再混合信息的 方法的流程圖；圖51是根據本發明實施例的向用戶終端提供再混合信息的方法的流程圖；圖52是根據本發明實施例的將再混合信息從用戶處發送至再混合提供服 務器的方法的流程圖；最佳實施方式 本發明的實施方式現在詳細參考在附圖中示出其示例的本發明的優選實施例。首先，在本公開中，術語"輸入單元"或"鍵"被理解為用於輸入特定輸入信號的裝置，且不僅限於諸如按鍵、觸摸傳感器等輸入系統。本發明的混合信號包括音頻信號、視頻信號等，且還可被理解為包括合成對象信號。本發明提供能夠通過源(對象)信號單元處理混合信號的算法。在通過源 信號單元處理混合信號的情形中，能夠可觀地生成各種效果。例如，在觀看電 影時，用戶有可能通過將男演員/女演員語音的音量維持在固定能級而僅提高背 景音樂的音量。在本發明中，源信號包括構成混合信號的至少一個源(例如， 鋼琴)。並且，由源信號單元處理表示與構成混合信號的特定源信號相關聯的 特性(例如，定位、增益等)可在處理混合信號時"單獨"修改。"單獨"表 示與特定源信號相關聯的特性的修改不影響其它源信號的特性，或者對其它源 信號的特性的影響很難察覺到。為了清楚和方便地進行描述起見，採用立體聲 信號作為例子。並且，應理解本發明不僅限於立體聲信號。在本發明中，小尺 寸的輔助信息以及一般混合信號的格式(例如，PCM、 MP3、 MPEG-AAC)被 傳送。因此，能夠利用混合信號和輔助信息生成再混合信號。圖1是根據本發明的一個實施例的第一信號處理裝置的框圖。 參照圖1，第一信號處理裝置包括輔助信息生成單元103和輔助信息編碼 單元105。輔助信息生成單元103利用一般混合信號101和構成混合信號的源信號 102來生成輔助信息104。混合信號101可包括單聲道、立體聲、或多聲道音頻信號。20源信號102可包括構成混合信號101的源信號的一部分或全部。並且，輔助信息104表示在由源信號單元在處理混合信號時所使用的信息。輔助信息104包括用於再混合該混合信號的混合參數。混合參數包括由編碼器利用源信號生成的編碼器混合參數，且可選擇性地包括僅利用混合信號生成的盲(blind)混合參數。各源信號的增益值、子頻帶功率等可以是混合參數的示例。將在圖2中描述針對輔助信息104的具體定義和生成方法。本發明包括僅利用構成混合信號的源信號102生成輔助信息104的方法。 並且，輔助信息編碼單元105通過對所生成的輔助信息104進行編碼來生成經編碼的輔助信息信號106。混合信號101和輔助信息信號106被傳送到解碼設備。圖2是在使用立體聲信號的情形中圖1所示的第一信號處理裝置的詳細框 圖。如前面的描述中所提及的，本發明所使用的混合信號可包括單聲道、立體 聲或多聲道音頻信號。為了清楚和方便起見，釆用立體聲信號201作為例子。可將立體聲信號201 3^n)和3^w)表示為構成立體聲信號的源信號的和，其中指示時間索引。因此，可將立體聲信號201表示為公式1。 formula see original document page 21在這種情形中，'r指示立體聲信號中所包括的源信號的數目，且"'(")' 指示源信號。並且，、i'和<bi'分別是用於確定各個，信號的幅度搖移(panning)和增益的值。每個是獨立的。每個"'(")，可以是純源 信號，或可包括向其添加小混響和聲音效果信號分量的純源信號。例如，特定 的混響信號分量可被表示為兩個源信號，即混合到左聲道的信號和混合到右聲 道的信號。本發明的目的是修改包括源信號的立體聲信號，以便再混合M個源信號 (OSMS I)。可利用不同的增益因數將源信號再混合至立體聲信號。可將 再混合信號表示為公式2。 [公式2]formula see original document page 22在公式2中，'Ci，和'di'是要再混合的M個源信號的新增益因數。'c/和 'di，可由解碼器端提供。在這種情形中，輔助信息生成單元206能夠利用立 體聲信號201和M個源信號202生成輔助信息207。如前面的描述所提及的，本發明的目的是在給出一般立體聲信號和較少的 輔助信息時通過源信號單元再混合該一般立體聲信號。利用極少量的輔助信息由表示為公式1的混合信號完全地生成表示為公 式2的再混合信號是不可能的。—所以，在沒有訪問每個源信號~(")的情況下，在給出表示為公式l的一般 混合信號的情形中，本發明的目的是感性地模仿表示為公式2的混合信號。參照圖2，將一般立體聲信號201和立體聲信號201中所包括的M個源 信號202輸入到第一信號處理裝置。立體聲信號201被延遲以與輔助信息同步， 然後可直接用作輸出信號。為了生成輔助信息，立體聲信號201和源信號202通過濾波器組203在時 間-頻率域中分解成按照子頻帶信號204和205。具體地，在時間-頻率域中處 理立體聲信號201和源信號202。並且，稍後將解釋時間-頻率域。在各子頻帶的中心頻率上類似地處理按照子頻帶信號204。特定頻率上的 立體聲信號201的子頻帶對204被表示為x"k)和X2(k)。在這種情形中，'k'是 各個子頻帶信號的時間索引。類似地，M個源信號202的子頻帶信號205被表 示為S!(k)， S2(k)， ...， SM(k)。為了清楚起見，不使用子頻帶(頻率)索引。如果給出源信號202的子頻帶信號205，則輔助信息生成單元206生成按照子頻帶的短時子頻帶功率^^ }。並且，輔助信息生成單元206利用立體聲信號201的子頻帶對204生成按 照子頻帶的增益因數ai和bi。從外部直接給出增益因數ai和bi。利用按照子頻 帶的短時子頻帶功率和按照子頻帶的增益因數生成按照子頻帶的輔助信息 207。輔助信息生成單元206可生成與立體聲信號相關聯的不同信息，作為輔助信息207以及短時子頻帶功率和增益因數。並且，輔助信息編碼單元208利用按照子頻帶的輔助信息207生成經編碼 的輔助信息信號209。對於多個立體聲信號201，增益因數ai和bi應當是固定的。如果增益因數 ai和bi可根據時間k變化，則將生成作為時間的函數的增益因數。代替直接量 化並編碼，可將增益因數變換成更適於量化和編碼的不同值。並且，^CA;) ^可被歸一化為與立體聲信號201的子頻帶功率有關的值。如果一般的編碼設備用於有效地編碼立體聲信號，這使得本發明強烈對抗 變化。例如，可將a;和bj變換成表示為公式3的增益和分貝(dB)單位能級 差，然後傳送。 [公式3]g, =101og10(a,2+6,2)並且，代替直接編碼為輔助信息，i可被變換成關於立體聲信號 定義的值，它被表示為公式4，然後傳送。為了生成短時，本發明使用單極平均。即，可將^^、w 、十算為公式5。 [公式5]￡ W ("} = a ,2 (Jt) + (1 - a)￡ {《-1)}在公式5中，a E [O，l]確定如公式6指數減小的估計窗的時間常數。 [公式6]在以下的描述中，EU指短時平均。如果沒有給出ai和bi，則它們需要通 過輔助信息生成單元206生成。因為￡^,(")^(")} = 所以可通過公式7計算a;。[公式4]在公式6中指子頻帶採樣頻率。例如，能夠使用T:40ms。—￡僅類似地，可通過公式8計算bi。[公式8]一魂(")&(")} l五涵圖3示出根據本發明的一個實施例的用於處理媒體信號的域。 如前面的描述所提及的，音頻信號和輔助信息被處理為如圖3所示的時間-頻率域中的按照子頻帶的信號。感性地感生出時間-頻率域中按照子頻帶的信號。例如，能夠使用具有正弦分析和約20ms的合成窗的STFT(短時傅立葉變換)生成按照子頻帶的信號。在這種情形中，能夠以一個組具有約比ERB (等效矩形帶寬)大兩倍的帶寬的方式編組STFT係數。圖4是根據本發明的一個實施例的第二信號處理裝置的框圖。參照圖4，縮減混合單元406通過將多個源信號401相加來生成和信號。與第一信號處理裝置不同，第二信號處理裝置傳送和信號404而不傳送立體聲信號。輔助信息生成單元403利用源信號401生成輔助信息405。輔助信息405 包括對應於各個源信號的子頻帶功率和增益因數。並且，輔助信息405可包括 對應於再混合渲染單元中的延遲的參數。類似於第一信號處理單元中的情形， 輔助信息405可通過變換成更適於量化和編碼的不同值而被傳送。輔助信息編碼單元利用所生成的輔助信息405生成輔助信息信號407。 所生成的和信號405和所生成的輔助信息信號407被傳送到解碼設備。 本發明還包括沒能具有縮減混合單元402的編碼設備。在這種情形中，不 將源信號401變換成和信號404，而是直接傳送之。圖5是根據本發明的一個實施例的第三信號處理裝置的框圖。 參照圖5，根據本發明的一個實施例的第三信號處理裝置包括輔助信息解 碼單元503和再混合渲染單元505。混合信號501和輔助信息信號502被輸入到第三信號處理裝置。混合信號24501可包括單聲道、立體聲、或多聲道音頻信號。輔助信息解碼單元503通過解碼輔助信息信號502來生成輔助信息504。 輔助信息504包括傳送的音頻信號501中所包括的源信號的增益因數和子頻帶 功率。利用由用戶直接提供的控制信息生成的用戶混合參數506可被輸入到再 混合渲染單元505。再混合渲染單元505使用混合信號501、所傳送的輔助信息504和用戶混 合參數506生成再混合信號507。稍後將參照圖6說明用於生成再混合信號的 方法的細節。再混合信號507生成為其聲道號等於所傳送的混合信號的聲道號的等同聲道混合信號，或者可生成為其聲道號大於混合信號的聲道號的擴展聲道混合 /士 口圖6是在使用立體聲信號的情形中圖5所示的第三信號處理裝置的詳細框 圖。如前面的描述中所提及的，所傳送的混合信號可包括單聲道、立體聲或多 聲道音頻信號。為了方便起見，假設所傳送的混合信號包括立體聲信號601。參照圖6，立體聲信號601經由濾波器組603在時間-頻率域中被分解為按 照子頻帶信號604。在特定頻率上的按照子頻帶的信號604被分別表示為Xl(k) 和x2(k)。輔助信息解碼單元605通過解碼所傳送的輔助信息信號602生成按照子頻 帶的輔助信息606。利用由用戶提供的控制信息生成的用戶混合參數608可被輸入到再混合 渲染單元607。並且，可按照子頻帶提供用戶混合參數608。如前面的描述所提及的，輔助信息606包括表示為按照子頻帶的增益因數 ai和bi的子頻帶功率和要再混合的M個源信號的E( }。再混合渲染單元607使用按照子頻帶生成的立體聲信號604、所傳送的輔 助信息606和用戶混合參數608生成按照子頻帶的再混合信號609 (y,(k), y2(k))。將詳細說明生成再混合信號609JJJ方法。再混合信號609經由逆濾波器組610在時域中變換成立體聲信號(少1，少2) 611。如下說明由再混合單元607生成再混合信號609的方法。25首先，公式1和公式2對按照子頻帶信號^04和609是有效的。在這種情 形中，由按照子頻帶的源信號Si(k)替換源信號^,")。 [公式9]4)=^叫w按照子頻帶的再混合信號609可被表示為公式10。 [公式10],=i為了生成再混合信號609，可使用最小二乘方估計。如果給出按照子頻帶 的混合信號(Xl(k), x2(k)) 604，則如公式ll所示具有不同增益的按照子頻帶 的再混合信號609可被估計為按照子頻帶的混合信號604的線性組合。[公式11]在公式11中，W (k)、 W12(k)、 W^(k)和W22(k)分別是權重因數。在這種情形中，所生成的估計誤差可被定義為公式12。 [公式12]e2 (" = _y2 W - j>2 (A)=少2_ w21 - w22 (A:)x2 W可按照子頻帶生成權重因數wu(k)、 w12(k)、 Wu(k)和w22(k)，以使均方誤差￡"1("}和""")}最小化。為此，能夠使用這樣的事實當e《k)和e2(k)分 別與x"k)和X2(k)正交時能夠使均方誤差最小化。所生成的wn(k)和wu(k)可被 表示為公式13。[公式13]^ jfi^ }-五2 {平2 }2612 五2 {X1X2 } -五|^2 ; }在公式13中，可直接生成￡{義1}、 E""和五"^"。然而，可利用所 傳送的輔助信息606 (例如，￡{^}、 ai、 bi)和由用戶提供的控制信息608 (例 如，增益因數Ci和di)由公式14生成￡"^}和^^1}。[公式14]}=e h2 J+ Z", (c,-",)五k2}w21W22 =類似地，可由公式15生成W2i和W22。[公式15]￡ {xf ]x〗卜￡2 {xx2} 一五(x^2 _y2}_ ￡(,2 —{，}在公式15中，五"JJ和五"^^可被表示為公式16。 [公式16]} = x2}+ Z",- ^殊2} 1如果混合信號604的相位彼此相干或幾乎為相干，則表示為公式17的值 接近l。[公式17]^ _ ,，}在這種情形中，可將權重表示為公式18。 [公式18]化W12 = w21 = 027如前面的描述所提及的，以上生成的按照子頻帶的再混合信號609經由逆濾波器組610在時間-頻率域中變換成再混合信號611。再混合信號611聽起來類似於利用由用戶提供的控制信息生成的用戶混合參數ci和di獨立地再混合源信號所生成的再混合信號。至此主要處理了2聲道立體聲信號的再混合。然而，如前面的描述所提及 的，本發明適用於多聲道音頻信號的再混合，例如，5.1聲道音頻信號以及立 體聲信號。本領域技術人員顯而易見的是能夠以類似於應用到本公開所描述的立體聲信號的方式再混合多聲道音頻信號。如果是這樣的話，可將公式11重 寫成公式19。 [公式19]—t選擇性地，混合信號的聲道中特定的一個可保持完整，而不被再混合。例如，再混合被應用於5.1環繞聲道的前聲道，而兩個後聲道未被修改。為此，將2或3聲道再混合算法應用於前聲道。圖7是根據本發明的一個實施例的第四信號處理裝置的框圖。參照圖7，根據本發明的一個實施例的第四信號處理裝置包括輔助信息解碼單元703、空間信息統一單元705和再混合渲染單元707。源信號的和信號701和輔助信息信號702被輸入到第四信號處理裝置。 輔助信息解碼單元703通過解碼輔助信息信號704來生成輔助信息702。輔助信息704包括增益因數、延遲常數、子頻帶功率等。輔助信息統一單元705利用輔助信息704將和信號701分成多個源信號706。再混合渲染單元707能夠利用源信號706生成再混合信號709。在這種情 形中，再混合渲染單元707能夠利用輔助信息所攜帶的混合參數生成再混合信 號709。並且，再混合渲染單元707能夠利用由用戶提供的控制信息所生成的用戶混合參數708來生成再混合信號709。圖8是根據本發明的一個實施例的一般編碼設備和信號處理裝置的組合 配置的框圖。參照圖8，混合信號801可通過由一般編碼設備803進行編碼而變換成經 編碼的混合信號805。混合信號801可包括按照聲道信號或源信號。並且，一 般編碼設備803包括在未來開發的編碼器以及諸如AAC、 MP3編碼器的常規 編碼器等。根據本發明的再混合信號編碼裝置804利用混合信號801和該混合信號中 所包括的源信號802生成輔助信息信號806。復用單元807利用經編碼的混合信號805和輔助信息信號806生成比特流 808。如前面的描述所提及的，輔助信息信號806可被插入到常規混合信號格 式內的輔助數據區中以具有與常規設備的兼容性。圖9是根據本發明的一個實施例的一般解碼設備和信號處理裝置的組合 配置的框圖。參照圖9，分用單元902將所傳送的比特流901分成經編碼的混合信號903 和輔助信息信號904。隨後， 一般解碼設備905通過解碼經編碼的混合信號903生成可用於根據 本發明的再混合信號解碼裝置907的混合信號906。並且， 一般解碼設備905 包括在未來開發的解碼器以及諸如AAC、 MP3解碼器的常規解碼器等。混合 信號906可包括按照聲道信號或源信號。根據本發明的再混合信號解碼裝置 907能夠利用輔助信息信號和用戶混合參數908中的至少一個將混合信號906 變換成再混合信號卯9。圖10是根據本發明的一個實施例的第五信號處理裝置的框圖。參照圖10，根據本發明的一個實施例的第五信號處理裝置包括混合信號 解碼單元.1001、參數生成單元1002和再混合渲染單元1008。任選地，第五信 號處理裝置可包括效應器1011。參數生成單元1002可包括盲混合參數生成單元1003、用戶混合參數生成 單元1004和再混合參數生成單元1005。再混合參數生成單元1005包括等同混合參數生成單元1006，且可任選地29包括擴展混合參數生成單元1007。再混合渲染單元1008包括等同混合渲染單元1009，且可任選地包括擴展 混合渲染單元1010。混合信號解碼單元1001通過解碼由編碼端傳送的經編碼的混合信號來生 成混合信號。參數生成單元1002接收由編碼端傳送的輔助信息和用戶控制信息(或配 置信息)。並且，用戶控制信息可從解碼器端生成，而不是由編碼器端傳送。用戶混合參數生成單元1004利用用戶控制信息生成用戶混合參數。並且， 編碼器混合參數可被包括在由編碼器端傳送的輔助信息中。盲混合參數生成單元1003能夠利用混合信號生成盲混合參數。編碼器混 合參數或盲混合參數可被選擇性地輸入到再混合參數生成單元1005。再混合參數生成單元1005利用輔助信息和用戶混合參數生成再混合參 數。能夠生成適用於再混合信號的聲道的再混合參數。再混合參數生成單元1005中所包括的等同混合參數生成單元1006生成在 生成其聲道號等於混合信號的聲道號的再混合信號時使用的再混合參數。並且，擴展混合參數生成單元1007生成在生成其聲道號大於混合信號的 聲道號的再混合信號時使用的再混合參數。將再混合參數輸入到再混合渲染單 元1008。再混合渲染單元1008中所包括的等同混合渲染單元1009利用再混合參數 和混合信號生成其聲道號等於混合信號的聲道號的等同聲道再混合信號。可包括在再混合渲染單元1008中的擴展混合渲染單元1010利用由擴展混 合參數生成單元1007生成的再混合參數和混合信號生成其聲道號大於混合信 號的聲道號的擴展聲道再混合信號。擴展混合渲染單元1010可利用由等同聲 道渲染單元1009生成的再混合信號生成擴展聲道再混合信號。因此，第五信號處理裝置按原樣輸出由編碼端傳送的混合信號，將混合信 號輸出到等同聲道再混合信號中，或將混合信號輸出到擴展聲道再混合信號 中。任選地，使用由效應器1011提供的信息，再混合渲染單元能夠給予再混 合信號各種效果。圖11是根據本發明的一個實施例的輸入裝置的框圖，且圖12是根據本發30明的一個實施例的輸入裝置的示例圖。參考圖11和圖12，根據本發明的一個實施例的輸入裝置1000與第一再混合信號解碼設備500互連，且包括第一輸入單元(源菜單鍵)1110、第二輸 入單元(語音靜音鍵1120)、第三輸入單元(語音調節鍵)1130、第四輸入單 元(環境調節鍵)1140、第五輸入單元(第一源鍵1150a、鋼琴鍵)1150、第 二源鍵(小提琴鍵)1150b、方向鍵1160a、定位設備1160b、數字鍵1170、存 儲單元1200、控制單元1300和顯示器1400。因為第一再混合信號解碼設備500具有與前面參考圖5描述的再混合信號 解碼設備相同的配置，所以在以下的描述中省略其元件的細節。並且，輸入裝 置1000的元件將詳細解釋如下。首先，第一輸入單元(源菜單鍵)1110是輸入設備，其輸入信號通過控 制單元1300轉換成按照源的菜單顯示命令。在這種情形中，按照源的菜單是 用於顯示特定混合信號中包括的源列表的圖像。所以，在顯示按照源的菜單時 可按照源調節音量級等。圖13示出在輸入第一輸入單元(源菜單鍵)之後顯 示的圖像(按照源的菜單顯示圖像)的圖像示例。在這種情形中，按照源的菜 單顯示圖像可顯示在第一界面設備550的顯示器1400上。第一輸入單元(源 菜單鍵)1110可用觸發器型按鍵或觸摸傳感器來實現，通過它根據按壓計數重 復命令執行或取消，這不會對本發明的各實現構成限制。第二輸入單元(語音靜音鍵)1120是通過控制單元1300將其輸入信號轉 換成語音靜音命令的輸入設備。在這種情形中，語音靜音命令是將特定混合信 號包括的源中的人類語音的能級設置為0的命令。圖14示出在已經輸入第二 輸入單元(語音靜音鍵)之後顯示的圖像的示例。第二輸入單元(語音靜音鍵) 1120可用觸發器型按鍵或觸摸傳感器來實現，通過它根據按壓計數重複命令執 行或取消，這不會對本發明的各實現構成限制。第三輸入單元(語音調節鍵)1130是通過控制單元1300將其輸入信號轉換成語音能級調節命令的輸入設備。在這種情形中，語音能級調節命令是升高 或降低特定混合信號所包括的源中的人類語音的能級的命令。圖15示出在已 經輸入第三輸入單元(語音調節鍵)之後顯示的圖像的示例。第三輸入單元(語 音調節鍵)1130被設置成輸入能級升高命令或能級降低命令，並可用一對按鍵、慢動梭、2向慢動按鈕、2向觸摸巻軸、 一對觸摸傳感器、觸摸輪等中的一個 來實現，本發明不受此限制。第四輸入單元(環境調節鍵)1140是通過控制單元1300將其輸入信號轉換成環境圖像顯示命令的輸入設備。在這種情形中，環境圖像顯示特定混合信號中所包括的源的相對位置，以利用方向鍵1160a或定位設備1160b實現每個 源的位置。圖16示出在已經輸入第四輸入單元(環境調節鍵)之後顯示的圖 像(環境圖像)的示例。第四輸入單元(環境調節鍵)1140可用觸發器型按鍵 或觸摸傳感器來實現，通過它根據按壓次數重複命令執行或取消，這不會對本 發明的各實現構成限制。第五輸入單元1150是通過控制單元1300將其輸入信號轉換成源聲音靜音 命令的輸入設備。在這種情形中，源聲音靜音鍵是禁止對應於特定樂器的源信 號回放的命令。例如，第五輸入單元1150可包括將對應於"鋼琴"的源信號 的能級幾乎設置為0的第一源鍵(鋼琴鍵)1150a，或將對應於"小提琴"的 源信號的能級幾乎設置為0的第二源鍵(小提琴鍵)1150b。圖17示出在已經 輸入第五輸入單元的第一源鍵(鋼琴鍵)之後顯示的圖像的示例。且圖18示 出在已經輸入第五輸入單元的第二源鍵(小提琴鍵)之後顯示的圖像的示例。第五輸入單元1150的第一和第二源鍵中的每一個可用觸發器型按鍵或觸 摸傳感器來實現，通過它根據按壓次數重複命令執行或抵消，這不會對本發明 的各實現構成限制。方向鍵1160a是通過控制單元1300將其輸入信號轉換成用於方向移動的 命令的輸入設備。在這種情形中，在顯示按照源的菜單圖像的狀態下，用於方 向移動的命令可以是特定的源能級調節命令。或者，在顯示環境圖像的狀態下， 用於方向移動的命令可以是特定位置的位置調節命令。方向鍵1160a可以用四 個按鍵、四個觸摸傳感器、四向觸摸巻軸、觸摸輪等來實現，本發明的各實現 不限於此。定位設備1160b是通過控制單元1300將其輸入信號轉換成用於位置指定 的命令的輸入設備。類似於方向鍵1160a，在顯示按照源的菜單圖像的狀態下， 用於位置指定的命令可以是特定源能級命令。或者，在顯示環境圖像的狀態下， 用於位置指定的命令可以是特定源的位置調節命令。並且，定位設備1160b可以用滑鼠、跟蹤球、觸摸板、觸控螢幕、觸摸面板(輸入筆)等實現，本發明的 各實現不限於此。數字鍵1170是通過控制單元1300將其輸入信號轉換成用於數字輸入的命 令的輸入設備。在這種情形中，在顯示按照源的菜單圖像或環境圖像的狀態下， 用於數字輸入的命令可以是用於選擇匹配相應數字的特定源的命令。例如，在按照源的菜單圖像上顯示"l.語音，2.鋼琴，3.小提琴，4.長笛"的情形中，如果 用戶選擇數字鍵1170的"鍵#3"，則匹配數字3的"小提琴"被選擇。數字鍵1170 可以用10個按鍵、IO個觸摸傳感器、觸摸面板等來實現，本發明的各實現不 限於此。各種類型的按照鍵的命令信息被存儲在存儲單元1200中。在這種情形中， 按照鍵的命令信息表示每個輸入單元(第一輸入單元1110、第二輸入單元1120 等)(所包括的數字鍵1170)和對應於輸入單元的命令(按照源的菜單顯示命 令、語音靜音命令等)。同時，用戶通過快捷鍵登記過程使按照鍵的命令信息 能夠以新的方式存儲或修改。並且，稍後將參考圖22解釋快捷鍵登記過程的 細節。此外，關於按照源的菜單圖像、語音靜音圖像、語音調節圖像、環境調 節圖像等的數據可被進一步存儲在存儲單元1200中。控制單元1300基於存儲單元1200中所存儲的每個按照鍵的命令信息將從 輸入單元1U0、 1120、 1130、 1140和1150中的每一個接收的輸入信號轉換成 對應的命令。具體地，控制單元1300將經由第一輸入單元1110接收的輸入信 號轉換成按照源的菜單顯示命令。控制單元1300將經由第二輸入單元1120接 收的輸入信號轉換成語音靜音命令，然後基於語音靜音命令輸出關於混合信號 的控制信息506。控制單元1300將經由第三輸入單元1130接收的輸入信號轉 換成語音能級調節命令。控制單元1300將經由第四輸入單元1140接收的輸入 信號轉換成環境圖像顯示命令。並且，控制單元1300將經由第五輸入單元1150 接收的輸入信號轉換成源聲音靜音命令。根據經由輸入單元1110、 1140等的輸入，控制單元1300基於從第一再混 合信號解碼設備500接收的源信息(si)使界面圖像能顯示。例如，在經由第 一輸入單元1110輸入按照源的菜單顯示命令的情形中，控制單元1300基於源 信息(si)控制按照源的菜單在顯示器1400上顯示。在經由第四輸入單元114033輸入環境圖像顯示命令的情形中，控制單元1300基於與混合信號對應的源信 號信息(Si)控制環境圖像顯示。基於經由輸入單元1120、 1130、 1140等的命令，控制單元1300輸出關於 混合信號的控制信息506，然後控制該控制信息506被輸入到第一再混合信號 解碼設備500。在以上的描述中參考圖5描述了控制信息506，且在以下的描 述中省略其細節。具體地，在顯示器上顯示按照源的菜單圖像的狀態下，控制 單元1300將經由定位設備1160b或方向鍵1160a接收的輸入信號轉換成按照 源的能級調節命令。在顯示器上顯示環境圖像的狀態下，控制單元1300將經 由定位設備1160b或方向鍵1160a接收的輸入信號轉換成環境調節命令。在將 輸入信號轉換成對應命令的過程中，控制單元1300能夠參考存儲單元1200中 存儲的按照鍵的命令信息。並且，控制單元1300能夠基於經轉換的命令(例 如，按照源的能級調節命令、環境調節命令等)輸出關於混合信號的控制信息 506。顯示器1400是在控制單元1300的控制下在其上顯示按照源的菜單圖像、 環境圖像等的顯示設備。此外，在已經輸入了輸入單元(第一輸入單元1110 等)之後顯示的各個圖像(在圖14、圖15、圖17、圖18等中)可顯示在顯示 器1400上。圖19是根據本發明的另一個實施例的輸入裝置的框圖。 參考圖19，根據本發明的另一個實施例的輸入裝置2000 (在下文中稱為 "輸入裝置2000")與第一再混合信號解碼設備500和第一界面設備550互連。 並且，該輸入裝置2000包括第一輸入單元(源菜單鍵)2110、第二輸入單元 (語音靜音鍵)2120、第三輸入單元(語音調節鍵)2130、第四輸入單元(環 境調節鍵)2140、第五輸入單元(第一源鍵2150a (鋼琴鍵))2150、第二源 鍵(小提琴鍵)2150b、方向鍵2160a、定位設備2160b、數字鍵2170、存儲單 元2200、控制單元2300、顯示器2400和無線通信單元2500。除控制單元2300 和無線通信單元2500外，這些元件與前面參考圖11和圖12描述的具有相同 名稱的元件幾乎相同，在以下的描述中省略其細節。第一再混合信號解碼設備500具有與前面參考圖5描述的再混合信號解碼 設備相同的配置，所以在以下的描述中省略其細節。同時，第一界面設備550是向輸入裝置2000提供界面的設備。並且，第 一界面設備550包括無線通信單元552、存儲單元554、界面控制單元556和 顯示單元558。第一界面設備550的無線通信單元552是與輸入裝置2000進行無線通信 的設備。在這種情形中，無線通信單元552採用諸如紅外通信系統之類的各種 通信系統之一。在存儲單元554中，可存儲關於按照源的菜單圖像、語音靜音 圖像、語音調節圖像、環境調節圖像等的數據。界面控制單元556基於從第一 再混合信號解碼設備500接收的源信息(si)顯示界面圖像。並且，界面控制 單元556基於從輸入設備2000接收的命令向第一再混合信號解碼設備500輸 入控制信息506。已經參考圖5描述了控制信息506，在以下的描述中將省略 其細節。顯示器558是在界面控制單元556的控制下在其上顯示界面圖像的顯 示設備。如果輸入裝置200設置有顯示器2400,則第一界面設備550的顯示器 558不是必需的元件。如下解釋輸入裝置200的相應元件中的控制單元2300和無線通信單元 2500。首先，控制單元2300將經由第一輸入單元2110接收的輸入信號轉換成按照源的菜單顯示命令。控制單元2300將經由第二輸入單元2120接收的輸入信號轉換成語音靜音命令。控制單元2300將經由第三輸入單元2130接收的輸入信號轉換成語音能級調節命令。控制單元2300將經由第四輸入單元2140接收的輸入信號轉換成環境圖像顯示命令。並且，控制單元2300將經由第五輸入單元2150接收的輸入信號轉換成源聲音靜音命令。在顯示器上顯示按照源的菜單圖像的狀態下，控制單元2300將經由定位設備2160b或方向鍵2160a接收的輸入信號轉換成按照源的能級調節命令。在顯示器上顯示環境圖像的狀態下，控制單元2300將經由定位設備2160b或方向鍵2160a接收的輸入信號轉換成環境調節命令。在將每一個上述輸入信號轉換成對應的命令的過程中，控制單元2300能夠參考存儲單元2200中所存儲的按照鍵的命令信息中的每一 個。無線通信單元2500將通過控制單元2300轉換的命令發送到外部設備(具 體地，第一界面設備550)。在第一界面設備550發送關於按照源的菜單圖像35的數據或關於環境圖像的數據的情形中，無線通信單元2500接收所發送的數 據。圖20是根據本發明的一個實施例的互連至輸入裝置的第二再混合信號解 碼設備和第二界面設備的框圖。參考圖20，輸入裝置1000被互連至第一再混合信號解碼設備500。因為， 已經參考圖5描述了第一再混合信號解碼設備500，所以在以下的描述中省略 其細節。第二界面設備750不是從第一再混合信號解碼設備500而是從第二再 混合信號解碼設備700接收源信息(si)。並且，第二界面750的其餘元件752、 754、 756和758分別與前面第一界面設備550的元件552、 554、 556和558 幾乎相同，在以下的描述中省略其細節。圖21是根據本發明的另一個實施例的互連至輸入裝置的第二再混合信號 解碼設備和第二界面設備的框圖。參考圖21，輸入裝置2000被互連至第二再混合信號解碼設備700和第二 界面設備750。因為，已經參考圖7描述了第二再混合信號解碼設備700，所 以在以下的描述中省略其細節。第二界面設備750不是從第一再混合信號解碼 設備500而是從第二再混合信號解碼設備700接收源信息(si)，然後將控制 信息708輸入到第二再混合信號解碼設備700。並且，第二界面750的其餘元 件752、 754、 756和758分別與前面第一界面設備550的元件552、 554、 556 和558幾乎相同，在以下的描述中省略其細節。圖22是根據本發明實施例的輸入方法的流程圖。參照圖22，如果用戶選擇快捷鍵登記，則輸入裝置接收快捷鍵登記命令 [SllO]。圖23示出在已經輸入快捷鍵登記命令之後顯示的圖像的示例。隨後， 用戶從提供給輸入裝置的多個鍵中選出用作快捷鍵的鍵(例如，鍵#1) [S120]。 輸入裝置顯示可用於混合信號的源列表[S130]。例如，可用於混合信號的各源 包括語音音頻信號、按照樂器的音頻信號(語音、鋼琴、小提琴、長笛等)。 如果是這樣，則用戶通過從源列表中選擇一個來選擇匹配快捷鍵的源[S140]。 例如，用戶能夠選擇鋼琴。隨後，用戶從至少一個或多個功能(例如，聲音靜 音、環境調節等)中選擇一個功能(例如，聲音靜音)以用於快捷鍵。因此， 如果用戶經由步驟S120、 S140和S150選擇該鍵、該源和該功能，則輸入裝置36將所選鍵、所選源和所選功能存儲為快捷鍵信息[S160]。例如，輸入裝置以將 鋼琴信號的聲音靜音命令匹配鍵#1的方式存儲它們。如果是這樣，則在輸入鍵 #1的情形中，輸入裝置將鍵#1的輸入信號轉換成鋼琴信號的聲音靜音命令。圖24是根據本發明的一個實施例的界面顯示裝置的框圖，且圖25A和圖 25B是根據本發明的一個實施例的界面顯示裝置的實現的示例圖。參照圖24、圖25A和圖25B，根據本發明的一個實施例的界面顯示裝置 300被互連至第一再混合信號解碼設備500。並且，界面顯示裝置3000包括輸 入單元3100、控制單元3200、第一顯示器330a和第二顯示器3300b。在這種 情形中，第一再混合信號解碼設備500包括輔助信息解碼單元503和再混合渲 染單元505，並具有與前面參考圖5描述的再混合信號解碼設備幾乎相同的配 置和功能，因此在以下的描述中省略其細節。輸入單元3100是選擇多個混合信號之一的輸入設備。在這種情形中，混 合信號可包括參考圖5描述的按照聲道的音頻信號501。由輸入單元3100從多 個混合信號中選出的混合信號501p和混合信號501p的輔助信息信號502p被 輸入到第一再混合信號解碼設備500。輸入單元3100可被設置成選擇混合信號 中所包括的源之一，且可被進一步設置成輸入用於源信號的能級調節的命令、 用於源信號的按照子頻帶的能級調節(均衡器調節)的命令和用於源信號的環 境調節的命令。輸入單元3100可用方向鍵、觸摸輪等以及諸如滑鼠、跟蹤球、 觸摸板等定位設備來實現。並且，還應理解輸入單元3100可用使用諸如紅外 通信之類的無線通信的遙控器來實現。控制單元3200詢問對應於輸入單元3100選擇的混合信號501p的源信號 信息(si)，基於源信號信息(si)配置源信號列表(在下文中稱為源列表)， 然後在第一顯示器3300a上顯示源列表。在這種情形中，源信號信息(si)是 關於輸入單元3100所選擇的混合信號501p中包括的源信號的信息，且可以是 包括各個源信號的樂器名稱等的信息。此外，源信號信息(si)可以是關於前 面參考圖1描述的源信號102的信息。同時，源信號信息(si)可進一步包括 元數據(樂器演奏者姓名、製作日期等)。同時，源信號信息(si)可以是由 控制單元3200從第一再混合信號解碼設備500的輔助信息解碼單元203接收 的信息。在這種情形中，源列表可包括源信號502p的樂器名稱、歌手名稱和在從輸入單元3100接收關於再混合的各種命令(用於源信號的能級調節 的命令、用於源信號的按照子頻帶的能級調節的命令、用於源信號的環境調節的命令)之一的情形中，控制單元3200將相應的命令轉換成控制信息506、然 後將其輸入到再混合渲染單元505。在這種情形中，控制信息506可與前面參 考圖5描述的控制信息或參考圖6描述的控制信息608相同，因此應在以下的 描述中將省略其細節。第一顯示器3300a是在控制單元3200的控制下在其上顯示源列表的顯示 器。在選擇混合信號時，將第一顯示器3300a上顯示的源列表保持顯示在第一 顯示器3300a上。在這種情形中，"在選擇混合信號時"表示"所選擇的混合 信號被播放或再混合(能級調節、環境調節等)"。如果用戶選擇不同的混合 信號，則在第一顯示器3300a上顯示匹配不同的混合信號的源列表。在這種情 形中，第一顯示器3300a可用液晶顯示器(LCD)或大量發光器件的矩陣來實 現，本發明的各實現不限於此。在第一顯示器3300a用大量發光器件實現的情 形中，可通過閃爍大量發光器件來顯示源列表。第二顯示器3300b是其上顯示元數據、音量級調節圖像、均衡器調節圖像、 環境調節圖像等的顯示器。圖26至29示出在選擇特定源時分別在第一或第二 顯示器上顯示的圖像示例。在圖26中，在從第一顯示器3300a上顯示的源列 表選擇"l.語音"的情形中，示出在第二顯示器3300b上顯示所選源(l.語音) 的元數據的情形。在圖27中，示出在第二顯示器3300b上顯示所選源(l.語音) 的音量級調節圖像的情形。在圖28中，示出在第二顯示器3300b上顯示所選 源(3.小提琴)的均衡器調節圖像(按照子頻帶的能級調節圖像)的情形。在 圖29中，示出在第二顯示器3300b上顯示所選源(2.鋼琴)的環境調節圖像的 情形。將圖26至29相互比較，即使第二顯示器3300b上顯示的圖像保持變化， 也可觀察到源列表保持顯示在第一顯示器3300a上。同時，因為第二顯示器3300b和第一顯示器3300a不需要機械地或在構造 上相互分離，所以應該理解第二顯示器3300b和第一顯示器3300a兩者可用單 個面板來實現。圖30是根據本發明的另一個實施例的界面顯示裝置的框圖。參照圖30，根據本發明的另一個實施例的界面顯示裝置4000包括輸入單元4100、控制單元4200、第一顯示器4300a和第二顯示器4300b，並被互連至 第二再混合信號解碼設備700。在這種情形中，第二再混合信號解碼設備700 包括輔助信息解碼單元703、輔助信息統一單元705和再混合渲染單元707。 並且，第二再混合信號解碼設備700具有與前面參考圖7描述的第二再混合信 號解碼設備幾乎相同的配置和功能，所以在以下的描述中省略其細節。同時，將根據本發明的另一個實施例的界面顯示裝置4000與前面根據本 發明的一個實施例的界面顯示裝置4000相比較，區別僅在於其互連至第二再 混合信號解碼設備700而不是第一再混合信號解碼設備500，還在於輸入合成 對象信號701p而不是混合信號501p。其相應元件4100、 4200、 4300a和4300b 與前面根據本發明的一個實施例的界面顯示裝置4100的具有相同名稱的元件 4100、 4200、 4300a和4300b幾乎相同，因此在以下的描述中省略其細節。圖31是根據本發明實施例的界面顯示方法的流程圖。首先，在以下的描 述中使用的術語"混合信號"應被理解為包括合成對象信號的概念。並且，根 據本發明的實施例的界面顯示方法可通過根據本發明的一個實施例的界面顯 示裝置3000或根據本發明的另一個實施例的其它界面顯示裝置2000來實施。參照圖31，界面顯示裝置在顯示器上顯示關於至少一個或多個混合信號 的信息作為混合信號的列表[S210]，該信息已經存儲或可發送。如果是這樣， 用戶利用輸入設備從在步驟S210顯示的混合信號列表選擇要播放或再混合的 特定混合信號[S220]。如果是這樣，界面顯示裝置從對應於在步驟S220選擇的 混合信號的輔助信息中提取對應於混合信號的源信號信息。然後，界面顯示裝 置從對應於在步驟S220選擇的混合信號的輔助信息提取對應於混合信號的源 信號信息[S230]。界面顯示裝置基於在步驟S230提取的源信號信息配置源列表。隨後，界 面顯示裝置在第一顯示器上顯示源列表[S250]。用戶檢査第一顯示器上顯示的源列表，然後從源列表中選擇一個[S260]。 如果是這樣，則界面顯示裝置在第二顯示器上顯示在步驟S260選擇的源的元 數據(根據設置的音量級調節圖像、均衡器調節圖像、環境調節圖像等)。隨後，在步驟S220選擇的混合信號的選擇完成之後(例如，在用戶終止相應混合信號的回放或選擇另一個混合信號時)，從步驟S250開始的源列表的顯示於是終止[S290]。圖32是根據本發明的一個實施例的界面顯示裝置的框圖。參照圖32，根據本發明的一個實施例的界面顯示裝置5100包括輸入單元 5110、存儲單元5120、控制單元5130和顯示器5140，並被互連至第一再混合 信號解碼設備500。在這種情形中，第一再混合信號解碼設備500包括輔助信 息解碼單元503和再混合渲染單元506。並且，第一再混合信號解碼設備500 具有與前面參考圖5描述的第一再混合信號解碼設備幾乎相同的配置和功能， 所以在以下的描述中省略其細節。輸入單元5110是選擇多個混合信號之一的輸入設備。在這種情形中，混 合信號可包括前面參考圖5描述的混合信號(按照聲道的音頻信號)501。由 輸入單元5110從多個混合信號中選出的混合信號501p和所選混合信號501p 的輔助信息信號502p被輸入到第一再混合信號解碼設備500。輸入單元5110 可被設置成輸入用於源信號的能級調節的命令、用於源信號的按照子頻帶的能 級調節的命令和用於源信號的環境調節的命令。輸入單元5110可用方向鍵、 觸摸輪等以及諸如滑鼠、跟蹤球、觸摸板等定位設備來實現。並且，當然輸入 單元5110可用使用諸如紅外通信等無線通信的遙控器來實現。存儲單元5120是其中存儲按照圖標的圖像數據的存儲設備。具體地，對 應於圖標的範疇和關鍵字可被一起存儲在存儲單元5120中。並且，利用圖像 數據，圖標不僅可被表示為文本還可被表示為圖像。控制單元5130詢問對應於由輸入單元5110選擇的混合信號501p的源信 號信息(si)，然後基於源信號信息(si)顯示對應於源信號的圖標。在這種 情形中，源信號信息(si)是關於輸入單元5110所選擇的混合信號501p中包 括的源信號的信息，且可以是包括各個源信號的樂器名稱等的信息。此外，源 信號信息(si)可以是關於前面參考圖1描述的源信號102的信息。同時，源 信號信息(si)可進一步包括元數據(樂器演奏者姓名、歌手姓名等)。同時， 源信號信息(si)可以是由控制單元5130從第一再混合信號解碼設備500的輔 助信息解碼單元203接收的信息。同時，利用存儲單元5120中存儲的圖像數據，對應於源信號的圖標也可40被表示為文本或圖像。在從輸入單元5110接收關於再混合的各種命令(用於源信號的能級調節 的命令、用於源信號的按照子頻帶的能級調節的命令、用於源信號的環境調節的命令)之一的情形中，控制單元5130將相應的命令轉換成控制信息506、然 後將其輸入到再混合渲染單元505。在這種情形中，控制信息506可與前面參 考圖5描述的控制信息或參考圖6描述的控制信息608相同，因此在以下的描 述中將省略其細節。並且，顯示器5140是在控制單元5130的控制下在其上顯示對應於源信號 的圖標的顯示設備。圖33A至圖33D是根據本發明的一個實施例的界面顯示裝置的實現的示 例圖。首先，圖33A示出根據本發明的一個實施例的界面顯示裝置，其被裝入 移動終端內的第一再混合信號界面設備500的一個機身中。圖33B示出根據本 發明的一個實施例的界面顯示裝置5100的輸入單元5110用通過導線或觸摸筆 連接到第一再混合信號解碼設備500的滑鼠實現。並且，可觀察到顯示器5140 是像輸入單元5110那樣通過導線連接到第一再混合信號解碼設備500的監視 器。圖33D示出輸入設備5110用與第一再混合信號解碼設備500進行無線通 信的遙控器來實現，儘管根據本發明的一個實施例的界面顯示裝置5100的顯 示器5140通過導線連接到第一再混合信號解碼設備500。參照圖33D，可觀察 到根據本發明的一個實施例的界面顯示裝置5100的輸入單元5110類似圖33C 的情況用遙控器來實現。並且，還觀察到顯示器5140設置有遙控器。因此， 根據本發明的一個實施例的界面顯示裝置5100和第一再混合信號解碼設備 500可被實現為各種配置。圖34是根據本發明的另一個實施例的界面顯示裝置的框圖。 參照圖34，根據本發明的另一個實施例的界面顯示裝置5200包括輸入單 元5210、存儲單元5220、控制單元5230和顯示器5240，並被互連至第二再混 合信號解碼設備700。在這種情形中，第二再混合信號解碼設備700包括輔助 信息解碼單元703、輔助信息統一單元705和再混合渲染單元707。並且，第 二再混合信號解碼設備700具有與前面參考圖7描述的第二再混合信號解碼設41備幾乎相同的配置和功能，所以在以下的描述中省略其細節。
同時，將根據本發明的另一個實施例的界面顯示裝置5200與前面根據本 發明的一個實施例的界面顯示裝置5100相比較，區別僅在於其互連至第二再
混合信號解碼設備700而不是第一再混合信號解碼設備500，還在於輸入合成 對象信號701p而不是混合信號501p。其相應元件5210、 5220、 5230和5240 與前面根據本發明的一個實施例的界面顯示裝置5110的具有相同名稱的元件 5100、 5120、 5130和5140幾乎相同，因此在以下的描述中省略其細節。
圖35A和圖35B是根據本發明的一個實施例的界面顯示方法的流程圖。 首先，在以下的描述中使用的術語"混合信號"應被理解為包括合成對象信號 的概念。並且，根據本發明的一個實施例的界面顯示方法可通過根據本發明的 一個實施例的界面顯示裝置5100或根據本發明的另一個實施例的其它界面顯 示裝置5200來實施。
參照圖35A，界面顯示裝置在顯示器上顯示關於至少一個或多個混合信號 的信息作為混合信號的列表[S410]，該信息已經存儲或可發送。如果是這樣， 用戶利用輸入設備從在步驟S410顯示的混合信號列表中選擇要播放或知曉其 源信號信息的特定混合信號[S420]。如果是這樣，則界面顯示裝置從對應於在 步驟S420選擇的混合信號的輔助信息中提取對應於混合信號的源信號信息。 然後，界面顯示裝置從對應於在步驟S420選擇的混合信號的輔助信息提取對 應於混合信號的源信號信息[S430]。在混合信號的元數據被包括在步驟S430 提取的源信號信息中的情形中，界面顯示裝置從源信號信息中提取元數據 [S440]。
隨後，界面顯示裝置基於在步驟S430提取的源信號信息詢問對應於源信 號的圖標[S450]。在這種情形中，圖標可用文本或圖像配置。在步驟S440提取 元數據的情形中，能夠詢問匹配所提取的元數據的圖像。在步驟S450詢問的 圖標然後顯示在顯示器上[S460]。圖36A示出其上顯示按照特定混合信號的源 信號的圖標的屏幕的示例。參照圖36A，在源信號信息包括"鋼琴、小提琴、 歌手(女性)、長笛"的情形中，分別對應於鋼琴、小提琴、歌手(女性)、 長笛的圖標在屏幕上顯示。因此，通過根據本發明的實施例的界面顯示方法， 通過步驟S410至S450顯示特定混合信號的圖標。圖36B示出其中按照特定混合信號的源信號的圖標表示元數據的圖像的示例。參照圖36B，在源信號信息
中所包括的元數據包括"鋼琴演奏者Chung Myung-Hoon"和"歌手Cho Soo-Mee"的情形中，對應於鋼琴的圖標包括Chung Myung-Hoon的照片且對 應於歌唱音樂的圖標包括Cho Soo-Mee的照片。
在以下的描述中，解釋在執行通過上述步驟顯示的圖標中的特定一個之後 的過程。
參照圖35B,如果用戶選擇在步驟S450顯示的圖標之一、然後輸入對特 定圖標的執行命令，則界面顯示裝置接收對所選圖標的執行命令[S510]。對圖 標的執行命令，即在執行圖標的情形中實施的過程可根據設置而不同。並且， 如下解釋三種情況(能級調節、均衡器調節、環境調節)。
在圖標的執行命令被設置成能級調節(音量調節)的情形中(在步驟S520 中為"是")，顯示對應於步驟S510中執行的圖標的源信號的能級調節圖像 [S522]。圖37A是能級調節圖像的示例圖。參照圖37A，在總共四個圖標中的 "長笛"圖標被執行的情形中，能夠調節長笛的能級(音量)的控制杆被顯示 在屏幕上。用戶能夠通過利用圖37A所示屏幕上的定位設備或利用鍵盤的方向 鍵等移動控制杆來輸入針對特定源信號(例如，長笛)的能級調節的命令。一 旦接收針對能級調節的命令(在步驟S524中為"是")，圖標的形狀就根據 所調節的能級而改變[S526]。在這種情形中，圖標的形狀對應於包括形狀、顏 色和亮度中的至少一個的概念。圖37B是其上根據經調節的能級修改圖標的形 狀的圖像的示例圖。參照圖37B，當長笛的能級被調節為高時，可觀察到對應 於長笛的圖標的大小增大。隨後，通過將步驟S524輸入的能級調節命令轉換 為控制信息，在步驟S420選擇的混合信號被再混合[S550]。在這種情形中，控 制信息是被輸入到第一再混合信號界面設備或第二再混合信號解碼設備的信 息，且已經在根據本發明的一個實施例的界面顯示裝置的描述中進行解釋。所 以，在以下的描述中將省略其細節。
在圖標的執行命令被設置成均衡器調節(按照子頻帶的能級調節)的情形 中(在步驟S530中為"是")，顯示對應於步驟S510執行的圖標的源信號的 能級調節圖像[S532]。圖38是均衡器圖像(按照子頻帶能級調節圖像)的示例 圖。在圖3中，示出在總共四個圖標中的"鋼琴"被執行的情形中，其中顯示按照子頻帶的控制杆的屏幕，以調節鋼琴的均衡器。用戶能夠以利用定位設備移 動按照子頻帶控制杆的方式在圖38所示的屏幕上輸入針對特定源信號(例如 鋼琴)的按照子頻帶能級調節的命令。 一旦接收到針對按照子頻帶能級調節的
命令(在步驟S534中為"是")，圖標的形狀就根據所調節的按照子頻帶能 級而部分地改變[S536]。例如，在低頻帶的能級被調高的情形中，對應於圖標 左部的部分的亮度可漸漸暗下來。隨後，通過將步驟S534輸入的按照子頻帶 能級調節命令轉換為控制信息，在步驟S420選擇的混合信號被再混合[S550]。
在圖標的執行命令被設置成環境調節(相對位置調節)的情形中(在步驟 S540中為"是")，顯示對應於步驟S510執行的圖標的源信號的環境調節圖 像(相對位置調節圖像)[S542]。圖39是環境調節圖像(相對位置調節圖像) 的示例圖。在圖39中，示出在執行總共四個圖標中的"鋼琴"圖標的情形中， 示出其上顯示鋼琴的相對位置的屏幕，以使鋼琴的環境能夠被調節。用戶能夠 通過使用圖39所示的屏幕上的定位設備、方向鍵等移動圖標來輸入針對特定 源信號(例如，鋼琴)的環境調節的命令。 一旦接收到針對環境調節的命令(在 步驟S544中為"是")，圖標的形狀就根據所調節的環境而改變[S546]。例如， 在源信號的經調節的相對位置接近用戶(聽眾)的位置的情形中，能夠增加對 應圖標的亮度。隨後，通過將步驟S544中輸入的環境調節命令轉換為控制信 息，在步驟S420選擇的混合信號被再混合[S550]。
圖40是根據本發明的又一個實施例的界面顯示裝置的框圖。
參照圖40，根據本發明的又一個實施例的界面顯示裝置6100包括輸入單 元6110、存儲單元6120、控制單元6130和顯示器6140，並被互連至第一再混 合信號解碼設備500。在這種情形中，第一再混合信號解碼設備500包括輔助 信息解碼單元503和再混合渲染單元506。並且，第一再混合信號解碼設備500 具有與前面參考圖5描述的第一再混合信號解碼設備幾乎相同的配置和功能， 所以在以下的描述中省略其細節。
輸入單元6110是輸入針對混合信號的回放命令的輸入設備。並且，輸入 單元6110可用方向鍵、觸摸輪等以及諸如滑鼠、跟蹤球、觸摸板等定位設備 來實現。
存儲單元6120是其中存儲按照源信號的圖像的存儲設備。例如，可在存儲單元6120中存儲按照樂器的圖像(鋼琴圖像、小提琴圖像、長笛圖像等)
和按照演奏者的照片(Chung Myung-Hoon的照片、Cho Soo-Mee的照片等)。 控制單元6130以按照對應於混合信號的源信號的能級按時間改變時按時 間改變的方式控制要顯示的源信號的圖像的形狀。在這種情形中，圖像可包括 基於從第一再混合信號解碼設備500的輔助信息編碼單元503或再混合渲染單 元505接收的源信號信息(si)從存儲單元6120詢問的按照源信號的圖像。並 且，可從接收自第一再混合信號解碼設備500的再混合渲染單元505的源信號 能級信息(si)中提取源信號的按時間的能級。
例如，在總播放時間對應於3分45秒的情形中，在從播放開始時間(t=0 分O秒)至播放完成時間(1=3分45秒)的每一秒檢測源信號(鋼琴、小提琴、 長笛)的各能級，且對應圖像(鋼琴圖像、小提琴圖像、長笛圖像)的形狀(大 小、顏色、亮度、圖像內的位置等)於是改變地顯示。在特定定時點鋼琴(小 提琴等)的能級高的情形中，能夠增大鋼琴圖像(小提琴圖像等)的大小。在 特定定時點鋼琴(小提琴等)的能級高的情形中，能夠增加鋼琴圖像(小提琴 圖像等)的亮度。
並且，顯示器6140是其上顯示對應於源信號的圖像的顯示設備。 圖41是根據本發明的再一個實施例的界面顯示裝置的框圖. 參照圖41，根據本發明的再一個實施例的界面顯示裝置6200包括輸入單 元6210、存儲單元6220、控制單元6230和顯示器6240，並被互連至第二再混 合信號解碼設備700。在這種情形中，第二再混合信號解碼設備700包括輔助 信息解碼單元703、輔助信息統一單元705和再混合渲染單元707。並且，第 二再混合信號解碼設備700具有與前面參考圖7描述的第二再混合信號解碼設 備幾乎相同的配置和功能，所以在以下的描述中省略其細節。
同時，將根據本發明的再一個實施例的界面顯示裝置6200與前面根據本 發明的又一個實施例的界面顯示裝置6100相比較，區別僅在於其互連至第二 再混合信號解碼設備700而不是第一再混合信號解碼設備500，還在於輸入合 成對象信號701而不是混合信號501。其相應元件與前面根據本發明的又一個 實施例的界面顯示裝置6100的元件幾乎相同，因此在以下的描述中省略其細 節。
45圖42是根據本發明的另一個實施例的界面顯示方法的流程圖。首先，在 以下的描述中使用的術語"混合信號"應被理解為包括合成對象信號的概念。 並且，根據本發明的一個實施例的界面顯示方法可通過根據本發明的又一個實 施例的界面顯示裝置6100或根據本發明的再一個實施例的其它界面顯示裝置
6200來實施。
參照圖42，如果用戶利用輸入設備輸入針對特定混合信號的回放命令， 則界面顯示裝置接收所輸入的命令[S610]。隨後，界面顯示裝置接收對應於混 合信號的源信號信息[S620]。界面顯示裝置然後基於在步驟S620中接收的源信 號信息詢問對應於各個源信號的圖像[S630]。
隨後，如果混合信號的回放開始(在步驟S640中為"是")，則界面顯 示裝置按時間檢測對應於混合信號的源信號的源信號能級(或按照子頻帶的能 級)。隨後，根據在步驟S640中所詢問的能級(按照子頻帶的能級)，界面 顯示裝置改變並顯示在步驟S630中詢問的圖像的形狀(大小、顏色、亮度、 屏幕內的位置等)。圖43是其上圖像的大小與源信號的能級成比例地改變的 屏幕的示例圖。觀察圖43中的按照對象的圖像大小，如果當前播放時間是"tl"， 則可觀察到除女性歌手外樂器的各能級為低，而女性歌手的能級為高。如果當 前播放時間是"t2"，則可觀察到僅女性歌手的能級低於其餘樂器的能級。如 果當前播放時間是"t3"，則可觀察到僅女性歌手和鋼琴的能級為高。圖44 是其上圖像的亮度與源信號的能級成比例地變化的屏幕的示例圖。參照圖44， 在當前時間是tl、 t2或t3的定時點，可觀察到按照對象的圖像亮度根據源信 號的能級的各種變化而改變。
同時，能夠根據源信號的能級的變化而改變對應於源信號的圖像的大小。 具體地，僅顯示在特定定時點具有最高能級的源信號的圖像，且通過將其餘源 信號的大小設為0而不顯示其餘源信號的圖像。圖45和圖46是其上僅顯示源 信號中具有最高能級的圖像的屏幕的示例圖。參照圖45，當播放開始後播放時
間是tl時，鋼琴的能級在總共四個源信號中為最高。因此，能夠觀察到其它源 信號(小提琴、歌手、長笛)的圖像消失且僅鋼琴圖像(鋼琴家Chung Myung-Hoon的照片)顯示在屏幕上。當播放時間是t2時，歌手(女性)的能 級在總共四個源信號中為最高。因此，能夠觀察到僅歌手(女性)圖像(歌手ChoSoo-Mee的照片)在屏幕上顯示。參照圖46，當播放時間是播放開始後的 tl時，能夠觀察到處於最高能級的歌手的第三圖像被置於中間。當播放時間是 t2時，能夠觀察到處於最高能級的歌手的第一圖像被置於中間。
在圖像根據源信號的按照子頻帶的能級而改變的情形中，能夠部分地改變 源信號的圖像的形狀。例如，通過使圖像的水平軸對應於源信號的頻率軸且還 使源信號的垂直軸對應於能級軸，如果低頻帶的能級為高且如果高頻帶的能級 為高，則圖像的左部表示為細而圖像的右部表示為粗。以上解釋的步驟S650 和S660繼續直到混合信號的回放終止[S670]。
能夠通過用於提供混合信息的伺服器(在下文中稱為再混合信息提供服務 器)向用戶提供再混合信息。再混合信息提供伺服器能夠以從包括多個源信號 的混合信號排除某些源信號的方式提供經修改混合信號。具體地，假設混合信 號包括多個源信號，再混合信息提供伺服器可提供經修改的混合信號，構成混 合信號的源信號中的至少一個從該經修改的混合信號中排除。在下文中，由從 包括在原始混合信號中的多個源信號排除某些源信號而生成的混合信號被稱 為經修改的混合信號以與原始混合信號相區別。在再混合信息提供伺服器提供 經修改的混合信號的情形中，用戶能夠在接收混合信號之前接收並收聽經修改 的信號。在用戶已經收聽到經修改的混合信號之後，如果用戶嘗試收聽從中排 除了任一源信號的原始混合信號，則能夠向再混合信息提供伺服器請求發送其 中包括所有源信號的原始混合信號。
再混合信息提供伺服器可向用戶提供免費的再混合信息，或可向用戶提供 收費的部分或全部再混合信息。在再混合信息提供伺服器向用戶提供收費的再 混合信息的情形中，用戶為再混合信息付費、然後接收相應的再混合信息。再 混合信息提供伺服器能夠向用戶提供免費的經修改的混合信號或收費的原始 混合信號。如下參考圖47至52解釋其中用戶從再混合信息提供伺服器接收由 從混合信號排除某些源信號而生成的經修改的混合信號、然後使用所接收的經 修改的混合信號的方法，以及其中在再混合信息提供伺服器提供付費的再混合 信息時進行支付的方法。
圖47是根據本發明實施例的再混合信息提供系統的示意圖。
參照圖47，再混合信息提供系統包括用戶終端7001、再混合信息提供伺服器7002、銀行機構7003和移動通信服務提供商7004。
用戶需要混合信號或源信號以及關於源信號的輔助信息以便再混合源信 號。輔助信息包括由編碼設備生成的編碼器混合參數、由解碼設備生成的盲混 合參數、利用用戶輸入的控制信息生成的用戶混合參數等。
用戶能夠通過經由用戶終端7001中所包括的用戶界面(圖中未示出)等 調節表示各源信號的圖標來調節經再混合的混合信號中所包括的源信號。用戶 能夠以調節表示源信號的圖標的方式改變源信號的大小或位置、聲音的特徵 等。圖標能夠包括表示人類感覺的字符圖釋(emoticon)、歌手或樂器演奏者 的照片、樂器的照片或圖片等。在以下的描述中，按照源信號再混合混合信號 所需的一組信息——包括混合信號、各聲音源的源信號、按照源信號控制混合 信號的混合參數、擴展混合混合信號的擴展混合參數、用於表示源信號的圖標 等——被稱為再混合信息。
用戶利用用戶終端7001訪問再混合信息提供伺服器7002。在這種情形中， 用戶終端7001包括能夠與其它用戶終端進行有線/無線通信且還能夠生成混合 信號的諸如用戶PC (膝上型電腦、臺式機等)、移動終端(行動電話等)、 PDA (個人數字助理)、PMP (便攜多媒體播放器)等設備。
用戶終端7001選擇來自再混合信息提供伺服器7002的特定再混合信息。 再混合信息提供伺服器7002在資料庫(圖中未示出)中搜索由用戶選擇的再 混合信息、然後提取搜索到的再混合信息。再混合信息提供伺服器7002將所 提取的再混合信息發送到用戶終端。
再混合信息提供伺服器7001能夠提供由從混合信號中所包括的或混合信 號的特定部分內所包括的源信號排除預定源信號而生成的經修改的混合信號。 例如，如果用戶嘗試收聽由柴可夫斯基作曲利用鋼琴、小提琴和大提琴的鋼琴 三重奏"Memory of Great Artist"(偉大藝術家的回憶)，則用戶在收聽其混 合信號之前能夠收聽經修改的混合信號。在用戶向再混合信息提供伺服器7002 請求鋼琴三重奏"Memory of Great Artist"的經修改的混合信號的情形中，再 混合信號提供伺服器7002從資料庫提取經修改的混合信號，即從中排除了大 提琴信號的"Memory of Great Artist"，然後將所提供的經修改混合信號發送 給用戶。在"Memory of Great Artist"的經修改的混合信號未被存儲在資料庫中的情形中，再混合信息提供伺服器能夠通過排除混合信號所包括的預定源信 號(即，鋼琴信號、小提琴信號、大提琴信號)來將混合信號修改成各種形式。 再混合信息提供伺服器7002能夠以從混合信號所包括的源信號隨機排除 特定源信號的方式或根據用戶請求生成經修改的混合信號。如果用戶請求通過 從混合信號所包括的源信號排除鋼琴信號來生成經修改的混合信號，則再混合 信息提供伺服器生成僅包括小提琴和大提琴信號的經修改的混合信號、然後將 所生成的信號發送到用戶。
用戶從再混合信息提供伺服器7002接收經修改的混合信號、然後收聽所
接收的經修改的混合信號。在收聽經修改的混合信號後，如果用戶嘗試收聽混
合信號，則用戶向再混合信息提供伺服器7002請求發送"Memory of Great Artist"的混合信號。用戶能夠利用用戶終端7001收聽從再混合信息提供服務 器7002接收的經修改的混合信號或混合信號。用戶能夠將混合信號用作諸如 移動終端之類的用戶終端7001的呼叫聲音或鈴聲。並且，用戶能夠將混合信 號等用作主頁等的背景音樂。並且，用戶能夠通過從再混合信息提供伺服器 7002接收關於混合信號的輔助信息或經修改的混合信號以按照源信號調節混 合信號的方式生成經再混合的混合信號。
在某些情況下，再混合信息提供伺服器7002能夠提供付費的全部或部分 再混合信息。再混合信息提供伺服器7002可提供免費的基本再混合信息並可 提供付費的其它再混合信息。在再混合信息使用要付費的情形中，再混合信息 提供伺服器7002請求用戶支付。對於支付處理，再混合信息提供伺服器7002 可向用戶終端7001請求認證信息以檢查用戶是否是授權用戶。響應於再混合 信息提供伺服器7002的請求，用戶將用於認證的用戶信息輸入到用戶終端 7001。再混合信息提供伺服器7002能夠通過從用戶終端7001接收用戶輸入的 用戶信息來認證用戶是否是授權用戶。
在用戶嘗試使用信用卡支付再混合信息使用費的情形中，再混合信息提供 伺服器7002通過將用戶信息發送至諸如信用卡公司、銀行等銀行機構來請求 用戶授權是否存在的確認。銀行機構7003檢査用戶是否是已經在銀行機構中 預訂的授權用戶、然後將相應的結果發送到再混合信息提供伺服器7002。然後， 再混合信息提供伺服器7002請求銀行機構7003支付再混合信息使用費。如果是這樣，則銀行機構7003從用戶的帳戶中提取再混合信息使用費，然後通知
再混合信息提供伺服器7002已經作出支付。銀行機構7003實時或周期性地將 所提取的再混合信息使用費轉移到再混合信息提供伺服器7002的帳戶。在用 戶想要通過轉帳支付再混合信息使用費的情形中，銀行機構7003通知再混合 信息提供伺服器7002用戶已經將再混合信息使用費支付到再混合信息提供服 務器7002的帳戶上。在從銀行機構7003接收到支付完成的通知後，再混合信 息提供伺服器7002提取由用戶選擇的再混合信息、然後將所提取的再混合信 息發送到用戶終端7001。
再混合信息提供伺服器7002可向用戶終端7001提供再混合信息，用戶終 端7001可按原樣收聽。然而，用戶終端7001能夠以用戶修改再混合信息的方 式使用再混合信息。在這種情形中，用戶終端7001可包括用於處理再混合的 信號解碼設備。
用戶接收與輔助信息一起或與輔助信息分離的源信號和混合信號，然後能 夠利用用戶終端7001再混合源信號。在用戶終端7001僅從再混合信息提供服 務器7002接收混合信號的情形中，用戶終端7001直接生成關於混合信號的輔 助信息、然後能夠利用所生成的輔助信息按照源信號調節混合信號。用戶通過 按源信號調節混合信號來調節混合信號而生成經再混合的混合信號，然後能夠 將經再混合的混合信號上傳到再混合信息提供伺服器7002。並且，用戶生成用 於表示源信號的圖標或修改從再混合信息提供伺服器7002接收的圖標，然後 能夠將所生成或修改的圖標上傳到再混合信息提供伺服器7002。在這種情形 中，再混合信息包括由用戶上傳的經再混合的混合信號、由用戶生成/修改和上 傳的圖標等。
再混合信息提供伺服器7002將用戶利用用戶終端7001上傳的經再混合的 混合信號存儲在資料庫中(圖中未示出)。如果與前面用戶不同的第二用戶請 求發送經再混合的混合信號，則再混合信息提供伺服器能夠以免費或付費的方 式將經再混合的混合信號發送到第二用戶終端。再混合信息提供伺服器7002、 前面向再混合信息提供伺服器7002上傳經再混合的混合信號、圖標等的用戶 以及嘗試使用經再混合的信號、圖標等的第二用戶可根據預設協議支付再混合 信息使用費。在向第二用戶付費發送經再混合的混合信號的情形中，再混合信
50息提供伺服器7002可通過上述方法請求第二用戶支付。並且，再混合信息提
供伺服器7002可將第二用戶已支付的再混合信息使用費的預定部分支付給前 面向再混合信息提供伺服器7002上傳經再混合的混合信號、圖標等的用戶。
用戶可利用諸如行動電話等用戶終端7001支付再混合信息使用費。如果 用戶向再混合信息提供伺服器7002輸入諸如行動電話之類的用戶終端的號碼 等，則再混合信息提供伺服器7002將用戶的用戶終端7001的號碼發送到移動 通信服務提供商7004並請求用於用戶認證的認證號碼。響應於再混合信息提 供伺服器7002的請求，移動通信服務提供商7004將認證號碼發送到再混合信 息提供伺服器7002和用戶終端兩者。用戶將所接收的認證號碼輸入到再混合 信息提供伺服器7002。如果由用戶輸入的認證號碼匹配從移動通信服務提供商 7004接收的認證號碼，則再混合信息提供伺服器7002確定用戶是授權用戶。 在確定用戶被授權的情形中，再混合信息提供伺服器7002請求移動通信服務 提供商7004支付再混合信息使用費。如果是這樣，則移動通信服務提供商7004 將再混合信息使用費添加到用戶終端7001的正常使用費。如果支付了再混合 信息使用費，則移動通信服務提供商7004通知再混合信息提供伺服器7002已 經支付。在接收支付完成的通知後，再混合信息提供伺服器7002將用戶所選 的再混合信息發送到用戶終端7001。
隨後，用戶利用所接收的再混合信息生成經再混合的混合信號。用戶能夠 通過利用用戶終端7001調節源信號的大小、位置、音調等來使混合信號獨特。 用戶能夠利用用戶終端7001將經再混合的混合信號上傳到再混合信息提供服 務器7002。如上所述，第二用戶下載由其它用戶上傳到再混合信息提供伺服器 7002的經再混合的混合信號，然後能夠使用所下載的經再混合的混合信號。
圖48是根據本發明實施例的再混合信息提供伺服器的框圖。
參照圖48，再混合信息提供伺服器7002包括存儲系統7001、中央處理單 元(CPU) 7104、輸入/輸出設備7108和通信設備7109。中央處理單元7104 包括用於執行計算的算術邏輯單元(ALU) 7105、用於數據和命令的臨時存儲 的寄存器以及用於控制再混合信息提供伺服器7002的操作的控制器7107。存 儲系統7001包括具有諸如隨機存取存儲器(RAM)和只讀存儲器(ROM) 之類的存儲介質配置的高速主存儲器7102;具有諸如軟盤、硬碟、帶、CD-ROM、快閃記憶體等長期存儲介質配置的輔助存儲器；以及利用其它電、磁或光存儲介質的 用於存儲數據的設備。主存儲器7102可包括視頻顯示存儲器，用於經由顯示 設備顯示諸如混合信號或經修改的混合信號、圖標等的列表。輸入/輸出設備
7108包括鍵盤、滑鼠和諸如觸控螢幕和話筒等物理換能器。並且，通信設備7109 可包括用於與用戶終端7001或諸如RF收發機天線之類的設備進行有線/無線 通信的網絡接口。
圖49是根據本發明實施例的再混合信息提供伺服器的模塊的框圖。 參照圖49，再混合信息提供伺服器7002包括用於處理用戶終端7001、 銀行機構7003和移動通信服務提供商7004之間的通信的收發機處理模塊 7213;存儲和管理包括混合信號、經修改的混合信號等再混合信息的資料庫管 理模塊7214;生成經修改的混合信號的混合信號修改模塊7215;以及在再混 合信息要付費的情形中驗證用戶是否被授權的帳單處理模塊7216，該帳單處理 模塊7216處理支付。
再混合信息提供伺服器的整體配置通過以上的應用模塊解釋如下。 首先，再混合信息提供伺服器能夠使用各種作業系統(在下文中簡稱為 OS)作為系統OS。 OS通過向應用程式接口 (在下文中簡稱為API) 7201提 供高級命令來控制各應用模塊7206的操作。再混合信息提供伺服器包括高級 命令處理單元7202，其根據API 7201所提供的高級命令中的相應的一個標識 每個應用模塊7204，高級命令處理單元7202解碼相應的高級命令，高級命令 處理單元7202將經解碼的命令提供給相應位置。應用模塊控制單元7203根據 高級命令處理單元7202所提供的命令來控制應用模塊7204的操作。具體地， 高級命令處理單元7202標識是否存在對應於經由API 7201提供的高級命令的 應用模塊7204。如果存在對應於經由API 7201提供的高級命令的應用模塊 7204，則高級命令處理單元7202將所提供的命令解碼成可由相應應用模塊 7204識別的命令、然後將經解碼的命令發送到對應的映射單元或控制消息傳 輸。
因此，應用模塊控制單元7203包括分別用於收發處理模塊7213、資料庫 管理模塊7214、混合信號修改模塊7215和帳單處理模塊7216的映射單元7205、 7207、 7209和7211以及分別用於收發處理模塊7213、資料庫管理模塊7214、混合信號修改模塊7215和帳單處理模塊7216的接口單元7206、 7208、 7210 和7212。
收發處理模塊映射單元7205具有由高級命令處理單元7202提供的用於與 用戶終端7202、銀行機構7003或移動通信服務提供商7004進行通信的高級命 令，並將所提供的命令映射到可由收發處理模塊7213處理的設備級，然後將 經映射的命令經由收發處理模塊接口單元7206提供給收發處理模塊7213。
資料庫管理模塊映射單元和資料庫管理模塊接口單元7208存儲混合信號 或經修改的混合信號，然後在從用戶終端7001接收到混合信號請求或經修改 的混合信號請求的情形中提取所存儲的信號。資料庫管理模塊映射單元7207 具有由高級命令處理單元7202提供的用於使用資料庫管理模塊7214的高級命 令，並將所提供的命令映射至設備級命令，然後將經映射的命令經由資料庫管 理模塊接口單元7208提供給資料庫管理模塊7214。
在用戶等請求經修改的混合信號而需要修改混合信號的情形中，混合信號 修改模塊7215通過排除混合信號中所包括的預定源信號來生成經修改的混合 信號。混合信號修改模塊映射單元709具有經由高級命令處理單元7202施加 的高級命令，然後將所提供的命令映射至可由混合信號修改模塊7215識別的 設備級命令。將設備級命令經由混合信號修改模塊接口單元7210提供給混合 信號修改模塊7215。
帳單處理模塊7216檢査用戶是否是授權用戶。如果用戶是授權用戶，則 帳單處理模塊7216徵收再混合信息使用費。在第二用戶想要使用由另一用戶 生成和上傳的經再混合的混合信號的情形中，帳單處理模塊7216在再混合信 息提供伺服器7002、上傳經再混合的混合信號的用戶和第二用戶之間處理再混 合信息使用費。帳單處理模塊映射單元7211具有經由高級命令處理單元7202 施加的高級命令，然後將所提供的命令映射至可由帳單處理模塊接口單元7216 識別的設備級命令。將設備級命令經由帳單處理模塊接口單元7212提供給帳 單處理模塊7216。
圖50是根據本發明實施例的從再混合信息提供伺服器提供再混合信息的 方法的流程圖。
參照圖50，用戶利用用戶終端7001訪問再混合信息提供伺服器7002。再混合信息提供伺服器7002具有由用戶終端7001選擇的再混合信息[S701]。再 混合信息提供伺服器7002可將用戶選擇的再混合信息免費發送到用戶終端 7001。並且，再混合信息提供伺服器7002也可將用戶選擇的再混合信息付費 地發送到用戶終端7001。再混合信息提供伺服器7002確定用戶選擇的再混合 信息是免費還是付費的[S703]。如果用戶選擇的再混合信息要付費，則再混合 信息提供伺服器7002向用戶請求支付[S705]。對於支付，再混合信息提供服務 器7002能夠執行用戶認證以確認用戶是否是授權用戶。再混合信息提供服務 器7002能夠請求向用戶終端7001輸入用於用戶認證的用戶認證信息，諸如信 用卡號、帳戶號、社會安全號、口令(個人識別號碼)等。如果用戶利用用戶 終端7001輸入認證信息，則再混合信息提供伺服器7002將用戶輸入的用戶認 證信息發送到銀行機構7003、移動通信服務提供商7004等，然後請求確認用 戶是否被授權。
銀行機構7003或移動通信服務提供商7004在資料庫(圖中未示出)中搜 索由再混合信息提供伺服器7002發送的用戶認證信息、然後將相應的結果通 知給再混合信息提供伺服器7002。 .
如果用戶被確定為被授權，則再混合信息提供伺服器7002將支付信息發 送到銀行機構7003或移動通信服務提供商7004並請求進行支付。再混合信息 提供伺服器7002可包括混合信號修改單元(圖中未示出)。如果進行支付(在 步驟S707中為"是")，則再混合信息提供伺服器7002確定用戶選擇的再混 合信息是否是由排除指定源信號生成的經修改的混合信號[S709]。如果用戶專 用的再混合信息是經修改的混合信號，則再混合信息提供伺服器7002利用混 合信號修改單元修改混合信號或提取先前存儲的修改信號[S711]。再混合信息 提供伺服器7002將經修改的混合信號提供給用戶終端7001[S715]。如果用戶 選擇的再混合信息不是經修改的混合信號，則再混合信息提供伺服器7002提 取先前存儲的再混合信息[S713]。並且，再混合信息提供伺服器7002將所提取 的再混合信息提供給用戶終端7001[S715]。
圖51是根據本發明實施例向用戶終端提供再混合信息的方法的流程圖。
參照圖51，用戶利用用戶終端7001訪問再混合信息提供伺服器7002 [S801]。用戶利用用戶終端70001從再混合信息提供伺服器7002提供的再混合
54信息中選擇特定信息[S803]。如上所述，再混合信息包括混合信號、經修改的 混合信息、源信號、輔助信息、表示源信號的圖標和字符圖釋。並且，再混合
信息包括由其它用戶上傳到再混合信息提供伺服器7002的再混合信息等。用 戶終端7001確定用戶選擇的再混合信息是否是要付費的[S805]。如果用戶選擇 的再混合信息是要付費的，則用戶支付再混合信息使用費[S807]。在這種情形 中，再混合信息使用費可根據再混合信息的類型或大小、比特率等改變。例如， 在用戶嘗試僅接收特定源信號的情形中，用戶可支付比接收包括特定源信號的 混合信號的情況要少的使用費。在用戶接收關於混合信號的輔助信息或關於未 包括在混合信號的源信號的輔助信息的情形中，由用戶支付的量可改變。在完 成支付後，用戶從再混合信息提供伺服器7002接收再混合信息[S809]。
圖52是根據本發明實施例將再混合信息從用戶發送至再混合提供伺服器 的方法的流程圖。
參照圖52，用戶利用用戶終端7001接收再混合信息。再混合信息可由諸 如再混合信息提供伺服器7002之類的編碼設備發送。用戶終端7001可包括再 混合渲染單元(圖中未示出)，其利用再混合信息和控制信息再混合混合信號 中所包括的源信號。在用戶終端7001包括再混合渲染單元的情形中，用戶能 夠利用用戶終端7001利用混合信號、源信號及其輔助信息直接生成再混合信 息。並且，用戶還能夠通過利用再混合渲染單元修改用戶終端7001中所存儲 的再混合信息生成新的再混合信息[S901]。具體地，用戶能夠生成通過利用用 戶所擁有的再混合信息調節源信號的大小、位置、音調等來再混合的混合信號。 此外，用戶能夠修改表示源信號的圖標或字符圖釋或能夠直接生成圖標等。用 戶發送所生成的再混合信息以便將其上傳到再混合信息提供伺服器 7002[S903]。再混合信息提供伺服器7002將用戶上傳的新的再混合信息存儲在 資料庫中。如果第二用戶想要所存儲的再混合信息，則再混合信息提供伺服器 7002從資料庫提取想要的再混合信息、然後將提取的再混合信息發送到第二用 戶終端。
工業實用性
因此，本發明適用於媒體信號播放器、遙控器等的輸入設備。並且，本發明適用於媒體信號播放器、遙控器等的界面控制器。此外，本發明適用於媒體 信號信息提供伺服器等。
儘管本文參考本發明的優選實施例來描述和例示了本發明，但本領域的技 術人員將清楚可在本發明中作出各種修改和變形而不會脫離本發明的精神和 範圍。因此，本發明旨在涵蓋落入所附權利要求及其等效技術方案範圍內的本 發明的修改和變形。
權利要求
1.一種輸入裝置，包括輸入單元；控制單元，其將經由所述輸入單元接收的輸入信號轉換成按照源的菜單顯示命令，所述控制單元根據所述按照源的菜單顯示命令控制按照源的菜單顯示圖像基於對應於混合信號的源信息輸出；以及，用於輸出所述按照源的菜單顯示圖像的顯示器。
2. 如權利要求1所述的輸入裝置，其特徵在於，還包括定位設備或方向 鍵，其中所述控制單元將經由所述定位設備或方向鍵接收的輸入信號轉換成按 照源的能級調節命令。
3. —種輸入裝置，包括-輸入單元；控制單元，其將經由所述輸入單元接收的輸入信號轉換成按照源的菜單顯 示命令；以及，無線通信單元，其將所述控制單元轉換的命令發送到外部設備。
4. 一種輸入裝置，包括 輸入單元；以及控制單元，其將經由所述輸入單元接收的輸入信號轉換成語音靜音命令或 語音能級調節命令，所述控制單元基於所述語音靜音命令或語音能級調節命令 輸出關於混合信號的控制信息。
5. —種輸入裝置，包括 輸入單元；控制單元，其將經由所述輸入單元接收的輸入信號轉換成環境圖像顯示命 令，所述控制單元根據所述環境圖像單顯示命令控制環境圖像基於對應於混合 信號的源信息輸出；以及顯示器，所述環境圖像被輸出到所述顯示器。
6. 如權利要求5所述的輸入裝置，其特徵在於，還包括定位設備或方向 鍵，其中所述控制單元將經由所述定位設備或方向鍵接收的輸入信號轉換成環境調節命令，然後基於所述環境調節命令輸出關於所述混合信號的控制信息。
7. —種輸入方法，包括 接收快捷鍵登記命令；選擇多個鍵中的一個、多個源中的一個和至少一個或多個功能中的一個；以及通過將用於所選源的所選功能匹配到所選鍵來存儲， 其中多個所述源包括音頻信號源和視頻信號源中的至少一個，且其中至少 一個功能包括聲音靜音、環境調節和能級調節中的至少一個。
8. —種輸入裝置，包括輸入單元，用於選擇多個鍵中的一個、多個源中的一個和至少一個或多個 功能中的一個；存儲單元，用於存儲關於多個所述鍵中的每一個的命令信息；以及 控制單元，其將所選源的所選功能匹配到所選鍵，所述控制單元在所述存 儲單元中存儲所述匹配的結果，其中多個所述源包括音頻信號對象和視頻信號對象中的至少一個，其中至 少一個功能包括聲音靜音、環境調節和能級調節中的至少一個。
9. 一種顯示混合信號的界面的方法，包括 選擇特定混合信號；以及通過詢問有關對應於所述混合信號的源信號的信息顯示源信號的列表， 其中在選擇混合信號時維持所述顯示。
10. 如權利要求9所述的方法，其特徵在於，關於所述源信號的信息是從 對應於所述混合信號的輔助信息提取的。
11. 如權利要求9所述的方法，其特徵在於，所述源信號的列表包括樂器 名、歌手名和混合信號所包括的源信號的特性中的至少一個。
12. 如權利要求9所述的方法，其特徵在於，還包括 從所述源信號列表選擇單個源；以及 進一步顯示針對所選源的音量級調節圖像。
13. 如權利要求9所述的方法，其特徵在於，還包括 從所述源信號列表選擇單個源；以及顯示針對所選源的均衡器調節圖像或環境調節圖像。
14. 一種用於顯示混合信號的界面的裝置，包括 用於選擇多個混合信號之一的輸入單元；控制單元，其通過詢問對應於所述混合信號的源信號的信息顯示源信號的列表；以及用於顯示所述源信號的列表的顯示器， 其中在選擇混合信號時維持所述顯示。
15. 如權利要求14所述的裝置，其特徵在於，還包括第二顯示器，其中所述輸入單元從所述源信號的列表選擇源，並且 其中所述控制單元在所述第二顯示器上顯示針對所選源的元數據、音量級 調節圖像、均衡器調節圖像和環境調節圖像中的至少一個。
16. —種顯示混合信號的界面的方法，包括 選擇特定混合信號；以及通過詢問對應於所述混合信號的源信號的信息基於所述源信號的信息顯 示對應於所述源信號的圖標。
17. 如權利要求16所述的方法，其特徵在於，所述源信號的信息是從對 應於所述混合信號的輔助信息提取的。
18. 如權利要求16所述的方法，其特徵在於，還包括 如果接收到對所述圖標之一的執行命令，則顯示對應於所選圖標的源信號的能級調節圖像。
19. 如權利要求18所述的方法，其特徵在於，還包括-如果接收到針對能級調節的命令，則根據經調節的能級改變所選圖標的形狀，其中所選圖標的形狀包括大小、顏色、亮度和所述圖像內的位置中的至少 一個。
20. 如權利要求16所述的方法，其特徵在於，還包括如果選擇了所述圖標之一，則顯示對應於所選圖標的源信號的均衡器圖像。
21. 如權利要求20所述的方法，其特徵在於，還包括如果接收到針對按照子頻帶的能級調節的命令，則通過調節對應於所選圖 標的源信號的子頻帶能級來再混合所述混合信號。
22. 如權利要求16所述的方法，其特徵在於，還包括如果選擇所述圖標 之一，則顯示對應於所選圖標的所述源信號的環境調節圖像，其中所述環境調節圖像顯示按照源的信號相對位置。
23. —種用於顯示混合信號的界面的裝置，包括 用於選擇多個混合信號之一的輸入單元；控制單元，其基於與所述輸入單元所選擇的所述混合信號相對應的源信號的信息顯示對應於源信號的圖標；以及顯示單元，用於顯示對應於所述源信號的圖標。
24. —種顯示混合信號的界面的方法，包括 接收針對所述混合信號的回放命令；以及如果對應於所述混合信號的源信號的能級按時間改變，則通過按時間改變 形狀顯示所述源信號的圖像的形狀，其中所述圖像的形狀包括大小、顏色、亮度和所述圖像內的位置中的至少 一個。
25. —種用於顯示混合信號的界面的裝置，包括用於輸入針對所述混合信號的回放命令的輸入單元；控制單元，如果對應於所述混合信號的源信號的能級按時間改變，則所述控制單元通過按時間改變形狀來控制要顯示的所述源信號的圖像的形狀；以及 顯示單元，用於顯示對應於所述源信號的圖像，其中所述圖像的形狀包括大小、顏色、亮度和所述圖像內的位置中的至少一個o
26. —種由經由通信網絡連接到用戶終端的再混合信息提供伺服器實施的處理信號的方法，包括由用戶終端請求再混合信息；以及 將所請求的再混合信息發送到所述用戶終端，其中所述再混合信息包括混合信號、所述混合信號中包括的源信號、用於 按照源信號控制所述混合信號的混合參數、用於擴展混合所述混合信號的擴展混合信號、以及用於表示所述源信號的圖標或字符圖釋中的至少一個。
27. 如權利要求26所述的方法，其特徵在於，所述再混合信息包括通過從所述混合信號所包括的源信號中排除部分源信號生成的經修改的混合信號。
28. 如權利要求27所述的方法，其特徵在於，如果所述用戶終端請求發送經修改的混合信號，則所述方法還包括使用戶能夠選擇要從所述混合信號排除的源信號，，以及 生成所選源信號被排除的經修改的混合信號， 其中在發射時，所述經修改的混合信號被發送到用戶終端。
29. 如權利要求26至28中的任一項所述的方法，其特徵在於，所述發送 包括如果對所述再混合信息進行支付，則將所述再混合信息發送到所述用戶終 端。
30. 如權利要求29所述的方法，其特徵在於，所述再混合信息提供服務 器經由所述通信網絡連接到銀行機構或移動通信服務提供商，以及其中所述支付以以下方式進行向所述用戶終端請求用戶終端認證信息， 通過將用戶終端輸入的認證信息發送到銀行機構或移動通信服務提供商來請 求認證，且如果用戶終端認證完成，則通過將支付信息發送到銀行機構或移動 通信服務提供商來請求支付。
31. —種由經由通信網絡連接到再混合信息提供伺服器的用戶終端實施 的處理信號的方法，包括通過訪問所述再混合信息提供伺服器來請求再混合信息； 將由所述再混合信息提供伺服器請求的支付信息發送到所述再混合信息 提供伺服器；以及如果進行支付，則從所述再混合信息提供伺服器接收所述再混合信息， 其中所述再混合信息包括混合信號、所述混合信號中包括的源信號、用於 按照源信號控制所述混合信號的混合參數、用於擴展混合所述混合信號的擴展 混合信號以及用於表示所述源信號的圖標或字符圖釋中的至少一個。
32. —種經由通信網絡連接到用戶終端的再混合信息提供伺服器，包括 收發單元，其具有所述用戶終端請求的再混合信息，所述收發單元將所請求的再混合信息發送到用戶終端；資料庫單元，其響應於所述用戶終端的請求提取所請求的再混合信息；支付處理單元，如果再混合信息的使用要付費，則所述支付處理單元處理關於所述再混合信息使用的支付；以及控制單元，其控制由所述用戶終端請求的要發送到所述用戶終端的再混合fe息，其中所述再混合信息包括混合信號、所述混合信號中包括的源信號、用於 按照源信號控制所述混合信號的混合參數、用於擴展混合所述混合信號的擴展 混合信號以及用於表示所述源信號的圖標或字符圖釋中的至少一個。
33. —種通過通信網絡連接到再混合信息提供伺服器的用戶終端，包括-通信單元，其向所述再混合信息提供伺服器請求再混合信息，所述通信單元接收所請求的再混合信息；用於接收控制信息的用戶界面；再混合渲染單元，其利用所述再混合信息和所述控制信息再混合包括在混合信號中的源信號；以及控制單元，其通過全面地控制所述用戶終端來控制所述混合信號中包括的要再混合的源信號，其中所述再混合信息包括混合信號、所述混合信號中包括的源信號、用於 按照源信號控制所述混合信號的混合參數、用於擴展混合所述混合信號的擴展 混合信號以及用於表示所述源信號的圖標或字符圖釋中的至少一個。
全文摘要
公開了一種用於輸入控制混合信號所需的命令的裝置及其方法。本發明包括輸入單元；控制單元，其將經由輸入單元接收的輸入信號轉換成按照源的菜單顯示命令，該控制單元根據按照源的菜單顯示命令控制按照源的菜單顯示圖像基於對應於混合信號的源信息輸出；以及，用於輸出按照源的菜單顯示的顯示器。因此可按照包括在諸如視頻信號、音頻信號等混合信號中的源信號調節音量級，或調節環境(相對位置)。並且，用戶總是能夠確認關於與混合信號(或合成對象信號)相關聯的源信號(或對象信號)的信息。
文檔編號G06F3/01GK101583921SQ200780049602
公開日2009年11月18日 申請日期2007年12月3日 優先權日2006年12月1日
發明者任敬洙, 樸成鎬 申請人:Lg電子株式會社