信息處理設備、控制方法和存儲介質與流程

2023-06-16 00:55:31

本公開涉及信息處理設備、控制方法和存儲介質。

背景技術：

近來，從生物信息等估計人在特定時間的情感，並且將情感用於內容數據搜索、信息推薦等。

例如，下面的專利文獻1公開了一種用於基於諸如心跳和血壓的生物信息來獲得指示情感度的情感參數並且將情感參數轉換成一維情感貨幣的技術。

引用列表

專利文獻

專利文獻1：jp2005-124909a

技術實現要素：

技術問題

然而，在上述專利文獻1和先前技術中，主要基於生物信息來估計人類情感(愉快/不愉快)，但是沒有提及物件的虛擬心理狀態。

例如，甚至對於同一物品，在用戶帶有感情小心使用物件的情況以及用戶粗暴對待物件的情況下，用戶可能對於該物件具有不同的想法和感情。然而，不存在用於對此進行測量並且向第三方客觀通知測量結果的技術。

以該方式，即使在物件是相同物品的情況下，物件可能除了其功能和設計以外還具有個體價值。

因此，本公開提出了一種可以基於對象之間的交互來用數值表示對象的情感值的信息處理設備、控制方法和存儲介質。

針對問題的解決方案

根據本公開，提出了一種信息處理系統，該信息處理系統包括：檢測單元，該檢測單元檢測與第一對象和第二對象之間的交互有關的信息；以及生成單元，該生成單元能夠基於與交互有關的信息來生成第一對象的情感值和第二對象的情感值。

根據本公開，提出了一種控制方法，包括：檢測與第一對象和第二對象之間的交互有關的信息；以及能夠基於與交互有關的信息來生成第一對象的情感值和第二對象的情感值。

根據本公開，提出了一種存儲介質，該存儲介質中存儲有程序，該程序使得計算機用作：檢測單元，該檢測單元檢測與第一對象和第二對象之間的交互有關的信息；以及生成單元，該生成單元能夠基於與交互有關的信息來生成第一對象的情感值和第二對象的情感值。

發明的有益效果

如上所述，根據本公開，可以基於對象之間的交互來用數值表示對象的情感值。

注意，上述效果不一定是限制性的。在具有上述效果的情況下或替代上述效果，可以實現本說明書中描述的效果中的任一效果或者可以從本說明書領會的其他效果。

附圖說明

圖1是根據本公開的實施例的信息處理系統的概況的說明圖。

圖2是示出了根據本實施例的感測裝置的配置的示例的框圖。

圖3是示出了根據本實施例的情感伺服器的配置的示例的框圖。

圖4是示出了根據本實施例的信息處理系統的操作處理的序列圖。

圖5是根據第一應用示例的個人信用信息提供系統的整體配置的說明圖。

圖6是示出了根據第一應用示例的個人信用信息提供伺服器的配置的示例的框圖。

圖7是根據第一應用示例的情感伺服器的對象db的數據的示例的圖示。

圖8是根據第一應用示例的情感伺服器的情感信息db的數據的示例的圖示。

圖9是示出根據第一應用示例的信用排名顯示處理的流程圖。

圖10是根據第一應用示例的信譽排名畫面的示例的圖示。

圖11是示出了根據第一應用示例的顯示關於每個對象屬性的信譽信息的處理的流程圖。

圖12是根據第一應用示例的目標人對於房屋的相對情感值的計算的說明圖。

圖13是根據第一應用示例的針對每個對象屬性的信譽信息顯示畫面的示例的圖示。

圖14是示出根據第一應用示例的按時間順序的信譽顯示處理的流程圖。

圖15是根據第一應用示例的按時間順序信譽顯示畫面的示例的圖示。

圖16是根據第二應用示例的拍賣系統的整體配置的說明圖。

圖17是示出了根據第二應用示例的拍賣伺服器的配置的框圖。

圖18是根據第二應用示例的存儲在拍賣伺服器的物品和用戶信息db中的展出物品的數據的示例的圖示。

圖19是根據第二應用示例的情感伺服器的情感信息db的數據的示例的圖示。

圖20是示出了根據第二應用示例的根據展出物品的情感值進行的列表顯示處理的流程圖。

圖21是根據第二應用示例的取決於展出物品的情感值的列表顯示畫面的示例的圖示。

圖22是示出了根據第二應用示例的顯示與展出物品的情感值有關的詳細信息的處理的流程圖。

圖23是根據第二應用示例的展出物品的相對/絕對情感值的計算的說明圖。

圖24是根據第二應用示例的與展出物品有關的詳細信息的顯示畫面的示例的圖示。

圖25是示出了根據第二應用示例的顯示與參展方的情感值有關的詳細信息的處理的流程圖。

圖26是根據第二應用示例的與參展方的情感值有關的詳細信息的顯示畫面的示例的圖示。

圖27是根據第三應用示例的環境調整系統的整體配置的說明圖。

圖28是根據第三應用示例的通過移動對象進行的環境調整的示例的說明圖。

圖29是示出了根據第三應用示例的移動對象的配置的示例的框圖。

圖30是示出了根據第三應用示例的環境調整伺服器的配置的示例的框圖。

圖31是示出了根據第三應用示例的環境調整處理的流程圖。

圖32是示出了根據第三應用示例的覆蓋範圍改變處理的流程圖。

圖33是根據本實施例的交互評估數據的示例的圖示。

圖34是根據第三應用示例的交互評估的其他數據的示例的圖示。

圖35是根據第四應用示例的遙現(telepresence)系統的整體配置的說明圖。

圖36是根據第四應用示例的障子(shoji)圖像的顯示的示例的說明圖。

圖37是示出了根據第四應用示例的通信控制裝置的配置的示例的框圖。

圖38是示出了根據第四應用示例的遙現控制處理的流程圖。

圖39是示出了根據第四應用示例的開度設置操作處理的流程圖。

圖40是根據第四應用示例的交互評估數據的示例的圖示。

圖41是通過從圖40所示的交互評估值的示例提取用於情感值計算的數據而獲得的數據的示例的圖示。

圖42是根據第五應用示例的臨場感再現系統的整體配置的說明圖。

圖43是示出了根據第五應用示例的再現信息生成裝置的配置的示例的框圖。

圖44是示出了根據第五應用示例的存在信息生成處理的流程圖。

圖45是根據第五應用示例的拍攝對象識別的說明圖。

圖46是根據第五應用示例的交互評估數據的示例的圖示。

圖47是從圖46所示的交互評估數據的示例提取的且用於情感值計算的數據的示例的圖示。

圖48是示出了根據第五應用示例的再現控制裝置的配置的示例的框圖。

圖49是示出了根據第五應用示例的使用情感值的回放處理的流程圖。

圖50是根據第五應用示例的被布置成根據情感值而對應於各個拍攝對象的圖像效果的示例的圖示。

具體實施方式

在下文中，將參照附圖詳細描述本公開的優選實施例。在本說明書和附圖中，用相同的附圖標記來表示具有基本上相同的功能和結構的結構元件，並且將省略對這些結構元件的重複說明。

將按以下順序給出描述。

1.根據本公開的實施例的信息處理系統的概述

2.基本配置和操作處理

2-1.感測裝置

2-2.情感伺服器

2-3.操作處理

3.應用示例

3-1.個人信用信息提供系統

3-2.拍賣系統

3-3.環境調整系統

3-4.遙現系統

3-5.臨場感再現系統

4.結論

<>

首先，將描述圖1所示的根據本公開的實施例的信息處理系統100的概況。如圖1所示，在根據本實施例的信息處理系統100中，所有的人和物件被定義為對象，並且在對象(obj.a至obj.d)中的每一個上設置有用於檢測對象間交互的感測裝置1(10a至10d)。例如，由諸如手錶型裝置的可佩戴裝置實現的感測裝置1a附接至人obj.a。此外，在房屋obj.b中設置有能夠檢測門的開/關、人的進/出、房屋的維修等的感測裝置1b。此外，在車obj.c中設置有能夠檢測裡程、使用計數、駕駛小心程度、洗車等的感測裝置1c。此外，能夠檢測使用時間、存放狀態、拍攝對象類型、漏水、衝擊、維護操作的次數等的感測裝置1d附接至攝像裝置obj.d。

由感測裝置1檢測到的交互通過網絡3發送至情感伺服器2。例如，人obj.a與房子房屋obj.b、車obj.c和攝像裝置obj.d進行的交互(門的開/關、維修、駕駛、存放等)分別由感測裝置1a至1d檢測並被發送至情感伺服器2。具體地，當人與房屋進行了特定交互時，在人這一側的感測裝置1a和在房屋側的感測裝置1b檢測相應的交互(對其他對象執行的交互和由其他對象執行的交互)。此外，檢測到的交互不限於人與物件之間的交互，並且可以檢測物件之間的交互。

情感伺服器2累積從感測裝置1接收到的交互，並且對交互進行分析以計算每個對象的情感值。由情感伺服器2計算出的情感值用於各種服務。同時，由於存在必要的情感值根據服務的屬性而不同的情況，因此情感伺服器2發送用數值表示對與每種服務的每次交互的評估的評估值，並且可以在服務側通過預定計算方法、基於交互評估值來計算情感值。

以該方式，可以將所有的人和物件定義為對象，並且基於根據本實施例的信息處理系統100中的對象之間的交互來提供與用數值表示每個對象的值的新指標對應的情感值。作為本公開的背景，下面對這樣的情感值的有用性進行描述。

(背景)

由於基於新自由市場原則的全球經濟近期過度膨脹，成熟社會需要價值經濟的新指標。具體地，正在討論新製造的物件的「情感價值」。一般而言，由製造商投入物件的深刻的思想、意圖、背景、技術等被稱為情感價值，並且執行使用該情感價值的每個地區的人的動作。此外，帶有感情的用戶對物件的處理是物件的無形特殊價值，並且可能是超出其貨幣價值的價值。然而，過去在信息科學領域未使用這樣的「情感值」。

在這方面，根據裝置小型化、電池技術和網絡技術的新近進展，事物被連接的物聯網(iot)時代已經開始。在未來的物聯網時代，可以假設，物件和人在不加以區分的情況下連接的時代(已通過圖靈測試的物件與人交互)到來。在該情況下，可以利用人和物件(包括服務)之間在不加以區分的情況下的所有交互的歷史來限定人和物件的「情感價值」的相關性。

鑑於以上所述，本實施例提出了用數值表示人和物件的偽「情感價值」的情感值。由於情感價值由多維矢量來表示，因此認為維度減少或者矢量被轉換成簡單的標量值並使用，使得容易處理矢量以優化每種服務或物品的情感價值並使用優化的情感價值。可以預期，在未來情感值將連同貨幣一起成為價值經濟和經濟概念的新指標。因此，對於情感值而預期儲存(累積)、交換媒介(調解物件a和物件b的交換的功能)以及人和物件的價值的度量(情感價值被給予所有物品和服務，並且物件的價值由貨幣價值和情感價值確定)的功能。

上面描述了根據本實施例的信息處理系統100的概況。接下來，將依次描述信息處理系統100中所包括的感測裝置1和情感伺服器2的配置以及信息處理系統100的操作處理。

<>

圖2是示出了根據本實施例的感測裝置1的配置的示例的框圖。如圖2所示，感測裝置1包括傳感器11、交互提取單元12和通信單元13。

(傳感器)

傳感器11具有感測對象之間的交互的功能。例如，傳感器11由溼度傳感器、溫度傳感器、振動傳感器、紅外傳感器、攝像裝置、觸覺傳感器、陀螺儀傳感器、照度傳感器、人類傳感器(humansensor)、大氣傳感器(例如，塵埃傳感器和汙染物傳感器)、速度傳感器、計數測量值等來實現。

(交互提取單元)

交互提取單元12用作用於基於從傳感器11提取的感測數據來檢測與第一對象和第二對象之間的交互有關的信息的檢測單元。例如，交互提取單元12可以基於感測門的開/關的傳感器的感測數據來提取諸如門開/關的次數、開/關的衝擊/強度以及人的進/出的交互。

此外，交互提取單元12可以基於感測目標對象已被拆卸、復位處理已被執行、故障狀態已被修好(無差錯)、零件已被更換等的傳感器的感測數據來提取諸如目標對象的維修和維護的交互。

另外，當目標對象是汽車、自行車、摩託車等時，交互提取單元12可以基於感測距離測量值、發動機rpm測量值、輪胎更換頻率、制動定時、汙染、位置信息、燃料再填充頻率等的傳感器的感測數據來提取目標對象的交互，諸如裡程、使用計數、駕駛小心程度和洗車。

此外，交互提取單元12可以基於感測啟動時間、啟動定時、安裝狀態、環境空氣、溼度、溫度、漏水、衝擊等的傳感器的感測數據來提取目標對象的交互，諸如優先度、感情程度和存放狀態。

(通信單元)

通信單元13通過網絡3將與由交互提取單元12提取的交互有關的信息發送至情感伺服器2。

上述感測裝置1配備有包括中央處理單元(cpu)、只讀存儲器(rom)、隨機存儲存儲器(ram)和非易失性存儲器的微型計算機以控制感測裝置1的每個部件。

圖3是示出了根據本實施例的情感伺服器2的配置的示例的框圖。如圖3所示，情感伺服器2包括通信單元21、控制器20、對象db22和情感信息db24。

(通信單元)

通信單元21通過網絡從附接至/安裝在每個對象(人或物件)上的感測裝置1接收與交互相關的信息(以下稱為交互信息)。此外，根據外部裝置的請求，通信單元21發送存儲在情感信息db24中的交互評估或由情感值計算單元20e計算出的情感值。

(控制器)

控制器20控制情感伺服器2的每個部件。此外，控制器20由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。此外，根據本實施例的控制器20用作交互存儲控制器20a，評估單元20b、對象管理單元20c、相關對象搜索單元20d和情感值計算單元20e。

交互存儲控制器20a控制從附接至/安裝在對象上的感測裝置1接收到的交互信息存儲在情感信息db24中。

評估單元20b對存儲在情感信息db24中的交互進行評估。雖然對交互評估方法沒有特別限制，但是例如，評估單元20b根據針對執行/接收交互的對象以特定評估指標所確定的標準來執行計算和評估，並且將得分(具體地在-1.0至1.0的範圍內)分配給對象。評估結果與交互相關，並且被存儲在情感信息db24中。

對象管理單元20c執行管理，諸如對存儲在對象db22中的關於對象的信息的登記、改變和刪除。

相關對象搜索單元20d針對從外部裝置請求的對象id而在對象db22和情感信息db24中搜索產生了交互的對象作為相關對象。

情感值計算單元20e基於累積在情感信息db24中的交互信息的情感值來計算對象的情感值。以下將描述詳細的情感值計算方法。

(對象db)

對象db22是存儲每個對象的對象id的存儲單元。此外，除了對象id以外，對象db22還存儲關於對象的各種類型的信息，諸如產品名稱、產品類型、製造商id、型號以及製造日期和時間。

(情感信息db)

情感信息db24是存儲對象之間的交互和對交互的評估的存儲單元。

接下來，將參照圖4描述根據本實施例的信息處理系統100的操作處理。圖4是示出了根據本實施例的信息處理系統100的操作處理的序列圖。

如圖4所示，首先，當設置有感測裝置1a的對象a與設置有感測裝置1b的對象b進行特定交互時，感測裝置1a的交互提取單元12在步驟s103中獲取交互，然後，在步驟s106中通過通信單元13將所獲取的交互發送至情感伺服器2。

此外，設置在進行了交互的對象b上的感測裝置1b執行相同的處理。也就是說，感測裝置1b的交互提取單元12在步驟s109中獲取交互，然後，在步驟s112中將所獲取的交互發送至情感伺服器2。

因此，當在對象之間進行交互時，從兩個對象獲取交互，並且將獲取的交互發送至情感伺服器2。

然後，情感伺服器2的交互存儲控制器20a在步驟s115中將從每個感測裝置1a發送的交互存儲在情感信息db24中，然後，在s118中通過評估單元20b執行交互評估。此外，評估單元20的交互評估與該交互相互關聯並被存儲在情感信息db24中。

此外，在步驟s121中，情感伺服器2的情感值計算單元20e根據需要、基於交互評估來計算對象的情感值。

以上描述了根據本實施例的操作處理。考慮到，將基於由本實施例的情感伺服器2收集的交互歷史計算的對象的情感值作為指示對象的價值的新指標來用於各種服務。在下文中，使用多個應用示例來描述根據本實施例的使用情感值的各種服務系統。

<>

首先，參照圖5至圖15來將情感值當作信譽(可信度)並且用在個人信用信息提供系統101中的情況描述為第一應用示例。

通常，根據資產、負債、信用卡合同期限等計算的信譽被提供作為提供個人信譽的信用信息提供服務。相比之下，在本實施例中將個人情感值用作信譽信息。此外，可以通過根據特定條件(時間或對象屬性)過濾迄今為止與同人有關的對象的交互的歷史，來使用各種度量可視化人的信譽。例如，人的個性，比如某人曾在過去有不良行為並且粗暴對待物件但現在是小心對待物件的好人，某人魯莽地駕駛汽車而小心翼翼地對待個人計算機等，被表示為情感值。

圖5是根據第一應用示例的個人信用信息提供系統101的整體配置的說明圖。如圖5所示，個人信用信息提供系統101包括個人信用信息提供伺服器4和情感伺服器2。

情感伺服器2從作為個人信用信息提供系統101的成員的用戶obj.a、用戶obj.a通常與其進行交互的房屋obj.b、汽車obj.c和攝像裝置obj.d獲取交互信息。

此外，圖5所示的用戶obj.a和用戶當被登記為個人信用信息提供系統10中的成員時與唯一id相互關聯並被登記。

本文中，假設用戶獲取用戶obj.a的信用信息的情況。如圖5所示，用戶指定搜索條件，諸如用戶obj.a的id(即，對象id)以及在需要時指定時間段(例如，開始時間或結束時間)和相關對象的屬性(例如，物品類別和製造商名稱)，並且請求個人信用信息提供伺服器4顯示用戶obj.a的信用信息。

個人信用信息提供伺服器4根據用戶的請求、基於用戶obj.a的id和搜索條件(例如，時間段、相關對象的屬性等)從情感伺服器2獲取情感值。在該情況下，還可以獲取與用戶obj.a進行了交互的相關對象(房屋obj.b、汽車obj.c和攝像裝置obj.d)的情感值。

此外，個人信用信息提供伺服器4基於所獲取的情感值將用戶obj.a的信譽信息提供給用戶。當未指定諸如時間段、相關對象的屬性等的搜索條件時，顯示用戶obj.a的綜合信譽信息。此外，當指定了時間段時，顯示用戶obj.a在所指定的時間段內的信譽信息。此外，當指定了相關對象的屬性時，根據與在與對象obj.a有關的對象當中的、與所指定的對象屬性匹配的對象的交互而顯示信譽信息。

此外，信譽信息顯示方法可以包括：顯示情感值自身作為信譽值或者通過將情感值表示為曲線圖或條形圖來可視化情感值。

以上描述了根據第一應用示例的個人信用信息提供系統101的概況。同時，用戶可以不加入用戶obj.a加入的同一個人信用信息提供系統101，並且可以例如利用信用卡公司來獲取用戶obj.a的信用信息。在該情況下，信用卡公司的管理伺服器(未示出)訪問個人信用信息提供系統101的個人信用信息提供伺服器4以獲取用戶obj.a的信用信息。

(3-1-1.配置)

接下來，將參照圖6描述個人信用信息提供系統101中所包括的個人信用信息提供伺服器4的配置。

圖6是示出了根據本實施例的個人信用信息提供伺服器4的配置的示例的框圖。如圖6所示，個人信用信息提供伺服器4包括控制器40、通信單元41以及物品和用戶信息db(資料庫)42。

(通信單元)

通信單元41通過網絡連接至用戶的終端(未示出)，接收用戶的請求，並且根據請求將信用信息發送給用戶。此外，通信單元41通過網絡連接至情感伺服器2，並且獲取目標對象的情感值和相關對象的情感值。

(控制器)

控制器40控制個人信用信息提供伺服器4的每個部件。此外，控制器40由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。此外，根據本實施例的控制器40用作相關物品搜索單元40a、情感值請求單元40b、結果生成單元40c、顯示控制器40d和對象管理單元40e。

相關物品搜索單元40a在物品和用戶信息db42中搜索用戶指定的與檢查目標人有關的物品。例如，與檢查目標人有關的物品是作為檢查目標人擁有的物品的、先前與檢查目標人相關聯的物品。

情感值請求單元40b從情感伺服器2請求由用戶指定的檢查目標人的情感值。具體地，情感值請求單元40b通過通信單元41將檢查目標人的對象id以及(當搜索條件存在時)搜索條件(時間段、相關對象的屬性、相關對象的對象id等)發送至情感伺服器2。

結果生成單元40c基於由情感值請求單元40b從情感伺服器2獲取的檢查目標人的情感值來生成檢查目標人的信譽的檢查結果。具體地，例如，結果生成單元40c生成顯示檢查目標人的信譽信息的結果畫面。

顯示控制器40d控制由結果生成單元40c生成的結果畫面通過請求源的用戶終端顯示。例如，顯示控制器40d控制用於顯示結果畫面的信息通過通信單元41發送至用戶終端。

對象管理單元40e執行管理，諸如對存儲在物品和用戶信息db42中的關於物品和用戶(對象的示例)的信息的登記、修改和刪除。

(物品和用戶信息db)

物品和用戶信息db42是用於存儲關於物品和用戶的信息的存儲單元。用戶例如是被登記作為個人信用信息提供系統101中的成員的用戶。此外，物品和用戶信息包括每個物品和每個用戶的對象id。

以上描述了根據本應用示例的個人信用信息提供伺服器4的配置。同時，參照圖3描述了個人信用信息提供系統101中所包括的情感伺服器2的配置，因此，本文中省略了對其的描述。

[數據配置的示例]

接下來，將參照圖7和圖8描述用於計算在個人信用信息提供系統101中使用的情感值的情感信息db24的數據的示例和情感伺服器2的對象db22的數據的示例。

圖7是根據第一應用示例的情感伺服器2的對象db22的數據的示例的圖示。如圖7所示，用於標識各個對象的對象id、對象類型、製造商id、型號、序號以及製造日期和時間(對象生成日期和時間)是相關聯的並且被存儲在情感伺服器2的對象db22中。

圖8是根據第一應用示例的情感伺服器2的情感信息db24的數據的示例的圖示。關於在對象之間發生的交互的信息存儲在情感信息db24中。如上所述，當在對象之間發生交互時，交互由雙方的對象檢測。在圖8所示的數據的示例中，針對每個對象而創建在每個對象中生成的交互信息的數據流。本文，針對數據流，當發生交互時的對應對象被稱為相關對象。

如圖8所示，發生了交互的對象的對象id、交互日期和時間及時段、相關對象id、交互類型、交互的細節以及交互評估值是相關聯的並且被存儲在情感伺服器2的情感信息db24中。

例如，在圖8所示的數據的示例的第一行中，具有對象id：18000555的人於2000年6月21日與具有對象id：5505的汽車進行了交互「駕駛」，交互的細節為「訪問/制動操作：小心，方向盤操作：慢」，並且將交互評估值1賦予該交互。此外，在第二行中，具有對象id：5505的汽車於2000年6月21日從具有對象id：18000555的人接收交互「駕駛」，交互的細節為「燃料效率：好，制動磨損：小」，並且將交互評估值1賦予該交互。以該方式，在一側的對象與在另一側的對象進行的交互可以由這兩個對象來感測。

如圖8所示，除了上述駕駛以外，感測的交互類型可以是所有權的改變、購買、交換、維護、清洗等。

就駕駛交互而言，當坐在駕駛員座位上的人例如由附接至汽車的傳感器11識別，並且感測到汽車的移動同時人處於駕駛員座位上時，感測到汽車由坐在駕駛員座位上的人駕駛的事實。

對於維護交互，房屋的所有者對房屋進行了維護的事實可以例如基於由設置在房屋中的傳感器11感測到的振動和聲音的記錄、設置在房屋的每個地方中的攝像裝置(傳感器11的示例)的圖片和通過附接至用戶的身體的傳感器11的運動分析以及附加地基於對登記的改造公司伺服器中的記錄的參考等來檢測。

(3-1-2.顯示處理)

接下來，將參照圖9至圖15描述個人信用信息提供系統101的顯示處理。

[信用排名顯示]

圖9是根據第一應用示例的信用排名顯示處理的流程圖。如圖9所示，首先，在步驟s203中，用戶指定檢查目標人的範圍。具體地，通過用戶終端提出對個人信用信息提供伺服器4的檢查目標人的信譽的請求。

然後，在步驟s206中，個人信用信息提供伺服器4的情感值請求單元40b基於目標人的對象id來從情感伺服器2請求目標人的情感值。目標人的對象id可以由用戶來指定或者從物品和用戶信息db42獲取。否則，可以根據由個人信用信息提供伺服器4指定的目標人的姓名等而從在情感伺服器2側的對象db22獲取目標人的對象id。

隨後，在步驟s209中，情感伺服器2的情感值計算單元20e基於與所指定的目標人關聯的交互評估值來計算情感值。例如，情感值計算單元20e基於目標人與其他對象之間的交互的評估值的總和來計算目標人的總情感值。否則，情感值計算單元20e可以基於目標人和其他對象之間的交互的評估值的平均值來計算目標人的總情緒值，或者執行按時間順序的加權、然後基於總和或平均值來計算總情緒值。

當請求多個目標人的情感值時，重複前述步驟s206和s209，直到所有目標人的情感值的計算結束為止(s212)。

此後，當計算出所有目標人的情感值時(在s212中為「是」)時，在步驟s215中，個人信用信息提供伺服器4的結果生成單元40c將情感值當作信譽，對目標人進行排序並且生成信譽排名畫面。本文中，結果生成單元40c基於目標人的總信譽來生成排名畫面。

本文中，圖10中示出了信譽排名畫面的示例。如圖10所示，在排名畫面45中基於個人總信譽來按順序顯示檢查目標人。具體地，排名畫面45包括按信譽的降序排列的目標人信息框46a、46b和46c。目標人信息框46a、46b和46c包括目標人的姓名和根據信譽來指示排名的星號指示符。

此外，可以在目標人信息框46a、46b和46c中顯示與排名基礎對應的信譽的數值(即，情感值)。此外，例如，當選擇了目標人信息框46c中所包括的箭頭461時，顯示關於目標人△△△△的每個對象屬性的信譽信息。下面將參照圖11至圖13描述關於每個對象屬性的信譽信息的顯示。此外，例如，當選擇了目標人信息框46c中所包括的目標人姓名462時，顯示關於目標人△△△△的按時間順序的信譽信息。下面將參照圖14和圖15描述按時間順序的信譽信息的顯示。

返回參照圖9，在步驟s218中，顯示控制器40d控制由結果生成單元40c生成的結果(排名畫面)通過請求源的用戶終端顯示。

[關於每個對象屬性的信譽信息的顯示]

圖11是示出了根據第一應用示例的顯示關於每個對象屬性的信譽信息的處理的流程圖。如圖11所示，首先，在步驟s223中，個人信用信息提供伺服器4基於目標人的對象id而從情感伺服器2請求情感值。

然後，在步驟s226中，情感伺服器2的相關對象搜索單元20d獲取與目標人的對象id相關聯的相關物品的對象id(相關對象id)。本文中，與目標人的對象id相關聯的相關物品指的是與目標人發生了交互的另一對象(稱為相關對象)。此外，相關對象搜索單元20d可以基於由用戶指定的且包括在搜索條件中的對象屬性，針對與目標人發生了交互的其他對象來搜索與指定的對象屬性(即，對象類型)匹配的對象。

隨後，在步驟s229中，情感伺服器2的情感值計算單元20e從情感信息db24獲取與相關對象id關聯的交互評估值。

此後，在步驟s231中，情感值計算單元20e基於相關物品的交互評估值來計算相關物品的情感值。本文中，所計算出的情感值是目標人與相關物品之間的相對情感值。在下文中，將參照圖12描述計算相關物品的情感值的示例。

圖12是根據第一應用示例的計算目標人對於房屋的相對情感值的說明圖。如圖12所示，首先，從情感信息db24中僅提取關於目標人(對象id：18000555)與房屋(對象id：11401)進行的交互的信息。然後，如圖12所示，情感值計算單元20e根據所提取的交互信息、基於初始評估值除以已過年數的商與預定加權因子的乘積與以下結果的總和來計算目標人與房屋之間的相對情感值，所述結果為每次維護的評估值除以各自的維護間隔的商與預定加權因子的乘積的和。

返回參照圖11，當存在多個相關物品時，重複前述步驟s229和s231直到對所有相關物品的情感值的計算結束為止(s234)。

隨後，當對所有相關物品的情感值的計算結束時(在s234中為「是」)，個人信用信息提供伺服器4的結果生成單元40c將由情感值請求單元40b從情感伺服器2獲取的相關物品的相對情感值當作信譽，並且生成關於每個對象屬性的信譽信息的顯示畫面。然後，顯示控制器40d控制關於每個對象屬性的信譽信息的顯示畫面通過請求源的用戶終端顯示。

本文中，圖13中示出了關於每個對象屬性的信譽信息的顯示畫面的示例。當選擇了圖10所示的排名畫面45的目標人信息框46c中所包括的箭頭461時，圖10中所示的排名畫面45的目標人信息框46c切換至圖13所示的關於每個對象屬性的信譽信息的顯示畫面47，並且基於目標人△△△△與其他對象之間的交互評估值的相對情感值被顯示作為信譽。

如圖13所示，例如，除了針對房屋屬性的信譽信息顯示畫面47a以外，還可以顯示針對汽車屬性的信譽信息顯示畫面47b和針對攝像裝置屬性的信譽信息顯示畫面47c。此外，信譽可以通過曲線圖等來表示，並且還顯示取決於信譽的建議。因此，在搜索寄宿家庭、房間共享或汽車共享等的對應方中，例如，除了對應方的總信譽以外，還可以單獨識別針對物件屬性的信譽度(對待物件的方式)。

[按時間順序的信譽顯示]

圖14是示出了按時間順序的信譽顯示處理的流程圖。如圖14所示，首先，在步驟s243中，個人信用信息提供伺服器4基於目標人的對象id而從情感伺服器2請求情感值。

然後，在步驟s246中，情感伺服器2的相關對象搜索單元20d獲取與目標人的對象id相關聯的相關物品的對象id(相關對象id)。本文中，與目標人的對象id相關聯的相關物品指的是與目標人發生了交互的對象(也稱為相關對象)。

在步驟s249中，情感值計算單元20e針對一個相關對象id而按時間順序對目標人的交互進行分類，並且獲取目標人的按時間順序的評估值。

隨後，在步驟s251中，情感值計算單元20e基於評估值來計算目標人與相關對象之間的按時間順序的情感值。本文中，在已對按時間順序的交互評估值進行加權之後，情感值計算單元20e可以基於按時間順序的交互評估值的總和、其平均值、總和/平均值來獲取按時間順序的評估值。

然後，情感值計算單元20e將目標人的按時間順序的情感值相加以獲取總情感值。

此後，當存在多個相關物品時，重複前述步驟s249和s251直到所有相關物品的情感值的計算結束為止(s257)。

當所有相關物品的情感值的計算結束時(在s257中為「是」)，在步驟s260中，個人信用信息提供伺服器4的結果生成單元40c將由情感值請求單元40b從情感伺服器2獲取的情感值當作信譽，並且生成目標人的按時間順序的信譽信息的顯示畫面。然後，顯示控制器40d控制所生成的目標人的按時間順序的信譽信息的顯示畫面通過請求源的用戶終端顯示。

本文中，在圖15中示出了目標人的按時間順序的信譽信息的顯示畫面的示例。當選擇了圖10中所示的排名畫面45的目標人信息框46c中所包括的目標人名稱462時，圖10a中所示的排名畫面45的目標人信息框46c被切換至在圖15的左邊示出的信譽信息顯示畫面48，並且顯示目標人△△△△的當前信譽。此外，當選擇了信譽信息顯示畫面48的時間順序顯示按鈕481時，畫面切換至在圖15的右邊所示的按時間順序信譽信息顯示畫面49。按時間順序信譽信息顯示畫面49顯示目標人對於所有物件的按時間順序的信譽(按時間順序的總信譽)。此外，在按時間順序信譽信息顯示畫面49上顯示的按時間順序的信譽信息不限於圖15所示的對於所有物件的按時間順序的信譽，並且按時間順序信譽信息顯示畫面49可以顯示對於每個對象屬性的按時間順序的信譽。

以上描述了根據第一應用示例的個人信用信息提供系統101。同時，雖然在圖10中示出了人的信譽排名，但是本應用示例不限於此，並且例如可以顯示人和物件混合的信譽排名。在搜索幫助者時，例如，當檢查目標被指定為「幫助者」時，可以顯示人和物件(機器人)二者的排名。

接下來，參照圖16至圖26，將情感值被認為指示參展方的可信度、關於展出物品的意圖、處理側的小心程度等並且用於拍賣系統102中的情況描述作為第二應用示例。

由於在拍賣時展出由特定用戶使用的物件，因此一般而言，用戶期望基於根據用戶與物件之間的關係計算的物件的情感值來確定價格。同時，根據本實施例的情感值可以用作展出物件的用戶(參展方)的可信度的基礎。在本實施例中，情感價值可以被轉換為被稱為「情感值」的值並被使用。此外，可以通過參考基於針對除了展出物件以外的物件的交互評估值的情感值、根據參展方是通常小心對待物件的人還是粗暴對待物件的人來確定參展方的可信度和他或她對待物件的小心程度。

圖16是根據第二應用示例的拍賣系統102的整體配置的說明圖。如圖16所示，拍賣系統102包括拍賣伺服器5和情感伺服器2。

情感伺服器2從作為拍賣系統102的成員的用戶obj.a以及用戶obj.a通常與其進行交互的房屋obj.b、汽車obj.c和攝像裝置obj.d獲取交互信息。

此外，圖16所示的用戶obj.a和用戶當被登記作為拍賣系統102的成員時分別與唯一id相關聯並被登記。此外，用戶obj.a當在拍賣系統102展出物品時將物品的唯一對象id發送至拍賣伺服器5。拍賣伺服器5基於展出對象的對象id而從情感伺服器2請求相應對象的情感值。本文中，拍賣伺服器5還從情感伺服器2請求作為相應對象的參展方的用戶obj.a的情感值。此外，當相應對象是具有特定型號和物品名稱的物品時，可以從拍賣伺服器5的物品和用戶信息db42(參見圖6)獲取關於具有相同型號和物品名稱的其他展出物品的信息，並且基於所獲取的物品的對象id而從情感伺服器2請求情感值。

當展出新物品時或者當拍賣服務用戶在檢查要購買的物品的同時向拍賣伺服器5指定了物品時，執行由拍賣伺服器5從情感伺服器2對情感值的這種獲取。

然後，拍賣伺服器5可以將所獲取的情感值當作物品的信譽(小心程度、物品是否被小心對待、情感等)，並且基於所獲取的情感值來按情感值的順序對物品進行排序以顯示更小心對待的物品和其用戶具有更高程度的感情的物品。

以上描述了根據第二應用示例的拍賣系統102的概況。

(3-2-1.配置)

接下來，將參照圖17描述拍賣系統102中所包括的拍賣伺服器5的配置。

圖17是示出了根據本實施例的拍賣伺服器5的配置的示例的框圖。如圖17所示，拍賣伺服器5包括控制器50、通信單元51以及物品和用戶信息db52。

(通信單元)

通信單元51通過網絡連接至用戶的終端(未示出)，接收用戶的請求，並且根據該請求將展出物品和參展方的情感值發送給用戶。此外，通信單元41通過網絡連接至情感伺服器2，並且獲取目標對象的情感值和相關對象的情感值。

(控制器)

控制器50控制拍賣伺服器5的每個部件。此外，控制器50由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。此外，根據本實施例的控制器50用作相關物品搜索單元50a、情感值請求單元50b、結果生成單元50c、顯示控制器50d和對象管理單元50e。

相關物品搜索單元50a在物品和用戶信息db42中搜索與檢查目標物品有關的物品。與檢查目標物品有關的物品例如是與檢查目標物品具有相同型號和名稱的物品。

情感值請求單元50b從情感伺服器2請求檢查目標物品的情感值。具體地，情感值請求單元50b通過通信單元51向情感伺服器2發送檢查目標物品的對象id、當存在相關物品時相關物品的對象id以及檢查目標物品的參展方的對象id。

結果生成單元50c基於由情感值請求單元50b從情感伺服器2獲取的檢查目標物品等的情感值來生成檢查目標物品等的情感值的結果。具體地，例如，結果生成單元50c生成顯示檢查目標物品的情感值的結果畫面。

顯示控制器50d控制由結果生成單元50c生成的結果畫面通過請求源的用戶終端顯示。例如，顯示控制器50d控制用於顯示結果畫面的信息通過通信單元41發送至用戶終端。

對象管理單元50e執行管理，諸如對存儲在物品和用戶信息db42中的關於物品和用戶(對象的示例)的信息的登記、修改和刪除。

(物品和用戶信息db)

物品和用戶信息db52是存儲關於物品和用戶的信息的存儲單元。用戶例如是被登記作為拍賣系統102中的成員的用戶。此外，物品和用戶信息包括每個物品和每個用戶的對象id。

本文中，在圖18中示出了存儲在物品和用戶信息db52中的展出物品信息的數據的示例。如圖18所示，用於標識各個展出物品的展出id、類型id、物品的對象id、參展方的對象id、展出日期和時間、拍賣結束日期和時間、當前價格、出價列表和物品描述是關聯的並存儲在物品和用戶信息db52中。

上面描述了根據本應用示例的拍賣伺服器5的配置。同時，已經參照圖3描述了拍賣系統2中所包括的情感伺服器2的配置，因此本文中將省略對其的描述。

[數據配置的示例]

接下來，將參照圖19描述用於計算拍賣系統102中所使用的情感值的情感伺服器2的情感信息db24的數據的示例。同時，在本應用示例中所使用的對象db22的數據的示例與圖7所示的示例相同，因此，本文中將省略對其的描述。

圖19是根據第二應用示例的情感伺服器2的情感信息db24的數據的示例的圖示。關於在對象之間發生的交互的信息存儲在情感信息db24中。在圖19所示的數據的示例中，發生了交互的對象的對象id、交互的日期和時間以及時段、相關對象id、交互類型、交互的詳情以及交互評估值是關聯的並且被存儲。

當在對象之間發生交互時，針對兩個對象而提取交互，並且評估單元20b對每次交互進行評估。雖然針對兩個對象而提取的交互評估值在圖19所示的示例中是相同的，但是本應用示例不限於此，並且交互評估值可以不同。例如，當提取由用戶(對象id：1930213)與數字攝像裝置(對象id：384)進行的交互「操作」時，對珍視攝像裝置並因而小心操作攝像裝置的用戶進行正面評估，而對被強制操作、粗暴放置等的攝像裝置進行負面評估。以該方式，可以根據交互方向來執行不同的評估。

同時，每次交互的提取和評估的示例如下。

例如，對於駕駛交互，基於由附接至加速踏板、制動踏板和方向盤的傳感器感測的感測數據來分析交互的詳情，諸如小心駕駛和魯莽駕駛。此外，通過將加速器、制動器和方向盤操作的輸入值輸入至評估函數來在-1.0至1.0的範圍內獲得駕駛交互的評估值。

此外，對於操作攝像裝置等的交互，用傳感器來感測攝像裝置的快門按鈕的按壓力、旋轉轉盤的速度/由於過度旋轉而引起的返回次數、當放置攝像裝置時的衝擊以及當放入包中時向身體施加的衝擊等。評估單元20b基於由傳感器感測的感測數據對每個值進行加權以計算評估值。此外，評估單元20b將所計算出的值歸一化至-1.0至1.0的範圍。

此外，對於存放攝像裝置等的交互，通過感測來提取存放地點的溫度、溼度和含塵度(可用灰塵傳感器來感測)。基於這樣的值在存放期間的變化，評估單元20b用數值表示攝像裝置等的存放狀態是有利的還是不利的。此外，可以對每個參數進行加權以計算評估值。評估單元20b將所計算出的值歸一化至-1.0至1.0的範圍。

(3-2-2.顯示處理)

接下來，將參照圖20至圖26描述拍賣系統102的顯示處理。

[列表顯示]

圖20是示出了根據第二應用示例的根據展出物品的情感值進行的列表顯示處理的流程圖。如圖20所示，首先，在步驟s303中，用戶指定為檢查目標的展出物品。

然後，在步驟s306中，拍賣伺服器5的情感值請求單元50b在物品和用戶信息db52中搜索由用戶指定的物品。本文中，也可以搜索與關於由相關物品搜索單元50a搜索的相應物品的信息有關的物品(具有相同型號和名稱的其他展出物品)。

隨後，在步驟s309中，情感值請求單元50b基於每個物品的對象id而向情感伺服器2請求目標人的情感值。

此後，在步驟s312中，情感伺服器2的情感值計算單元20e基於與所指定的物品的對象id關聯的交互評估值來計算情感值。

當請求多個物品的情感值時，重複前述步驟s309和s312直到對所有物品的情感值的計算結束為止(s315)。

此後，當對所有物品的情感值的計算結束時(在s315中為是)，在步驟s318中，拍賣伺服器5的結果生成單元50c按情感值的順序對物品進行排序，並且基於情感值生成展出物品排名畫面。本文中，結果生成單元40c基於目標物品的總情感值(絕對情感值)來生成排名畫面。

本文中，在圖21中示出了基於展出物品的情感值的列表顯示畫面的示例。如圖21所示，列表顯示畫面55基於各個物品的總情感值(絕對情感值)而按順序顯示檢查目標物品。除了由用戶指定的展出物品以外，檢查目標物品包括與由用戶指定的展出物品具有相同型號和名稱的展出物品(相關物品)。因此，除了所指定的展出物品以外，用戶可以識別類型與所指定的展出物品相同的展出物品的情感值。

例如，列表顯示畫面55包括按情感值的降序排列的目標物品信息框56a、56b和56c。目標物品信息框56a、56b和56c各自包括目標物品的參展方的名稱和指示基於情感值的排名的星號指示符。此外，可以在目標物品信息框56a、56b和56c中顯示與排名的基礎對應的情感值。

此外，例如，當選擇了目標物品信息框56a中所包括的箭頭561時，顯示與由參展方○○○○展出的物品的情感值有關的詳細信息。下面將參照圖22至圖24描述與物品的情感值有關的詳細信息的顯示。此外，例如，當選擇了目標物品信息框46c中所包括的參展方名稱562時，顯示與參展方△△△△的情感值有關的詳細信息。下面將參照圖25至圖26描述與參展方的情感值有關的詳細信息的顯示。

返回參照圖20，在步驟s321中，顯示控制器50d控制由結果生成單元50c生成的結果(列表顯示畫面)通過請求源的用戶終端顯示。

[與展出物品的情感值有關的詳細信息的顯示]

圖22是示出了根據第二應用示例的顯示與展出物品的情感值有關的詳細信息的處理的流程圖。如圖22所示，首先，在步驟s333中，個人信用信息提供伺服器4從展出id獲取展出物品的對象id，並且從情感伺服器2請求展出物品的情感值。

隨後，在步驟s336中，情感伺服器2的情感值計算單元20e從對象db22獲取與物品的對象id相對應的對象的詳細內容(物品類型、製造商、製造日期和時間等)。

然後，在步驟s339中，情感值計算單元20e通過使用物品的對象id進行過濾來從情感信息db24獲取目標物品的所有交互評估值(參照圖23)。

此後，在步驟s341中，情感值計算單元20e針對各個相關對象id來對所獲取的、目標物品的所有交互評估值進行分類。本文中，相關對象id指的是與目標對象進行了交互的對象，一般地，對應於目標物品的所有者。

然後，在步驟s344中，情感值計算單元20e選擇一個相關對象id。

隨後，在步驟s347中計算所選擇的相關對象id與目標物品之間的相對情感值。也就是說，情感值計算單元20e針對在前述步驟s344中選擇的相關對象id，根據在前述步驟s341中針對各個相關對象id分類的情感值來計算交互評估值。

隨後，重複前述步驟s344和s347，直至對與目標物品對應的(具有與目標物品的交互關係的)所有相關對象id的相對情感值的計算結束為止(s351)。

然後，在步驟s352中，情感值計算單元20e基於目標物品的所有交互評估值來計算目標物品的絕對情感值。在下文中，將參照圖23描述展出物品的相對/絕對情感值的計算的示例。

圖23是根據第二應用示例的展出物品的相對/絕對情感值的計算的說明圖。如圖23所示，首先，通過使用展出物品(對象id：384)進行過濾來從情感信息db24獲取與展出物品有關的所有交互信息。

然後，情感值計算單元20e基於所獲取的交互信息來計算物品的絕對情感值和針對各個相關對象id(對象id：1930213、4649和5963084)的情感值(相對情感值)。相關對象id是物品的過去所有者的對象id。

物品的絕對情感值是基於迄今為止的物品的交互歷史的情感值的總數。具體地，例如，如圖23所示，基於針對各個交互類型的平均值與取決於交互類型(操作和存放)的權重a的乘積的總和來計算物品的絕對情感值。

此外，物品的絕對情感值是基於物品的每個過去所有者的交互歷史的情感值。圖23示出了計算對象id：5963084(所有者)與數字攝像裝置(對象id：384))之間的相對情感值的數學表達式作為示例。如圖23所示，使用針對相關對象id：5963084的交互歷史(圖23所示的數據的示例的第三行和第四行)、基於針對交互類型的平均值與取決於交互類型(操作和存放)的權重a的乘積的總和來計算物品與相關對象id之間的相對情感值。

返回參照圖22，在步驟s354中，拍賣伺服器5的結果生成單元50c生成如下畫面，該畫面將針對相關對象id按時間順序的相對情感值、主要交互的內容和物品的絕對情感值(總情感值)顯示作為由情感值請求單元50b從情感伺服器2獲取的關於物品的情感值的詳細信息。然後，顯示控制器50d通過請求源的用戶終端對所生成的詳細信息顯示畫面進行控制。

本文中，圖24中示出了與展出物品的情感值有關的詳細信息的顯示畫面的示例。當選擇了圖21中所示的列表顯示畫面55的目標物品信息框46a中所包括的箭頭561時，圖21中所示的列表顯示畫面55的目標物品信息框46a被切換至圖24中所示的關於展出物品的詳細信息的顯示畫面57，並且顯示與由參展方○○○○展出的物品的情感值有關的詳細信息。

圖24中所示的詳細信息顯示畫面57顯示了由參展方○○○○按時間序列展出的物品的過去所有者的相對情感值(0.92、-0.56和0.80)，並且還顯示了物品的總情感值(絕對情感值)。因此，用戶可以識別迄今為止如何對待物品以及過去的所有者如何看待物品。以該方式，基於迄今為止的處理方式而客觀地指示情感價值的情感值被指定為物品的新值。

[與參展方的情感值有關的詳細信息的顯示]

圖25是示出了顯示與參展方的情感值有關的詳細信息的處理的流程圖。如圖25所示，首先，在步驟s363中，個人信用信息提供伺服器4從展出id獲取參展方的對象id，並且從情感伺服器2請求參展方的情感值。

隨後，在步驟s366中，情感伺服器2的情感值計算單元20e從對象db22獲取與參展方的對象id相對應的對象的詳細內容(姓名、性別、年齡等)。

然後，在步驟s369中，情感值計算單元20e通過使用參展方的對象id進行過濾來從情感信息db24獲取參展方的所有交互評估值(迄今為止的交互信息歷史)。

此後，在步驟s371中，情感值計算單元20e針對各個相關對象id來對所獲取的、參展方的所有交互評估值進行分類。本文中，相關對象id指的是與目標人具有交互關係的對象，一般地，對應於由參展方擁有的物品和由參展方展出的其他物品。

然後，在步驟s374中，情感值計算單元20e針對各個相關對象來計算情感值(相對情感值)，計算情感值的和(絕對情感值)，並且將該和發送至拍賣伺服器5。拍賣伺服器5的結果生成單元50c生成如下畫面，該畫面將各個相關對象id的相對情感值、主要交互的內容和參展方的絕對情感值(總情感值)顯示作為由情感值請求單元50b從情感伺服器2獲取的與參展方的情感值有關的詳細信息。然後，顯示控制器50d控制所生成的詳細信息顯示畫面通過請求源的用戶終端顯示。同時，參展方的總情感值(絕對情感值)可以是各個相關對象的情感值(相對情感值)的總和或各個相關對象的情感值的平均值，或者可以通過對交互類型應用權重、然後對評估值進行求和或對評估值求平均來計算。

本文中，圖26中示出了與參展方的情感值有關的詳細信息的顯示畫面的示例。當選擇了圖21中所示的列表顯示畫面55的目標物品信息框46c中所包括的參展方名稱562時，圖21中所示的列表顯示畫面55的目標物品信息框46c被切換至圖26中所示的關於參展方的詳細信息的顯示畫面58，並且顯示與參展方△△△△的情感值有關的詳細信息。

圖26中所示的詳細信息顯示畫面58顯示了針對參展方△△△△的物品的相對情感值(-0.32、0.12和-0.3)，並且另外顯示了參展方的總情感值(絕對情感值)。因此，用戶可以通過針對參展方處理的可信度和小心程度檢查除了展出物品以外的物件的情感值，來確定參展方是通常小心對待物件的人還是通常粗暴對待物件的人。可以在對展出物品成功出價之前通過檢查參展方的情感值來識別參展方的個性。

同時，詳細信息顯示畫面58可以顯示由參展方設置為可共享信息的其他信息(年齡、性別等)作為關於參展方的信息。

上面描述了根據第二應用示例的拍賣系統102。

接下來，參照圖27至圖34將情感值用於在本地調整移動用戶的周圍環境的環境調整系統103的情況描述為第三應用示例。

圖27是根據第三應用示例的環境調整系統103的整體配置的說明圖。

如圖27所示，環境調整系統103包括：移動對象6，其跟蹤用戶以改變用戶的周圍環境；以及環境調整伺服器7，其對移動對象6進行控制。環境調整伺服器7經由接入點等與移動對象6進行通信，並且執行對移動對象6的移動控制等。如圖1所示，移動對象6可以是多個移動對象6a至6c，並且可以使用作為基點安裝在戶外的基站來移動。

環境調整伺服器7經由網絡3連接至情感伺服器2和熱圖(heatmap)伺服器75，並且獲取移動對象6的移動控制所需的信息。例如，環境調整伺服器7可以從情感伺服器2獲取用戶的情感值，並且根據情感值來執行環境調整控制。

另外，環境調整伺服器7可以通過使移動對象6跟蹤用戶並且根據用戶的情感來局部地改變周圍環境，來為用戶提供更舒適的環境。

移動對象6可以由如圖27所示的小飛行無人機來實現，並且可以在跟蹤移動用戶時飛行。圖28是本應用示例的由移動對象6進行的環境調整的示例的說明圖。如圖28所示，移動對象6可以飛行並跟蹤移動用戶、同時保持在用戶上方以用作雨傘或陽傘，以使得用戶例如不暴露於雨或直射陽光下，從而局部地改變用戶的周圍環境。此外，移動對象6可以根據需要改變覆蓋範圍。例如，如圖28所示，可以通過延伸以環形從移動對象6的中心延伸的板狀構件651來加寬覆蓋範圍。

同時，移動對象6不限於圖27所示的飛行對象，並且例如可以是在地面上移動同時跟蹤用戶的機器人型移動對象、或者在水中的移動對象。

上面描述了根據本公開的環境調整系統103的概況。

(3-3-1.配置)

接下來，將依次描述根據本應用示例的包括在環境調整系統103中的移動對象6和環境調整伺服器7的配置。順便提及，已參照圖3描述了情感伺服器2的配置，因此本文中將省略對其的描述。

[移動對象6的配置]

圖29是根據本應用示例的移動對象6的配置的示例的圖示。如圖29所示，移動對象6包括通信單元61、目標對象傳感器62、移動對象控制器63、環境傳感器64和變換控制器65。

通信單元61向/從環境調整伺服器7發送/接收數據。例如，通信單元61將通過目標對象傳感器62和環境傳感器64獲取的傳感器信息發送至環境調整伺服器7，並且從環境調整伺服器7接收包括移動控制和轉換控制的指示的控制信息。

目標對象傳感器62是獲取與跟蹤目標對象有關的信息的感測單元。本文中，例如，跟蹤目標對象對應於在室外移動的用戶。目標對象傳感器62例如包括攝像裝置62a、紅外攝像裝置62b、無線信號接收器62c或麥克風陣列62d，並且獲取與用戶有關的信息。

移動對象控制器63具有對移動對象6的移動進行控制的功能。具體地，移動對象控制器63包括動力驅動單元63a和姿態控制器63b。動力驅動單元63a例如由推進器、輪子或行走的腿來實現，並且進行操作以根據移動對象控制器63的控制來跟蹤目標用戶。此外，姿態控制器63b通過陀螺儀傳感器等來感測移動對象6的姿態，並且對動力驅動單元63a進行控制以調整移動對象6的傾斜和高度。根據本公開的移動對象控制器63可以通過控制移動對象6的飛行路線和高度來局部地改變用戶的周圍環境，以使得移動對象6例如對於用戶而言變成防雨或陽光的蓋子。

環境傳感器64是獲取與周圍環境有關的信息的感測單元。具體地，環境傳感器64例如通過緯度-經度定位單元64a或高度傳感器64b獲取環境信息。環境傳感器64的具體示例不限於此，並且根據需要，環境傳感器64還可以包括溫度傳感器、溼度傳感器等。

變換控制器65執行變換移動對象6的形狀的控制，以在擋雨或陽光時擴展覆蓋範圍。

上述移動對象6配備有包括中央處理單元(cpu)、只讀存儲器(rom)、隨機存取存儲器(ram)和非易失性存儲器的微型計算機以控制移動對象6的每個部件。

[環境調整伺服器的配置]

圖30是示出了根據本實施例的環境調整伺服器7的配置的示例的框圖。如圖30所示，環境調整伺服器7包括通信單元71、控制器70和用戶db72。

通信單元71向/從外部裝置發送/接收數據。具體地，例如，通信單元71從移動對象6接收目標對象信息和環境信息，並且將用於控制移動對象6的移動的控制信息發送至移動對象6。此外，通信單元71經由網絡3從情感伺服器2和熱圖伺服器75獲取預定數據。

控制器70對環境調整伺服器7的每個部件進行控制。具體地，控制器70控制移動對象6跟蹤目標用戶以根據用戶的情感來改變目標用戶的周圍環境。此外，控制器70由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。

本文中，控制器70用作用戶設置和管理單元70a、目標對象檢測單元70b、情感估計單元70c、環境信息獲取單元70d、熱圖生成/獲取單元70e、情感值計算單元70f和移動對象控制器70g。

用戶設置和管理單元70a對使用本系統的用戶的信息的登記、改變和刪除進行管理。例如，用戶的信息包括用戶的姓名、標識號、面部圖像、年齡、性別、愛好、口味、家庭住址、工作地點、行為模式等。

目標對象檢測單元70b基於從移動對象6發送的目標對象傳感器信息來檢測位於移動對象6附近的人、由人攜帶的對象等。具體地，目標對象檢測單元70b可以例如通過對從移動對象6發送的捕獲圖像進行分析並且將捕獲圖像與登記在用戶db72中的用戶的面部圖像進行比較，來檢測目標用戶。否則，目標對象檢測單元70b可以基於由移動對象6從無線通信裝置(諸如用戶佩戴的智能帶)接收的用戶標識信息來檢測目標用戶。

情感估計單元70c對由目標對象檢測單元70b檢測的目標用戶的情感進行估計。具體地，情感估計單元70c例如基於生物信息(脈搏、體溫、排汗量、腦波等)來估計目標用戶的情感。生物信息由用戶佩戴的智能帶獲取，被發送至移動對象6，並且從移動對象6發送至環境調整伺服器7。

此外，情感估計單元70c可以基於目標用戶的屬性(性別、年齡、身高、體重、個性、職業等)、愛好和品位以及周圍環境來估計目標用戶的情感。

環境信息獲取單元70d通過通信單元71從移動對象6獲取與周圍環境有關的信息。具體地，環境信息獲取單元70d獲取由移動對象6的環境傳感器64感測的數據(緯度、經度、高度等)作為環境信息。此外，環境信息獲取單元70d可以根據移動對象6的位置(緯度和經度信息)從預定伺服器獲取周圍地理信息、建築物信息等作為環境信息。

熱圖生成/獲取單元70e基於情感估計單元70c的估計結果和從環境信息獲取單元70d輸出的環境信息來生成地理上描繪情感的情感熱圖。更具體地，熱圖生成/獲取單元70e基於多個用戶的情感的估計結果來生成指示在特定地點是否存在具有特定情感的許多用戶的情感熱圖。

此外，熱圖生成/獲取單元70e基於從環境信息獲取單元70d輸出的環境信息(緯度、經度、高度、地理信息、建築物信息等)來生成目標用戶的當前地點的周圍的環境熱圖。

以該方式生成的熱圖可以存儲在網絡上的熱圖伺服器75中或者存儲在環境調整伺服器7的存儲單元(未示出)中。此外，可以定期地更新熱圖。

此外，熱圖生成/獲取單元70e可以生成情感熱圖與環境熱圖的綜合熱圖。

情感值計算單元70f針對由目標對象檢測單元70b檢測到的目標用戶的所有物和與目標用戶一起的人(相關對象)來計算情感值(即，相對情感值)。具體地，情感值計算單元70f從情感伺服器2獲取與目標用戶的對象id關聯的交互評估值，並且針對基於交互評估的每個交互評估值來計算目標用戶的相對情感值。

例如，將經常維護他或她擁有的手錶的目標用戶的交互的評估和在專門設計用於該手錶的盒中保存手錶的交互的評估存儲在情感伺服器2中，並且情感值計算單元70f獲取目標用戶的這樣的交互評估並且計算情感值。雖然評估值計算方法沒有被具體限制，但是例如可以按照交互類型對目標用戶與特定對象(相關對象)的交互進行分類，並且可以根據交互類型、使用加權函數來對與特定對象的所有交互的評估求平均。可以從用戶db72獲取目標用戶的對象id。

移動對象控制器70h基於從熱圖生成/獲取單元70e輸出的綜合熱圖來確定在目標用戶移動的路線上需要環境改變的區域，並且對移動對象6進行控制以改變用戶的周圍環境。確定需要環境改變的區域是基於綜合熱圖的值是否大於預定閾值來執行的。以該方式，通過使用通過對情感熱圖和環境熱圖進行綜合而獲得的綜合熱圖，可以通過例如在目標用戶經過用戶容易在雨中淋溼的地方時使移動對象6跟蹤目標用戶來局部地改變目標用戶的周圍環境以避雨，由此使得目標用戶能夠處於舒適狀態。

此外，當移動對象6改變了目標用戶的周圍環境時，移動對象控制器70h可以根據由情感值計算單元70f獲得的針對目標用戶的所有物或與目標用戶一起的人的情感值(重視程度)來執行對通過移動對象6擴展覆蓋範圍或在目標用戶之前覆蓋目標用戶的所有物或與目標用戶一起的人的控制。

以上詳細描述了包括在本應用示例中的每個裝置的配置。同時，雖然在本應用示例中描述了環境調整伺服器7的情感值計算單元70f計算情感值的原理，但是可以在情感伺服器2側執行情感值的計算。

(3-3-2.操作處理)

接下來，將參照圖31和圖32描述根據本應用示例的操作處理。

[環境調整處理]

圖31是示出了環境調整處理的流程圖。如圖31所示，首先，在步驟s403中，環境調整伺服器7獲取當前地點的環境信息、目標用戶的目的地和目的地到達時間信息。

隨後，在步驟s406中，環境調整伺服器7的情感評估單元70c獲取用戶的屬性、愛好、嗜好、生物信息等。

接下來，在步驟s409中，情感估計單元70c對用戶的情感進行估計。也就是說，情感估計單元70c可以基於用戶的屬性、愛好、品位、生物信息等來估計用戶在從當前位置至目的地的路線上、在當前環境下的情感。例如，當用戶是30多歲的女性，從過去的行為歷史、對話、文字等提取用戶通常攜帶陽傘的事實，並且從購買歷史提取已購買防曬霜和太陽傘的事實時，估計出該女性具有擔心紫外線、直射陽光和曬傷的感覺(不愉快的情感)。

隨後，在步驟s412中，環境調整伺服器7的控制器70基於估計結果來確定是否需要環境改變。具體地，例如，當用戶具有擔心紫外線、直射陽光和曬傷的感覺(不愉快的情感)時，如果當前位置和目的地的天氣晴朗並且暴露於直射陽光，則控制器70確定需要環境改變。

之後，當需要環境改變時(在s412中為「是」)時，在步驟s415中，移動對象控制器70g對移動對象6進行控制以改變目標用戶的周圍環境。具體地，移動對象控制器70g使得移動對象6跟蹤目標用戶以在避開雨或陽光的位置飛行。

然後，在步驟s418中，環境調整伺服器7確定用戶是否已到達目的地。當用戶已到達目的地時，環境調整操作結束，因此，例如移動對象控制器70g控制移動對象6返回預定基站。

當用戶尚未到達目的地時(在s418中為「否」)時，在步驟s421中，環境調整伺服器7通過目標對象檢測單元70b和環境信息獲取單元70d獲取用戶的當前位置信息和當前位置的環境信息。重複s415。

[覆蓋範圍改變處理]

接下來，將參照圖32描述改變移動對象6的覆蓋範圍的處理。本應用示例可以基於目標用戶的情感值來改變覆蓋範圍。因此，可以根據目標用戶的感受來執行環境調整，諸如優先覆蓋通常對於目標用戶而言重要的物件或覆蓋對於目標用戶而言重要的人。

圖32是示出了範圍改變處理的流程圖。如圖32所示，首先，在步驟s433中，環境調整伺服器7的情感值計算單元70f確定目標用戶的對象id。

然後，在步驟s436中，目標對象傳感器62和環境傳感器64感測關於移動對象6的周圍的信息以獲取關於目標用戶的信息和關於周圍環境的信息。

隨後，在步驟s439中，重複前述步驟s436直至在步驟s439中能夠檢測到所確定的目標用戶。

當檢測到目標用戶時(在s439中為「是」)時，在步驟s442中，目標對象檢測單元70b檢測與目標用戶一起移動的對象(諸如，嬰孩車或行李)或者與目標用戶一起移動的人。

隨後，在步驟s445中，情感值計算單元70f獲取所檢測到的對象或人的對象id。該對象id(也稱為相關對象id)可以預先登記在用戶db72中，或者可以通過相關對象搜索單元20d基於由移動對象6的攝像裝置62a獲取的捕獲圖像的分析結果而查詢情感伺服器2，來在對象db22中搜索該對象id。

然後，在步驟s448中，情感值計算單元70f指定目標用戶的對象id和與目標用戶一起移動的對象或人的對象id，並且從情感伺服器2獲取目標用戶與該對象或人之間的交互評估值。例如，通過對目標用戶與其他人之間的談話和郵件或者目標用戶對於對象的行為(諸如存放、維護、佩戴和欣賞)的評估值進行歸一化而獲得交互評估值。本文中，將參照圖33和圖34描述用於情感值計算的特定交互評估數據的示例。

圖33是根據本應用示例的交互評估數據的示例的圖示。圖33是在移動對象6用作雨傘時使用的交互評估的示例。當目標用戶(對象id：70007)在與同事(對象id：70008)在外面午餐之後試圖回去工作時下雨的情況被假定為該狀況。在該情況下，移動對象控制器70g從情感伺服器2獲取如圖33所示的交互評估值，以便確定移動對象6是否將在使除了目標用戶外的同事避免淋雨時飛行(移動對象6將遮蔽多少、當遮蔽兩個人時是否同樣地遮蔽兩個人或者相比於一側而優先遮蔽另一側等)。

圖33所示的交互評估示例包括交互(例如，在發生交互時的談話、郵件和工作場所外接觸)的評估值。談話交互是例如基於以下各項來評估的：基於通過語音識別的用戶的談話語音語調的好感度；基於通過語音識別和句法分析而識別的談話內容的親密級別(在該情況下是否執行了關於個人問題而非關於工作問題的談話)；用戶的基於圖像分析的微笑程度；基於圖像分析的兩個人目光接觸的次數等。此外，使用基於句法分析的郵件書寫的親密程度、尊重程度、郵件的件數等來評估郵件交互。此外，通過經由位置信息或其他傳感器檢測交互是工作中交互或工作外交互以及基於人員工作外在一起的時間、他們彼此靠近的時間和當進行談話時的談話交互評估來評估工作場所外接觸的交互。

在圖33所示的示例中，從目標用戶(對象id：70007)的角度對同事(對象id：70008)的評估慢慢提高，因此，測量到高好感度。此外，從同事(對象id：70008)的角度對目標用戶(對象id：70007)的評估也慢慢提高，但是低於從目標用戶(對象id：70007)的角度對同事(對象id：70008)的評估，因此，可以識別到目標用戶和同事對彼此評估不同。

當目標用戶(對象id：70007)呼叫移動對象6時，由於從計算出的高情感值識別到目標用戶(對象id：70007)對同事(對象id：70008)具有好感的事實，因此移動對象控制器70g對移動對象6進行控制以覆蓋同事與目標用戶，但是控制取決於在計算情感值時取決於交互類型的評估權重。

圖34是根據本應用示例的交互評估數據的另一示例的圖示。圖34是在移動對象6用作陽傘時使用的交互評估的示例。當目標用戶(對象id：8165)佩戴他或她當作珍寶並且作為來自他的或她的父親的紀念品的古董手錶(對象id：80075)時陽光強烈的情況被假設為情境。手錶對目標用戶很重要，並且因此目標用戶想要相比於他或她的身體優先覆蓋手錶(以使得手錶不暴露於直射陽光)。

圖34所示的交互評估示例包括交互(例如。在發生交互時的存放、維護、佩戴和欣賞)的評估值。對於存放交互，基於保存地點的光的強度(暗度級別)、溼度和溫度，這樣的值的平均值以及恆定保存程度來確定評估。在該示例中，使用專門設計的盒子並且因此對其的評估很高。此外，由於用戶在炎熱的夏季時段將手錶保存在專門設計的保存盒中，因此對其評估賦予更大權重，因此，比在其他保存時段內高得多(在第一行和第二行中為0.5，雖然正常為0.3)。此外，當在晚飯後無維護的情況下保存手錶時，保存的評估降低，因此保存順序也影響評估。此外，雖然對特定物件的感情隨著其保存時段增加而消失，並且由此其評估可能降低，但是假設在保存期間的時間因素不影響對於手錶的評估，這是因為手錶對用戶而言非常重要。

此外，基於維護內容的預定指標、維修專家的評估或其它客觀排名指標等來評估維護。例如，在迄今為止使用的內容(諸如在商店處的徹底檢修或維護)的情況下，評估提高。

根據用戶外出佩戴手錶的事件(目的地)的重要性、特異性等來評估佩戴維護。例如，在用戶通常不參加的特殊事件的情況下，佩戴手錶的評估很高。同時，當用戶參與每年舉行多次的新聞發布會時佩戴手錶的評估較低。此外，當用戶佩戴手錶時光的強度、溫度、溼度、與其他人的靠近程度等也會影響評估值。

此外，通過使用圖片對每個部分是否被分開並通過維護處理而維護的分析來對維護交互進行評估。

對于欣賞的評估，基於用戶欣賞手錶的時間和用戶在此時的面部表情來檢測欣賞交互，並且取決於根據腦波等的快樂程度、鬆弛程度來評估欣賞交互。此外，當通過語音識別、句法分析等檢測到例如用戶在欣賞手錶時的動作(例如，明確地向朋友說明該手錶是紀念品)時，評估變高。

情感值計算單元70f基於與佩戴在用戶的身體上的物件的這種交互的評估來計算用戶對於物件的意圖和關於物件的看法作為情感值。此外，移動對象控制器70g基於情感值來確定佩戴在用戶的身體上的手錶的重要性，並且控制移動對象6相比於目標用戶優先覆蓋手錶而免於陽光直射。

隨後，返回至圖32，在步驟s451中，情感值計算單元70f計算目標用戶對於對象/人的情感值。雖然情感值計算公式不受具體限制，但是例如可以根據交互類型對目標用戶與特定對象(相關對象)的交互進行分類，並且根據交互類型、使用加權函數來對針對特定對象的交互評估進行求平均(稱為如下公式1)。

(公式1)

ave(ωinta·(ave(einta·tw(t)))，ωintb·(ave(eintb·tw(t)))，ωintc·(ave(eintc·tw(t)))，...)

這裡

ωinta：交互a的權重

einta：交互a的評估值

tw(t)：針對評估值的經過時間的加權函數

上述公式1對應於基於人之間的交互評估值來計算情感值的情況，並且使用針對評估值的過去時間的加權函數tw(t)。t指定交互時間(或評估時間)，並且根據從進行交互時起經過的時間來執行加權。這是因為在人之間的關係的情況下，最近的交互被認為比過去的交互更重要。

接下來，在步驟s454中，移動對象控制器70g基於由情感值計算單元70f計算出的情感值來確定是否需要改變覆蓋範圍。具體地，當目標用戶相對於對象/人的相對情感值高於閾值時，移動對象控制器70g確定與目標用戶一起覆蓋對象/人或者在目標用戶之前覆蓋對象/人。

當需要改變覆蓋範圍時(在s454中為「是」)，在步驟s457中，移動對象控制器70g指示移動對象6改變覆蓋範圍。

根據本應用示例，如上所述，例如當目標用戶行走、同時攜帶重要古董時，移動對象6可以覆蓋古董，uo使得古董不暴露於太陽或雨中。當目標用戶與兒童和朋友在一起時，他們可以共享覆蓋範圍。

接下來，參照圖35至圖41將在控制遠程場所的通信的遙現系統104中設置了隱私級別時使用情感值的情況描述為第四應用示例。

圖35是根據第四應用示例的遙現系統104的整體配置的說明圖。如圖35所示，根據本應用示例的遙現系統104可以連接多個空間(例如，房間r1和房間r2)，並且將一個空間的圖片提供至另一空間以實現遠程空間中的用戶之間的通信。具體地，遙現系統104用安裝在房間r1中的高清晰度攝像裝置和麥克風陣列獲取用戶a在房間r1中的狀態，並且通過安裝在房間r2中的顯示部82a-2和揚聲器輸出所獲取的狀態。類似地，遙現系統104用安裝在房間r2中的高清晰度攝像裝置和麥克風陣列獲取用戶b在房間r2中的狀態，並且通過安裝在房間r1中的顯示部82a-1和揚聲器輸出所獲取的狀態。

以該方式，用高清晰度攝像裝置來拍攝雙方的狀態，並且將雙方的狀態提供給對方，因此，甚至位於遠程的用戶也可以執行更為現實和密切的通信。然而，需要用於控制用戶隱私的裝置。

根據本應用示例的遙現系統104可以通過在遙現系統中根據對方自動地設置隱私級別而適當地保持隱私。具體地，可以通過根據設置的隱私級別掩蔽提供給對方的圖片來應對不希望顯示房間的圖片的一部分而無需關斷和單方面關閉通信的用戶需求。

在本應用示例中，使用與指示對方的個性和可信度的預定指標對應的情感值來設置這樣的隱私級別。

例如，當用戶b的情感值高時，可以認為用戶b是高度可信的人，因此，遙現系統104將用戶a相對於用戶b的隱私級別設置為較低並且擴展暴露給用戶b的圖片的區域。相反，當用戶b的情感值低時，可以認為用戶b不是高度可信的人，因此，遙現系統104將用戶a相對於用戶b的隱私級別設置為較高，並且減小對用戶b開放的圖片的區域或者控制通信以將其關斷。

本文中，根據所設置的隱私級別對向對方開放的圖片(用戶a的捕獲圖像)的區域的控制是通過使用預定裝置對圖片進行掩蔽來實現的。作為圖片掩蔽手段，例如，可以通過將圖像疊加在開放圖片(用戶a的捕獲圖像)上以隱藏開放圖片的至少一部分來適當地保護用戶a的隱私。在本應用示例中，例如障子(shoji)圖像用作疊加圖像。由於障子是通過水平移動而打開和關閉的，因此障子是表現操作障子的人的意圖的裝置。也就是說，在障子的情況下，停止在稍微打開狀態不是不穩定的，並且表現操作與關於鉸鏈轉動的門和窗區分的門的人的意圖(打開到一定程度)。用戶b可以根據由障子圖像隱藏的開放圖片的程度(虛擬障子的打開程度，即開度)來直觀地識別用戶a願意共享的程度。

隱私級別被設置為這樣的障子圖像的虛擬障子的開度。也就是說，當隱私級別降低時開度增大，而當隱私級別提高時開度減小。此外，障子圖像的開度(隱私級別)可以由通信源和通信目的地共享。因此，用戶a可以通過觀看顯示在顯示部82a-1上的障子圖像的開度來直觀地識別他的或她的隱私級別被設置為何種程度。

圖36是根據本應用示例的障子圖像的示例的說明圖。如圖36所示，在用戶a所在的房屋r1中的牆壁的表面上設置有顯示部82a、攝像裝置82b和麥克風陣列82c。顯示部82a被布置成使得其還作為房間r2的牆壁的表面的下端靠近地板，以在房間r2的捕獲圖像821和障子圖像822顯示在顯示部82a上時實現仿佛障子實際設置在房屋r1的牆壁上並且遠程房間r2在附近的呈現和體驗。此外，作為示例，攝像裝置82b和麥克風陣列82c設置在顯示部82a上方。

顯示部82a顯示從房間r2發送的捕獲圖像821和掩蔽捕獲圖像821的障子圖像822。障子圖像822在疊加在捕獲圖像821上的同時顯示，並且根據隱私級別來調整其開度。

上面描述了根據本應用示例的遙現系統104的概況。雖然在圖36所示的示例中將障子圖像822用作隱私控制手段的示例，但是本應用示例不限於此，並且可以以相同的方式使用例如窗簾、捲簾、竹簾(misu)、百葉窗、毛玻璃、液晶快門等的圖像。當隱私控制手段是窗簾圖像、捲簾圖像、竹簾圖像或百葉窗圖像時，隱私級別被設置為其開度。當隱私控制手段是毛玻璃圖像或液晶快門圖像時，隱私級別被設置為其透明度。

此外，在上述遙現系統104中，房間r1的數據發送和接收由第一通信控制裝置(未視示出出)來控制，並且房間r2的數據發送和接收由第二通信控制裝置(未視出)來控制。第一通信控制裝置和第二通信控制裝置通過網絡連接，並且向/從彼此發送/接收數據。

(3-4-1.配置)

接下來，將參照圖37描述遙現系統104中所包括的通信控制裝置的配置。圖37是示出了根據第四應用示例的通信控制裝置8的配置的示例的框圖。通信控制裝置8控制通過遙現系統1連接的空間中的數據的發送和接收。

如圖37所示，根據本實施例的通信控制裝置8包括控制器80、通信單元81、遙現單元82、各種傳感器83、日曆和時鐘單元85以及存儲單元87。

[控制器80]

控制器80對通信控制裝置8的每個部件進行控制。控制器80由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。具體地，控制器80用作對應用戶信息獲取單元80a、情感值計算單元80b、開度設置單元80c、遙現控制單元80d、姿勢檢測單元80e和情感信息獲取單元80f。

對應用戶信息獲取單元80a獲取與通信目的地的對應用戶有關的信息。

情感值計算單元80b基於對應用戶的對象id而從情感伺服器2獲取與對應用戶關聯的交互評估值，並且計算對應用戶的情感值。對應用戶的對象id可以通過對應用戶信息獲取單元80a或通過查詢特定伺服器來獲取或者預先登記在存儲單元87中。情感值計算單元80b將所計算出的對應用戶的情感值輸出至開度設置單元80c。

開度設置單元80c將取決於對應用戶的隱私級別設置為開度。具體地，當對應用戶根據由情感值計算單元80b計算出的情感值而更加可信時，開度設置單元80c設置較低隱私級別，即，虛擬障子的更高開度。

遙現控制單元80d對遙現單元82進行控制，並且實現目標空間與通信目的地空間之間的遙現。具體地，遙現控制單元80d對由遙現單元82的攝像裝置82b拍攝的捕獲圖像和由麥克風陣列82c收集的聲音進行控制，以將其從通信單元81發送至通信目的地的通信控制裝置。本文中，遙現控制單元80d控制將捕獲圖像根據由開度設置單元80c設置的開度進行掩蔽。具體地，遙現控制單元80d可以執行根據所設置的開度將障子圖像疊加在捕獲圖像上的處理，並且將經處理的圖像發送至通信目的地或者將所設置的開度與捕獲圖像一起發送至通信目的地。

此外，遙現控制單元80d對從通信目的地的通信控制裝置接收到的捕獲圖像821進行控制以將其顯示在顯示部82a上，並且以相同的方式控制所接收的聲音通過揚聲器82d再現。當與通信目的地共享隱私級別時，遙現控制單元80d根據由開度設置單元80c設置的開度來調整所顯示的障子圖像822疊加在捕獲圖像821上的位置。

姿勢檢測單元80e基於由包括在各種傳感器83中的深度傳感器83a獲取的深度信息來檢測用戶的姿勢。例如，檢測打開/關閉障子的姿勢。因此，用戶可以任意地改變障子圖像822的開度。

情感信息獲取單元80f對用戶的情感進行評估並且基於由下面將描述的生物傳感器83d檢測到的生物信息、從由可見光攝像裝置獲取的捕獲圖像檢測到的面部表情、從通過麥克風獲取的語音檢測到的談話內容來獲取情感信息。

[通信單元81]

通信單元81向/從外部裝置發送/接收數據。例如，通信單元81在遙現控制單元80d的控制下將由遙現單元82的攝像裝置82b拍攝的捕獲圖像、由麥克風陣列82c收集的聲音、由開度設置單元80c設置的開度等發送至通信目的地的通信控制裝置。此外，通信單元81從通信目的地的通信控制裝置接收在通信目的地的空間中獲取的捕獲圖像和聲音。

此外，通信單元81連接至情感伺服器2，並且獲取與目標用戶的對象id相關聯的交互評估值。

[各種傳感器83]

各種傳感器83包括用於獲取目標空間的環境信息、用戶在目標空間中的行為信息、情感信息等的多個傳感器。具體地，根據本實施例的各種傳感器83包括深度傳感器83a、個人傳感器83b、行為傳感器83c、生物傳感器83d、位置信息獲取單元83e、高度傳感器83f、空氣汙染傳感器83g、溫度和溼度傳感器83h、噪聲傳感器83i等。

[遙現單元82]

遙現單元82包括顯示部82a、攝像裝置82b、麥克風陣列82c和揚聲器82d。如圖36所示，顯示部82a顯示通信目的地的空間的捕獲圖像821和根據由開度設置單元80c設置的開度疊加的障子圖像822。此外，揚聲器82d輸出通信目的地的空間的聲音。本文中，揚聲器82d可以以取決於由開度設置單元80c設置的開度的音量輸出聲音。攝像裝置82b捕獲目標空間(通信源的空間)的圖像，並且捕獲的圖像被發送至通信目的地的通信控制裝置。麥克風陣列82c收集目標空間的聲音，並且聲音數據被發送至通信目的地的通信控制裝置。

[日曆和時鐘單元85]

日曆和時鐘單元85獲取當前日期和時間，並且將所獲取的日期和時間信息輸出至控制器80。

[存儲單元]

存儲單元87存儲由控制器80執行的各種處理的程序和用在各種處理中的數據，例如，用戶的屬性信息、對象id等。

已描述了根據本應用示例的通信控制裝置8的配置。同時，通信控制裝置8不限於上述部件。例如，通信控制裝置8可以包括物理障子單元，並且使用被布置成覆蓋顯示部82a的物理障子作為用於根據隱私級別掩蔽圖片的裝置。

此外，可以在情感伺服器2側而不是通信控制裝置8的情感值計算單元80b側執行情感值的計算。

此外，雖然在本應用示例中將用於控制通過遙現所連接的空間的通信控制裝置3說明作為通過網絡連接的系統，但是根據本公開的遙現系統不限於此，並且空間的通信可以例如由單個伺服器來控制。在該情況下，伺服器具有圖37所示的通信控制裝置8的控制器80中所包括的功能部件。此外，在每個空間中設置有遙現單元82和各種傳感器83。

(3-4-2.操作處理>

接下來，將詳細描述根據本應用示例的遙現系統104的操作處理。

[遙現控制]

圖38是示出了根據本應用示例的遙現控制處理的流程圖。如圖38所示，首先，在步驟s503中，通信源的通信控制裝置8的遙現控制單元80d執行與通信目的地的通信控制裝置的遙現控制單元連接的處理。

然後，在步驟s506中，通信控制裝置8的開度設置單元80c設置障子的開度。下面將參照圖39描述控制開度的設置的詳情。

隨後，在步驟s509中，遙現控制單元80d通過攝像裝置82b和麥克風陣列82c獲取要發送至通信目的地的用戶的捕獲圖像(圖片)和聲音，並且控制將對所獲取的捕獲圖像和聲音根據設置的開度進行掩蔽。具體地，遙現控制單元80d可以執行根據所設置的開度將障子圖像疊加在捕獲圖像上的處理，並且將經處理的圖像發送至通信目的地或者例如將所設置的開度與捕獲圖像一起發送至通信目的地。

此後，在步驟s512中，遙現控制單元80d對從通信目的地的通信控制單元接收到的圖像和聲音進行控制，以通過顯示部82a和揚聲器32d在根據所設置的開度掩蔽圖像和聲音的狀態下將其輸出。

然後，當命令通信終止時(在s515中為「是」)，遙現控制單元80d終止與通信目的地的通信。

[控制開度的設置]

接下來，將詳細描述圖38的步驟s506中所示的障子的開度的設置。圖39是示出了根據本應用示例的設置開度的操作處理的流程圖。如圖39所示，首先，在步驟s523中，通信控制裝置8的開度設置單元80c將障子開度設置為先前登記的初始狀態。

然後，在步驟s526中，情感值計算單元80b獲取對應用戶的對象id。可以通過對應用戶信息獲取單元80a從通信目的地的通信控制裝置獲取對應用戶的對象id。

隨後，當可以獲取對應用戶的對象id時(在s529中為「是」)，在步驟s532中，情感值計算單元80b從情感伺服器2獲取與對應用戶的對象id關聯的交互評估值。

此後，在步驟s535中，情感值計算單元80b基於所獲取的交互評估值來計算情感值。本文中，將參照圖40至圖41詳細描述情感值和從情感伺服器2獲取的交互評估值的計算。

圖40是根據本應用示例的交互評估數據的示例的圖示。圖40所示的數據的示例是情感值計算單元80b從情感伺服器2獲取的與指定的對應用戶(這裡為用戶b)的對象id關聯的交互評估。

隨後，情感值計算單元80b針對其他對象(相關對象)而從圖40所示的過去交互評估的累積數據僅提取對應用戶(這裡為具有對象id：5505的用戶b)的交互評估，並且計算情感值。圖41是如上所述從圖40所示的交互評估值數據的示例提取的且用於情感值計算的數據的示例的圖示。

同時，如上所述，通過附接至/安裝在對象上和對象周圍的感測裝置來感測諸如「手錶/觀看/瀏覽對象/投出對象/」的交互。例如，當從附接至電視機和房間的攝像裝置傳感器的捕獲圖像的分析結果檢測到用戶b持續觀看電視機所位於的方向的事實時，並且當從電視機操作歷史檢測到在用戶b位於房間中的時間段內電視機工作並輸出圖像的事實時，感測到「用戶b正在看電視」/「電視正由用戶b觀看」的交互。另外，當從附接至電視機和房間的攝像裝置傳感器的捕獲圖像的分析結果檢測到用戶b投出物體的運動或者對象從用戶b的手的分離和移動時，並且當從附接至電視機的振動傳感器感測到電視機的殼體被物體擊中時，感測到「將物體投向電視機」/「被投出」的交互。

此外，當從附接至電話和房間的攝像裝置傳感器的捕獲圖像的分析結果檢測到用戶b用手握持電話機的聽筒的情景時，並且當從電話機操作歷史檢測到用戶b撥打電話的事實時，感測到撥打電話的交互。此外，當附接至電話的振動傳感器檢測到衝擊被施加至電話的事實時，並且當設置在電話機中的麥克風檢測到拉線的聲音時，感測到撥打電話、同時拉線的交互。

接下來，將描述由情感值計算單元80b計算用戶b的情感值q1的示例。例如，根據如下公式2來計算情感值q1。

(公式2)

這裡，

an:針對交互類型n的係數，-1≤an≤1

∑qn；交互類型n的評估的總數

上述公式2表示通過將針對每個交互類型的評估值的和乘以取決於交互類型的係數並且將所有交互類型的總和除以交互的總數來計算情感值q1。這裡，在如下公式3中表示向上述公式1應用圖41所示的交互評估。

(公式3)

以該方式，情感值計算單元80b可以獲得如上述公式3所表示的用戶b的情感值q1。

所計算出的對應用戶的情感值表示對應用戶的可信度。雖然即使在當通信對方在遙現系統104中可信任時隱私較低的情況下用戶也是安心的，但是可以通過在對方不可信任時提高隱私來適當保持用戶的隱私。因此，使用表示對應用戶的可信度的情感值是有效的。

返回參照圖39，在步驟s538中，開度設置單元80c基於由情感值計算單元80b計算出的情感值來計算和設置與隱私級別對應的障子開度，並且將所設置的開度輸出至遙現控制器80d。

上面描述了在根據本應用示例的遙現系統104中使用情感值。

接下來，將參照圖42至圖50來將在播放現有運動圖像時使用情感值、基於拍攝者與拍攝對象之間的關係來添加新呈現的臨場感再現系統105描述作為第五應用示例。

圖42是根據本應用示例的臨場感再現系統105的整體配置的說明圖。如圖42所示，臨場感再現系統105包括：再現信息生成裝置9，其根據獲取的內容數據生成臨場感再現信息；以及回放控制裝置95，其在基於臨場感再現信息回放內容數據時為觀看者(用戶)再現生成內容數據時的臨場感。再現信息生成裝置9和回放控制裝置95可以通過網絡連接。

再現信息生成裝置9使用情感值來生成用於添加表現對拍攝對象的感覺的新呈現的抽象的臨場感再現信息，所述情感值對應於指示內容數據創建者(例如。拍攝者)對拍攝對象的感覺以及它們之間的關係的預定指標。

回放控制裝置95執行裝置控制以及圖像效果和聲音效果的生成，以使得在基於與內容數據相關聯的臨場感再現信息來回放內容數據時再現生成內容數據時的臨場感(背景)。由於臨場感回放信息被抽象化，因此回放控制裝置95可以根據可用裝置的特徵以及可以生成的效果來執行再現處理。

(3-5-1.再現信息生成側的配置和操作處理)

接下來，將參照圖43至圖47來描述再現信息生成裝置9的配置和操作處理。

[再現信息生成裝置9的配置]

圖43是示出了根據本應用示例的再現信息生成裝置9的配置的示例的框圖。如圖43所示，再現信息生成裝置9包括控制器90、通信單元91、內容存儲單元92和臨場感再現信息存儲單元93。

(控制器)

控制器90對再現信息生成裝置9的每個部件進行控制。控制器90由包括cpu、rom、ram和非易失性存儲器的微型計算機來實現。具體地，如圖2所示，控制器90用作內容分析單元90a、內容附加信息提取單元90b、詳細天氣和地點信息搜索單元90、拍攝對象識別單元90d、情感值獲取單元90e、臨場感再現信息生成單元90f和存儲控制器90g。

內容分析單元90a執行對於內容數據(諸如運動圖像)的圖像分析和聲音分析。內容數據可以存儲在內容存儲單元92中，或者可以通過通信單元91接收。內容分析單元90a包括圖像特徵值提取單元901、振動特徵值提取單元902和聲音特徵值提取單元903。

圖像特徵值提取單元901具有基於圖像分析提取圖像特徵值的功能。振動特徵值提取單元902具有基於圖像分析提取振動特徵值的功能。此外，聲音特徵值提取單元903具有基於聲音分析而提取聲音特徵值的功能。這樣的特徵值可以針對運動圖像的每個幀來提取或者針對預定數量的幀來提取。

內容附加信息提取單元90b從內容數據中提取附加信息。附加信息是當(在運動圖像的情況下拍攝期間)生成內容數據時存儲的信息，並且可以是例如日期信息(在運動圖像的情況下為拍攝日期)、內容數據的時間信息和位置信息(緯度、經度和高度)、當生成內容數據時獲取的傳感器信息等。

詳細天氣和地點信息搜索單元90基於由內容附加信息提取單元90b提取的內容數據的日期、時間和地點來搜索關於內容生成地點的詳細天氣信息和詳細地點信息。詳細的天氣信息可以是天氣、溫度、溼度、風向、風力、降雨量等。詳細的地點信息可以是站名稱、設施名稱、地點名稱、建築物類型等。詳細天氣和地點信息搜索單元90c訪問網絡上的搜索伺服器(反向地理編碼(reversegeo-coding)系統、事件日曆伺服器等)，以搜索這樣的詳細天氣和地點信息。

拍攝對象識別單元90d基於由內容分析單元90a的圖像特徵值提取單元901提取的圖像特徵值或由聲音特徵值提取單元903提取的聲音特徵值來識別內容數據的拍攝對象。

情感值獲取單元90e獲取內容數據創建者(在運動圖像的情況下為拍攝者)和拍攝對象的情感值。具體地，情感值獲取單元90e基於創建者的對象id和拍攝對象的對象id來向情感伺服器2請求獲取情感值。當從情感伺服器2發送創建者與拍攝對象之間的交互的評估時，情感值獲取單元90e基於交互評估來計算創建者對於拍攝對象的相對情感值(指示創建者對拍攝對象的感覺的指標)。可以在情感伺服器2中執行情感值計算。在該情況下，情感值獲取單元90e通過通信單元91從情感伺服器2獲取所計算出的情感值。

創建者的對象id可以嵌入內容數據中作為元數據，並且由內容附加信息提取單元90b提取。拍攝對象的對象id可以嵌入內容數據中作為元數據，並且由內容附加信息提取單元90b提取。否則，可以基於由拍攝對象識別單元90d識別的拍攝對象的特徵值來獲取拍攝對象的對象id。可以將拍攝對象特徵與對象id的匹配存儲在再現信息生成裝置9的存儲單元(未示出)中或者存儲在情感伺服器2的對象db22中。情感值獲取單元90e可以通過將拍攝對象特徵值發送至情感伺服器2來獲取拍攝對象的對象id。

臨場感再現信息生成單元90f生成用於在播放內容數據時將內容數據的臨場感(背景)提供給觀看者(用戶)的信息。

存儲控制器90g可以將由臨場感再現信息生成單元90f生成的臨場感再現信息嵌入存儲在內容存儲單元92中的內容數據中，或者將臨場感再現信息與內容數據相關聯地存儲在臨場感再現信息存儲單元93中作為單獨文件。

通信單元91向/從外部裝置發送/接收數據。例如，通信單元91連接至情感伺服器2，並且接收與對象id相對應的交互評估。此外，通信單元91連接至回放控制裝置95，並且發送其中嵌入有臨場感再現信息的內容數據或者內容數據和與內容數據相關聯的臨場感再現信息。

內容存儲單元92存儲內容數據。所存儲的內容數據可以是通過通信單元91接收的數據。

臨場感再現信息存儲單元93將所生成的臨場感再現信息與內容數據相關聯地存儲作為單獨文件。

[再現信息生成裝置9的操作處理]

接下來，將參照圖44描述再現信息生成裝置9的再現信息生成處理。圖44是示出了根據本應用示例的再現信息生成處理的流程圖。

首先，如圖44所示，在步驟s603中，情感值獲取單元90e獲取運動圖像的前導幀(leadingframe)。

然後，在步驟s606中，情感值獲取單元90e從拍攝對象識別單元90d獲取目標幀的拍攝對象識別結果。拍攝對象識別單元90d基於通過目標幀的圖像分析而提取的圖像特徵值來識別該幀中的拍攝對象。例如，如圖45所示，通過對通過拍攝者p進行的拍攝而生成的運動圖像的幀97的圖像分析來識別拍攝對象s1、s2和s3。

然後，在步驟s609中，情感值獲取單元90e獲取與由拍攝對象識別單元90d識別的目標幀的拍攝對象對應的對象id。

當不能獲取拍攝對象的對象id時(在s609中為否)，在步驟s612中，情感值獲取單元30e將拍攝者的對象id和拍攝對象的屬性發送至情感伺服器2。

隨後，在步驟s615中，情感值獲取單元90e從情感伺服器2接收拍攝對象的對象id的候選。情感伺服器2例如通過相關對象搜索單元20d、針對與拍攝者具有交互歷史的對象搜索與拍攝對象的屬性相同或類似的相關對象，並且將相關對象的對象id發送至再現信息生成裝置9作為候選。

然後，如果存在從情感伺服器2發送的多個對象id候選(在s618中為「是」)，則在步驟s621中，情感值獲取單元90e從多個候選當中選擇與拍攝對象對應的一個對象id。

隨後，在步驟s624中，情感值獲取單元90e將拍攝對象的對象id發送至情感伺服器2。

此後，在步驟s627中，情感值獲取單元90e獲取拍攝者與拍攝對象之間的相對情感值，並且與拍攝對象在幀中的位置相關聯地存儲所獲取的相對情感值。拍攝者與拍攝對象之間的相對情感值可以在情感伺服器2中計算或由情感值獲取單元90e基於從情感伺服器2接收到的拍攝者與拍攝對象之間的交互的評估來計算。

隨後，如果在目標幀中存在其他拍攝對象(在s630中為「是」)，則從步驟s609開始重複處理。因此，例如獲取圖14所示的、指示拍攝者p(父親，對象id：312039)對於拍攝對象s1(妻子，對象id：105384093)、拍攝對象s2(孩子，對象id：15122014)和拍攝對象s3(玩具，對象id：101960)的情感或感覺的相對情感值。

本文中，將參照圖46和圖47詳細描述情感值獲取單元90e對相對情感值的計算。圖46是根據本實施例的交互評估的數據的示例的圖示。基於由情感值獲取單元90e指定的拍攝者的對象id和每個拍攝對象的對象id而從情感伺服器2發送圖46所示的交互評估。

例如，在圖46所示的數據的示例的第一行中，拍攝者p(對象id：312039)於2013年12月24日對與拍攝對象s1(對象id：105384093)對應的妻子執行的交互「給予配飾」被給予為0.7的評估。在第二行中，由拍攝者p(對象id：312039)於2013年12月24日對與拍攝對象s1(對象id：105384093)對應的妻子執行的交互「被給予配飾」被給予為1.00的評估。以該方式，由一方的對象對另一方的對象進行的交互可以由雙方的對象來檢測。

如圖46所示，除了上述給予以外，所檢測到的交互類型可以是存放、身體愛撫、談話、播放等。

從例如信用卡的使用歷史和網上購物的購買歷史、在郵件中和社交媒體上書寫的內容、由設置在房間中或對象上的攝像裝置獲得的捕獲圖像的識別、由設置在房間中或對象上的麥克風獲得的聲音的識別等檢測給予的交互。對給予的交互的評估由情感伺服器2的評估單元20b來執行。例如，評估單元20b基於給予禮物的人的通常購買歷史以及禮物的金額與他的或她的收入的比率來提取支出程度，基於對與銷售人員的談話的識別來提取對禮物的肯定程度，基於在網上購物期間的網頁瀏覽時間和從頁面轉變至產品選擇的時間等來提取真誠度，將預定的權重分配給這樣的值，並且將這些值歸一化至-1.0至1.0的範圍以產生評估值。

此外，例如，從對象位置、移動歷史、對通過設置在房間中或對象上的攝像裝置獲得的捕獲圖像的識別等檢測存放交互。評估單元20b將權重分配給存放地點、存放地點的溼度、大氣中的灰塵量等，並且將這些值歸一化至-1.0至1.0的範圍，以產生評估值。

此外，例如，基於經由雙方的可穿戴裝置對人體交流中的觸摸的確定、通過攝像裝置的圖像識別、雙方的加速度傳感器的運動模式等來檢測身體愛撫交互。評估單元20b將權重分配給從通過笑臉識別而獲得的微笑程度、通過語音識別而獲得的笑聲和談話的內容所獲取的各個指標，並且將結果值歸一化至-1.0到1.0的範圍，以產生評估值。

此外，例如，基於語音識別、語音音調、對在郵件中和社交媒體中書寫的內容的分析(句法分析和語義分析)等來檢測談話交互。評估單元20b使用包括在談話中的單詞、上下文、語音音調等來確定談話的內容的肯定/浮動模式的程度，並且最終將結果值歸一化至-1.0到1.0的範圍，以產生評估值，這是因為評估的總和根據單詞的數量和談話的內容而改變。

此外，例如基於對附接至玩具的近場通信晶片與附接至孩子的近場通信晶片之間的連接的檢查、雙方的加速度傳感器的運動等來檢測玩耍交互。當無法通過連接檢查和運動來識別「玩耍」時，如果玩具是另一方的對象，則由於玩具用於玩耍，因此識別出「玩耍」交互。評估單元20b基於雙方的交互時間的測量結果以及通過捕獲的圖像和聲音進行的笑臉檢測和笑聲檢測來獲得孩子針對玩具的評價值。此外，可以通過測量對待玩具的粗暴程度以及對待是否超出玩具的使用的規定模式來獲得從玩具的角度出發的評估值。雖然當嬰兒粗暴對待玩具時從玩具的角度出發的評估值減小，但是當對應方是嬰兒時，可以在最後獲得評估值的步驟中通過減小從玩具的觀點出發的評估值的權重因子或者校正評估值來調整評估值。

隨後，當通過情感值獲取單元90e計算指示拍攝者對各個拍攝對象的情感和感受的相對情感值時，情感值獲取單元90e從圖46所示的交互評估數據中僅提取拍攝者與每個拍攝對象之間的交互評估。圖47是從圖46所示的交互評估數據的示例中提取的用於情感值計算的數據的示例的圖示。如圖47所示，提取了拍攝者(對象id：312039)與拍攝對象s1至s3(對象id：105384093、15122014和101960)之間的交互評估。

例如，情感值獲取單元90e使用目標對象的評估的總和、通過將目標拍攝對象的交互類型乘以權重因子然後與目標拍攝對象的評估相加而獲得的總和、或者通過將總和除以交互的次數而獲得平均值來獲得拍攝者與拍攝對象之間的相對情感值。

返回參照圖44，在步驟s633中，情感值獲取單元90e計算整個幀的情感值。具體地，例如，使用幀中的拍攝對象的相對情感值的總和或通過將總和除以拍攝對象的數量而獲得的平均值來獲取情感值。

然後，在步驟s636中，情感值獲取單元90e存儲目標幀的情感值(拍攝對象的相對情感值和整個幀的情感值)。

此後，在步驟s639中處理目標幀進行至下一幀，並且當仍存在新的幀時(在s642中為「是」)，從步驟s606開始重複處理。

已描述了作為臨場感再現信息的根據本實施例的情感值計算。雖然在上述實施例中計算每個拍攝對象與拍攝者之間的相對情感值，但是本公開不限於此，並且可以計算每個拍攝對象的絕對情感值或者可以根據需要計算拍攝對象之間的相對情感值。使用拍攝對象的所有交互評估的總和、通過將交互類型乘以權重因子並且然後與目標拍攝對象的所有評估相加而獲得的總和、或者通過將總和除以交互的次數而獲得的平均值來獲得每個拍攝對象的絕對值。此外，使用拍攝對象之間的交互評估的總和、通過將交互類型乘以權重因子並且然後與拍攝對象之間的交互評估相加而獲得的總和、或者通過將總和除以交互的次數而獲得的平均值來獲得拍攝對象之間的相對情感值。

(3-5-2.回放側的配置和操作處理)

接下來，將參照圖48至圖50描述回放控制裝置95的配置和操作處理。回放側可以基於由再現信息生成裝置9生成的抽象的臨場感再現信息、根據包括在回放側中的裝置的特性來自由地確定再現方法。

[再現控制裝置95的配置]

圖48是示出了根據本應用示例的回放控制裝置95的配置的示例的框圖。如圖48所示，回放控制裝置95包括內容獲取單元951、臨場感再現信息獲取單元952、臨場感再現效果指定單元953、圖像效果生成單元954、聲音效果生成單元955、裝置控制器956、解碼器單元957和內容輸出控制器958。

內容獲取單元951獲取要播放的內容數據。例如，內容獲取單元951從雲(例如，再現信息生成裝置9的內容存儲單元92)獲取內容數據。

臨場感再現信息獲取單元952獲取與要播放的內容數據對應的臨場感再現信息。例如，假定臨場感再現信息已嵌入內容數據中，或者已存儲在雲上作為與內容數據分開的文件。

臨場感再現效果指定單元953指定將根據由臨場感再現信息獲取單元952獲取的臨場感再現信息和設置在回放側的裝置的特性來回放存在(由臨場感再現信息指示的上下文)的裝置。例如，可以將輸出圖像和聲音的電視裝置、空調裝置、芳香劑噴射裝置、振動裝置、照明裝置、鼓風裝置等當作包括在再現側中的裝置。

圖像效果生成單元954根據臨場感再現效果指定單元953的指令來生成用於再現臨場感的圖像效果。

聲音效果生成單元955根據臨場感再現效果指定單元953的指令來生成用於再現臨場感的聲音效果。

裝置控制器956根據臨場感再現效果指定單元353的指令對各個裝置進行控制以用戶(觀看者)提供臨場感。

解碼器單元957對由內容獲取單元951獲取的內容數據進行解碼，並且將解碼後的內容數據輸出至內容輸出控制器958。

內容輸出控制器958輸出經解碼器單元957解碼的內容數據。具體地，當內容數據是運動圖像時，例如，內容輸出控制器958對電視機裝置進行控制以播放運動圖像。此外，內容輸出控制器958以由圖像效果生成單元954生成的圖像效果播放運動圖像，或者輸出由聲音效果生成單元955生成的聲音效果。

[回放控制裝置95的操作處理]

接下來，將參照圖49描述回放控制裝置95的回放處理。如上所述，臨場感再現信息包括指示拍攝者對拍攝對象的情感和感覺的相對情感值。可以通過在回放側根據相對情感值進行呈現來利用拍攝者對於拍攝對象的感覺提供觀看拍攝對象的新體驗。

圖49是示出了根據本實施例的使用情感值的回放處理的流程圖。如圖49所示，首先，在步驟s653中，臨場感再現效果指定單元953獲取整個當前回放幀的情感值t。整個回放幀的情感值t可以是從由臨場感回放信息獲取單元952獲取的臨場感再現信息獲得的。整個回放幀的情感值t對應於在圖44的步驟s633中描述的整個目標幀的情感值。

然後，在步驟s656中，臨場感再現效果指定單元953確定整個先前幀的情感值t與整個當前幀的情感值t之間的差是否等於或大於預定值。

隨後，當情感值差等於或大於預定值時(在步驟s656中為「是」)，在步驟s659中，臨場感再現效果指定單元953確定是否經過了最小裝置控制應用時間。這是出於避免在短時間內切換裝置控制的目的。

如果經過了最小裝置控制應用時間(在s659中為「是」)，則在步驟s662中，臨場感再現效果指定單元953指示裝置控制器956根據情感值t執行裝置控制。例如，執行取決於情感值的物理呈現，諸如振動的產生、煙霧的排放和照明的改變。

然後，在步驟s665中，臨場感再現效果指定單元953確定是否經過了最小圖像效果應用時間。這是出於避免在短時間內切換圖像效果的目的。

如果經過了最小圖像效果應用時間(在s665中為「是」)，則在步驟s668中臨場感再現效果指定單元953指示圖像效果生成單元954根據情感值t應用整個圖像的效果。例如，整個圖像的效果是增亮圖像的整個色澤或者使圖像的色調略微發紅。

然後，在步驟s671中，臨場感再現效果指定單元953確定是已經過了最小背景音樂(bgm))應用時間。這是出於避免在短時間內切換bgm的目的。

如果經過了最小bgm應用時間(在s671中為「是」)，則在步驟s674中，臨場感再現效果指定單元953指示聲音效果生成單元955根據情感值t播放bgm。例如，當感情值t為高時播放歡快的bgm，而當情感值t為低時播放陰沉的bgm。

然後，在步驟s677中，臨場感再現效果指定單元953獲取從當前回放幀識別的每個拍攝對象的情感值和每個拍攝對象在畫面中的位置(即，在幀中的位置)。每個拍攝對象的情感值是包括在臨場感再現信息中的拍攝者對於每個拍攝對象的相對情感值。

隨後，在步驟s680中，臨場感再現效果指定單元953指示圖像效果生成單元954根據拍攝對象類型和情感值選擇圖像效果和疊加的圖像，並且指示內容輸出控制器958在與拍攝對象對應的位置處顯示所選擇的圖像效果。本文中，將參照圖50描述被布置成根據情感值而對應於拍攝對象的圖像效果的示例。

根據從在圖50的左側所示的幀98識別的拍攝對象s1、s2和s3的相對情感值，臨場感再現效果指定單元953如在圖50的右側所示的幀99中一樣分別對應於拍攝對象s1至s3布置圖像效果e1至e3。例如，如果拍攝對象s1是母親、拍攝對象s2是孩子並且拍攝對象s3是玩具，則選擇針對家庭和孩子的圖像效果。另外，如果相對情感值為高，則選擇愉快和明亮的圖像效果。此外，與拍攝對象對應的布置可以是圍繞拍攝對象的圖像效果的布置，以使得圖像效果和拍攝對象不交疊。因此，在執行拍攝時拍攝者的感覺、拍攝時的氣氛等通過新添加的呈現來表示，由此再現在拍攝期間的臨場感。

雖然在s662、s668、s674和s680中描述了取決於情感值的呈現(裝置控制、圖像效果和bgm)，但是本實施例不限於此，並且當在臨場感再現信息中描述了根據拍攝對象的相對情感值評估的拍攝者的抽象主觀表現時，可以執行取決於主觀表現的呈現。

此外，當運動圖像回放未到達運動圖像終點時(在步驟s683中為「否」)，重複s653至s680的處理。

上面描述了根據本應用示例的臨場感再現系統105中的情感值的使用。

如上所述，在根據本公開的實施例的信息處理系統中，可以基於對象之間的交互來將對象的情感值表示為數值。具體地，可以通過測量物件與用戶之間的交互並且在伺服器中將歷史存儲作為與物件和用戶相關聯的特定多維向量來計算與物件相關聯的情感值、與用戶關聯的情感值以及物件與用戶之間的相對情感值。

這樣的情感值可以用在個人信用信息提供系統101、拍賣系統102、環境調整系統103、遙現系統104和臨場感再現系統105中。

上面參照附圖描述了本公開的優選實施例，但是本技術不限於上述示例。本領域的技術人員可以在所附權利要求的範圍內發現各種替換和修改，並且應當理解，各種替換和修改自然會落入本公開的技術範圍內。

例如，可以累積交互信息，並且每當累積交互信息時可以計算其評估和情感值，或者可以根據需要計算累積的交互信息的評估和情感值。

此外，可以在上述設備中所包括的硬體(諸如cpu、rom和ram)中準備用於運用每個設備的功能的電腦程式。此外，還提供了存儲有電腦程式的計算機可讀存儲介質。

此外，在本說明書中描述的效果僅是說明性或例示的效果，並且不是限制性的。也就是說，在上述效果下或取代上述效果，根據本公開的技術可以實現本領域技術人員從本說明書的描述顯而易見的其他效果。

另外，還可以將本技術配置如下。

(1)一種信息處理系統，包括：

檢測單元，所述檢測單元檢測與第一對象和第二對象之間的交互有關的信息；以及

生成單元，所述生成單元能夠基於與所述交互有關的信息來生成所述第一對象的情感值和所述第二對象的情感值。

(2)根據(1)所述的信息處理系統，其中，所述生成單元能夠基於與一個對象和多個其他對象之間的交互有關的信息來生成絕對數值情感值，並且基於與所述一個對象和特定對象之間的交互有關的信息來生成相對值。

(3)根據(1)或(2)所述的信息處理系統，還包括：

存儲控制器，所述存儲控制器將與所述交互有關的信息與所述第一對象和所述第二對象中的每一個相關聯，並且將所述信息存儲在存儲單元中，

其中，所述生成單元基於存儲在所述存儲單元中的、與所述交互有關且與特定對象相關聯的信息的歷史來生成所述特定對象的情感值。

(4)根據(1)至(3)中任一項所述的信息處理系統，其中，即使當所述第一對象是人且所述第二對象是物件時，所述生成單元也能夠基於與所述交互有關的信息來生成所述第一對象的情感值和所述第二對象的情感值。

(5)根據(1)至(4)中任一項所述的信息處理系統，其中，當所述第一對象和所述第二對象之間的交互已發生時，所述檢測單元檢測與雙向交互有關的信息。

(6)根據(1)至(5)中任一項所述的信息處理系統，包括：

信用信息提供伺服器，所述信用信息提供伺服器將所述情感值當作個人信譽並且提供個人信用信息。

(7)根據(1)至(6)中任一項所述的信息處理系統：包括：

商業交易伺服器，所述商業交易伺服器將所述情感值當作參展方的可信度或展出物品的價值，並且提供所述參展方或所述展出物品的情感值。

(8)根據(1)至(7)中任一項所述的信息處理系統，包括：

環境調整伺服器，當通過移動對象在跟蹤目標用戶的同時移動來調整所述目標用戶的周圍環境時，所述環境調整伺服器根據所述目標用戶的情感值或與所述目標用戶有關連的對象的情感值來控制環境調整。

(9)根據(1)至(8)中任一項所述的信息處理系統，包括：

通信控制裝置，所述通信控制裝置根據通信目的地裝置的用戶的情感值來自動設置隱私級別，並且在通信源裝置的用戶的圖片被發送至所述通信目的地裝置時，控制將所述通信源裝置的用戶的圖片根據自動設置的隱私級別進行掩蔽。

(10)根據(1)至(9)中任一項所述的信息處理系統，包括：

再現信息生成裝置，所述再現信息生成裝置基於從內容數據中提取的拍攝對象的感情值來生成抽象的臨場感再現信息，並且控制將所生成的臨場感再現信息與所述內容數據相關聯地存儲。

(11)一種控制方法，包括：

檢測與第一對象和第二對象之間的交互有關的信息；以及

能夠基於與所述交互有關的信息來生成所述第一對象的情感值和所述第二對象的情感值。

(12)一種存儲介質，所述存儲介質中存儲有程序，所述程序使得計算機用作：

檢測單元，所述檢測單元檢測與第一對象和第二對象之間的交互有關的信息；以及

生成單元，所述生成單元能夠基於與所述交互有關的信息來生成所述第一對象的情感值和所述第二對象的情感值。

附圖標記列表

100信息處理系統

101個人信用信息提供系統

102拍賣系統

103環境調整系統

104遙現系統

105臨場感再現系統

1感測裝置

11傳感器

12交互提取單元

13通信單元

2情感伺服器

20控制器

20a交互存儲控制器

20b評估單元

20c對象管理單元

20d相關對象搜索單元

20e情感值計算單元

21通信單元

22對象db

24情感信息db

3網絡

4個人信用信息提供系統

5拍賣伺服器

6移動對象

7環境調整伺服器

8通信控制裝置

9再現信息生成裝置

95回放控制裝置