使用用戶反饋來改善搜索結果的製作方法

2023-05-02 17:58:21 1

專利名稱：使用用戶反饋來改善搜索結果的製作方法
使用用戶反饋來改善搜索結果
扭旦 冃爾
各種產品和服務通過公眾的評論、建議、以及反饋隨著時間不斷發展和改 善。因為是公眾定期地使用這些產品和服務，並且公眾能夠注意到產品或服務 中可能需要改正的大多數缺陷，所以公眾可以是一良好的反饋源。
有許多對於公眾可用的、能夠為一作出請求的用戶搜索大範圍的信息的搜 索服務。許多這些搜索服務都是基於被用來針對用戶的搜索請求找出最相關的 搜索結果的各種不同的算法。然而，這些算法並不總是完美的，並且可能並不 總是提供針對用戶搜索請求的最好的搜索結果。另外，因為每個人的需求和喜 好是不相同的，所以針對一特定搜索查詢的一搜索結果集對於一個人來說可能 足夠了，然而，針對同一搜索査詢的相同搜索結果對於另一個人來說就可能不 夠。搜索服務因此可以是能夠從接受用戶評論和反饋中獲益的另一種服務。因 為公眾自己的反饋可用來提供對公眾想要什麼的更好的理解而不是只是依靠 算法來提供結果，所以將用戶反饋納入提供搜索結果的搜索服務的方法可導致 更好以及更多的相關搜索結果。
概要
提出了一種用於管理將要被用來排列搜索結果的反饋數據的系統和方法。 該系統和方法公開了從多個用戶匯集反饋數據的元素，其中，該反饋數據可採 用未結構化的或結構化的格式。此外，該系統和方法公開了將反饋數據與一個 或多個文檔相關聯。另外，該系統和方法能夠基於反饋數據排列一個或多個文 檔。而且，該系統和方法能夠提供經排列的一個或多個文檔作為對搜索請求的 搜索結果。
提供本概要以便用簡化的形式介紹將在以下詳細描述中進一步描述的一 些概念。本概要並不旨在標識出所要求保護的主題的關鍵特徵或必要特徵，也 不旨在用於幫助確定所要求保護的主題的範圍。
附圖簡述


圖1示出了用於實現本發明的一個系統的實施例；
圖2示出了用於管理能夠被用來排列搜索結果的反饋數據的一種方法的實 施例；
圖3示出了用於提供對於一個或多個文檔的反饋的一種方法的實施例
詳細描述
圖l示出了用於實現本發明的一個系統的實施例。客戶機102可以是執行 包括web瀏覽、搜索、電子郵件(email)以及其他任務、應用程式以及功能 在內的各種任務的臺式或膝上型計算機、啟用網絡的蜂窩電話(具有或沒有媒 體捕捉/回放能力)、無線電子郵件客戶機、或其他客戶機、機器、設備、或其 組合。客戶機102還可以是任何可攜式媒體設備，諸如數位照相機設備、數字 攝像機(具有或沒有靜止圖像捕捉功能)、諸如個人音樂播放器以及個人視頻 播放器等的媒體播放器、以及任何其他可攜式媒體設備。
伺服器104可以是或可以包括運行Microsoft Windows 、 MacOSTM、 Unix、 Linux 、 Xenix 、 IBM AIXTM、 Hewlett-Packard UXTM、 Novell Netware 、 Sun Microsystems Solaris 、 OS/2 、 BeOSTM、 Mach、 Apache、 OpenSt印TM或其他 作業系統或平臺的工作站。在一實施例中，客戶機102也可以是伺服器。
客戶機102可包括通信接口。該通信接口可以是允許客戶機102直接連接 到任何其他客戶機或設備或允許客戶機102通過網絡106連接到客戶機、服務 器、或設備的接口。網絡108可包括，例如，區域網(LAN)、廣域網(WAN)、 或網際網路。在一實施例中，客戶機102可通過無線接口連接到另一客戶機、服 務器、或設備。
圖2示出了用於管理能夠被用來排列搜索結果的反饋數據的一種方法的實 施例。在一實施例中，搜尋引擎可被用作能夠管理這些反饋數據的伺服器。該 搜尋引擎可包括可以是例如倒排索引的索引。在步驟202，搜尋引擎能夠從一 個或多個用戶匯集一個或多個反饋數據元素。該反饋數據可以是與一文檔相關 聯的、從用戶接收到的任何類型的信息。在一實施例中，該反饋數據可用於根
據與相應的搜索查詢的相關度來對一文檔進行評級，其中，該搜索査詢可包括 至少一個搜索項。在另一實施例中，該反饋數據可大體描述用戶對於一特定文 檔的感受。在這樣的實施例中，該反饋數據能夠描述用戶有多麼滿意或有多麼 不滿意該文檔。文檔可以是，例如，網頁、任何類型的多媒體內容、或能夠被 搜尋引擎索引的任何類型的內容。在一實施例中，文檔能夠作為搜索結果來呈 現給用戶。
在步驟204，所匯集的反饋數據能夠與一個或多個文檔相關聯。在一實施 例中，用戶能夠以一結構化的格式將反饋數據發送到搜尋引擎。在創建一結構 化的格式時，搜尋引擎能夠向用戶呈現一用戶界面(UI)，該搜尋引擎可在其 中定義它想從該用戶收到什麼類型的信息。例如，搜尋引擎能夠創建一 UI， 該搜尋引擎可在其中請求用戶通過以數值範圍1-5來對文檔進行評級來提供關 於一特定文檔的反饋數據，其中5可以是對於該文檔最喜歡的等級，而l可以 是最不喜歡的等級。另一個示例可向用戶呈現一 UI，用戶可在其中從對應於 文檔的預定文本描述的任何數量的按鈕中進行選擇。該文本描述能夠描述該用 戶有多麼滿意或有多麼不滿意該文檔。例如，該UI可包含用戶可選擇作為關 於一特定文檔的反饋數據的項，諸如"可能是最好的"、"好"、"一般"、 "差"、"可能是最差的"。在又一個示例中，搜尋引擎可向用戶呈現一 UI 並且要求該用戶通過對搜索結果中的文檔重新排序來顯示該用戶相信哪些文 檔比其他文檔與其搜索請求更相關來提供反饋數據。本發明能夠使用可提供允 許用戶對文檔重新排序的傳統手段的客戶側腳本語言。例如，用戶可點擊和拖 拽表示文檔的圖標、圖像、或連結到其他文檔的其他圖標、圖像或連結上方或 下方，來創建根據相關度的升序或降序重新排序的文檔列表。
在用於以預定方式接收反饋數據的任何類型的結構化格式中，因為搜索已 經知道它會從用戶接收到什麼類型的信息，所以該搜尋引擎能夠將反饋數據與 特定文檔相關聯。另外，如果反饋數據是對被包括在由搜尋引擎提供的搜索結 果列表中的文檔的響應，則該搜尋引擎能夠將對應於搜索結果的搜索査詢、反 饋數據、以及文檔彼此關聯起來。
在另一實施例中，用戶能夠以一未結構化的格式將反饋數據發送到搜索引 擎。在為該用戶創建未結構化的格式以便發送反饋數據時，搜尋引擎能夠向該
用戶呈現一 UI，該用戶可在其中自由地輸入能夠揭示用戶關於一特定文檔的
感受的任何類型的信息。例如，搜尋引擎能夠呈現一 UI，包括用戶可在其中
輸入作為關於一特定文檔的反饋數據的他/她所具有的任何評論的文本框。
在一實施例中，因為反饋數據是響應於搜尋引擎在接收到搜索査詢後提供 的從搜尋引擎接收到的搜索結果而提供的，所以反饋數據可直接與搜索查詢相 關。例如，反饋數據可被連結到搜索體驗，其中，用戶能夠提供可與搜尋引擎 作為對於該用戶的搜索查詢的搜索結果而提供的網頁相關聯的反饋數據。因為 反饋數據被連結到搜尋引擎為其提供搜索結果的搜索査詢，所以搜尋引擎能夠 將反饋數據與特定文檔和搜索査詢相關聯。
在另一實施例中，反饋數據可以不直接與搜索查詢相關，並且搜尋引擎可 能不能夠將反饋數據直接連結到文檔或搜索查詢。事實上，用戶能夠提供不是 直接與搜索體驗有關的反饋數據。更具體而言，用戶能夠通過聯繫搜尋引擎、 連接到搜尋引擎的獨立伺服器，或通過聯繫管理搜尋引擎的實體來提供反饋數 據。例如，用戶可將能夠描述其關於當進行一搜索請求時接收到的一特定搜索 結果的感受的電子郵件作為反饋數據發送給搜尋引擎或獨立伺服器，或者該反 饋數據能夠大體描述該用戶關於一特定文檔的感受。在另一個示例中，用戶可 呼叫管理搜尋引擎的實體，並能口頭地提供能夠描述其對於當進行搜索請求時 接收到的一特定搜索結果的感受的的反饋數據，或者該反饋數據同樣能夠大體 描述該用戶對於一特定文檔的感受。該實體然後可以使用常規的語音一文本軟 件來將語音轉換成文本。在又一個示例中，搜尋引擎或獨立伺服器能夠檢索可 在網際網路上的博客上找到的反饋數據。在每個示例中，搜尋引擎或獨立伺服器 可使用常規的解析算法來解析該文本以將反饋數據與一特定文檔以及也可能 一搜索査詢相關聯。
在步驟206，搜尋引擎可在其索引中存儲匯集的反饋數據。該索引也可以 是例如倒排索引。在一實施例中，在步驟204處彼此相關聯的反饋數據、 一個 或多個文檔、以及搜索查詢可以一起被存儲在索引中。在另一實施例中，反饋 數據可被存儲在與被搜尋引擎從網絡上索引的其他內容分開的索引中。
在步驟208，搜尋引擎可基於其接收到的反饋數據來排列存儲在其索引中 的一個或多個文檔。反饋數據可以是被用來為與該反饋數據相關聯的類似搜索
査詢提供更好的搜索結果的多個特徵中的一個特徵。例如，從網際網路上找到的 文檔中索引的文本可以是用來確定對特定搜索查詢的搜索結果的排序的一個 特徵。另一個特徵可以是從該用戶反饋數據中接收到的文本。又一個特徵可以 是從一文檔的標題中特別發現的文本。此外，再一個特徵可以是文檔的大小與 在該文檔中發現一特定單詞的次數的比值。應當注意，任何類型的特徵可用來 確定怎樣排列一個或多個文檔。上述的特徵只是可用來確定怎樣排列某些文檔 的各種類型的特徵的子集，因此，本發明不應僅限於那些示例。
當為一特定搜索查詢排列多個文檔時，搜尋引擎可被配置成強調在反饋數 據中發現的單詞比在任何其他特徵的上下文中發現的單詞要來得重要。例如， 搜尋引擎可強調包含一特定單詞的反饋數據比在其中包含該相同單詞十次的
文檔重要三倍。為了幫助其本身確定一單詞相對於其從中發現的特徵的重要 性，搜尋引擎可對搜索査詢的特定單詞附加不同的標識符，該標識符可在單詞 在搜尋引擎中被索引後通知搜尋引擎該單詞來自於哪裡。例如，搜尋引擎可使 用表明該單詞來自於文檔標題的標識符、表明該單詞來自於文檔正文的標識
符、或表明其來自於反饋數據的標識符。
在其他實施例中，包括文檔的搜索結果可基於一特定特徵中的單詞的上下 文的比較來排列。例如，朝著反饋數據的一特定項目的頂部發現的單詞比在相 同的反饋數據元素中發現該單詞的次數更重要。相同的示例可被應用於文檔， 其中，在該文檔中發現一個單詞的次數比在該文檔中何處發現該單詞更重要。 配置搜尋引擎來強調某些特徵的方法可確定搜尋引擎隨後將如何鑑於所接收 到的反饋數據來排列並為類似的搜索查詢提供搜索結果。 一旦一個或多個文檔
已被排列，在步驟210，搜尋引擎能夠為類似的搜索査詢提供對應於該已經與 特定反饋數據相關聯的搜索查詢的經排列的文檔。
存儲在搜尋引擎的索引中的反饋數據可具有一生命期或折舊速率。例如， 在一實施例中，本發明可被配置為相比於舊的反饋數據更強調在更接近於從用 戶接收到搜索請求的時候的時刻所接收到的反饋數據。在另一實施例中，反饋 數據的折舊速率可根據該反饋數據所對應的文檔的爬尋(crawl)率而改變。例 如，如果例如文檔、網頁具有一高爬尋率，意味著在該網頁上發現的數據經常 被搜尋引擎索引(例如每小時)，則與那個網頁相關聯的反饋數據能夠以與該
網頁被索引相同的速率變陳舊和不重要。反饋數據的折舊度則可成為用於確定 如何鑑於反饋數據來排列一個或多個文檔的另一個特徵。然而，在另一實施例 中，具有一高爬尋率的文檔可被認為比具有更低爬尋率的其他文檔重要得多。 在這一實施例中，與具有高爬尋率的文檔相關聯的所接收到的任何類型的反饋 數據也可被認為是重要的並且能夠成為用於確定如何鑑於該反饋數據來排列 一個或多個文檔的另 一個特徵。
圖3示出了用於為一個或多個文檔提供反饋的方法的一實施例。在步驟
302，可將對應於用戶最初提交的搜索査詢的搜索結果的第一文檔列表呈現給 該用戶。在步驟304，該用戶可啟動發送與搜索結果中的一個或多個文檔相關 聯的反饋數據的響應。如前所述，可將用於輸入對於一個或多個文檔的反饋數 據的UI呈現給用戶。該用戶能夠以如以上詳述的結構化或未結構化的格式來 輸入該數據。可能有用於啟動發送反饋數據的響應的許多不同的方法。在一個 實施例中，用戶可點擊表示文檔的圖像、圖標、或連結以觸發UI呈現給該用 戶來輸入反饋數據。在另一實施例中，用戶可將其滑鼠光標懸停在能夠觸發 UI呈現給用戶以輸入反饋數據的圖像、圖標、或連結上。在又一實施例中， 當檢測到會觸發顯示UI的事件時，該UI能夠在可被定位於包含搜索結果的文 檔的窗口的側面的側窗格中顯示。
在一實施例中，在步驟306處搜尋引擎可接收反饋數據。在另一實施例中， 在步驟306處可提供一客戶端應用程式來接收反饋數據。在這兩個實施例中， 搜尋引擎和客戶端應用程式能夠立即基於所接收到的反饋數據來創建數據項。
數據項可以是包括一個或多個不同文檔或第一文檔列表的經重新排序的版本 的第二搜索結果列表。另外，數據項可以是能夠確認搜尋引擎或客戶端應用程 序接收到反饋數據的通告。當數據項是第二搜索結果列表時，在步驟308處客 戶端應用程式或搜尋引擎能夠在其從用戶接收到反饋數據時立即顯示該第二 列表。客戶端應用程式可包括能夠提供允許用戶對第一搜索結果列表中包括的 文檔進行重新排序或重新排列的常規手段的腳本語言。例如，用戶能夠點擊和 拖拽表示文檔的圖標、圖像、或連結到其他文檔的其他圖像、圖標、或連結上 方或下方，來創建根據相關度的升序或降序重新排序的文檔列表。 一旦用戶重 新排序或重新排列了文檔，客戶端應用程式能夠立即顯示第二搜索結果列表。
或者，搜尋引擎能夠接收反饋數據，完成如圖2中所討論的步驟204-208，並 且能夠鑑於所接收到的反饋數據來顯示第二搜索結果列表。
在一實施例中，客戶端應用程式能夠允許用戶在客戶機上存儲能夠與反饋 數據一起使用的偏好以允許搜尋引擎提供對應於該用戶的偏好和反饋數據的 搜索結果。例如，用戶能夠定製其機器來通知搜尋引擎他/她希望新聞內容、體 育內容、視頻內容、或圖像內容比任何其他類型的內容具有更高的排名。另外， 客戶端應用程式能夠向搜尋引擎通知能夠與反饋數據一起使用來提供相關搜 索結果的該用戶機器的特定物理特性。例如，客戶端應用程式能夠通知搜索引 擎該用戶的機器是一行動裝置。該搜尋引擎可能具有某些經索引的文檔，該文 檔是為行動裝置更好地格式化的並且該搜尋引擎能夠鑑於該用戶的反饋數據 將其作為搜索結果發送到該用戶。
雖然已在此詳細示出並描述了本發明的具體實施例，但應該理解，也可對 本發明做出各種改變和修改而不背離本發明的範圍和意圖。此處所描述的實施 例在所有方面都旨在說明性而非限制性的。沒有背離本發明範圍情況下的本發 明的各替換實施例對本領域技術人員將變得顯而易見。
從前述內容可知，本發明很好地適用於實現前述的所有目的和目標，並且 具有對於該系統和方式是顯而易見的和固有的其他優點。也可理解特定的特徵 和子組合是有用的並且可以加以利用而無需參考其他特徵和子組合。這是可預 期的並且是在所附權利要求的範圍中的。
權利要求
1.一種用於管理將被用來排列搜索結果的反饋數據的方法，所述方法包括從多個用戶匯集一個或多個反饋數據元素；將所述一個或多個反饋數據元素與一個或多個文檔相關聯；基於所述一個或多個反饋數據元素來排列所述一個或多個文檔；以及提供所述經排列的一個或多個文檔。
2. 如權利要求1所述的方法，其特徵在於，還包括將一搜索査詢與所述 一個或多個反饋數據元素以及所述一個或多個文檔相關聯。
3. 如權利要求1所述的方法，其特徵在於，所述一個或多個反饋數據元 素是以未結構化的格式接收的。
4. 如權利要求l所述的方法，其特徵在於，還包括接收搜索請求，其中， 在排列所述一個或多個文檔時，相比於較舊的反饋數據，更多地強調在更接近 於接收到所述搜索請求的時候的時刻所接收到的反饋數據。
5. 如權利要求4所述的方法，其特徵在於，還包括基於所述一個或多個 文檔被索引的頻率來強調所述反饋數據，其中，當所述反饋數據對應於比其他 文檔更頻繁地被索引的文檔時，所述反饋數據被更多地強調。
6. 如權利要求1所述的方法，其特徵在於，還包括通過標識所述反饋數 據中的一個或多個單詞的位置來排列所述文檔。
7. 如權利要求1所述的方法，其特徵在於，所述反饋數據被存儲在一倒 排索引中。
8. 如權利要求1所述的方法，其特徵在於，所述反饋數據不與搜索請求相關聯。
9. 如權利要求1所述的方法，其特徵在於，所述文檔是基於所述反饋數 據以及作出請求的設備的物理特性來排列的。
10. —種管理將被用來排列搜索結果的反饋數據的方法，所述方法包括 接收一個或多個反饋數據元素，所述一個或多個反饋數據元素是未結構化的格式；將所述一個或多個反饋數據元素與一個或多個文檔相關聯； 基於所述一個或多個反饋數據元素來排列所述一個或多個文檔；以及 提供所述經排列的一個或多個文檔。
11. 如權利要求10所述的方法，其特徵在於，還包括將一搜索查詢與所 述一個或多個反饋數據元素以及所述一個或多個文檔相關聯。
12. 如權利要求IO所述的方法，其特徵在於，還包括通過標識所述反饋 數據中的一個或多個單詞的位置來排列所述文檔。
13. 如權利要求10所述的方法，其特徵在於，所述反饋數據不與搜索請 求相關聯。
14. 一種用於管理將被用來排列搜索結果的反饋數據的方法，所述方法包括接收搜索査詢；基於所述搜索査詢以及至少一個反饋數據元素來排列多個文檔，所述反饋 數據與至少一個文檔相關聯；提供所述多個經排列的文檔。
15. 如權利要求14所述的方法，其特徵在於，所述一個或多個反饋數據元素是以結構化的格式接收的。
16. 如權利要求14所述的方法，其特徵在於，所述一個或多個反饋數據 元素是以未結構化的格式接收的。
17. 如權利要求14所述的方法，其特徵在於，所述反饋數據不與搜索請 求相關聯。
18. 如權利要求14所述的方法，其特徵在於，還包括通過標識所述反饋 數據中的一個或多個單詞的位置來排列所述文檔。
19. 如權利要求14所述的方法，其特徵在於，還包括提供關於所述至少 一個反饋數據元素的折舊速率。
20. 如權利要求19所述的方法，其特徵在於，所述折舊速率是根據所述 多個文檔中的至少一個的爬尋率而改變的。
全文摘要
本發明公開了用於管理將用來排列搜索結果的反饋數據的系統和方法。本發明能夠將來自多於一個用戶的多個用戶反饋數據匯集到搜索索引中。用戶反饋數據能夠與索引中的一個或多個文檔相關聯以使得該一個或多個文檔能夠基於所匯集的反饋數據的類型來排列。一旦文檔已被排列，就能夠向請求者提供該經排列的文檔。
文檔編號G06F17/30GK101375281SQ200780003872
公開日2009年2月25日 申請日期2007年1月10日 優先權日2006年1月31日
發明者H·J·威廉士, J·H·法拉歌, J·戴, N·J·梅內賽斯, R·納姆, S·薩特 申請人:微軟公司