亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

通過基于交互的認證的內容激活、系統(tǒng)和方法

文檔序號:6533645閱讀:878來源:國知局
通過基于交互的認證的內容激活、系統(tǒng)和方法
【專利摘要】呈現(xiàn)了多模態(tài)認證和內容分發(fā)的系統(tǒng)、方法和用例。內容消費者可以捕獲多個對象的多模態(tài)數(shù)字表示,其中從所述數(shù)字表示導出的特征的并列可用于識別至少一些對象是有效的認證對象。一旦認證,認證代理確定為與相應相關的內容的內容訪問級別為并列。該內容隨后可以根據內容訪問級別呈現(xiàn)在可能在安全虛擬機內的電子設備上。
【專利說明】通過基于交互的認證的內容激活、系統(tǒng)和方法
[0001] 本申請請求于2012年2月24日提交的具有序列號61/603049的美國臨時申請的 優(yōu)先權。 發(fā)明領域
[0002] 本發(fā)明的領域是內容分發(fā)技術。

【背景技術】
[0003] 下面的描述包括可有助于理解本發(fā)明的信息。并非承認任何本文所提供的信息是 現(xiàn)有技術或相關于當前要求保護的發(fā)明,或具體或隱含引用的任何出版物是現(xiàn)有技術。
[0004] 因為受到尋求滿足他們對內容的貪婪需求的內容消費者的驅動,在網絡上分布到 電子設備的內容量繼續(xù)以驚人速度增長。遺憾的是,內容消費者并不總是享受他們想要的 內容。此外,內容提供者往往缺乏以確保提供者權利受到保護的方式的內容分配的控制。內 容需求和內容權利之間的沖突導致消費者和提供者的無奈。所需要的是一種基礎設施,它 允許內容經常存在并僅允許內容將要分配給有效認證的個人。有趣的是,還可以理解:日常 對象或相對于彼此的對象可以受控方式用作激活內容的關鍵,其保護內容提供商的權利并 滿足消費者對立即滿足內容的需求。甚至進一步,尚未被理解的是,日常對象可以用來獲得 不同內容等級的訪問,這可引起更多的動態(tài)對象交互。
[0005] -些努力已指示聯(lián)結品牌與電視的社會形態(tài)。例如,第二屏幕網絡?(參見網址 WWW. secondscreen. com)允許當相應內容呈現(xiàn)在電視上時內容提供商發(fā)送廣告到用戶的第 二屏幕(例如,手機)。然而,這種方法沒有解決消費者在遠離電視的任何時間點對內容的 需求。進一步,第二屏幕的方法需要消費者選擇加入系統(tǒng),而不是提供訪問到目前存在內容 的普遍層。
[0006] 更多的努力已指向使用生物特征識別技術用于建立個人的身份作為認證系統(tǒng)的 一部分。例如,Murakami等于2010年09月3日提交的標題為"Biometric Authentication System"的歐洲專利申請說明書EP2348458描述了使用生物特征以基于生物認證來確 定用戶識別。此外,matsuyama等于2011年6月16日提交的標題為"Identification Device, Identification Method, and Storage Medium"的美國專利申請公開 2011/0311112 公開基于從人臉的圖像幀提取的特征數(shù)據識別個人。當在后續(xù)幀中的特定特征數(shù)據還沒 有被識別時,該特征數(shù)據與隨后幀的面部區(qū)域相關聯(lián)。又進一步,Wechsler等于2010年6 月 1 日提交的標題為 "Face Authentication Using Recognition-by-Parts, Boosting, an d Transduction"的其美國專利8194938描述了通過比較人臉的獲取圖像"補丁"與已知補 丁而驗證人臉,其中補丁可以通過SIFT或Gabor小波提取。有趣的是,每一種所公開的技 術需要生物特征的先驗認識,并且相對于不受限制的對象類不適合于使用。
[0007] 不過,也有可用的技術提供向著關于識別或認識不同類別對象的至少最小的 道路,不僅僅是識別生物特征的先驗已知類別。例如,Yokono于2002年5月24日提 交的標題為"Object Recognition Device, Object Recognition Method, and Robot Equipment"(en)的日本專利摘要JP4164737描述了一種機器人的學習系統(tǒng),其中機器人 通過將未知物體相對于成像裝置放置在預定位置而學習認識不明物體。此外,Matsugi等 于 2004 年 1 月 15 日提交的標題為 "Behavior Recognition Device and Method, Animal Object Recognition Device and Method, Equipment Control Device and Method, and Program"(en)的日本專利摘要JP2005202653論述了基于原始特征認識對象。該原語特征 可以在一段時間觀察,以產生輸出行為類別。
[0008] 基于圖像的識別包括于2001年9月5日提交的、標題為"Image Capture and Identification System and Process"的共同擁有的美國專利7016532;于2005年8月 15 日 提交的、標題為''Use of Image-Derived Information as Search Criteria for Internet and other Search Engines"的美國專利7680324 ;于2006年I月26日提交的、標題為 "Data Capture and Identification System and Process,'的美國專利7565008;和于2004 年 3 月 22 日提交的、標題為"Data Capture and Identification System and Process"的 美國專利7477780,所有都是Boncyk等提交的。Boncyk描述了從對象的圖像數(shù)據計算基本 參數(shù),然后使用該參數(shù)以在數(shù)據庫中查找已知物體的圖像。
[0009] 上述參考文獻至少在一定程度上允許用于識別或認識對象,但未能解決基于不同 形式的數(shù)據采集根據不同的訪問級別認證用戶或授權訪問內容。
[0010] 其它工作已指向使用不同的數(shù)據采集技術以驗證用戶身份。例如,Avni等于2001 年 12 月 4 日提交的、標題為 "System for and Method of Web Signature Recognition System Based on Object Map"的美國專利6687390公開了基于用戶在電腦上如何按下指 示設備以在背景圖片圖像上操縱光標而驗證用戶的身份。
[0011] 更進一步的工作已經指向驗證物理對象非偽造。Kaish等于1998年7月6日提交 的、標題為 "System and Method for Authentication of Goods" 的美國專利 5974150 描 述了使用以不規(guī)則圖案置于介質(例如,紙張)的多個元素(例如,歷時纖維)的位置以認 證產品為真實的而不是偽造的。與Kaish類似,F(xiàn)raser于2009年4月21日提交的、標題 為"Authentication Method and System"的美國專利7995196也試圖提供基于基片上一 組元素(例如,纖維)的物理分散模式認證對象的技術。Gerigk等于2010年11月19日提 交的、標題為"Method and Device for Identifying and Authenticating Objects,'的美 國專利8245922也介紹了驗證對象。Gerigk描述使用代碼區(qū)域中的代碼編碼對象,該區(qū)域 散射電磁輻射。雖然這些文獻提供關于認證本身的實用性,他們不理解內容可以具有不同 的訪問級別。
[0012] 提供對內容訪問的技術的一個示例包括Loghmani等于2002年10月29日提交的、 標題為"Multi-Modal Voice-Enable Content Access and Delivery System"的美國專利 7283973,L〇ghmani描述了使用語音識別或DTMF音調,以允許用戶通過電話訪問內容。對批 準授權訪問內容的進一步進展描述在de Jong于2003年10月15日提交的、標題為"Rights Locker for Digital Content Access Control"的美國專利 7380280 中。de Jong 建議使 用令牌管理系統(tǒng)方法以限制對內容的訪問。甚至進一步,John等于2007年6月4日提交 的、標題為"Method and Apparatus to Control Access to Content"的美國專利7953079 介紹了基于內容訪問策略提供對內容的訪問,其中內容通過類型分類,可能通過使用語音 識別、文字識別或圖像處理工具。更進一步地,Roberts等于2009年6月30日提交的、標題 為"Methods and Systems for Controlling Presentation of Media Content Based on User Interaction"的美國專利申請討論了監(jiān)控用戶以確定他們主動或被動地與媒體內容 互動。內容基于交互配置文件被呈現(xiàn)給用戶。
[0013] 以上公開的引用文件沒有通過允許用戶利用對象作為授權密鑰以提供更高的 安全性。然而,F(xiàn)ondeur等于2011年11月29日提交的、標題為"Method for Enabling Authentication of Identification, and Related Verification Systems,'白勺國際串i青摘要 W02012/085378描述了獲取由個人秘密選擇的對象的圖像,其中對象的圖像用于注冊在系 統(tǒng)中注冊該個人。Fonduer僅僅考慮了使用對象的圖像進行用戶注冊,并沒提供用于使用不 同的模式進行授權。盡管如此,Brown于2009年12月28日提交的、標題為"Virtualization of Authentication Token for Secure Applications" 的美國專利申請 2011/0161232 進 行了進一步的進展。Brown討論了收集物理鑰匙(例如,汽車鑰匙、房子鑰匙等)或其他物 理令牌的圖像,作為"你有什么"的驗證類型的一部分。Brown描述物理令牌的圖像可以與聲 紋("你是什么"的認證因素)結合,以創(chuàng)建更強大的多因素驗證協(xié)議合。不幸的是,Brown 系統(tǒng)只是簡單地介紹了使用多個鑰匙,而不考慮相關安排。
[0014] 所有的出版物在此通過引用結合到相同的程度,就如同每個單獨的出版物或專利 申請被具體地和單獨地通過引用并入本文。凡引用文獻中定義或使用的術語不一致于或違 反本文所提供的術語的定義,本文提供的術語的定義適用,以及引用文獻中該術語的定義 并不適用。
[0015] 在一些實施例中,用于描述和請求本發(fā)明的某些實施例的表達成分量的數(shù)字,諸 如濃度、反應條件等的屬性都應當理解為在一些實例中由詞語"關于"進行修改。因此,在 一些實施例中,列在所撰寫的說明書和所附的權利要求中的數(shù)值參數(shù)是近似值,其可以根 據所需性能而有所變化以由特定實施例獲得的。在一些實施例中,數(shù)字參數(shù)應理解為根據 所報道的顯著數(shù)字并且通過應用普通的舍入技術。盡管提出本發(fā)明的一些實施例的寬范圍 的數(shù)值范圍和參數(shù)設置是近似值,在特定示例中提出的數(shù)值盡可能精確地可行。在本發(fā)明 的一些實施例中提出的數(shù)值可以包含一定的誤差,由它們各自的測試測量中發(fā)現(xiàn)的標準偏 差廣生。
[0016] 如在本文的描述中以及隨后的權利要求中,"一"、"一個"和"該"包括復數(shù)參考,除 非上下文另有明確說明。此外,如在本文的描述中使用的,"中"的含義包括"中"和"上", 除非上下文另有明確說明。
[0017] 在本文中值的范圍的引用僅旨在用作單獨提及落在該范圍內的每個單獨的值的 速記方法述。除非本文另有說明,每個單獨的值被結合到說明書中,就好像它在本文中單獨 列舉一樣。本文中所描述的所有方法可以以任何合適的順序進行,除非在此另有說明或以 其它方式與上下文明顯矛盾。任何和所有實例的使用或相對于某些實施例提供的示例性語 言(例如,"諸如")僅僅是為了更好地說明本發(fā)明,并不構成限制本發(fā)明的范圍。在說明書 中語言不應該被解釋為指示本發(fā)明實踐所必需的任何未要求的元件。
[0018] 本發(fā)明的替代元件或實施例的分組不應當被解釋為限制。每組組件可被稱為并請 求單獨地或與該組的其他元件或這里發(fā)現(xiàn)的其他元件的任何組合。組中的一個或多個元件 可包括在分組中或從分組中刪除,為了方便和/或可專利性的理由。當任何該類包括或刪 除發(fā)生時,本說明書在本文中被認為含有修改的分組,從而實現(xiàn)在所附權利要求書中使用 的所有馬庫什組的書面描述。
[0019] 更理想的系統(tǒng)將提供認證或授權訪問實體以基于彼此相對的對象的并列,而不是 僅僅存在對象作為安全令牌而訪問不同級別的內容。在 申請人:的工作中如下所述,該方法 通過提供合理的可拒絕性、細粒度訪問或控制或其他訪問級別特征并同時允許內容提供商 保持對它們的內容的控制是有利的。
[0020] 因此,仍然需要內容激活和驗證的系統(tǒng)和方法
[0021] 發(fā)明概述
[0022] 本發(fā)明的主題提供了一種裝置、系統(tǒng)和方法,其中我們可以基于認識到在環(huán)境或 場景中的實際對象可以被認為是相關于獲得對內容訪問的認證驗證對象而激活內容。創(chuàng) 造性主題的一個方面包括激活內容的方法。電子設備可以訪問能準許訪問內容的認證代 理。在一些實施例中,所述電子裝置獲得與識別引擎(可操作作為認證代理)的至少一個 物理對象的交互(例如,對話框、成像、工作、播放、感測、監(jiān)測等)的數(shù)字表示,可能是多模 態(tài)的表示。該方法進一步可以包括基于數(shù)字表示區(qū)分環(huán)境中的至少兩個對象為有效認證對 象,其中有效驗證對象可以區(qū)分與那些與認證不相關的其他對象。該方法可以進一步包括: 推導涉及有效認證對象的認證特征集合,其中認證特征可以從物理對象的數(shù)字表示進行確 定。示例認證特征可以包括從圖像或音頻數(shù)據計算的哈希編碼、尺度不變特征變換(SIFT) 特征、音頻簽名、地點、時間,或與數(shù)字表示相關的其他方面。該方法的另一個步驟包括:可 能由認證代理建立內容訪問級別作為在交互空間中相對于彼此驗證特征集的并列的函數(shù), 其中并列的屬性可用作內容或訪問級別數(shù)據庫的索引。認證代理隨后能通過配置電子設備 以根據內容訪問級別呈現(xiàn)或提交內容,而激活與物理對象相關聯(lián)的內容。
[0023] 本發(fā)明主題的另一個方面包括一種內容分發(fā)系統(tǒng),該系統(tǒng)包括認證對象數(shù)據庫、 識別平臺以及認證代理。優(yōu)選地,認證對象數(shù)據庫存儲多個認證元素,其中每個元素可以表 示真實的或虛擬的對象,該對象可由個人用作認證密鑰。例如,個人可以注冊家庭植物作為 自己的認證元素。每個認證元件優(yōu)選地包括被認為是有效特征的一個或多個認證特征,元 素通過該特征可用于認證;例如動作人物玩具前與動作人物玩具后。識別平臺取得或以其 他方式獲取具有一個或多個對象的場景的數(shù)字表示。平臺分析該數(shù)字表示以通過一個或多 個對象特性的推導來識別對象。該平臺進一步被配置為基于對象特征和元素的認證特征的 比較而識別場景中的至少一個對象作為和用戶相關的認證元素。認證代理可以使用存在于 場景中的認證特征以獲得內容訪問級別,其可用于授權可在電子設備上呈現(xiàn)的內容。
[0024] 然而,本發(fā)明主題的另一個方面包括用于獲得產品信息的方法。該方法可包括:提 供訪問識別服務器,可運行作為搜索引擎、在線零售商或其他服務。識別服務器可以從視頻 流捕獲視頻幀。例如,個人可以捕獲電視節(jié)目、商業(yè)或電影的靜止圖像,其中靜止圖像表示 所捕獲的視頻幀。識別服務器可以進一步被配置以基于特征導出與幀相關聯(lián)的特征,并標 識從其獲取幀的至少一個發(fā)起視頻流。一旦視頻流已經被標識,則該方法可以進一步包括: 從產品數(shù)據庫中獲得與所標識的視頻流相關的產品信息。該產品信息可以呈現(xiàn)在電子設備 上。
[0025] 從優(yōu)選實施例的以下詳細描述連同附圖,本發(fā)明的主題的各種目的、特征、方面和 優(yōu)點將變得更加明顯進行,其中相同的數(shù)字表示相同的部件。
[0026] 附圖簡述
[0027] 圖1是多模式的跨媒體認證和內容分發(fā)生態(tài)系統(tǒng)的示意圖。
[0028] 圖2是在環(huán)境中區(qū)分認證對象與其它對象的識別平臺的示意圖。
[0029] 圖3是分析對象的數(shù)字表示以推導認證特征集合的圖示。
[0030] 圖4是交互空間中認證特征集合的并列的示例。
[0031] 圖5是認證特征集合的并列確定內容訪問級別的圖示。
[0032] 圖6是用于活動內容的方法的示意圖。
[0033] 發(fā)明詳述
[0034] 應當指出,雖然以下的描述被繪制為基于計算機/服務器的認證或內容分發(fā)系 統(tǒng),各種替代結構也被認為是合適的,并且可以采用各種計算設備,包括服務器、接口系統(tǒng)、 數(shù)據庫、代理對等體、引擎、控制器或其他類型的單獨或共同操作的計算設備。應該理解, 計算設備包括被配置為執(zhí)行存儲在有形的非臨時性計算機可讀存儲介質(例如,硬盤驅動 器、固態(tài)驅動器、RAM、閃存、ROM等)上的軟件指令的處理器。所述軟件指令優(yōu)選地配置計 算設備以提供角色、責任或其它如下所討論的相對于所公開的裝置的功能。在特別優(yōu)選的 實施例中,各種服務器、系統(tǒng)、數(shù)據庫、或接口使用標準化協(xié)議或算法交換數(shù)據,可能根據 HTTP、HTTPS、AES、公-私密鑰交換、網絡服務API、已知的金融交易協(xié)議,或其他的電子信息 交換方法。數(shù)據交換優(yōu)選地通過分組交換網絡、因特網、局域網、廣域網、虛擬專用網或其它 類型的分組交換網絡進行。
[0035] 應當理解,所公開的技術提供了許多有益的技術效果,包括向電子設備生成一個 或多個內容激活信號。激活信號配置該電子設備以使得呈現(xiàn)激活內容。例如,電子設備通 過網絡接收到激活信號,以及作為響應,電子設備啟動虛擬機,該虛擬機被授權以根據內容 訪問級別來呈現(xiàn)內容給用戶。
[0036] 下面的討論提供了本發(fā)明主題的許多示例性實施例。雖然每個實施例表示本發(fā)明 的元件的單個結合,本發(fā)明的主題被認為包括所公開的元件的所有可能組合。因此,如果一 個實施例中包括元件A、B和C,以及第二實施例包括元件B和D,則本發(fā)明的主題也被認為 是包括A、B、C、D的其它剩余組合,即使沒有明確地披露。
[0037] 如本文所用,除非上下文另有規(guī)定,術語"耦合到"意在包括直接耦合(其中,互 相耦合的兩個元件彼此相互接觸)和間接連接(其中,至少一個其他元件位于兩個元件之 間)。因此,術語"耦合到"和"耦合于"被同義地使用。在本文檔中論述的網絡環(huán)境中,術 語"耦合到"和"耦合于"也可以指"通信地耦合"。
[0038] 概述
[0039] 圖1示出了認證和內容分發(fā)生態(tài)系統(tǒng)。在所示的示例中,內容是基于認證用戶或 設備作為與場景100的多模態(tài)105的函數(shù)被激活。在一些實施例中,多模態(tài)交互105包括從 電子設備110 (例如,蜂窩電話、汽車等)獲取一個或多個真實世界對象120A或120B,如圖 所示,其中電子設備110還可以用作輸出設備。示例電子設備包括手機、平板電腦、電腦、游 戲機、汽車、信息亭、自動販賣機、機器人、電子設備、醫(yī)療設備、安全系統(tǒng)或其它設備。應該 理解,多模態(tài)交互105可以覆蓋交互和多模態(tài)數(shù)據的廣泛范圍。與環(huán)境交互的示例可包括 做運動、散步、逛街、采購、成像、收集環(huán)境數(shù)據、監(jiān)測、聽、玩、工作或其他類型的交互。交互 數(shù)據可以從獲取不同模態(tài)數(shù)據的一個或多個傳感器獲得。示例模態(tài)包括視頻數(shù)據、音頻數(shù) 據、動覺數(shù)據、位置數(shù)據、時間數(shù)據、壓力數(shù)據、溫度數(shù)據、消息數(shù)據或其他類型的數(shù)據。與環(huán) 境相關聯(lián)的傳感器數(shù)據可通過電子設備中的傳感器110、例如蜂窩電話(例如,加速度計、 磁強計、羅盤、麥克風、GPS、無線電等),或通過在其它不同的或遠程設備(例如,安全攝像 機、新聞來源等)中的傳感器獲得。
[0040] 下面的討論描述了相對于電子設備110、示例蜂窩電話、在物理環(huán)境中拍攝圖像數(shù) 據作為一個或多個物理對象120A至120B的數(shù)字表示141的本發(fā)明的主題。應該理解,下面 所公開的技術可以很容易地適應于數(shù)據的其它模態(tài),包括聲音、動畫、生物數(shù)據、位置數(shù)據, 或可通過傳感器捕獲或以其他方式從數(shù)據源獲得的其他數(shù)據。此外,所提出的示例側重于 真實世界的物理對象120A和120B。然而,認證對象也可以包括在計算系統(tǒng)上提交的虛擬對 象、在示例的在線游戲世界中的虛擬對象、增強現(xiàn)實物體或其他類型的虛擬對象。
[0041] 在所示的示例中,電子設備110捕獲數(shù)字表示141作為反映與場景100的交互105 的圖像,包括植物(即,對象120A)以及表示為駕照的文件(S卩,對象120B)。植物和駕照 表示可用來作為密鑰以解鎖內容193或獲得訪問控制內容193的示例真實世界對象。交互 105可以僅包括捕獲的圖像,以及更復雜的交互。示例交互105可包括園藝、參加在牙醫(yī)的 辦公室預約、在家裝店購物或其他類型的多模態(tài)交互。與在交互數(shù)據庫(未示出)中或通 過交互的用戶選擇類型的已知交互相比,每個交互105可以通過傳感器數(shù)據簽名確定。
[0042] 電子設備110獲得圖像或其他數(shù)字表示141,并當必要時可以處理該數(shù)據。應該認 識到,數(shù)字表示141可以包括原始傳感器數(shù)據、經處理的傳感器數(shù)據(例如,圖像文件)、經 分析的傳感器數(shù)據(例如,減小的數(shù)據集),或從所述數(shù)字表示141派生的其他信息。數(shù)字 表示141可以然后呈現(xiàn)給識別平臺140,該識別平臺140被配置成接收或以其它方式獲得數(shù) 字表示141。數(shù)字表示可使用公知協(xié)議(例如,!1111\?1?、551^、55!1等),或其他專有協(xié)議通 過網絡(例如,廣域網、局域網、因特網、蜂窩網絡等)被發(fā)送到識別平臺141。在一些實施 例中,電子設備110包括識別平臺141。另外,應當理解,所公開系統(tǒng)的每個元件具有可分布 在整個生態(tài)系統(tǒng)的角色或職責。例如,認證代理180可以設置在電子設備110中或操作為 提供認證服務用于收費的刪除服務器。另外,單一元件的角色和職責可以分布在生態(tài)系統(tǒng) 中的多個設備。例如,內容數(shù)據庫195可以具有設置在電子設備110、識別平臺140、甚至在 遠程第三方服務(如搜索引擎,購物網站等)中的部分。
[0043] 識別平臺140接收數(shù)字表示141,并試圖識別如數(shù)字表示141表示的場景或環(huán)境 100中的對象120A或120B ;例如植物和駕照。識別平臺140可以分析數(shù)字表示141以提取 涉及對象120A或120B的一個或多個特征160。在一些實施例中,特征160可以包括與對象 120A或120B相關聯(lián)的對象的屬性。還可以設想,該特征160可以包括來自于數(shù)字表示141 的數(shù)據派生的屬性。關于圖像,特征160可以包括尺度不變特征變換(SIFT)、二元魯棒不 變伸縮關鍵點(BRISK)、加速魯棒特征(SURF),或從圖像數(shù)據導出的其它類型的特征。在一 些實施例中,特征160可以包括從圖像的至少一部分、或數(shù)字表示141的一部分、甚至從其 他模態(tài)計算的哈希值。可接受的哈??梢园ǜ兄?,其中感知哈希值對于相似內容是 類似的(參見,網址WWW. phash. org)。示例感知哈希包括固定長度的MH圖像的哈希值、離 散余弦變換(DCT)可變長度的視頻散列、離散余弦變換圖像的哈希值、放射圖像的哈希值、 基于直方圖的圖像的哈希值、或樹皮音頻哈希值。特征160還可以包括通過自動語音識別 (ASR)、生物特征值(例如,呼吸、心率、血壓、五官等)、位置信息(例如,GPS、三角測量、慣 性運動、不產-GPS銥數(shù)據等),或由許多模態(tài)衍生的其他屬性。
[0044] 特征160還可以依賴于如數(shù)字表示中表示的交互數(shù)據的模態(tài)。其他的示例對象 特征160可包括涉及時間、地點、新聞事件、天氣狀況、溫度、壓力、生物簽名、語音或音頻信 號,或其它類型模態(tài)的信息。無論對象特征160的類型或對象特征160如何產生的,識別 平臺140可以使用該對象特征160,以確定現(xiàn)實世界對象120A或120B的特性。在一些實 施例中,識別平臺通過基于對象特征搜索對象數(shù)據庫而識別對象120A和120B。用于識別 對象的合適技術在共同擁有的美國專利7016532 ;7477780 ;7680324 ;7403652 ;7565008 ; 7899243 ;7881529 ;7899252 ;和同一系列中的其他中討論。
[0045] 識別平臺140可提供物體特征160至認證代理180。認證代理180可以使用對象 特征160或其他對象信息,以通過鑒別對象與由數(shù)字表示141表示的場景中的其他確定現(xiàn) 實世界對象120A或120B是確實有效的認證對象。對象特征160或其他信息可用于構建查 詢以在認證對象數(shù)據庫150中搜索被認為是有效的認證對象的對象。認證代理180可以使 用查詢,以獲得具有滿足查詢的對象特征的已知認證對象的結果集合。因此,該數(shù)據庫查詢 可用來在數(shù)字表示141中表示的對象之間鑒別以確定它們是否是有效的認證對象。在所示 的示例中,該植物或駕照(或兩者)可以由認證代理180驗證為相對于交互105的一個或多 個屬性的實際有效的驗證對象。例如,當從用戶的帳戶信息確定,植物和駕照可只對于特定 用戶是有效的,注冊認證對象,如從設備標識符確定的用戶的特定電子設備,在當前的GPS 坐標或位置數(shù)據,或用于在指定的時間周期。所有這些因素以及更多可提請承擔以確定現(xiàn) 實世界對象120A或120B是否的確是激活內容的有效驗證對象。如前面所提到的,虛擬物 體也可以通過類似技術表示有效的認證對象。
[0046] 有效的認證對象可以包括各種各樣的對象。示例2D對象可以包括印刷媒體(例 如,駕照、護照、簽名、支票、文件、海報、廣告牌、照片、渲染圖像、書籍、報紙、雜志等)、陰影、 在顯示屏幕上呈現(xiàn)的圖像(例如,計算機顯示器、電視、游戲系統(tǒng)、電子廣告牌、電影屏幕、 售貨亭、自動售貨機、醫(yī)療顯示畫面等)、所呈現(xiàn)的虛擬對象、信用卡或其它大致平坦的物 體??捎米饔行дJ證對象的示例3D對象可以包括個人、臉、動物、衣服、車輛、建筑物、玩具、 植物、計算設備、建筑、食品、雕像、印刷模型、機器人,工具或具有實質性寬度、深度或長度 的其他對象。又進一步,有效的認證對象也可以包括時間方面。隨著時間變化的示例對象 包括口頭語言、視頻、音樂、手勢、設備的鉸接移動(例如,玩具、機器人等),或者隨時間變 化的其他對象。
[0047] 一旦認證代理180確定兩個或多個物理對象120A或120B對應于有效認證對象, 認證代理180可基于特征160的并列、認證特征、或可用的其他信息確定一個或多個內容訪 問級別183。訪問級別183確定內容193對于當前交互105將被激活的程度、對內容的控 制程度,或可能與環(huán)境100中內容193交互的可能的進一步交互的程度。訪問級別183可 以基于查找表推導或基于特征160如何匹配映射到內容訪問級別183的突出認證特征進行 計算。例如,如果駕照在植物的前方,則內容193的全套可以被激活。如果駕照在植物的背 面,則最小的內容193可以被激活。該方法允許內容發(fā)行商確定如何或在何種程度上他們 的內容193可以是分布的。另外,相對于對象120B的對象120A的放置可以控制內容193如 何被訪問。繼續(xù)前面的示例,當駕照進一步移動到植物的前面,使得駕照對著圖像的較大部 分,內容193可以被指示以快進。如果駕照被移到植物的背后,內容193可以指示以后退。 在這種情況下,對象120A和對象120B之間的交互空間中的派生距離可用來控制播放速度。
[0048] 內容訪問級別183或涉及訪問級別183的信息可以提供給內容服務器190,該內 容服務器190在內容數(shù)據庫195中存儲內容的一個或多個部分。訪問級別信息通知內容服 務器190哪些內容193或內容193的內容呈現(xiàn)給電子設備110或其它輸出設備的用戶。因 此,所識別的內容193被激活以供用戶消費。輸出設備可包括電子設備110、設備、打印機、 機器人、機器、車輛或能夠呈現(xiàn)內容的設備類型。
[0049] 在一些實施例中,內容服務器190可以發(fā)送信號或指令到電子設備110或其他輸 出設備,以實例化虛擬機112。在所示的示例中,虛擬機112被華麗地表示為輸出設備(即, 電子設備110)外部的框。然而,本領域的技術人員將認識到,虛擬機112在電子設備110的 存儲器或者處理器內被實例化。虛擬機112根據由訪問級別183確定的一個或多個規(guī)則,可 保持在內容服務器190、認證代理180或內容提供者的控制下。內容服務器190可以然后指 示虛擬機112在輸出電子設備110上呈現(xiàn)內容193。通過確保內容服務器190或基礎設施 的其他元件控制虛擬機112或它的功能,內容供應商的權利受到保護,同時還允許通過識 別有效的認證對象,內容消費者按需獲取內容193。實例化虛擬機112和控制內容呈現(xiàn)的適 當技術在Wise于2002年6月10日提交的標題為"Remote Virtual Medical Diagnostic Imaging Viewer"的美國專利7181617中描述;Wise于2007年I月19日提交的、標題為 "Remote Data Viewer"的美國專利7685417 ;Wise于2008年4月16日提交的標題為"File Access Management System"的美國專利申請;和Wise于2010年3月12日提交的標題為 "Remote Data Viewer"的美國專利申請公開2010/0169642中描述。
[0050] 本發(fā)明的主題被認為包括實例化或啟動虛擬機112具有從認證對象特征確定的 屬性160。該特征可以決定消費者訪問呈現(xiàn)或提交內容193。例如,現(xiàn)實世界對象相對彼此 的并列可使得虛擬機112以使得內容消費者時移內容(例如,快進、快退、暫停等)的形式 被實例化。
[0051] 圖2提供了在環(huán)境200中認證對象220和非認證對象230之間鑒別的更詳細的概 述。個人利用設備210以與環(huán)境200交互,其可以包括多個對象。在該環(huán)境中的對象可以 包括一個或多個認證對象220或非認證對象230。設備210獲得數(shù)字表示241,包括數(shù)據、 可能的多模式數(shù)據,它表示環(huán)境中的各個方面200。設備210通過通信鏈路215發(fā)送數(shù)字表 示241到識別平臺240。當識別平臺240是設備210的遠端時,通信鏈路215可以包括網絡 (例如,無線、有線、因特網、PAN、虛擬專用網、廣域網等),或者如果識別平臺240被設置在 設備210中時,通信鏈路215可包括內部連接(例如,總線、共享存儲器、寄存器、API等)。 應該注意,識別平臺240可以耦合認證代理、內容服務器、設備210、遠程服務或其他計算平 臺。為了目前的討論,識別平臺240應被視為包括認證代理。
[0052] 識別平臺240向數(shù)字表示241應用一個或多個分析技術,以從數(shù)字表示241生成 特征243。在一些實施例中,特征243可以被認為是數(shù)字表示241本身的特性,而不是環(huán)境 200的特征。例如,圖像數(shù)據可以被分析以生成圖像特征,可能包括描述符(例如,色彩平 衡、直方圖、小波、SIFT特征、快走關鍵點、SURF描述符、ORB描述符等)、移動從運動數(shù)據中 導出(例如,vSLAM、GPS等)的描述符、音頻參數(shù)(例如,幅度、相位、頻率等),或其它類型 的特征243。這些特征可然后通過鑒別器247用于鑒別認證對象220與非認證對象230。
[0053] 在一些實施例中,鑒別器247可以操作為接收查詢并提交查詢到已知對象數(shù)據庫 250的搜索引擎。響應于該查詢,已知對象數(shù)據庫250返回涉及具有滿足查詢的屬性的認 證對象的認證信息的結果集。已知對象數(shù)據庫250可以被配置為存儲按照特征243附著的 常見命名空間可索引的認證對象信息。常見命名空間可以被認為是以描述可能的交互空間 的方式定義的架構。交互空間可以被認為是多維空間,其中每個維度表示傳感器數(shù)據的一 種可能形式或方式。交互空間可以根據位置信息(例如,坐標;X、Y或Z ;經度,緯度;等)、 時間信息、方向信息、生物信息,或其他交互空間信息來定義。因此,認證對象信息可以基于 SIFT特征或特征群集、音頻簽名、傳感器簽名、位置或位置坐標、方向特征、生物簽名、用戶 簡檔信息或者在交互空間內的其它方面進行存儲或進行檢索。
[0054] 鑒別器247從已知對象數(shù)據庫250接收結果集,并通過咨詢返回認證對象信息而 在環(huán)境200中的對象之間鑒別。鑒別器247比較特征243或提供給系統(tǒng)或通過數(shù)字表示 241的其他信息,與結果集中的認證對象信息,以識別任何已知對象。如果已知對象被發(fā)現(xiàn) 并被認為是相對于交互的有效認證對象249,則識別平臺240相對于每個有效的認證對象 249導出一組或多組認證特征260。
[0055] 作個更具體的示例,考慮這樣一種情形,其中設備210捕獲環(huán)境200的圖像,如在 圖2中所示包括多個對象。數(shù)字表示241將可能包括圖像數(shù)據,以及其他模態(tài)。然而,對于 為了討論的方便,本實施例將集中于所述圖像數(shù)據。識別平臺240可以分析圖像數(shù)據,并產 生涉及圖像數(shù)據的多個SIFT或BRISK圖像描述符。該描述符可以然后被傳遞到鑒別器247, 其依次產生查詢作為圖像描述符的函數(shù),并且提交該查詢到已知對象數(shù)據庫250。查詢可包 括實際圖像描述符連同其它信息。已知對象數(shù)據庫250可返回涉及被認為具有相似的圖像 描述符的先驗已知成像對象的一組已知對象信息,至少在查詢所要求的置信水平內。例如, 已知對象數(shù)據庫250可以返回涉及剛認證對象220的信息或或可返回超出認證對象220的 其他對象的信息;例如非認證對象230。應該認識到,如果對象是已知的或用已知的對象數(shù) 據庫250中注冊,該方法可以用于基本上識別在環(huán)境200中的任何對象。該方法是有利的, 因為它允許利用現(xiàn)有的或第三方對象數(shù)據庫,而不是具有專有數(shù)據庫。示例第三方對象數(shù) 據庫包括G〇Ogle?G〇ggles?、in8? Mobile 的 ID (請參閱網址 WWW. in8. com/#big_ID)、 亞馬遜或其他第三方對象數(shù)據庫。
[0056] 繼續(xù)該示例,鑒別器247查詢返回的對象信息并根據該圖像數(shù)據鑒別哪些對象是 確實有效的認證對象290。例如,如果環(huán)境200中的所有對象都表示在結果集,有關認證對 象的信息220可以標記元數(shù)據或其它類型的數(shù)據,指示它們實際上是有效的認證對象249。 應該認識到,有效的認證對象249包括認證對象220、認證對象220的部分、或圖像數(shù)據以外 的其它對象;例如從語音識別個人。
[0057] 無論對象如何被鑒別,繼續(xù)本示例,識別平臺240從特征243和有效認證對象240 導出一個或多個認證特征集260。相對于圖像數(shù)據和呈現(xiàn)的示例,認證特征集260可以包括 對應于植物的第一認證特征集和對應駕照(例如,文檔)的第二認證特征集。
[0058] 圖3示出可產生認證特征集合360的可能分析的子集。在該示例中,認證特征集 合360包括對應于植物對象349A的集合360A、對應于文件對象349B的集合360B、以及對 應于音頻對象349的集合360C。每個對象349A至349C可以經由數(shù)字表示341內的一個或 多個數(shù)據模式表示。例如,數(shù)字表示341可以包括表示對象349A和349B的圖像數(shù)據(例 如,JPG、PNG、BMP、靜止圖像、視頻等)。另外,數(shù)字表示341可以包括表示與環(huán)境相關聯(lián)的 聲音音頻數(shù)據(例如,WAV、MP3、錄音等等)。
[0059] 數(shù)字表示341中數(shù)據的的每個模式可根據與模式相關聯(lián)的一個或多個分析技術 343進行分析。圖像數(shù)據可以通過可包括以下中的一個或多個技術進行分析:過篩、活躍、 沖浪、踩住、vSLAM、小波、光學字符識別(OCR)或其他技術以產生特征集合360A或360A。應 該認識到,特征集合360A或360B可包括原衍生特征(例如,在圖像數(shù)據或在交互空間中特 定位置的描述符),或間接的或推斷的特征。間接的或推斷的特征可以包括從應用OCR到圖 像數(shù)據獲取的文本、或基于對象查詢的元數(shù)據或標簽。例如,特征集360A可以包括命名類 型、屬或植物對象349A的物種的標簽,即使該信息以文本形式不存在于在圖像數(shù)據中。進 一步,特征集合360C可只包括詞語,如作為通過自動語音識別(ASR)技術重建和相對于時 間所記錄。每個認證特征集合360如所示具有許多特征。應該認識到,認證特征集合360 根據用于生成特征的技術可包括一、三、七、十或更多的特征。例如,基于圖像的特征集可包 括比一百多甚至比一千多的特征。雖然認證特征集合可包括符號數(shù)據(例如,文字、字母、 數(shù)字、條形碼、QR碼、矩陣碼、彩碼、等等),可以預期特征集合可缺少從與有效認證對象相 關聯(lián)的符號標記導出的信息。例如,特征集合可缺少與有效認證對象相關聯(lián)并同時仍然用 于激活內容的任何條形碼數(shù)據。
[0060] 認證特征集合360表示為圖3中不同并單獨管理的對象360。每個集合360可以 單獨用于以識別或認證各個對象349A至349C。另外,集合360可組合成集體令牌或密鑰以 識別或認證用戶或請求交互。仍進一步如本文所公開,該集合360相對于彼此在交互空間 中的并列產生了能激活內容的豐富的認證、授權、命令、控制或管理系統(tǒng)。
[0061] 圖4示出了從多個認證特征集合460A、460B和460C(統(tǒng)稱為認證特征集合460) 得出并列對象470。如前所述,認證特征集合460存在于交互空間400中。交互空間400圖 示為物理空間(即X,Y軸),并為了討論具有時間分量(即,T軸)。應該認識到,交互空間 460可具有其它尺寸,可包括衍生的意圖、語境、人口統(tǒng)計或涉及交互的其他方面。在交互空 間400中的每個點可以由向量或η元組來表示。
[0062] 每個認證特征集合460可以被認為存在于交互空間中。例如,集合460Α可以表示 從成像植物對象得到的一個或多個SIFT (參見圖3,集合360Α),其中每個特征對應于物理 空間-時間中的相對位置,如圖所示。SIFT特征的位置可以通過字段計算的深度確定,可能 基于McKinnon 在 2012 年 6 月 7 日提交的標題為"Depth Estimate Determination, Systems and Methods"的美國專利申請2012/0163672中公開的技術。當運動數(shù)據是可用時,位置的 特征也可以從使用vSLAM衍生。再進一步,相對于時間的位置可以基于數(shù)字表示中的時間 標記來確定、根據觀測的時間標記、或甚至當數(shù)據到達時。交互操作空間原點可以從捕獲設 備的位置數(shù)據(例如,GPS、慣性運動等)、從拍攝設備相對于背景的位置或方向,或其它基 于位置的信息來確定。因此,每個特征集合460A、460B或460C存在為互動空間400中的點 或位置。
[0063] 特征集合460中的特征集群可以通過相對于認證對象識別該簇被視為分組。集 群在交互空間中可以經由一個或多個群集技術被發(fā)現(xiàn)或得到。例如,可以通過使用K均值 (即,質心聚類)、EM聚類(S卩,分布聚類)、DBSCAN( S卩,密度聚類)、CLIQUE或SUBCLU(即, 在高維數(shù)據空間中的子空間聚類)或其他類型的聚類技術發(fā)現(xiàn)特征集合460A。因此,每個 集群可以被識別為與一個有效的認證對象相關聯(lián)。此外,該集群可以在空間上具有范圍; "質量"的中心、心、中心、數(shù)量、寬度、范圍、密度、長度、寬度、延長或者其他屬性。這些特性 可以然后用于確定并列屬性,并當確定內容訪問級別時被認為是有利的。
[0064] 特征集合460之間的并列可以根據交互空間400的各個方面或屬性確定。在所示 示例中,并列可基于一個特征集合460相對于另一個的相對方位461確定。一旦特征集合的 優(yōu)選方向被選擇(即,確定集合的哪些元素被考慮是集合的優(yōu)選"頂"或"上"),方向可以根 據絕對角度相對于交互空間原點表示,或根據一個集合與另一個的相對角度表示。方向461 可以由相對于交互空間400的一組歐拉角表示。進一步,并列可以基于特征集合460之間 的相對位置463確定。相對位置463可以被表示為具有對應于交互空間的每個維度的元素 的向量,其中每個元素的值表示距離或距離不同。在三維空間中,特征集合460A和460C之 間的相對位置463可以表示為:V= {XC-XA,YC-YA,Zc-ZJ。相對位置也可以根據相對于交互 空間原點的絕對坐標來表示。更進一步,特征集合460之間的并列可以基于相對時間465。 相對時間465可以基于每個特征集合460何時發(fā)生或相對于該交互何時檢測進行表示。應 該理解:互動空間400的其他方面也可以用于計算或推導特征集合460之間的并列。
[0065] 并列470表示分別從特征集合460A、460B和460C衍生的并列信息470A、470B、 470C的聚合。并列信息可以被認為是涉及興趣的當前交互的一組并列屬性。這些屬性可以 包括確定對象的名稱、特征集合中相關特征的數(shù)量、對象或特征的類型、特征集合的重心、 相對值或位置或其他并列屬性。
[0066] 圖5示出建立,由認證代理580, 一個或多個訪問級別583對內容593在該示例中 示出的一種可能的方法中,認證代理580利用一個或多個并列570作為用于產生查詢或用 于選擇訪問級別的其他標準的基礎。例如,查詢可以包括對象標識符(例如,名稱、品牌、型 號、GUID、UUID、序列號等),或其它對象屬性以及涉及對應認證特征集合的并列屬性(例 如,位置、集群、分組、方向、時間等)。認證代理580可以提交查詢到認證數(shù)據庫550,其依 次返回并列570解鎖的內容信息。內容信息可以包括訪問級別583,其可用于訪問一個或多 個內容593。
[0067] 訪問級別583表示用戶與內容593交互的程度或范圍。如所示,內容593可以包 括多個訪問級別,取決于內容的特性,其中每個級別可以基于并列570激活。例如,如果內 容593包括通過手機訪問的增強現(xiàn)實推廣游戲,對游戲的訪問級別可以通過有效認證對象 的不同并列確定,例如飲料罐和Lakers?的NBA海報。當飲料的用戶位置可以繞海報或相 對于該海報的特征(例如,播放器的圖片、徽標等),用戶能夠獲得更多的機會。也許,放置 Pepsi?'罐子到科比的右側將對應獲得1級,這僅僅使用戶觀察或播放游戲內容。如果用 戶放置Coke?.到科比的右邊,也許用戶會達到訪問2級并獲得免費優(yōu)惠券或促銷。然而, 進一步地移動罐到相對位置可以通過授權用戶時移內容、發(fā)起或參與交易、復制或記錄內 容、編輯內容、分享內容、直接或間接地與內容交互、或以其他方式訪問內容而提供更好的 控制。因此,輸出設備可以呈現(xiàn)與產品相關的推廣為內容593,尤其當推廣與有效認證對象 相關聯(lián)時。雖然該示例使用飲料罐作為示例,推廣可包括優(yōu)惠券、商業(yè)、報價、銷售、彩票、廣 告或其他類型的推廣。
[0068] 應該認識到,訪問級別583可以表示除了控制措施的安全措施。用戶可以相對必 須放置兩個對象以及在系統(tǒng)注冊配置,作為用以解除銀行帳戶或授權交易的令牌。用戶也 可以登錄可類似于第一配置的第二配置,但根據不同的訪問級別583激活內容。例如,放置 駕照到植物的右邊可啟動個人銀行賬戶的事務。然而,如果個體受脅迫,模擬交易的激活將 是有益的。也許放置駕照到植物的左邊可以激活假交易,并同時也通知惡意活動的機構。
[0069] 內容593可以包括內容的模態(tài)或類型的廣譜形式。內容的示例類型可包括應用 軟件或模塊、圖像數(shù)據、視頻數(shù)據、音頻數(shù)據、醫(yī)療記錄、游戲數(shù)據、宣傳資料、產品或服務信 息、虛擬或增強現(xiàn)實數(shù)據、命令、指令、機器人指令或命令,或其他類型的數(shù)據。內容的進一 步示例包括交易信息、娛樂信息、新聞信息、運動信息、促銷信息、醫(yī)療信息、安全信息、游戲 信息、應用信息、醫(yī)療信息、辦公室或工作的信息,或者其他類型的信息。示例模態(tài)可以包括 聽覺、視覺、動覺、手勢、嗅覺、觸覺、味覺、傳感器信息或其它類型的模態(tài)。仍然,進一步的內 容可以包括多種類型的介質,并且可以考慮跨媒體內容。
[0070] 圖6呈現(xiàn)用于根據所公開的技術激活內容的方法600。步驟610 :包括使能電子設 備以訪問認證代理。在一些實施例中,用戶可以在電子設備的非臨時性計算機可讀存儲器 上安裝軟件指令,其中所述指令在處理器上執(zhí)行以提供認證代理的服務。認證代理可以充 當獨立的應用程序,如庫中的模塊,或者甚至作為操作系統(tǒng)的組成部分。在其它實施例中, 認證代理可在網絡上訪問,其中一個或多個遠程計算設備提供訪問認證代理服務。例如,認 證代理可充當為運行為虛擬化云基礎系統(tǒng)(例如,PaaS、IaaS、SaaS,等等)的收費服務。示 例電子設備可以包括智能電話、車輛、設備、信息亭、游戲系統(tǒng)、自動售貨機、醫(yī)療裝置、自動 取款機或其它類型的電子設備。
[0071] 步驟620包括電子設備獲取與環(huán)境的交互的數(shù)字表示,物理的或虛擬的,該環(huán)境 包括多個對象。電子設備可以從一個或多個傳感器獲取數(shù)字表示。該傳感器可以是內部的 或集成于電子設備或可以是遠程設備。例如,在其中所述電子裝置包括智能電話的實施例 中,傳感器可以包括集成的照相機、加速計、觸摸顯示器、麥克風、GPS傳感器、無線收發(fā)器或 其它傳感器。遠程傳感器可以包括安全攝像機、天氣傳感器、醫(yī)療傳感器、霍爾效應探頭,或 者可以通過電子設備外部的通信鏈路訪問的其它傳感設備。交互可以包括錄制音頻、購買 產品、捕獲圖像、在社交網絡上分享內容、操作電子設備、玩游戲、園藝,或可以感受的其他 類型的交互。
[0072] 數(shù)字表示被認為包括從不同的傳感器獲得的表示環(huán)境的數(shù)據。在視圖中,該傳感 器可以捕獲各種各樣的數(shù)據模態(tài),所述方法可以進一步包括:獲得多模態(tài)數(shù)據作為數(shù)字表 示的一部分。例如,多模態(tài)數(shù)據可以包括圖像數(shù)據、運動數(shù)據、音頻數(shù)據、溫度數(shù)據、地址數(shù) 據、位置數(shù)據、方向數(shù)據、元數(shù)據、化學數(shù)據、醫(yī)學數(shù)據、用戶數(shù)據、動覺數(shù)據、生物度量數(shù)據、 語言數(shù)據、加速度數(shù)據、標題數(shù)據,或其他類型數(shù)據的兩個或多個,如步驟625所建議的。
[0073] 步驟630可以包括基于所述數(shù)字表示從環(huán)境中的多個對象鑒別至少兩個不同的 對象作為有效認證對象。在一些實施例中,識別平臺分析該數(shù)字表示以將數(shù)字信號轉換成 一個或多個屬性或特性,其然后可用于通過數(shù)據庫查詢識別或認識不同的對象。識別平臺 可以通過匹配已知對象與派生屬性而識別環(huán)境中的多個對象。所識別的對象可然后通過咨 詢在已知對象數(shù)據庫或在認證對象注冊表中存儲的對象信息被鑒別為有效認證對象與非 認證對象。當發(fā)現(xiàn)匹配時,匹配被注冊為有效認證對象,識別平臺可以通知認證代理:環(huán)境 中具有匹配的至少一些對象是確實有效認證對象。應該理解,識別平臺可以設置在電子設 備內或也可設置在遠程服務器中,可能通過網絡耦合到認證代理。
[0074] 步驟640包括:導出來自數(shù)字表示并與第一有效認證對象相關聯(lián)的第一認證特性 集合,并導出來自數(shù)字表示并與與第二有效認證對象相關聯(lián)的第二不同的認證特征集合。 認證特征集合可包括數(shù)字表示的導出屬性或特性,或者可包括間接或推斷的特征。導出屬 性可以包括特征,諸如圖像描述符或關鍵點、音頻信號屬性、生物信號強度或其他這樣的特 征。間接的或推斷的特性可以通過獲得與所識別的對象相關的對象信息而獲得;名字、類 另IJ、品牌、身份、元數(shù)據或其他屬性。此外,如步驟641所建議的,導出認證特征集合可以包 括:導出不同模態(tài)的至少兩個特征集合;例如圖像數(shù)據和音頻數(shù)據。此外,在步驟643,導出 特征集合可以包括:從涉及數(shù)字表示中的有效認證對象的圖像數(shù)據導出圖像特征(例如, SIFT特征、圖象特征、景深,等)。更進一步地,步驟645可以包括:從與有效認證對象相關 聯(lián)的數(shù)字表示計算散列作為認證特征。
[0075] 應當理解,認證特征集合并不一定代表和有效認證對象相關聯(lián)的所有可能的特 征。相反,該認證特征可以簡單地表示與對象的部分相關聯(lián)的特征;正面、側面、背面或其 他部分。例如,該認證特征集合可以包括認證對象的僅僅部分的圖像數(shù)據。因此,單個認證 對象的位置、方向、朝向或覆蓋可影響激活內容。驗證特征可以包括一個、兩個、三個、七個、 或更多種類型的特征數(shù)據。示例特征數(shù)據可以基于圖像數(shù)據、運動數(shù)據、音頻數(shù)據、溫度數(shù) 據、位置數(shù)據、位置數(shù)據、方向數(shù)據、元數(shù)據、用戶數(shù)據、動覺數(shù)據、生物度量數(shù)據、語言數(shù)據、 加速度數(shù)據、標題數(shù)據或其它類型的數(shù)據。
[0076] 步驟650包括:在和每個有效認證對象相關的認證特征之間導出并列。并列可以 被認為是建造或實例化的對象,包括描述位置、排列、相對位置或交互空間內特征集合的其 他配置的并列屬性。在三維物理空間中以及其中認證特征集合包括圖像數(shù)據的特征(例 如,SIFT特征、BRISK關鍵點、vSLAM坐標等),特征集可以包括在3D空間中具有程度或位 置的圖像特征的集群。因此,并列可包括有關多個特征集如何相對于彼此被布置在3D空間 的信息。并列屬性可以以單獨特征、集群特征或特征的子集合來定義。例如,如果認證特征 包括多個圖像特征集群,并列可以被描述為在第一群集的質心和所述第二群集的質心之間 的3D空間內的幾何距離。應該理解,交互空間可以是由比物理維度更多維度定義的多維空 間。示例其他的維度可以包括時間、人口統(tǒng)計、派生的情緒和意圖、社會關系或者其他方面。
[0077] 鑒于該并列可以相對于交互空間內的認證特性集合的配置進行說明,應該理解, 并列可以包括基于在交互空間中相對放置派生的屬性。因此,步驟651可以包括:基于從 數(shù)字表示內對應的有效認證對象的相對位置導出的相對位置信息,確定認證特征集合的并 列。相對位置信息也可以直接從認證特征集合來確定。相對位置可以是物理長度(例如, 英寸、英尺、英里、厘米、米、公里等)、度量之間的相對差(例如,情緒量表)或交互空間內的 其他相對度量。與此類似,步驟653可以包括:基于數(shù)字表示內相應的有效認證對象的相對 取向信息或直接從交互空間內認證特征集合的相對取向,確定認證特征集合的并列。相對 取向的信息可以包括相對于參考點的角度(例如,攝像頭、用戶、地理位置等),或者可以包 括根據特征集合相對彼此面向表示的簡單取向(例如,向上、向下、左、右、面向等)。更進 一步,步驟655可以包括:基于相對于認證特征集合的相對時間信息確定并列。當?shù)谝惶卣?集合出現(xiàn)或相對于第二特征集合的時空存在變化時,相對時間可以表達。相對時間信息還 可以包括:運動信息(例如,表觀路徑、速度、加速度、加加速度等)、出現(xiàn)的時間、消失的時 間、變化的時間(例如,旋轉、變化面向、特征集合的遷移等),集群中特征的遷移或功能,或 其他時間相關信息。
[0078] 應該理解,認證特征集合或內容觸發(fā)標準可以依靠地理位置數(shù)據。地緣位置數(shù)據 可以反映建筑物內或甚至建筑物外的交互的位置。例如,位置數(shù)據可以通過GPS定位,甚至 非GPS技術獲得。示例非GPS技術包括使用相對于環(huán)境中存在的視覺特征基于視覺的映射 (例如,SLAM、vSLAM)。非GPS技術的另一個示例包括使用銥星衛(wèi)星信號(例如,1626. 104 兆赫、20. 32毫秒QPSK脈沖串,等等),其能夠穿透建筑物。該非GPS地理定位信息可以被 折疊成并列屬性,用于用戶認證或激活內容。
[0079] 步驟660可包括:可能由認證代理建立內容訪問級別,作為認證特征集合相對于 彼此的并列。內容訪問級別可以通過比較并列屬性與綁定到策略或規(guī)則集合的屬性而確 定,該規(guī)則集合管理內容如何被訪問。例如,一旦內容被識別為相關,內容可以具有相關聯(lián) 的訪問策略,其中策略指示根據并列屬性定義的訪問級別標準。該策略可被直接綁定到內 容,或獨立于內容。作為示例(見圖5),認證代理可耦合訪問級別數(shù)據庫,并使用并列屬性 以創(chuàng)建針對數(shù)據庫的查詢。響應于查詢,數(shù)據庫可以返回訪問級別或具有滿足查詢的標準 的策略。
[0080] 步驟670可以包括:基于內容訪問級別經由認證代理可激活內容。激活可以通過 不同的技術發(fā)生。在一些實施例中,內容或內容的部分可以先驗存在于目標輸出設備(例 如,電子設備),以及設備可以被指示基于內容訪問級別而授予訪問內容。在其它實施例中, 內容可以通過向目標輸出設備提供命令或指令啟動附加操作而被激活。其他的操作可包 括:指示設備來啟動下載內容、進行金融交易以購買內容、發(fā)布內容播放器、啟動虛擬機或 采取其他操作。
[0081] 激活內容可包括:激活內容作為激活觸發(fā)標準的函數(shù),如步驟675所建議地。觸發(fā) 標準可用于決定哪些內容基于交互空間是實際上可用的。例如,具體內容可只在規(guī)定的地 理圍欄或在規(guī)定的時間段可用。因此,該內容可以是1)基于觸發(fā)標準成為可用,和2)根據 訪問級別控制。觸發(fā)標準可以基于交互空間的屬性或尺寸來定義。因此,激活觸發(fā)標準可 以依賴于絕對或相對時間、多個身份認證請求或其他認證指標、認證特征的特性(例如,圖 像與聲音)、除了認證特征的因素(例如,環(huán)境、地理性質,等)、排除認證特征的因素(即, 不依賴于認證特征),或其他因素。
[0082] 步驟680包括:可能由認證代理配置輸出設備,以根據內容訪問級別來呈現(xiàn)內容。 如上面提到的,輸出設備可以通過發(fā)送一個或多個命令到輸出設備以采取操作進行配置。 配置設備的命令或者其相關聯(lián)的內容播放器依賴于內容的性質。例如,當內容包括媒體文 件(例如,視頻、音樂等)時,這些命令可以限制或使得輸出設備上的相應播放器基于授予 的訪問級別時移內容。然而,如果內容包括3D打印文件,該命令可限制或使得打印機從彩 色文件中創(chuàng)建3D對象。
[0083] 在一些實施例中,配置輸出設備可以包括指示輸出設備啟動虛擬機,如步驟681 所建議地。虛擬機可包括Java?虛擬機、.NET?虛擬機、Python虛擬機、VMware?虛 擬機或其他虛擬機。使用虛擬機被認為是有利的,因為該內容可以基于訪問級別與用戶分 離。例如,虛擬機可以啟動,以及該內容可以被存儲在安全存儲器(例如,加密的存儲器、固 定的容器、FIPS-140等)中。該方法可以進一步包括步驟683,根據訪問級別相對于內容權 利而固定虛擬機。虛擬機的控制器(例如,內容提供者)可以然后允許用戶觀察內容,并同 時確??刂破飨拗圃L問。內容播放器或虛擬機內的內容可以通過由安全令牌鎖定內容或播 放器、通過加密內容、或者通過應用其它的安全措施被保護。另外,步驟685可以包括:虛擬 機根據接入級別限制對內容的訪問。如前所述,虛擬機可以被命令以相對于呈現(xiàn)內容鎖定 內容播放器或輸出設備的特性。
[0084] 示例
[0085] 下面的部分描述了本發(fā)明主題的各種實施例。
[0086] 基于認證對象的內容激活
[0087] 本發(fā)明主題的一個方面包括基于認證對象激活內容,包括激活內容的方法。該方 法可包括步驟:提供對認證代理的訪問,該認證代理被配置以認證用戶、設備或相對于期望 內容的其他實體。訪問可以通過電子設備接口提供,可能由手機的因特網連接。在一些實 施例中,認證代理以及可能隨著生態(tài)系統(tǒng)中的其它元件可提供作為內容提供商或消費者的 收費服務。
[0088] 該方法可以包括步驟:獲得與至少一個物理對象的交互的多模態(tài)數(shù)字表示。所述 多模態(tài)數(shù)字表示可以包括如前面所討論的各種類型的數(shù)據,并且可以反映實體和場景或物 理對象的交互。應該理解,數(shù)字表示包括電子設備或其它數(shù)據源的數(shù)據。交互可包括獲取 物理物體的圖像、靠近物理對象、物理上與對象進行交互、監(jiān)測物理對象或者其它類型的交 互,直接或間接的。多模態(tài)數(shù)字表示的示例模態(tài)可以包括一個、兩個或更多的數(shù)據的種類如 下:圖像數(shù)據、運動數(shù)據、音頻數(shù)據、溫度數(shù)據、地址數(shù)據、位置數(shù)據、方向數(shù)據、元數(shù)據、用戶 數(shù)據、動覺數(shù)據、生物度量數(shù)據、語言數(shù)據、加速度數(shù)據、速度數(shù)據、標題數(shù)據、基準數(shù)據的變 化,或其他類型的數(shù)據。
[0089] 如前面所討論地,物理對象可以包括幾乎任何類型的對象,因為用于分析數(shù)字表 示的算法可以是對象本身不可知的。相反,該算法尋求在相關聯(lián)數(shù)據中的特征(例如,SIFT 特征、音頻特征、傳感器數(shù)據簽名等)。物理對象可以包括不同類型的對象,包括印刷媒體、 實質上三維對象、或者甚至呈現(xiàn)渲染圖像的計算設備。示例印刷媒體可包括駕照、簽名、海 報、廣告牌、照片、渲染圖像、書、報紙或雜志??勺鳛檎J證基礎的示例三維對象包括人、臉、 動物、車輛、建筑物、玩具、植物、計算設備、建筑、雕像或其他對象。示例渲染圖像可包括計 算機屏幕、亭、電子無序板、電視、電影畫面、游戲系統(tǒng)或其他類型的渲染圖像。
[0090] 認證特征還可以包括基于數(shù)字表示的模式的不同模式。每類模態(tài)都可以單獨或共 同處理以創(chuàng)建更繁雜的或復雜的認證方案。在更優(yōu)選的實施例中,認證特征包括至少兩種 不同的模態(tài),例如圖象數(shù)據和音頻數(shù)據。特別設想的認證特征包括與認證對象或認證對象 的至少部分相關聯(lián)的圖像數(shù)據。在一些實施例中,認證特征可以包括圖像的散列值、可能的 感知散列。
[0091] 該方法進一步包括:從與交互相關聯(lián)的其他對象設備物理對象,其中物理對象將 被識別為有效認證對象。物理對象可以基于從包括對象特征的多模態(tài)數(shù)字表示來識別。物 理對象可以通過搜索具有相似對象特征的認證對象的認證對象數(shù)據庫與從數(shù)字表示導出 的那些進行識別。
[0092] 該方法可以進一步包括:導出涉及認證對象的多個認證特征,其中認證特征可以 考慮量化值或用于進行認證的參數(shù)。例如,認證特征可以考慮鑰鍵,可包括SIFT特征、音頻 特征、散列值、圖像或圖像數(shù)據特性、來自圖像或音頻的區(qū)域信息的深度,或從數(shù)字表示導 出的其它類型的數(shù)據或與認證對象相關聯(lián)的信息。
[0093] 應該理解,與物理對象的交互和生成的數(shù)字表示可以包括與多個認證對象的交 互,如圖1所示。在其中場景中的多個對象被認為是認證對象的場景中,認證特征可以從對 象相對于彼此的并列或排列導出。認證特征可以包括與物理對象的排列相關聯(lián)的相對取向 信息,或者可包括與物理對象相關聯(lián)的相對取向信息。例如,如果認證對象包括駕照和咖啡 杯,杯子的手柄相對于駕照的取向可指示所需的訪問等級。如果手柄指向遠離駕照,或許最 小的內容可被激活。如果手柄指向牌照,或許全部內容可被激活。
[0094] 在內容被激活之前,認證可要求令人滿意的存在、或者甚至不存在一個或多個認 證特征。在某些情況下,認證代理可需要至少三個認證特征,或者甚至多達七個或更多的認 證特征??紤]其中病人進入急診室的醫(yī)療保健場景。醫(yī)生可以拍攝患者的圖像(即,真實 世界3D對象)、向平板電腦指出病人的名字,并指出該醫(yī)生的名字。識別平臺分析圖像和音 頻數(shù)據(例如,多模態(tài)交互的數(shù)字表示),以獲得與病人相關的特征和語音。此外,該平板 電腦的數(shù)字表示可以包括GPS位置、時間或其他信息。所導出的特征隨后被用于確定一個 或多個認證對象,在這種情況下,認證對象可包括患者的臉上作為響應,認證代理得到來自 數(shù)字表示的認證特征集合和來自認證對象信息的信息。認證特征可以包括:(a)患者的臉 的SIFT特征、(b)醫(yī)生的語音模式、(c)患者的姓名、(d)醫(yī)生的姓名、(e)急診室的GPS坐 標、(f)時間、(g)人臉的區(qū)域的深度,或(h)可能患者的駕照或醫(yī)療卡的圖像。因此,大群 的認證特征可用于確定內容訪問級別。在本實施例中,內容訪問級別可允許醫(yī)生由于緊急 情況訪問所有病人的電子醫(yī)療記錄。
[0095] 基于該認證特征,該方法還可以包括建立內容訪問級別。內容訪問級別指示哪個 內容、哪些內容或到何種程度內容被提供給內容消費者。該內容可以包括媒體類型的廣泛 范圍或包括如下的信息:交易信息、娛樂信息、新聞信息、運動信息、促銷信息、醫(yī)療信息、安 全信息、游戲信息、應用程序或軟件指令、指導信息,或其他類型的數(shù)據。
[0096]內容的特別優(yōu)選的類型包括涉及產品、服務或其他產品類型的推廣信息。例如,物 理對象可以是可在雜貨店購買的產品。該產品本身可以是認證對象,以及推廣信息可以包 括朝向購買產品應用的優(yōu)惠券、商業(yè)、廣告、或其他類型的促銷信息。
[0097] 該方法還包括根據訪問等級激活內容。激活可以發(fā)生在認證代理上或可包括提供 訪問等級到內容服務器,從而激活該內容。在一些實施例中,在激活發(fā)生之前,其他的激活 觸發(fā)標準必須得到滿足。例如,激活觸發(fā)標準可以要求多個認證請求進入系統(tǒng)或絕對時間。 也許只有當100個用戶拍攝電影海報的圖像時,互動的故事情節(jié)才能被激活。觸發(fā)標準的 其他實例包括認證標準以外的因素,或甚至排除認證標準。例如,認證標準可以依賴于一天 的具體時間或新聞提醒。
[0098] 所考慮的方法進一步包括配置電子設備,例如蜂窩電話或平板電腦,以根據訪問 級別來呈現(xiàn)內容。如先前所討論地,配置電子設備以呈現(xiàn)或提交內容可包括在內容服務器 或內容提供者的控制下指示電子設備來啟動虛擬機,優(yōu)選為固定的虛擬機。虛擬機可以基 于訪問級別限制訪問內容??蓮倪@些內容中受益的示例電子設備包括手機、平板電腦、計算 機、汽車、信息亭、自動販賣機、機器人、電子設備、醫(yī)療設備、安全系統(tǒng)、游戲控制臺或其它 類型的設備。
[0099] 用于分析多模態(tài)交互的數(shù)字表示的算法尋求與旨在交互的對象相關聯(lián)的特征或 數(shù)據中的特征。這些特征并不一定包括或需要解碼圖像中的符號。因此,認證特征可缺少 從和交互中對象相關聯(lián)的符號標記導出的信息,例如條形碼。盡管如此,使用解碼的符合信 息(例如,字符、數(shù)字、條形碼等)可以增加過程。
[0100] 基于識別對象作為認證對象進行認證
[0101] 本發(fā)明主題的另一個方面被認為包括內容分發(fā)系統(tǒng),其中內容基于認識到實際對 象事實上是認證對象而激活。分發(fā)系統(tǒng)可以包括認證對象數(shù)據庫、識別平臺以及認證代理, 如圖1所示。以下討論詳細闡述圖1的生態(tài)系統(tǒng)。
[0102] 認證對象數(shù)據庫存儲認證元素,其中元素被綁定到特定用戶,也具有涉及該對象 的有效認證特征集合。有效認證特征能表示所需的特征和相關值或條件性特征。此外,認 證單元可包括內容的指針或引用,當在交互中特征的存在或缺乏具有合適屬性時認證特征 將解鎖。在一些實施例中,認證對象數(shù)據庫可以包括存儲數(shù)千、數(shù)百萬或表示認證對象的 更多圖像的圖像數(shù)據庫或圖像搜索引擎??蛇m用于與本發(fā)明主題的示例圖像數(shù)據庫包括 Google?圖像、TinEye反向圖像搜索引擎?(參見網址WWW. tineye. com)、醫(yī)療圖像數(shù)據 庫,或者其他類型的圖像數(shù)據庫。在一些實施例中,圖像由相關圖像認證特征進行索引(例 如,SIFT、區(qū)域的深度)、圖像數(shù)據的特性、元數(shù)據等。
[0103] 識別平臺可經配置以專門處理和數(shù)字表示相關聯(lián)的圖像數(shù)據以及其他類型的模 態(tài)。一旦識別平臺獲取圖像數(shù)據,就可以推導出圖像中涉及對象的對象特征。優(yōu)選地,識別 平臺使用對象特征以區(qū)分或識別圖像中的對象,其中所識別的對象被認為是認證對象。識 別平臺可以提交對象特征到認證對象數(shù)據庫以比較對象特征與一個或多個有效認證特征, 用于確定成像對象是否實際上是認證對象。多個認證元素可被返回。在這樣的情況下,結 果集可以根據對象特征如何滿足每個元素的有效認證特征集合進行排名。
[0104] 認證代理使用對象特征(包括圖像特征)和有效認證特征以確定內容訪問級別, 如前所述。認證代理可基于在對于認證元素中的指針或引用或基于用戶請求而確定內容訪 問級別。在一些實施例中,用戶可以請求特定的內容,其中內容數(shù)據庫中的內容對象指向所 需的認證元素。而在其它實施例中,認證單元指向可由認證元素激活的內容。一旦內容訪 問級別已由認證代理建立,認證代理可授權內容服務器以為用戶激活內容。
[0105] 來自所捕獲視頻流的產品信息
[0106] 然而,本發(fā)明主題的另一個方面包括:獲取產品信息的方法。該方法表示具體實施 方式,其中內容消費者可以基于捕獲在視頻流中的視頻幀的圖像而激活產品信息。該方法 包括:提供訪問到識別服務器或其它類型的識別平臺。識別服務器可以作為服務,例如搜索 引擎,消費者可以通過網絡連接提交一個或多個圖像到服務。
[0107] 識別服務器從顯示的視頻流獲取所捕獲的視頻幀,其中視頻幀從電子設備(例 如,蜂窩電話、車輛、照相機、平板電腦等)發(fā)送。應該理解,術語"所捕獲的視頻幀"用于此 是指視頻流的至少靜止圖像。所捕獲的視頻幀可以是視頻流中的一個或多個實際的幀,可 能在電子設備上播放期間捕獲。此外,所捕獲的視頻幀可包括由在電子設備上的相機傳感 器拍攝的靜止圖像,或者可以包括靜止圖像,其中兩個或多個實際視頻幀互相轉移,這可導 致有點模糊的圖像。識別服務器可以從電子通過網絡連接捕獲視頻幀。例如,可用于捕獲 所捕獲的視頻幀的電子設備包括蜂窩電話、游戲系統(tǒng)、計算機、平板計算機、公用電話亭、電 子廣告牌、或配置有相機的其他類型的設備。
[0108] 不管所捕獲的視頻幀的性質,識別服務器從所捕獲的視頻幀得到一個或多個幀特 征。幀特征可以包括SIFT特征、感知哈希值、直方圖、識別出的對象,或如前面所討論的可 從所捕獲的視頻幀導出的其他特征。
[0109] 識別服務器可以使用幀特征以識別具有類似特征的已知視頻流。例如,識別服務 器可以提交幀特征作為對已知視頻流數(shù)據庫的查詢。響應于視頻流,數(shù)據庫返回具有已先 驗分析的一個或多個已知視頻流的結果集,可能逐幀。結果集中的視頻可以根據一個或多 個派生幀特征進行排名。此外,該結果集可包括有關原始視頻流的附加信息,包括相關的產 品信息。例如,個人可以提交電視節(jié)目的截屏,并將其提交給識別服務器。識別服務器可以 識別原電視節(jié)目并返回在放映中有特征的呈現(xiàn)放映期間廣告中有特征的產品列表。
[0110] 所考慮的方法進一步包括配置電子設備以呈現(xiàn)產品信息給消費者。該產品信息或 對于該問題的其他類型的信息包括名稱、品牌、型號、購買價格、配置設備以從事交易的指 示或其他類型的信息。
[0111] 在一些實施例中,視頻流可以還包括可與所捕獲的視頻幀一起被捕獲的音頻數(shù) 據。當所捕獲的視頻幀被捕獲時,與幀相關聯(lián)的音頻數(shù)據也可以被捕獲。識別服務器也可 以來自音頻特征,其也可以用于識別視頻或甚至視頻流中的位置。
[0112] 在特別優(yōu)選的實施例中,音頻數(shù)據可以包括表示超出人類聽覺的聲音的數(shù)據;例 如超聲波簽名。因此,視頻流可以包含可用于識別發(fā)起流、產品、廣播源或其他對象的附加 音頻信息。在該實施例中,識別服務器可以分析音頻流,以獲得可用于識別流或與流相關聯(lián) 的產品的頻率分量。
[0113] 使用案例
[0114] 下面的討論提出旨在實現(xiàn)使得本發(fā)明主題對于特定市場更高透明度的特定用例 場景。應該理解,每個用例場景也被認為是本發(fā)明的主題。
[0115] 一個用例包括提供基于產品信息的電視節(jié)目。當消費者看到有趣的產品或電視節(jié) 目上的其他對象時,用戶可以使用他們的手機捕獲屏幕截圖。此外,該節(jié)目可以包括一個或 多個嵌入的高頻信號,聲音大于20KHz,它可以攜帶識別節(jié)目的各個方面或節(jié)目中產品的更 多信息。例如,蜂窩電話可以捕獲高頻音頻信號并解碼該信號以獲得嵌入信息。應該理解, 蜂窩電話可以根據需要作為識別平臺操作。因此,蜂窩電話可以將原始數(shù)據或從圖像或音 頻導出的特征發(fā)送到認證服務,其激活與視頻屏幕相關聯(lián)的產品信息。例如,音樂視頻可以 提供各種不同的時裝。手機用戶可以通過請求與視頻相關的產品信息而購買時裝。
[0116] 另一個用例可以包括激活與雜志或海報相關的內容??紤]這樣一個場景:消費者 接收具有一項體育賽事的一個或多個照片的雜志。消費者使用他們的蜂窩電話捕獲照片的 圖像。照片的圖像可以與圖像數(shù)據庫進行認證,也許基于來自Gettyimages?的可用圖像 (參見網址WWW.gettyimages.com)。圖像進行分析并比較于已知的圖像。如果發(fā)現(xiàn)匹配, 則實際體育賽事的實際視頻饋入(現(xiàn)場或者記錄)可以被發(fā)送到消費者的手機。
[0117] 類似的用例包括基于海報或廣告牌的圖像而激活內容??紤]廣告未知馬上發(fā)生事 件的廣告牌或海報宣傳。目標在于開發(fā)神秘事件中關注的地面隆起或病毒,也許是電影上 映或新類型的智能手機的發(fā)布。也許推廣只是指出某天和時間,然后說如果10000人基于 推廣所獲取的圖像同時請求激活,內容將被激活。當某日和時間到來時,以及10, 〇〇〇個請 求發(fā)生,內容被激活。應該理解,推廣的圖像包括激活特征,同時10000個請求表示觸發(fā)標 準的激活。
[0118] 更進一步的海報可表示跨媒體的廣播頻道。海報的圖像可以激活被廣播到海報的 所有觀眾的當前內容。內容也可以被同步,使所有消費者實質上同時查看或接收相同內容。 舉例來說,科比的海報可以提供每天的更新內容,甚至全天。當消費者通過捕獲海報激活圖 像內容時,消費者將接收類似于電臺或電視信道的當前正被遞送的內容。內容可以包括基 于運動焦點、新聞、博客文章、視頻片段、評論、實際的游戲、或其他類型內容的節(jié)目。
[0119] 然而,另一個用例包括當購物時提供優(yōu)惠券給消費者。當消費者通過商店行走時, 消費者可以捕獲目標產品的圖像,可能試圖做價格比較。不過,這家店可能不希望失去消費 者。對此,操作為內容服務的該店可以基于位置信息、圖像特征或其他因素檢測價格比較事 件。價格比較事件可以由通知商店的遠程搜索引擎進行檢測,或者如果消費者的手機利用 店內的Wi-Fi接入點則在商店中可以檢測到。不管事件如何檢測,商店可以激活與產品相 關聯(lián)的優(yōu)惠券以試圖留住消費者。因此,零售商能夠以激活內容的形式提供優(yōu)惠券,而不必 使用條形碼修改貨架上現(xiàn)有產品的清單或標簽。
[0120] 還有一個用例可以包括基于計算機的游戲。所公開的設施可以用于創(chuàng)建真實世界 上的點播內容層,其中內容可以基于玩家與真實世界的一個或多個交互被激活。例如,內容 可以根據對多個游戲玩家的交互,而不是單個玩家的交互來激活。這種情況產生了能支持 "神奇"、"咒語"或替代物理的游戲。也許在基于幻想設置的增強現(xiàn)實游戲中,隊員可能都必 須在特定的位置,并與在該位置的對象交互。在某些情況下,球員可能會在一致行動來模擬 一種儀式,或單獨行動以模擬在戰(zhàn)斗中相互支持。如果玩家實現(xiàn)捕獲其交互的一個或多個 數(shù)字表示,其中所述數(shù)字表示具有正確的認證特征或觸發(fā)標準,玩家將激活新的內容。由第 四堵墻影城?所提供的功能(參見網址fourthwallstudios.com)可適用于這樣的玩游戲 場景。
[0121] 還有一些用例與醫(yī)療保健有關。一個示例包括使用基因組信息以激活內容。例 如,個體(例如,人、寵物、動物、植物等)的基因組被進行分析以確定個體基因組中的特定 特征。用于導出基因組特征的示例技術包括由Five3 Genomics?開發(fā)的那些。基因組特征 可以然后被鏈接到生成的簽名或基因組的熱圖圖像。簽名或熱圖可以被認為是表示基因組 的條形碼或QR碼。進一步,簽名特征成為基因組的認證特征。然后簽名可以是面向公眾的 認證對象,該對象可用于激活內容。內容的安全性可以通過要求捕獲簽名的圖像以外的額 外模態(tài)來進一步增強,可能包括位置數(shù)據、位置數(shù)據、3D對象數(shù)據、語音數(shù)據或其它因素。
[0122] 另一個醫(yī)療應用可包括如前面所討論地基于突發(fā)事件激活內容。也許,在急診室 中的醫(yī)生成像個人以激活他們的醫(yī)療記錄,或成像他們的基因組標記或駕照或醫(yī)療卡的背 面的熱圖。經過適當?shù)恼J證,病人的醫(yī)療記錄對于醫(yī)生被激活。
[0123] 再一個用例可以包括寵物識別系統(tǒng)。寵物主人可以在提供本文中討論的能力的在 線服務注冊自己的寵物。主人可以提交他們的寵物的一個或多個照片作為認證對象。該系 統(tǒng)可以從照片中得到認證特征,或向寵物主人提供選項以選擇所需的認證特征。寵物主人 可以放置自己寵物的照片在寵物項圈上,便于識別。當寵物丟失時,發(fā)現(xiàn)寵物的某人可以拍 攝寵物的圖像或項圈圖片。從圖像中獲得的特征可用于激活內容。在這種特定情況下,激 活內容可包括主人的聯(lián)系信息,其可以被呈現(xiàn)給寵物的發(fā)現(xiàn)者。附加的內容可包括主人識 另IJ,也許是主人與寵物的視頻或圖像,可以被發(fā)送到發(fā)現(xiàn)者。此外,該系統(tǒng)可以在主人的手 機上激活內容,指示其中該寵物發(fā)現(xiàn)者的位置或甚至如何找到寵物的指示。
[0124] 其他考慮
[0125] 下面的額外考慮是為了進一步說明本發(fā)明主題的不同特性。
[0126] 應該理解,本主題在認證和內容激活生態(tài)方面呈現(xiàn)。生態(tài)系統(tǒng)的每個元素被呈現(xiàn) 為系統(tǒng)中的不同功能元件,并與彼此通信。然而,該系統(tǒng)的元素按照需要可被集成在單個設 備(例如,蜂窩電話)或分布在多個設備(例如,蜂窩電話、電視和云計算系統(tǒng))。特別考慮 到電子設備可以包括識別平臺或識別平臺的各方面。
[0127] 激活內容可以以不同的方式來訪問。在一些實施例中,一旦合適的認證已經實現(xiàn) 以及內容訪問級別被確定,內容可以簡單地傳遞到電子設備。該內容可以從內容服務器推 動或從設備中拉出。因此,接收內容的每個個人根據自己的交互并在不同時間單獨地接收 內容。在其他實施例中,內容可以以同步的方式分布在多個個人之間,其中個人實質上同時 接收相同的內容。例如,返回參照例如科比的海報,每個個人可以在同一時間接收廣播內 容。然而,其他情況下可包括提供同步激活的內容到已成功滿足激活觸發(fā)標準并發(fā)現(xiàn)有關 激活特征的僅僅一小部分。
[0128] 另一種考慮涉及同時觀看激活內容的消費者數(shù)目。如果有成千上萬人同時激活內 容(如果不是數(shù)百萬甚至數(shù)十億人),基礎設施必須支持交付內容到龐大數(shù)字的個人。內 容可以是激活之前的邊際緩存,以便很容易地最終交付。內容可以是在網絡開關中的邊緣 情況,在中間服務器、個人區(qū)域網絡設備或播放器、在互聯(lián)網服務提供商、在接入點或對于 內容有足夠內存的其它地方。例如,醫(yī)療記錄或基因組的內容可緩存在National Lambda Rail的許多服務器(參見www. nlr. net)。
[0129] 對于幾千人激活內容還為內容提供商帶來了機會。消費者和設想的生態(tài)系統(tǒng)之間 的交互可以被跟蹤,用于評級的目的,其中成千上萬的個人同時激活內容。個人的統(tǒng)計數(shù)據 可以基于受到隱私限制的他們的帳戶信息來獲得,并提供給內容提供商。
[0130] 由于無數(shù)可能的認證特征或認證模態(tài)的性質,內容提供商和消費者能夠獲得許多 可能的方法以創(chuàng)建認證要求。該可能性的廣譜產生了創(chuàng)造合理可拒絕力的能力。舉例來說, 如果個人被迫放棄自己的認證因素,他們只能揭示他們因素的小部分,其只釋放很少內容。 請考慮這樣一個場景,其中認證特征需要有筆夾的個人的筆與他們的結婚戒指并列。當筆 夾朝向結婚戒指時,個人的全部內容可以被激活。然而,如果筆夾遠離結婚戒指,很輕微的 變化,只有少量的信息被激活。因此,個人似乎已以該人可以合理地否認存在任何其他信息 的方式發(fā)布信息。更進一步地,將所述筆和戒指放在其它方位可以激活其它電子設備上的 內容。也許把戒指放在筆尖能激活包括短信的內容或手機短信到警察局。
[0131] 特別優(yōu)選的實施例中將多模態(tài)認證和內容分發(fā)生態(tài)系統(tǒng)的方面、角色或職責集成 到操作系統(tǒng)。該方法放松電子設備的用戶以下載專用應用、安裝新的軟件、或以復雜方式與 設備交互。例如,當電子設備收集環(huán)境數(shù)據時,識別模塊可以分析流入到設備的環(huán)境數(shù)據或 其它數(shù)字表示,以識別相關于環(huán)境的對象或特征,其中電子設備找到自身。如果必要或需 要,操作系統(tǒng)可以卸載它的分析到前端服務。進一步,操作系統(tǒng)可以實例化一個或多個虛擬 機用于呈現(xiàn)相關內容,可能包括執(zhí)行軟件,其中虛擬機保持在操作系統(tǒng)或遠程內容提供商 的控制下。
[0132] 作為在本文件中更早參考地,內容可以采取許多不同的形式。一種特別設想的內 容形式包括配置目標電子設備采取動作的可執(zhí)行指令。例如,消費者可使用他們的相機配 備的手持游戲系統(tǒng)成像電影海報。經過適當?shù)恼J證,電影的供應商可以指示游戲系統(tǒng),以發(fā) 布和交易系統(tǒng)耦合的虛擬機。虛擬機可以裝載指令,該指令配置游戲系統(tǒng)以呈現(xiàn)購買界面。 如果用戶購買電影,這部電影可以在虛擬機中以安全的方式啟動。交易數(shù)據僅代表響應于 接收到內容指令可以采取的一種操作類型??稍O想所有類型的操作。
[0133] 呈現(xiàn)內容可包括多于在電子設備上提交圖像、播放音樂或者配置電子設備以執(zhí)行 操作。在一些實施例中,呈現(xiàn)內容可包括構建或創(chuàng)建三維物體。例如,內容可以包括3D打印 機的指令,能從樹脂、塑料、電力或其他材料構建3D對象??蛇m用于本發(fā)明主題的示例三維 打印機包括 MakerBot? (參見 WWW. makerbot. com)、CNC 機器、ZPrinter? (見 WWW. zcorp. com),或產生3D物體的其他電子設備。應該理解,本發(fā)明的主題被認為包括在外源控制下 實例化3D打印機或CNC機器內的虛擬機,以使打印機能夠生成對象,并同時保留內容提供 者的權利。
[0134] 本發(fā)明的主題也被認為包含有效認證對象的配置的登記并可能鏈接配置到一個 或多個交互。登記有效認證對象可以通過一種或多種技術發(fā)生。一種可能的技術包括:配 置交互空間內的有效認證對象(例如,駕照、玩具、制鞋、手勢、說出的話,等),并記錄配置 集成對象的操作的對象作為交互的數(shù)字表示。認證代理可分析數(shù)字表示以編輯相關的認證 特征集合為并列,從而可以存儲在認證數(shù)據庫中。創(chuàng)建該配置的實體可以然后綁定并列與 所需內容或操作(例如,啟動應用程序、進行交易、發(fā)送消息等)。另一種技術可包括:單獨 捕獲每個有效認證對象的數(shù)字表示,并登記每個單獨對象。然后相對于彼此捕獲各個對象 的一個或多個并列,其中每個并列可以被鏈接到內容??紤]智能設備(例如,手機、平板電 腦、phablet、計算機、信息亭、ATM等)的安全系統(tǒng)為例。用戶可以通過使用數(shù)據捕獲的不 同模態(tài)登記多個對象而鎖定對設備的訪問。也許用戶可通過要求在他們的結婚戒指、說出 的話和在背景圖像移動結婚戒指之間的并列而鎖定設備。一旦登記,只有當檢測到涉及婚 戒、文字和背景的認證特征的并列時,該設備將然后被解鎖。因此,用戶可以被允許訪問操 作系統(tǒng)或設備的特征(即,設備內容)。
[0135] 對于本領域技術人員顯而易見地,除了已經描述的更多修改是可能的,而不偏離 本文的發(fā)明概念。本發(fā)明的主題因此不被限制,除非在所附權利要求的范圍中。此外,在解 釋說明書和權利要求書中,所有的術語應該被解釋為與上下文一致的最寬的可能方式。特 別是,術語"包括"和"包含"應當被解釋為以非排他性方式的元件、部件或步驟,表示所引 用的元件、組件或步驟可以存在或使用或與未明確引用的其他元件、部件或步驟進行組合。 其中本說明書中的權利要求是指某物選自包含A、B、C......和N中的至少一種,文本應當 被解釋為來自分組的僅僅一個元件,而不是A加 N或B加 N等。
【權利要求】
1. 一種激活內容的方法,所述方法包括: 使得電子設備訪問認證代理; 通過設備獲取與包括多個物理對象的物理環(huán)境的交互的數(shù)字表示; 基于所述數(shù)字表示,從環(huán)境中的多個物理對象鑒別至少兩個不同的對象為第一有效認 證對象和第二有效認證對象; 導出來自所述數(shù)字表示并與第一有效認證對象相關的第一認證特征集合,以及來自所 述數(shù)字表示并與第二有效認證對象相關聯(lián)的第二認證特征集合; 由所述認證代理建立內容訪問級別為第一認證特征集合相對于所述第二認證特征集 合的并列的函數(shù); 由所述認證代理基于所述內容訪問級別激活內容;和 配置輸出設備,以根據所述內容訪問級別呈現(xiàn)內容。
2. 如權利要求1所述的方法,還包括:獲得多模態(tài)數(shù)據作為所述數(shù)字表示的一部分,包 括至少兩個如下種類的模態(tài)數(shù)據:圖像數(shù)據、運動數(shù)據、音頻數(shù)據、溫度數(shù)據、地址數(shù)據、位 置數(shù)據、方向數(shù)據、元數(shù)據、用戶數(shù)據、動覺數(shù)據、生物度量數(shù)據、語言數(shù)據、加速度數(shù)據和航 向數(shù)據。
3. 如權利要求2所述的方法,其中導出所述第一認證特征集合的步驟包括:導出不同 模態(tài)的至少兩個特征集合。
4. 如權利要求1所述的方法,其中導出第一認證特征集合的步驟包括:從數(shù)字表示中 第一有效認證對象的圖像數(shù)據導出圖像特征。
5. 如權利要求4所述的方法,其中所述第一認證特征集合包括:所述第一有效認證對 象的一部分的圖像數(shù)據。
6. 如權利要求1所述的方法,其中導出第一認證特征集合的步驟包括:從與第一有效 認證對象相關聯(lián)的數(shù)字表示計算散列作為認證特征。
7. 如權利要求1所述的方法,其中所述第一認證特征集合包括以下中的至少一個: SIFT特征、圖象特征以及場的深度。
8. 如權利要求1所述的方法,其中所述第一認證特征集合包括以下類型特征數(shù)據的至 少兩個:圖像數(shù)據、運動數(shù)據、音頻數(shù)據、溫度數(shù)據、地址數(shù)據、位置數(shù)據、方向數(shù)據、元數(shù)據、 用戶數(shù)據、動覺數(shù)據、生物指標數(shù)據、語言數(shù)據、加速度數(shù)據和航向數(shù)據。
9. 如權利要求1所述的方法,進一步包括:基于在所述數(shù)字表示中從所述第一有效認 證對象集合與第二有效認證對象的相對位置導出的相對位置信息,確定所述第一認證特征 集合相對于所述第二認證特征集合的并列。
10. 如權利要求9所述的方法,其中進一步包括:確定并列作為從所述第一認證特征集 合和第二認證特征集合導出的相對位置信息的函數(shù)。
11. 如權利要求1所述的方法,進一步包括:基于在所述數(shù)字表示中從所述第一有效認 證對象集合與第二有效認證對象的相對取向導出的相對取向信息,確定所述第一認證特征 集合相對于所述第二認證特征集合的并列。
12. 如權利要求9所述的方法,其中進一步包括:確定并列作為從所述第一認證特征集 合和第二認證特征集合導出的相對取向信息的函數(shù)。
13. 如權利要求1所述的方法,其中,所述第一和第二有效認證對象中的至少一個包括 印刷媒體。
14. 如權利要求13所述的方法,其中印刷媒體包括以下的至少一種:駕駛執(zhí)照、護照、 簽名、支票、文件、海報、廣告牌、照片、呈現(xiàn)的圖像、書、報紙和雜志。
15. 如權利要求1所述的方法,其中所述第一和第二有效認證對象中的至少一個包括 實質上的三維對象。
16. 如權利要求15所述的方法,其中實質上的三維對象包括以下的至少一種:個人、 臉、動物、車輛、建筑物、玩具、植物、計算設備、建筑、食品和雕像。
17. 如權利要求1所述的方法,其中所述第一有效認證對象包括具有提交圖像的計算 設備。
18. 如權利要求1所述的方法,其中所述第一認證特征集合包括至少三個認證特征。
19. 如權利要求18所述的方法,其中所述第一認證特征集合包括至少七個認證特征。
20. 如權利要求1所述的方法,進一步包括:呈現(xiàn)與產品相關的內容,作為推廣。
21. 如權利要求20所述的方法,其中產品與第一認證有效認證對象相關聯(lián)。
22. 如權利要求20所述的方法,其中推廣包括以下的至少一個:優(yōu)惠券、商業(yè)、報價、銷 售、彩票以及廣告。
23. 如權利要求1所述的方法,其中,所述內容包括以下的至少一個:交易信息、娛樂信 息、新聞信息、運動信息、促銷信息、醫(yī)療信息、安全信息和游戲信息。
24. 如權利要求1所述的方法,其中激活內容的步驟包括:激活內容作為激活觸發(fā)標準 的函數(shù)。
25. 如權利要求24所述的方法,其中所述激活觸發(fā)標準依賴于絕對時間。
26. 如權利要求24所述的方法,其中所述激活觸發(fā)條件取決于多個認證請求。
27. 如權利要求24所述的方法,其中激活觸發(fā)標準取決于除了在所述第一和第二認證 特征集合中的特征以外的多種因素。
28. 如權利要求27所述的方法,其中集合觸發(fā)標準取決于排除認證特征的多種因素。
29. 如權利要求1所述的方法,其中所述第一認證特征集合缺乏從與第一有效認證對 象相關聯(lián)的符號標記導出的信息。
30. 如權利要求29所述的方法,其中所述認證特征缺乏條形碼數(shù)據。
31. 如權利要求1所述的方法,其中配置所述輸出設備以呈現(xiàn)內容的步驟包括:指示所 述輸出設備來啟動虛擬機。
32. 如權利要求31所述的方法,進一步包括:根據訪問級別相對于內容權利保護所述 虛擬機。
33. 如權利要求31所述的方法,進一步包括:通過該虛擬機根據所述內容訪問級別限 制訪問該內容。
34. 如權利要求1所述的方法,其中電子設備包括如下的至少一個:手機、平板電腦、電 腦、游戲機、汽車、信息亭、自動販賣機、機器人、電子家電、醫(yī)療設備和安全系統(tǒng)。
35. 如權利要求1所述的方法,其中所述電子設備包括輸出設備。
【文檔編號】G06Q30/02GK104428781SQ201380021303
【公開日】2015年3月18日 申請日期:2013年2月8日 優(yōu)先權日:2012年2月24日
【發(fā)明者】P·頌雄 申請人:南特控股有限公司
網友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點贊!
1