使用注視跟蹤的增強(qiáng)照片和視頻拍攝的制作方法
【專利摘要】當(dāng)用戶用圖像捕捉設(shè)備(例如具有相機(jī)的計(jì)算設(shè)備)拍攝照片或視頻時(shí)，在場(chǎng)景中的一個(gè)興趣點(diǎn)被確定。所述計(jì)算設(shè)備包括眼睛跟蹤器，所述眼睛跟蹤器輸出通過(guò)取景器觀看場(chǎng)景的用戶眼睛的注視向量，其指示了場(chǎng)景中的興趣點(diǎn)。隨后，基于所確定的在場(chǎng)景中的興趣點(diǎn)來(lái)執(zhí)行所選擇的操作。可以基于所述興趣點(diǎn)來(lái)選擇用于捕捉圖像的曝光量。通過(guò)取景器縮放或調(diào)整視野可以被錨定在所述興趣點(diǎn)處，并且在捕捉圖像之前，通過(guò)取景器的圖像可以圍繞所述興趣點(diǎn)被縮放?？梢試@興趣點(diǎn)執(zhí)行圖像增強(qiáng)效果。
【專利說(shuō)明】使用注視跟蹤的増強(qiáng)照片和視頻拍攝
[0001 ] 背景
[0002]不同類型的計(jì)算設(shè)備可捕捉或拍攝主體或?qū)ο蟮碾娮訄D像。例如，用戶可使用相機(jī)或攝像機(jī)來(lái)拍攝某人或場(chǎng)景的照片或視頻。其他計(jì)算設(shè)備也可捕捉圖像，諸如電子布告欄、個(gè)人計(jì)算機(jī)、膝上型計(jì)算機(jī)、筆記本、平板、電話或可穿戴計(jì)算設(shè)備。
[0003]被捕捉的圖像可被本地地存儲(chǔ)在計(jì)算設(shè)備中，或被傳送到遠(yuǎn)程計(jì)算設(shè)備以供存儲(chǔ)。類似地，圖像可被拍攝該圖像的計(jì)算設(shè)備檢索和查看，或替換地，圖像可在遠(yuǎn)程站點(diǎn)處的不同計(jì)算設(shè)備的顯示器上被查看。
[0004]概述
[0005]當(dāng)用戶用圖像捕捉設(shè)備(諸如具有相機(jī)的計(jì)算設(shè)備)拍攝照片或視頻時(shí)，確定場(chǎng)景中的一個(gè)興趣點(diǎn)。所述計(jì)算設(shè)備包括眼睛跟蹤器，所述眼睛跟蹤器輸出通過(guò)取景器觀看場(chǎng)景的用戶眼睛的注視向量，其指示了場(chǎng)景中的興趣點(diǎn)。
[0006]隨后，可基于所確定的在場(chǎng)景中的興趣點(diǎn)來(lái)執(zhí)行所選擇的操作。例如，可以基于所述興趣點(diǎn)來(lái)選擇用于捕捉圖像的曝光量。通過(guò)取景器縮放或調(diào)整視野可以被錨定在所述興趣點(diǎn)處，并且在捕捉圖像之前，通過(guò)取景器的圖像可以圍繞所述興趣點(diǎn)由用戶自動(dòng)地或手動(dòng)地(或用姿勢(shì)地)縮放?？梢栽谒雠d趣點(diǎn)周圍執(zhí)行圖像增強(qiáng)效果，例如增強(qiáng)在所述興趣點(diǎn)處或附近的形狀的模糊線條。
[0007]—個(gè)獲得圖像的方法實(shí)施例包括接收指示在取景器中的注視方向的信息。基于指示所述注視的方向的信息做出在取景器中的興趣點(diǎn)的確定。也基于所述興趣點(diǎn)來(lái)做出捕捉圖像的曝光量的確定。視野在所述取景器中被圍繞興趣點(diǎn)調(diào)整，并且圖像以所確定的曝光量和視野被捕捉。
[0008]—個(gè)裝置實(shí)施例包括取景器和至少一個(gè)傳感器，所述傳感器響應(yīng)于指示曝光量的第一信號(hào)和指示在取景器中要從其縮放的點(diǎn)的第二信號(hào)捕捉取景器中的圖像。至少一個(gè)眼睛跟蹤器輸出指示在取景器中的注視的方向的注視向量。至少一個(gè)處理器執(zhí)行存儲(chǔ)在處理器可讀存儲(chǔ)器中的處理器可讀指令以:I)接收注視向量;2)基于注視向量確定取景器中的興趣點(diǎn)；3)基于所述興趣點(diǎn)確定曝光量;4)確定在取景器中要從其縮放的點(diǎn)；以及5)輸出指示曝光量的第一信號(hào)和指示在取景器中要縮放的點(diǎn)的第二信號(hào)。在一個(gè)實(shí)施例中，要從其縮放的點(diǎn)(point to zoom from)是所述興趣點(diǎn)。
[0009]在另一實(shí)施例中，一個(gè)或多個(gè)處理器可讀存儲(chǔ)器包括在被執(zhí)行時(shí)使得一個(gè)或多個(gè)處理器執(zhí)行一種用于通過(guò)相機(jī)捕捉圖像的方法的指令。所述方法包括從眼睛跟蹤器接收注視向量，并基于所述注視向量確定在相機(jī)的取景器中的興趣點(diǎn)。興趣點(diǎn)是基于注視向量在相機(jī)的取景器中被確定的。基于所述興趣點(diǎn)的曝光量被確定。在取景器中要縮放的點(diǎn)被確定。將指示相機(jī)的曝光量的第一信號(hào)和指示在取景器中要從其縮放的點(diǎn)的第二信號(hào)一起輸出給相機(jī)。指示圍繞興趣點(diǎn)的縮放量的第三信號(hào)可被輸出。在一個(gè)實(shí)施例中，要從其縮放的點(diǎn)是所述興趣點(diǎn)。
[0010]提供本概述以便以簡(jiǎn)化的形式介紹以下在詳細(xì)描述中進(jìn)一步描述的一些概念。本概述并非旨在標(biāo)識(shí)出要求保護(hù)的主題的關(guān)鍵特征或必要特征，亦非旨在用作輔助確定要求保護(hù)的主題的范圍。
[0011]附圖簡(jiǎn)述
[0012]圖1是示例性系統(tǒng)體系結(jié)構(gòu)的高級(jí)框圖。
[0013]圖2是示例性軟件體系結(jié)構(gòu)的高級(jí)框圖。
[0014]圖3A解說(shuō)示例場(chǎng)景。
[0015]圖3B示出用于拍攝在圖3A中所示的場(chǎng)景的圖像的示例性圖像捕捉設(shè)備。
[0016]圖3C示出具有用于拍攝在圖3A中所示的場(chǎng)景的圖像的所確定的曝光和縮放量的示例性圖像捕捉設(shè)備。
[0017]圖4A-B示出具有在示例性網(wǎng)絡(luò)中使用的圖像捕捉設(shè)備的示例性眼鏡。
[0018]圖5A-B示出示例性眼鏡的側(cè)部和頂部。
[0019]圖6-8是捕捉圖像的示例性方法的流程圖。
[0020]圖9示出了示例性計(jì)算設(shè)備。
[0021 ] 詳細(xì)描述
[0022]當(dāng)用戶用圖像捕捉設(shè)備(例如具有相機(jī)的計(jì)算設(shè)備)拍攝照片或視頻時(shí)，在場(chǎng)景中的一個(gè)興趣點(diǎn)被確定。所述計(jì)算設(shè)備包括眼睛跟蹤器，所述眼睛跟蹤器輸出通過(guò)指示場(chǎng)景中的興趣點(diǎn)的取景器觀看場(chǎng)景的用戶眼睛的注視向量。
[0023]隨后，基于所確定的在場(chǎng)景中的興趣點(diǎn)來(lái)執(zhí)行所選擇的操作。例如，可以基于所述興趣點(diǎn)來(lái)選擇用于捕捉圖像的曝光量。通過(guò)取景器縮放或調(diào)整視野可以被錨定在所述興趣點(diǎn)處，并且在捕捉圖像之前，通過(guò)取景器的圖像可以圍繞所述興趣點(diǎn)由用戶自動(dòng)地或手動(dòng)地(或用姿勢(shì)地)縮放?？梢試@所述興趣點(diǎn)執(zhí)行圖像增強(qiáng)效果，例如增強(qiáng)在所述興趣點(diǎn)處或附近形狀的模糊線條。
[0024]圖1是用于捕捉圖像(諸如照片或視頻)的裝置(或系統(tǒng))100的高級(jí)框圖。具體而言，當(dāng)捕捉場(chǎng)景的圖像時(shí)裝置100使用用戶的眼睛注視信息來(lái)確定興趣點(diǎn)。在一實(shí)施例中，裝置100包括圖像捕捉設(shè)備104(諸如相機(jī))、計(jì)算設(shè)備101和眼睛跟蹤器105。
[0025]在一個(gè)實(shí)施例中，圖像捕捉設(shè)備104在眼睛跟蹤器105提供了指示在圖像捕捉設(shè)備104的取景器(諸如如圖3B所示的取景器303)中所示的場(chǎng)景中的用戶111的興趣點(diǎn)的信息(注視向量108)之后，拍攝或捕捉圖像106。在一個(gè)實(shí)施例中，圖像捕捉設(shè)備104包括捕捉圖像106的電子傳感器104a。在一個(gè)實(shí)施例中當(dāng)計(jì)算設(shè)備101將一個(gè)或多個(gè)控制信號(hào)傳送給圖像捕捉設(shè)備104之后，圖像捕捉設(shè)備104將圖像106傳輸給計(jì)算設(shè)備101。響應(yīng)于計(jì)算設(shè)備101從眼睛跟蹤器105接收到注視向量108而輸出控制信號(hào)107。
[0026]眼睛跟蹤器105輸出指示了要由圖像捕捉設(shè)備104捕捉的場(chǎng)景中的用戶111的興趣點(diǎn)的信息。在一個(gè)實(shí)施例中，眼睛跟蹤器105輸出指示了圖像捕捉設(shè)備104的取景器中的場(chǎng)景的興趣點(diǎn)的注視向量108。在一個(gè)實(shí)施例中，眼睛跟蹤器105被定位在圖像捕捉設(shè)備104的取景器附近。
[0027]計(jì)算設(shè)備101包括執(zhí)行(或讀取)存儲(chǔ)在存儲(chǔ)器102中的輸出用于捕捉圖像的控制信號(hào)的處理器可讀指令的處理器103。在一實(shí)施例中，存儲(chǔ)器102是存儲(chǔ)軟件組件(諸如控件102a、點(diǎn)102b、照片/視頻應(yīng)用102c和圖像102d)的處理器可讀存儲(chǔ)器。
[0028]在一個(gè)實(shí)施例中，從圖像捕捉設(shè)備104接收的圖像(諸如圖像106)被存儲(chǔ)在圖像102d中。在一替換實(shí)施例中，圖像被存儲(chǔ)在遠(yuǎn)程計(jì)算設(shè)備處。
[0029]在一個(gè)實(shí)施例中，控件102a至少部分控制計(jì)算設(shè)備101。在一個(gè)實(shí)施例中，控件102a輸出控制信號(hào)107并接收一個(gè)或多個(gè)注視向量108。在一個(gè)實(shí)施例中，控件102a是計(jì)算設(shè)備101的操作系統(tǒng)。
[0030]在一個(gè)實(shí)施例中，點(diǎn)102b通過(guò)控件102a接收注視向量108并確定通過(guò)取景器觀看場(chǎng)景的用戶111的興趣點(diǎn)。例如，如圖3B所示用戶可以具有對(duì)應(yīng)于在取景器303中的日落的興趣點(diǎn)305。在實(shí)施例中，在確定用戶111的興趣點(diǎn)之前點(diǎn)102b接收多個(gè)注視向量108。點(diǎn)102b隨后基于注視向量108將興趣點(diǎn)信息輸出給照片/視頻應(yīng)用102c。
[0031]照片/視頻應(yīng)用102c負(fù)責(zé)基于觀看圖像捕捉設(shè)備的取景器中的場(chǎng)景的用戶的興趣點(diǎn)確定曝光量并調(diào)整視角(或縮放量)。照片/視頻應(yīng)用102c還負(fù)責(zé)確定要調(diào)整視角(或應(yīng)用縮放量)的錨點(diǎn)或取景器中的點(diǎn)。在一個(gè)實(shí)施例中，照片/視頻應(yīng)用102c還基于所述興趣點(diǎn)向圖像提供圖像增強(qiáng)效果。
[0032]在一個(gè)實(shí)施例中，圖像捕捉設(shè)備104被包括在計(jì)算設(shè)備101中或與計(jì)算設(shè)備101封裝在一起。在另一個(gè)實(shí)施例中，圖像捕捉設(shè)備104和眼睛跟蹤器105與計(jì)算設(shè)備101分開封裝。
[0033]在一實(shí)施例中，圖像捕捉設(shè)備104、計(jì)算設(shè)備101和眼睛跟蹤器105被封裝并被包括在單個(gè)設(shè)備中。例如，圖像捕捉設(shè)備104、計(jì)算設(shè)備101和眼睛跟蹤器105可被包括在眼鏡、數(shù)碼相機(jī)、蜂窩電話、計(jì)算機(jī)、筆記本計(jì)算機(jī)、膝上計(jì)算機(jī)或平板中。
[0034]計(jì)算設(shè)備101、圖像捕捉設(shè)備104和眼睛跟蹤器105可通過(guò)有線或無(wú)線連接來(lái)傳送信息，諸如圖像、控制和注視向量信息。計(jì)算設(shè)備101、圖像捕捉設(shè)備104和眼睛跟蹤器105可通過(guò)網(wǎng)絡(luò)(諸如局域網(wǎng)(LAN)、廣域網(wǎng)(WAN)和/或因特網(wǎng))的方式進(jìn)行通信。
[0035]圖2是照片/視頻應(yīng)用102c的示例性軟件體系結(jié)構(gòu)200的高級(jí)別框圖。
[0036]在一實(shí)施例中，照片/視頻應(yīng)用102c包括至少一個(gè)軟件組件。在各實(shí)施例中，軟件組件可包括計(jì)算機(jī)(或軟件)程序、對(duì)象、函數(shù)、子例程、方法、實(shí)例、腳本和/或處理器可讀指令、或它們的一部分、單個(gè)地或組合的。在此描述了可由各種軟件組件來(lái)執(zhí)行的一個(gè)或多個(gè)示例功能。在替換實(shí)施例中，可使用在此描述的更多或更少軟件組件和/或軟件組件的功會(huì)K。
[0037]在一實(shí)施例中，照片/視頻應(yīng)用102c包括軟件組件，例如曝光201、縮放202和增強(qiáng)203。
[0038]在一個(gè)實(shí)施例中，曝光201負(fù)責(zé)基于用戶的興趣點(diǎn)確定曝光量。在一個(gè)實(shí)施例中，確定曝光量包括確定抵達(dá)用于捕捉圖像106的電子傳感器104a的光量，如圖1和3A-C所示。在一個(gè)實(shí)施例中，以勒克斯(Iux)秒為單位來(lái)測(cè)量曝光量。
[0039]縮放202，在一個(gè)實(shí)施例中，是負(fù)責(zé)基于用戶的興趣點(diǎn)確定視角(或放大或縮小)。例如，在(使用眼睛跟蹤器302)做出用戶將日落310a作為場(chǎng)景中的興趣點(diǎn)的確定之后縮放202在取景器303中提供了經(jīng)縮放的日落350，如圖3A-C所示。在一個(gè)實(shí)施例中，縮放202確定要調(diào)整視角或應(yīng)用縮放量的錨點(diǎn)(或要從其縮放的點(diǎn))。在一個(gè)實(shí)施例中，錨點(diǎn)或從其要應(yīng)用縮放量的點(diǎn)是興趣點(diǎn)。
[0040]縮放202還確定要應(yīng)用的縮放量(正的或負(fù)的)。在一個(gè)實(shí)施例中，縮放202基于取景器中的場(chǎng)景確定縮放量。在另一個(gè)實(shí)施例中，縮放202應(yīng)用預(yù)定的縮放量，例如2X、3X、4X……。在一個(gè)實(shí)施例中，可以由用戶選擇預(yù)定的縮放量。在另一個(gè)實(shí)施例中，基于在拍攝圖像時(shí)的用戶輸入或姿勢(shì)來(lái)應(yīng)用縮放量。
[0041]在一個(gè)實(shí)施例中，增強(qiáng)203負(fù)責(zé)將圖像增強(qiáng)效果提供給圖像，諸如圖1中的圖像106。在一個(gè)實(shí)施例中，增強(qiáng)203對(duì)圖像的興趣點(diǎn)周圍的形狀線條進(jìn)行銳化，這些線條可能由于應(yīng)用了縮放量而被模糊。在一個(gè)實(shí)施例中，增強(qiáng)203可以將圖像增強(qiáng)效果應(yīng)用到存儲(chǔ)在圖像102d中或從遠(yuǎn)程位置檢索到的圖像。
[0042]在替換實(shí)施例中，增強(qiáng)203包括其他類型的圖像增強(qiáng)效果軟件來(lái)增強(qiáng)圖像。例如，增強(qiáng)203可以包括噪聲減少、剪裁、變色、取向、對(duì)比度和亮度軟件組件以將相應(yīng)的圖像增強(qiáng)效果應(yīng)用于圖像，諸如圖像106。
[0043]圖3A示出具有男人310b和日落310a的場(chǎng)景310。在一個(gè)實(shí)施例中，用戶可以使用圖像捕捉設(shè)備(諸如圖3B所示的相機(jī)300)來(lái)捕捉場(chǎng)景310的圖像。
[0044]圖3B示出相機(jī)300，用于如用戶在相機(jī)300的取景器303中所見(jiàn)的那樣捕捉場(chǎng)景310的圖像。在一實(shí)施例中，相機(jī)300包括圖像捕捉設(shè)備104、計(jì)算設(shè)備101和眼睛跟蹤器105。用戶可以通過(guò)按下觸發(fā)器301來(lái)捕捉取景器303中所見(jiàn)的圖像(照片或視頻)?？刂瓢粹o304還包括用于操作相機(jī)300的按鍵。例如，控制按鍵304可以包括手動(dòng)放大或縮小以及設(shè)置曝光的按鍵。在替換實(shí)施例中，觸發(fā)器301和按鍵304被包括在觸摸屏中，所述觸摸屏也被包括在取景器303中。在一個(gè)實(shí)施例中，對(duì)應(yīng)于如圖1所示的眼睛跟蹤器105的眼睛跟蹤器302被放置在相機(jī)300上以輸出指示用戶將日落310a作為興趣點(diǎn)305的注視向量。
[0045]圖3C示出是在取景器303中的經(jīng)放大的日落310的版本(或經(jīng)調(diào)整的日落310a的視角)的經(jīng)縮放日落350，它具有針對(duì)經(jīng)縮放日落350所確定的曝光。在一個(gè)實(shí)施例中，照片/視頻應(yīng)用102c確定縮放量(例如2x、3x……)、從其縮放的錨點(diǎn)并確定興趣點(diǎn)305(諸如在特定的日落310a下)的曝光量。
[0046]圖4A示出包括眼鏡1502的裝置1500，所述眼鏡包括相機(jī)和如在此所述的眼睛跟蹤系統(tǒng)。裝置1500包括在其中通過(guò)在本示例中的線1506或在其他示例中是無(wú)線地與伴隨處理模塊1524通信的眼鏡1502。在一個(gè)實(shí)施例中，伴隨處理模塊1524對(duì)應(yīng)于如圖1所示的計(jì)算設(shè)備101。在該實(shí)施例中，眼鏡1502包括具有鏡腿臂1513和1515以及鼻梁架1504的框架1515。
[0047]在一個(gè)實(shí)施例中，眼鏡1502包括針對(duì)每個(gè)眼睛的顯示光學(xué)系統(tǒng)1514，1514r和15141，在其中圖像數(shù)據(jù)被投射入用戶的眼睛中以生成圖像數(shù)據(jù)的顯示，同時(shí)用戶還透視顯示光學(xué)系統(tǒng)1514獲得現(xiàn)實(shí)世界的實(shí)際直接視圖。
[0048]每個(gè)顯示光學(xué)系統(tǒng)1514也被稱為透視顯示器，并且兩個(gè)顯示光學(xué)系統(tǒng)1514—起也可被稱為透視，意味著光學(xué)透視顯示器1514。
[0049]框架1515提供用于將該裝置的各元件保持在原位的支撐結(jié)構(gòu)以及用于電連接的管道。在該實(shí)施例中，框架1515提供了便利的眼鏡架作為對(duì)下面進(jìn)一步討論的該裝置的各元件的支撐?？蚣?515包括具有用于記錄聲音并向控制電路1536傳送音頻數(shù)據(jù)的話筒1510的鼻梁架1504。在此示例中，鏡腿臂1513被示出為包括眼鏡1502的控制電路1536。
[0050 ]如在圖5A和5B中例示出的是面向外的例如相機(jī)的圖像捕捉設(shè)備1613，用于記錄諸如靜止圖像(照片)、視頻或二者之類的數(shù)字圖像數(shù)據(jù)，以及將視覺(jué)記錄傳送給控制電路1536，控制電路1536進(jìn)而可將捕捉到的圖像數(shù)據(jù)發(fā)送給所述伴隨處理模塊1524，伴隨處理模塊1524還可通過(guò)一個(gè)或多個(gè)通信網(wǎng)絡(luò)1560將該數(shù)據(jù)發(fā)送給一個(gè)或多個(gè)計(jì)算機(jī)系統(tǒng)1512或另一個(gè)人A/V裝置。[0051 ]在另一實(shí)施例中，圖像生成單元1620被包括在每個(gè)鏡腿臂1513上。
[0052]如圖4B所示，眼鏡1502(或伴隨處理模塊1524)可以通過(guò)一個(gè)或多個(gè)通信網(wǎng)絡(luò)1560有線地和/或無(wú)線地(例如WiF1、藍(lán)牙、紅外、紅外個(gè)域網(wǎng)、RFID傳輸、WUSB、蜂窩、3G、4G或其他無(wú)線通信手段)與一個(gè)或多個(gè)計(jì)算機(jī)系統(tǒng)1512(無(wú)論是位于附近還是遠(yuǎn)程位置)、處于某個(gè)位置或環(huán)境中的其他眼鏡1508進(jìn)行通信。在一個(gè)實(shí)施例中，在圖9中還示出計(jì)算機(jī)系統(tǒng)1512的一些硬件組件的示例。組件的規(guī)模和數(shù)量可以因計(jì)算機(jī)系統(tǒng)1512的不同實(shí)施例而顯著變化。
[0053]應(yīng)用可以在計(jì)算機(jī)系統(tǒng)1512上執(zhí)行，其與在裝置1500中的一個(gè)或多個(gè)處理器上執(zhí)行的應(yīng)用進(jìn)行交互或?yàn)槠鋱?zhí)行處理。例如，3D地圖繪制應(yīng)用可以在裝置1500中的所述一個(gè)或多個(gè)計(jì)算機(jī)系統(tǒng)1512上執(zhí)行。
[0054]在圖4A和4B的所例示的實(shí)施例中，所述一個(gè)或多個(gè)計(jì)算機(jī)系統(tǒng)1512和裝置1500還具有對(duì)一個(gè)或多個(gè)3D圖像捕捉設(shè)備1520的網(wǎng)絡(luò)訪問(wèn)，所述3D圖像捕捉設(shè)備例如可以是一個(gè)或多個(gè)相機(jī)，相機(jī)在視覺(jué)上監(jiān)視一個(gè)或多個(gè)用戶和周圍空間，使得由所述一個(gè)或多個(gè)用戶執(zhí)行的姿勢(shì)和移動(dòng)以及包括表面和物體的周圍空間的結(jié)構(gòu)可被捕捉、分析和跟蹤。圖像數(shù)據(jù)以及在由一個(gè)或多個(gè)3D捕捉設(shè)備1520捕捉的情況下的深度數(shù)據(jù)可以補(bǔ)充由裝置1500的眼鏡1502上的一個(gè)或多個(gè)圖像捕捉設(shè)備1613所捕捉的數(shù)據(jù)。
[0055]圖5A是提供對(duì)硬件和軟件組件的支持的眼鏡1502的框架的眼鏡腿臂1513的側(cè)視圖。在框架1515前面描述了至少兩個(gè)面向物理環(huán)境的圖像捕捉設(shè)備1613(例如，可捕捉真實(shí)世界或場(chǎng)景的諸如視頻和靜止圖像之類的圖像(通常是彩色的)的相機(jī))中的一個(gè)。在一些示例中，圖像捕捉設(shè)備1613也可以是深度敏感的，例如它們可以是傳送和檢測(cè)紅外光的深度敏感相機(jī)，深度數(shù)據(jù)可從所述紅外光中被確定。
[0056]'控制電路1536提供支持眼鏡1502的其他組件的各種電子設(shè)備。在該示例中，右鏡腿臂1513包括用于眼鏡1502的控制電路1536，該控制電路包括處理器15210、處理器15210可訪問(wèn)的用于存儲(chǔ)處理器可讀指令和數(shù)據(jù)的存儲(chǔ)器15244、通信地耦合到處理器15210的無(wú)線接口 1537、以及為控制電路1536的各組件以及眼鏡1502的其他組件(如相機(jī)1613、話筒1510)提供電力的電源15239。處理器15210可以包括一個(gè)或多個(gè)處理器，所述處理器可以包括控制器、CPU、GPU和/或FPGA以及多個(gè)處理器核。
[0057]在實(shí)施例中，眼鏡1502可以包括其他傳感器。在鏡腿臂1502內(nèi)或安裝到鏡腿臂1502的是一耳機(jī)或一組耳機(jī)1630、包括一個(gè)或多個(gè)慣性傳感器的慣性感測(cè)單元1632、以及包括一個(gè)或多個(gè)位置或鄰近度傳感器的位置感測(cè)單元1644，位置感測(cè)單元的一些示例是GPS收發(fā)機(jī)、IR收發(fā)機(jī)或用于處理RFID數(shù)據(jù)的射頻收發(fā)機(jī)。
[0058]在該實(shí)施例中，在其操作中處理模擬信號(hào)的每個(gè)設(shè)備都包括與數(shù)字處理器15210和存儲(chǔ)器15244數(shù)字對(duì)接，并且為其相應(yīng)設(shè)備產(chǎn)生或轉(zhuǎn)換模擬信號(hào)或者既產(chǎn)生又轉(zhuǎn)換模擬信號(hào)的控制電路。處理模擬信號(hào)的設(shè)備的一些示例是用于下面所討論的每只眼睛的顯示光學(xué)系統(tǒng)15141、1514r的感測(cè)單元1644、1632和耳機(jī)1630以及話筒1510、圖像捕捉設(shè)備1613和相應(yīng)的IR照明器1634A、以及相應(yīng)的IR檢測(cè)器或相機(jī)1634B。
[0059]在又一個(gè)實(shí)施例中，安裝到鏡腿臂1515或其內(nèi)部的是產(chǎn)生表示圖像的可見(jiàn)光的圖像源或圖像生成單元1620。圖像生成單元1620可將虛擬物體顯示為出現(xiàn)在顯示器視野中的指定深度位置來(lái)提供虛擬物體的真實(shí)的、聚焦的三維顯示，該虛擬物體可以與一個(gè)或多個(gè)現(xiàn)實(shí)物體交互。
[0060]在一些實(shí)施例中，圖像生成單元1620包括微顯示器，用于投影一個(gè)或多個(gè)虛擬物體的圖像以及耦合諸如透鏡系統(tǒng)之類的用于將圖像從微顯示器引導(dǎo)到反射表面或元件1624的光學(xué)器件。反射表面或元件1624將光從圖像生成單元1620引導(dǎo)到光導(dǎo)光學(xué)元件1612中，光導(dǎo)光學(xué)元件將表示圖像的光引導(dǎo)到用戶的眼睛中。
[0061 ]圖5B是包括顯示光學(xué)系統(tǒng)1514的眼鏡1502的一側(cè)的實(shí)施例的俯視圖。眼鏡1502的框架1515的一部分將圍繞顯示光學(xué)系統(tǒng)1514以用于提供支撐和進(jìn)行電連接。為了示出眼鏡1502中的顯示光學(xué)系統(tǒng)1514(在該情況下是用于右眼系統(tǒng)的1514r)的各個(gè)組件，圍繞顯示光學(xué)系統(tǒng)的框架1515的一部分未被描繪。
[0062]在所例示的實(shí)施例中，顯示光學(xué)系統(tǒng)1514r是集成式眼睛跟蹤和顯示系統(tǒng)。該系統(tǒng)實(shí)施例包括用于增強(qiáng)虛擬圖像的對(duì)比度的不透明濾光器1514，在該示例中不透明濾光器1514處于可任選的透視透鏡1616之后并與之對(duì)齊，用于投影來(lái)自圖像生成單元1620的圖像數(shù)據(jù)的光導(dǎo)光學(xué)元件1612處于不透明濾光器1514之后并與之對(duì)齊，以及可任選的透視透鏡1618處于光導(dǎo)光學(xué)元件1612之后并與之對(duì)齊。
[0063]光導(dǎo)光學(xué)元件1612將來(lái)自圖像生成單元1620的光傳送到佩戴眼鏡1502的用戶(例如如圖1所示的用戶111)的眼睛1640。光導(dǎo)光學(xué)元件1612還允許眼睛1640通過(guò)光導(dǎo)光學(xué)元件1612接收到來(lái)自眼鏡1502的前方的光，如表示顯示光學(xué)系統(tǒng)1514r的光軸1542的箭頭所描繪的那樣，由此允許用戶除接收來(lái)自圖像生成單元1620的虛擬圖像之外，還具有眼鏡1502的前方空間的實(shí)際直接視圖。從而，光導(dǎo)光學(xué)元件1612的壁是透視的。在該實(shí)施例中，光導(dǎo)光學(xué)元件1612是平面波導(dǎo)。代表性的反射元件1634E表示一個(gè)或多個(gè)光學(xué)元件，比如反射鏡、光柵以及將表示圖像的可見(jiàn)光從平面波導(dǎo)引導(dǎo)向眼睛1640的其他光學(xué)元件。
[0064]紅外照明和反射也穿越平面波導(dǎo)以供眼睛跟蹤系統(tǒng)(或眼睛跟蹤器)1634跟蹤用戶的眼睛1640(通常為用戶的瞳孔)的位置和移動(dòng)。眼睛移動(dòng)也可包括眨眼。所跟蹤的眼睛數(shù)據(jù)可被用于諸如注視檢測(cè)、眨眼命令檢測(cè)以及收集指示用戶的個(gè)人存在狀態(tài)的生物測(cè)定信息之類的應(yīng)用。在一個(gè)實(shí)施例中，眼睛跟蹤器1634輸出指示了將由圖像捕捉設(shè)備1613成像或拍成視頻的場(chǎng)景中的興趣點(diǎn)的注視向量。在一個(gè)實(shí)施例中，顯示光學(xué)系統(tǒng)1514r的鏡頭被用作拍攝照片或視頻的取景器。
[0065]眼睛跟蹤系統(tǒng)1634包括眼睛跟蹤IR照明源1634A(紅外發(fā)光二極管(LED)或激光器(例如VCSEL))和眼睛跟蹤IR傳感器1634B(例如IR相機(jī)、IR光電檢測(cè)器的布置、或者用于跟蹤閃光位置的IR位置敏感檢測(cè)器(PSD))。在該實(shí)施例中，代表性的反射元件1634E還實(shí)現(xiàn)了雙向IR濾光，它將IR照明優(yōu)選地以光軸1542為中心地引導(dǎo)向眼睛1640，并從眼睛1640接收IR反射。波長(zhǎng)選擇性濾光器1634C讓來(lái)自反射表面或元件1624的可見(jiàn)光譜光通過(guò)，以及將來(lái)自眼睛跟蹤照明源1634A的紅外波長(zhǎng)照明引導(dǎo)到平面波導(dǎo)中。波長(zhǎng)選擇性濾光器1634D在朝向鼻梁架1504的光路方向上傳遞可見(jiàn)光和紅外照明。波長(zhǎng)選擇性濾光器1634D將來(lái)自波導(dǎo)的包括眼睛1640的紅外反射(優(yōu)選地包括光軸1542周圍捕捉的反射)的紅外輻射從被具體化為波導(dǎo)的光導(dǎo)光學(xué)元件1612引導(dǎo)到IR傳感器1634B。
[0066]與光導(dǎo)光學(xué)元件1612對(duì)齊的不透明濾光器1514選擇性地阻擋自然光穿過(guò)光導(dǎo)光學(xué)元件1612，來(lái)增強(qiáng)虛擬圖像的對(duì)比度。不透明濾光器1514幫助使虛擬物體的圖像表現(xiàn)得更真實(shí)并表示全范圍的顏色和強(qiáng)度。在該實(shí)施例中，用于不透明濾光器1514的電控制電路(未示出)通過(guò)路經(jīng)框架的電連接從控制電路1536接收指令。
[0067]再次，圖5A和5B示出了眼鏡1502的一半。對(duì)于所例示的實(shí)施例，完整的眼鏡1502可包括另一顯示光學(xué)系統(tǒng)1514以及本文所述的組件。
[0068]圖6-8是捕捉圖像的示例性方法的流程圖。在各實(shí)施例中，圖6-8中所示的框表示硬件(例如，處理器、存儲(chǔ)器、電路)、軟件(例如，操作系統(tǒng)、應(yīng)用、驅(qū)動(dòng)器、機(jī)器/處理器可執(zhí)行指令)或用戶的操作個(gè)體或其組合。如本領(lǐng)域普通技術(shù)人員將理解的，各實(shí)施例可以包括比示出的更多或更少的框。
[0069]圖6是示出一種用于通過(guò)基于興趣點(diǎn)的所確定的曝光量和視野捕捉圖像的方法的流程圖。在一實(shí)施例中，方法600由計(jì)算設(shè)備101以及圖1中示出的軟件組件中的至少一些來(lái)執(zhí)行。
[0070]框601示出接收指示在取景器中的注視方向的信息。在一個(gè)實(shí)施例中，計(jì)算設(shè)備101從眼睛跟蹤器105接收到注視向量108。在一個(gè)實(shí)施例中，注視向量108指示了在圖像捕捉設(shè)備104的取景器中的用戶111的興趣點(diǎn)。
[0071]框602示出了基于指示所述注視的方向的信息確定在取景器中的興趣點(diǎn)。在一個(gè)實(shí)施例中，點(diǎn)102b基于指示用戶的注視方向的信息(諸如注視向量108)來(lái)確定興趣點(diǎn)。
[0072]框603示出基于所述興趣點(diǎn)來(lái)確定捕捉圖像的曝光量。在一個(gè)實(shí)施例中，確定曝光量包括確定抵達(dá)用于捕捉圖像106的傳感器104a的光量，如圖1和3A-C所示。在一個(gè)實(shí)施例中，以勒克斯秒為單位來(lái)測(cè)量曝光量。
[0073]框604示出圍繞興趣點(diǎn)調(diào)整取景器中的視野。在一個(gè)實(shí)施例中，調(diào)整視野包括圍繞興趣點(diǎn)放大或縮小取景器上的圖像。在一個(gè)實(shí)施例中，圖像以預(yù)定量被縮放，諸如2x。在其他實(shí)施例中，用戶可以手動(dòng)或做姿勢(shì)來(lái)放大或縮小。
[0074]框605示出了以該曝光量和經(jīng)調(diào)整的視野捕捉圖像。在一個(gè)實(shí)施例中，圖像捕捉設(shè)備104通過(guò)所確定的曝光和所確定的視野捕捉圖像。在一個(gè)實(shí)施例中，圖像106被傳送給計(jì)算設(shè)備101并被存儲(chǔ)在存儲(chǔ)器102的圖像102d中，如圖1所示。圖像隨后由計(jì)算設(shè)備101檢索并查閱。在一實(shí)施例中，照片/視頻應(yīng)用102c檢索并呈現(xiàn)所儲(chǔ)存的圖像。
[0075]圖7是示出一種用于輸出用于捕捉圖像的信息的方法700的流程圖。
[0076]框701示出接收注視向量，例如圖1示出的注視向量108。
[0077]框702示出了基于所述注視向量確定在取景器中的興趣點(diǎn)。在一個(gè)實(shí)施例中，存儲(chǔ)在存儲(chǔ)器102中的點(diǎn)102b基于用戶的注視向量108確定興趣點(diǎn)。
[0078]框703示出基于所述興趣點(diǎn)來(lái)確定曝光量。在一個(gè)實(shí)施例中，確定曝光量包括確定如本文描述的抵達(dá)傳感器的光量。
[0079]框704示出確定在取景器中要從其縮放的點(diǎn)。在一實(shí)施例中，點(diǎn)102b確定興趣點(diǎn)。在一個(gè)實(shí)施例中，興趣點(diǎn)被用作取景器中用于放大或縮小的要從其縮放的點(diǎn)或錨。
[0080]框705示出輸出指示曝光量的第一信號(hào)和指示在取景器中要從其縮放的點(diǎn)的第二信號(hào)。在另一個(gè)實(shí)施例中，指示在興趣點(diǎn)周圍(或圍繞興趣點(diǎn))的縮放量也如在一個(gè)實(shí)施例中的邏輯框705所示被輸出。縮放量可以由照片/視頻應(yīng)用102c確定，并且在一個(gè)實(shí)施例中具體為縮放202。第一和第二信號(hào)(以及在一個(gè)實(shí)施例中的第三控制信號(hào))被包括在從計(jì)算設(shè)備101到圖像捕捉設(shè)備104的控制信號(hào)107中，如圖1所示。
[0081]圖8是示出一種用于輸出用于捕捉圖像的信息的方法800的流程圖。
[0082]框801示出從眼睛跟蹤器接收注視向量。
[0083]框802示出了基于所述注視向量確定在相機(jī)的取景器中的興趣點(diǎn)。
[0084]框803示出基于所述興趣點(diǎn)來(lái)確定曝光量。
[0085]框804示出確定在取景器中要從其縮放的點(diǎn)。
[0086]框805不出將指不曝光量的第一信號(hào)輸出給相機(jī)。
[0087]框806示出將指示在取景器中要從其縮放的點(diǎn)的第二信號(hào)輸出給相機(jī)。在一個(gè)實(shí)施例中，要從其縮放的點(diǎn)是所述興趣點(diǎn)。
[0088]框807示出向圖像提供圖像增強(qiáng)效果。在一個(gè)實(shí)施例中，增強(qiáng)203增強(qiáng)圖像，諸如圖像106。在一個(gè)實(shí)施例中，增強(qiáng)203可以包括濾鏡或其他圖像處理軟件組件或功能以圍繞興趣點(diǎn)銳化模糊線條。
[0089]框808示出將具有圖像增強(qiáng)效果的圖像存儲(chǔ)在存儲(chǔ)器中，例如如圖1所示的存儲(chǔ)器102 中。
[0090]框809示出從存儲(chǔ)器中檢索具有圖像增強(qiáng)效果的圖像以供用戶觀看。
[0091]圖9是可托管圖1和2中解說(shuō)的軟件組件中的至少一些的(并且在一實(shí)施例中對(duì)應(yīng)于計(jì)算設(shè)備101的)計(jì)算設(shè)備1800的一個(gè)實(shí)施例的框圖。在一個(gè)實(shí)施例中，圖像捕捉設(shè)備1820和眼睛跟蹤器1822被包括在計(jì)算設(shè)備1800中。在各實(shí)施例中，圖像捕捉設(shè)備1820和眼睛跟蹤器1822對(duì)應(yīng)于如圖1所示的圖像捕捉設(shè)備104和眼睛跟蹤器105。在一實(shí)施例中，計(jì)算設(shè)備1800是具有相機(jī)的移動(dòng)設(shè)備，諸如蜂窩電話或平板。眼睛跟蹤器105可與計(jì)算設(shè)備1800包括在一起或可在計(jì)算設(shè)備1800外部，諸如本文中描述的眼鏡。
[0092]在其最基本的配置中，計(jì)算設(shè)備1800通常包括一個(gè)或多個(gè)處理器1802，其包括一個(gè)或多個(gè)CPU和/或GPU以及一個(gè)或多個(gè)處理器核。計(jì)算設(shè)備1800還包括系統(tǒng)存儲(chǔ)器1804。取決于計(jì)算設(shè)備的確切配置和類型，系統(tǒng)存儲(chǔ)器1804可包括易失性存儲(chǔ)器1805(如RAM)、非易失性存儲(chǔ)器1807(如R0M、閃存等)或是兩者的某種組合。該最基本配置在圖9中由虛線1806來(lái)例示出。另外，設(shè)備1800還可具有附加特征/功能。例如，設(shè)備1800還可包含附加存儲(chǔ)(可移動(dòng)和/或不可移動(dòng))，其包括但不限于磁盤、光盤或磁帶。這樣的附加存儲(chǔ)在圖9中由可移動(dòng)存儲(chǔ)1808和不可移動(dòng)存儲(chǔ)1810來(lái)例示出。
[0093]設(shè)備1800還可包含允許該設(shè)備與其他設(shè)備通信的通信連接1812，如一個(gè)或多個(gè)網(wǎng)絡(luò)接口和收發(fā)機(jī)。設(shè)備1800還可具有諸如鍵盤、鼠標(biāo)、筆、話音輸入設(shè)備、觸摸輸入設(shè)備(觸摸屏)、姿勢(shì)輸入設(shè)備等輸入設(shè)備1814。還可包括諸如顯示器、揚(yáng)聲器、打印機(jī)等輸出設(shè)備1816。這些設(shè)備在本領(lǐng)域是公知的，因此不在此詳細(xì)討論。
[0094]在一個(gè)實(shí)施例中，用戶可以通過(guò)姿勢(shì)、觸摸或聲音向輸入設(shè)備1814鍵入輸入。在一個(gè)實(shí)施例中，輸入設(shè)備1814包括自然用戶界面(NUI)以接收并轉(zhuǎn)換來(lái)自用戶的聲音和姿勢(shì)輸入。在一個(gè)實(shí)施例中，輸入設(shè)備1814包括觸摸屏和話筒以用于接收并轉(zhuǎn)換用戶的觸摸或聲音(諸如聲音命令)。
[0095]一個(gè)或多個(gè)處理器1802、系統(tǒng)存儲(chǔ)器1804、易失性存儲(chǔ)器1805和非易失性存儲(chǔ)器1807通過(guò)一條或多條總線互連。在此實(shí)現(xiàn)中所使用的總線的細(xì)節(jié)對(duì)理解此處所討論的關(guān)注主題不是特別相關(guān)。然而，應(yīng)該理解，這樣的總線可以包括串行和并行總線、存儲(chǔ)器總線、夕卜圍總線、使用各種總線體系結(jié)構(gòu)中的任何一種的處理器或局部總線中的一個(gè)或多個(gè)。作為示例，這樣的架構(gòu)可以包括工業(yè)標(biāo)準(zhǔn)體系結(jié)構(gòu)(ISA)總線、微通道體系結(jié)構(gòu)(MCA)總線、增強(qiáng)型ISA(EISA)總線、視頻電子標(biāo)準(zhǔn)協(xié)會(huì)(VESA)局部總線、以及也稱為夾層總線的外圍部件互連(PCI)總線。
[0096]在一個(gè)實(shí)施例中，一個(gè)或多個(gè)處理器1802、易失性存儲(chǔ)器1805和非易失性存儲(chǔ)器1807被集成到片上系統(tǒng)(SoC，也稱為S0C)上，其是將計(jì)算設(shè)備或其他電子系統(tǒng)的電子組件和/或子系統(tǒng)集成到安置在單個(gè)封裝內(nèi)的單個(gè)半導(dǎo)體基板和/或單個(gè)芯片中的集成電路(IC)。例如，先前在個(gè)人計(jì)算機(jī)(PC)中的存儲(chǔ)器模塊子系統(tǒng)中的存儲(chǔ)器現(xiàn)在可被包括在SoC中。類似地，存儲(chǔ)器控制邏輯可被包括在SoC的處理器中而不是包括在分開地封裝的存儲(chǔ)器控制器中。
[0097]如本領(lǐng)域普通技術(shù)人員將理解的，其他電子組件可以被包括在SoC中。SoC可以包括數(shù)字的、模擬的、混合信號(hào)的，和/或射頻電路一一在單個(gè)半導(dǎo)體基板上的一個(gè)或多個(gè)。SoC可以包括振蕩器、鎖相環(huán)、計(jì)數(shù)器-計(jì)時(shí)器、實(shí)時(shí)計(jì)時(shí)器、加電復(fù)位發(fā)電機(jī)、外部接口(例如，通用串行總線(USB)、IEEE 1394接口(火線)、以太網(wǎng)、通用異步接收機(jī)/發(fā)射機(jī)(USART)和串行外圍總線(SPI))、模擬接口、電壓調(diào)節(jié)器和/或電源管理電路。
[0098]在替換的實(shí)施例中，SoC可以被系統(tǒng)級(jí)封裝(SiP)或?qū)盈B封裝(PoP)替換。在SiP中，多個(gè)芯片或半導(dǎo)體基板被安置在單個(gè)封裝中。在SiP實(shí)施例中，(諸)處理器核將可以在一個(gè)半導(dǎo)體基板上，而高性能存儲(chǔ)器將可以在第二半導(dǎo)體基板上，二者都被安置在單個(gè)封裝中。在一個(gè)實(shí)施例中，第一半導(dǎo)體基板通過(guò)線結(jié)合耦合至第二半導(dǎo)體基板。
[0099]在PoP實(shí)施例中，(諸)處理器核將可以在布置在第一封裝中的一個(gè)半導(dǎo)體管芯上，而高性能存儲(chǔ)器將可以在布置在第二不同封裝中的第二半導(dǎo)體管芯上。第一封裝和第二封裝隨后將通過(guò)標(biāo)準(zhǔn)接口被堆疊以在各封裝(具體而言在各半導(dǎo)體管芯)間路由信號(hào)。在一個(gè)實(shí)施例中，所堆疊的封裝接著可被耦合到將附加存儲(chǔ)器作為組件的印刷線路板。
[0100]在各實(shí)施例中，處理器包括執(zhí)行(或讀取)存儲(chǔ)在處理器可讀存儲(chǔ)器中的處理器(或機(jī)器)可讀指令的至少一個(gè)處理器核。處理器可讀指令的一示例可包括圖1中示出的控件102a、點(diǎn)102b、照片/視頻應(yīng)用102c以及圖像102d。處理器核還可以包括控制器、圖形處理單元(GPU)、數(shù)字信號(hào)處理器(DSP)和/或現(xiàn)場(chǎng)可編程門陣列(FPGA)。
[0101]在各實(shí)施例中，存儲(chǔ)器包括在集成電路上的一個(gè)或多個(gè)存儲(chǔ)器單元陣列。易失性存儲(chǔ)器的類型包括但不限于動(dòng)態(tài)隨機(jī)存取存儲(chǔ)器(DRAM)、基于分子電荷的(ZettaCore)DRAM、浮體DRAM和靜態(tài)隨機(jī)存取存儲(chǔ)器(“SRAM” ) ARAM的特定類型包括雙倍數(shù)據(jù)速率SDRAM(“DDR” )，或晚一代SDRAM(例如，“DDRn” )。
[0102]非易失性存儲(chǔ)器的類型包括但不限于以下類型:電可擦除可編程只讀存儲(chǔ)器(“EEPR0M”)、閃存(包括NAND和NOR閃存)、0N0閃存、磁阻或磁性RAM( “MRAM” )、鐵電RAM(“FRAM” )、全息介質(zhì)、奧弗辛斯基效應(yīng)的/相變、納米晶體、納米管RAM(NRAM-Nantero)、MEMS掃描探針系統(tǒng)、MEMS懸臂式開關(guān)、聚合物、分子、納米浮柵和單電子。
[0103]在一個(gè)實(shí)施例中，控件102a、點(diǎn)102b、照片/視頻應(yīng)用102c以及圖像102d的至少一些部分被存儲(chǔ)在存儲(chǔ)器(例如硬盤驅(qū)動(dòng)器)中。當(dāng)計(jì)算設(shè)備1800通電時(shí)，控件102a、點(diǎn)102b、照片/視頻應(yīng)用102c以及圖像102d的各部分被加載入RAM以供處理器1802執(zhí)行。在各實(shí)施例中，其他應(yīng)用可以存儲(chǔ)在硬盤驅(qū)動(dòng)器上以供由處理器1802執(zhí)行。
[0104]以上描述的計(jì)算設(shè)備1800僅僅是以上參考圖1和各個(gè)其他附圖討論的計(jì)算設(shè)備
101、圖像捕捉設(shè)備104和眼睛跟蹤器105的一個(gè)示例。如上所解釋的，存在此處中所述的各實(shí)施例可以使用的各種其他類型的計(jì)算設(shè)備。
[0105]附圖中的流程圖和框圖示出根據(jù)各實(shí)施例的系統(tǒng)(裝置)、方法和計(jì)算機(jī)(軟件)程序的可能實(shí)現(xiàn)的體系結(jié)構(gòu)、功能和操作。關(guān)于這個(gè)方面，流程圖或框圖中的每個(gè)框可表示一軟件組件。還應(yīng)當(dāng)注意，在一些替換實(shí)現(xiàn)中，框中提到的功能可不以附圖中提到的次序來(lái)發(fā)生。例如，連續(xù)示出的兩個(gè)框?qū)嶋H上可基本并發(fā)地執(zhí)行，或者取決于所涉及的功能，這些框有時(shí)可以相反的次序執(zhí)行。還注意，框圖和/或流程圖說(shuō)明中的每個(gè)框以及框圖和/或流程圖示意中各框的組合可由基于專用硬件的系統(tǒng)來(lái)實(shí)現(xiàn)，基于專用硬件的系統(tǒng)執(zhí)行指定的功能或動(dòng)作或?qū)Ｓ糜布蛙浖M件的組合。
[0106]在各實(shí)施例中，所示出和/或所描述的信號(hào)路徑是傳輸信號(hào)的介質(zhì)，諸如互連、傳導(dǎo)元件、觸頭、引腳、半導(dǎo)體基板中的區(qū)域、引線、金屬跡線/信號(hào)線或光電導(dǎo)體個(gè)體或其組合。在一個(gè)實(shí)施例中，多個(gè)信號(hào)路徑可以替代圖中所示的單個(gè)信號(hào)路徑，并且單個(gè)信號(hào)路徑可以替代圖中所示的多個(gè)信號(hào)路徑。在各實(shí)施例中，信號(hào)路徑可以包括總線和/或點(diǎn)到點(diǎn)連接。在一實(shí)施例中，信號(hào)路徑包括控制和數(shù)據(jù)信號(hào)線。在又一些其他實(shí)施例中，信號(hào)路徑是單向的(信號(hào)在一個(gè)方向上傳播)或雙向的(信號(hào)在兩個(gè)方向上傳播)或者是單向信號(hào)線和雙向信號(hào)線兩者的組合。
[0107]上述詳細(xì)描述只是為了說(shuō)明和描述的目的而提出的。這并不旨在窮舉本發(fā)明系統(tǒng)或?qū)⒈景l(fā)明系統(tǒng)限于所公開的精確形式。鑒于上述教導(dǎo)，許多修改和變型都是可能的。如本文中使用的，單數(shù)形式的“一”、“一個(gè)”以及“其”旨在也包括復(fù)數(shù)形式，除非上下文明確地以其他方式指示。選擇所述實(shí)施例以最好地解釋本發(fā)明系統(tǒng)的原理及其實(shí)踐應(yīng)用，從而允許本領(lǐng)域技術(shù)人員能夠在各種實(shí)施例中并采用各種適于所構(gòu)想的特定用途的修改來(lái)最好地利用本發(fā)明系統(tǒng)。本發(fā)明系統(tǒng)的范圍旨在由所附權(quán)利要求書來(lái)定義。
【主權(quán)項(xiàng)】
1.一種獲得圖像的方法，所述方法包括: 接收指示在取景器中的注視方向的信息； 基于所述指示注視方向的信息確定在所述取景器中的興趣點(diǎn)； 基于所述興趣點(diǎn)來(lái)確定捕捉圖像的曝光量； 圍繞所述興趣點(diǎn)調(diào)整所述取景器中的視野；以及 以所述曝光量和視野捕捉所述圖像。2.如權(quán)利要求1所述的方法，其特征在于，指示所述注視的方向的所述信息包括注視向量，其中所述注視向量是從眼睛跟蹤器接收的。3.如權(quán)利要求2所述的方法，其特征在于，調(diào)整所述視野包括圍繞所述興趣點(diǎn)數(shù)字放大。4.如權(quán)利要求3所述的方法，其特征在于，確定所述曝光量包括確定抵達(dá)用于捕捉所述圖像的傳感器的光量，其中所述曝光量是以勒克斯(Iux)秒為單位來(lái)測(cè)量。5.如權(quán)利要求4所述的方法，其特征在于，所述圖像被包括在照片和視頻中的一者中。6.如權(quán)利要求5所述的方法，其特征在于，還包括將具有所述曝光量和視野的圖像存儲(chǔ)到處理器可讀存儲(chǔ)器中。7.如權(quán)利要求6所述的方法，其特征在于，所述取景器包括顯示器并且權(quán)利要求6的方法還包括: 在所述處理器可讀存儲(chǔ)器中檢索具有所述曝光量和視野的所述圖像；以及 在所述顯示器上提供具有所述曝光量和視野的所述圖像。8.如權(quán)利要求7所述的方法，其特征在于，所述眼睛跟蹤器、取景器、傳感器和處理器可讀存儲(chǔ)器被封裝在相機(jī)、平板、電話和眼鏡中的一者中。9.如權(quán)利要求1所述的方法，其特征在于，所述指示注視方向的信息是從眼睛跟蹤器接收的，其中確定所述曝光量包括確定抵達(dá)捕捉所述圖像的傳感器的光量，還包括: 在所述處理器可讀存儲(chǔ)器中存儲(chǔ)具有所述曝光量和視野的所述圖像； 在所述處理器可讀存儲(chǔ)器中檢索具有所述曝光量和視野的所述圖像；以及 在所述取景器上提供具有所述曝光量和視野的所述圖像。10.如權(quán)利要求1所述的方法，其特征在于，進(jìn)一步包括: 基于所述興趣點(diǎn)在具有所述曝光量和視野的所述圖像上執(zhí)行圖像增強(qiáng)效果。11.一種裝置，包括: 取景器； 至少一個(gè)傳感器，所述傳感器響應(yīng)于指示曝光量的第一信號(hào)和指示在所述取景器中要從其縮放的點(diǎn)的第二信號(hào)捕捉所述取景器中的圖像； 至少一個(gè)眼睛跟蹤器，輸出指示在所述取景器中的注視的方向的注視向量； 至少一個(gè)處理器；以及 用于存儲(chǔ)處理器可讀指令的至少一個(gè)處理器可讀存儲(chǔ)器， 其中所述至少一個(gè)處理器執(zhí)行所述處理器可讀指令以: 接收所述注視向量； 基于所述注視向量確定在所述取景器中的興趣點(diǎn)； 基于所述興趣點(diǎn)確定曝光量； 確定在所述取景器中的要從其縮放的點(diǎn)；以及 輸出指示所述曝光量的所述第一信號(hào)和指示在所述取景器中要從其縮放的點(diǎn)的所述第二信號(hào)，其中所述要從其縮放的點(diǎn)是所述興趣點(diǎn)。12.如權(quán)利要求11所述的裝置，其特征在于，所述裝置包括眼鏡，并且所述取景器被投射在眼鏡的鏡片上。13.如權(quán)利要求11所述的裝置，其特征在于，所述裝置包括蜂窩電話，并且所述取景器被提供在所述蜂窩電話的觸摸屏上。14.如權(quán)利要求11所述的裝置，其特征在于，所述至少一個(gè)處理器執(zhí)行所述處理器可讀指令以進(jìn)行以下操作: 將所述圖像存儲(chǔ)在所述至少一個(gè)處理器可讀存儲(chǔ)器中；以及 從所述至少一個(gè)處理器可讀存儲(chǔ)器中檢索要在所述取景器上觀看的所述圖像。15.如權(quán)利要求11所述的裝置，其特征在于，所述至少一個(gè)處理器執(zhí)行所述處理器可讀指令以進(jìn)行以下操作: 基于所述興趣點(diǎn)在所述圖像上執(zhí)行圖像增強(qiáng)效果。
【文檔編號(hào)】H04N5/232GK105900415SQ201480072875
【公開日】2016年8月24日
【申請(qǐng)日】2014年12月24日
【發(fā)明人】Q·S·C·米勒, S·G·拉塔, D·斯蒂里
【申請(qǐng)人】微軟技術(shù)許可有限責(zé)任公司