專利名稱：處理數(shù)據(jù)以確定視覺(jué)場(chǎng)景中視覺(jué)模式的方法
技術(shù)領(lǐng)域：
本發(fā)明涉及一種處理表示用戶和其工作環(huán)境之間的交互的數(shù)據(jù) 的方法和系統(tǒng)。
背景技術(shù)：
在不同的領(lǐng)域(航空，宇宙空間，汽車，航海......)，駕駛航空、
宇宙空間、陸地或海洋交通工具的用戶與其交通工具上的環(huán)境的交互 在人類方面和機(jī)器方面被特別加以研究，以便改善例如駕駛員與車載 環(huán)境(儀表板......)之間的接口或駕駛程序(例如，飛機(jī)中的飛行程序)。
因此出于對(duì)用戶的舒適和安全考慮，以及同樣地出于對(duì)被輸送的 乘客的安全的考慮，這些研究旨在改善該接口的人機(jī)適應(yīng)性。
人們致力于例如改善交通工具上的儀表板接口元件(例如，飛機(jī) 中的駕駛和導(dǎo)航儀器)，以便其向駕駛員提供更多信息，以更符合人 機(jī)工程學(xué)的方式表示的信息、更為可靠的信息，以使得駕駛員盡可能 少的疲勞和緊張。
在研究駕駛員-交通工具上的環(huán)境的交互、或更為廣泛地說(shuō)，用 戶-工作環(huán)境的交互的背景下，擁有全新的方法研究這一交互將是有用的。

發(fā)明內(nèi)容
為此，本發(fā)明提出一種處理表示用戶和其工作環(huán)境的交互的數(shù)據(jù)
的方法，其特征在于包括以下步驟
-當(dāng)用戶與工作環(huán)境的至少一個(gè)接口元件交互時(shí)，獲取表示隨著 時(shí)間用戶視線在構(gòu)成其工作環(huán)境的一視覺(jué)場(chǎng)景的視覺(jué)元素上的位置
的數(shù)據(jù)，這些數(shù)據(jù)的獲取是由一個(gè)測(cè)眼設(shè)備進(jìn)行的，
-處理因此獲取的數(shù)據(jù)以確定包含一個(gè)視覺(jué)元素序列并隨著時(shí)間
重復(fù)幾次的至少一個(gè)一見(jiàn)覺(jué)才莫式(motif visuel)。
因此確定一個(gè)或幾個(gè)視覺(jué)模式，它們?cè)诨趶挠脩?例如一個(gè)駕 駛員)采集的測(cè)眼數(shù)據(jù)的基礎(chǔ)上的情景(scenario)中重復(fù)，該用戶 與在該情景中使用的工作環(huán)境(例如一個(gè)交通工具)的至少一個(gè)接口 元件進(jìn)行交互。
視覺(jué)場(chǎng)景的視覺(jué)元素例如是工作環(huán)境的接口元件(例如，交通工 具上的儀表板的接口元件)、多個(gè)這樣的元件的區(qū)域和/或同一接口元 件的不同區(qū)域和/或由這些接口元件提供的視覺(jué)信息(靜態(tài)的和/或動(dòng) 態(tài)的)。
對(duì)于一個(gè)航空器的駕駛員，視覺(jué)元素還可以包括外部顯示器。 本發(fā)明確定的這個(gè)或這些視覺(jué)模式提供極有價(jià)值的信息，例如， 它能被用于
-驗(yàn)證交通工具現(xiàn)有的使用程序(例如，飛機(jī)中的飛行程序)； -若同樣的模式在大部分用戶處得以確定則推薦該使用方式； -對(duì)用戶進(jìn)行評(píng)估；
-揭示例如艙內(nèi)儀表板和交通工具的儀器的接口元件的使用方 式，以及從外部視覺(jué)場(chǎng)景(滑行道，航線信標(biāo)，存在的交通工具，行 人，等)中獲取信息的方式；
-更好掌握用其他評(píng)估用戶一 接口元件的交互和交通工具總體 環(huán)境元素的方法得到的結(jié)果。
將注意到這數(shù)據(jù)定性處理能夠以確定任意的視覺(jué)模式或特定的 視覺(jué)模式的單個(gè)命令執(zhí)行。
同樣有可能的是執(zhí)行用于確定具有一個(gè)或多個(gè)滿足至少一個(gè)預(yù) 定標(biāo)準(zhǔn)的視覺(jué)元素的視覺(jué)模式的定性處理。
因此，例如，我們可以在一個(gè)航空器的導(dǎo)航儀器中尋找包括作為 視覺(jué)元素的航空器未來(lái)軌跡終點(diǎn)的視覺(jué)模式。
根據(jù)一項(xiàng)特征，本方法包括一個(gè)對(duì)獲取的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)處理的預(yù)
先步驟，并且用于確定至少一個(gè)視覺(jué)模式的數(shù)據(jù)處理步驟根據(jù)該統(tǒng)計(jì) 處理步驟的結(jié)果執(zhí)行。
這個(gè)統(tǒng)計(jì)處理可以在獲取的測(cè)眼數(shù)據(jù)中進(jìn)行分類，并且因此可簡(jiǎn) 化數(shù)據(jù)定性處理，因?yàn)楹笳呤窃谝驯唤y(tǒng)計(jì)處理(定量處理)的獲取數(shù) 椐上執(zhí)行。
定性處理因此使得計(jì)算時(shí)間縮短且計(jì)算量減小。
根據(jù)一項(xiàng)特征，獲取的數(shù)據(jù)的統(tǒng)計(jì)處理步驟隨著時(shí)間提供用戶注 視過(guò)的某些視覺(jué)元素的出現(xiàn)次數(shù)。
以此方式根據(jù)視覺(jué)元素的重要性和/或?qū)τ脩舳缘呐d趣點(diǎn)執(zhí)行 一見(jiàn)覺(jué)元素分類。
根據(jù)一項(xiàng)特征，旨在確定至少一個(gè)視覺(jué)模式的數(shù)據(jù)處理從出現(xiàn)次 數(shù)最高的視覺(jué)元素開(kāi)始執(zhí)行。
統(tǒng)計(jì)處理可以確定情景中最受用戶關(guān)注的視覺(jué)場(chǎng)景視覺(jué)元素或 為其工作環(huán)境，例如他的交通工具，定義的使用方式。
同樣可能的是從對(duì)應(yīng)于另一標(biāo)準(zhǔn)的視覺(jué)元素開(kāi)始進(jìn)行數(shù)據(jù)處理。
根據(jù)一項(xiàng)特征，數(shù)據(jù)獲取步驟提供與用戶隨著時(shí)間注視的至少某 些視覺(jué)元素相關(guān)的用戶視覺(jué)行為數(shù)據(jù)。
考慮到在數(shù)據(jù)定性處理時(shí)用戶的視覺(jué)行為，由于更大量信息的載 體，可以得到一個(gè)更為精細(xì)的視覺(jué)模式。
事實(shí)上我們知道用戶用何種方式》見(jiàn)看這些^L覺(jué)元素，換而言之用 注視、掃視或視線追蹤。因此可能的是把(測(cè)眼儀存儲(chǔ)的)用戶視覺(jué) 行為用作用于確定給定視覺(jué)元素相對(duì)于另一個(gè)視覺(jué)元素的重要性的 標(biāo)準(zhǔn)。
根據(jù)一項(xiàng)特征，數(shù)據(jù)獲取步驟在給定時(shí)間間隔期間執(zhí)行。 數(shù)據(jù)在情景或用戶工作環(huán)境，例如他的交通工具的使用方式或一
個(gè)電腦顯示屏展開(kāi)期間的一段觀察時(shí)期被釆集。
根據(jù)一項(xiàng)特征，數(shù)據(jù)獲取步驟在一個(gè)與使用用戶工作環(huán)境的給定
程序(例如，交通工具，顯示屏或手提電話的使用方式)運(yùn)行有關(guān)的
情景范圍內(nèi)被執(zhí)行。 我們因此把用戶(例如駕駛員)置于一個(gè)給定狀態(tài)，以便根據(jù)一 個(gè)眼睛測(cè)量分析評(píng)價(jià)他與其工作環(huán)境(例如交通工具上的儀表板)的 一個(gè)或多個(gè)接口元件的交互。
根據(jù)一項(xiàng)特征，用戶是一個(gè)與交通工具上的儀表板的接口元件交 互的交通工具駕駛員。例如，當(dāng)我們?yōu)橐患茱w機(jī)駕駛艙建模并且測(cè)眼 數(shù)據(jù)從建立的模型采集時(shí)，視覺(jué)模式的確定可被用于驗(yàn)證/完善該模 型。
根據(jù)一項(xiàng)特征，交通工具是機(jī)動(dòng)車。
本發(fā)明同樣旨在提供一種用于處理表示用戶和其工作環(huán)境之間
的交互的數(shù)據(jù)的系統(tǒng)，其特征在于包括
—當(dāng)用戶和工作環(huán)境的至少一個(gè)接口元件交互時(shí)，用于獲取表示
隨著時(shí)間用戶視線在構(gòu)成其工作環(huán)境的視覺(jué)場(chǎng)景的視覺(jué)元素上的位 置的測(cè)眼數(shù)據(jù)的獲取設(shè)備，
-用于處理由此獲取的數(shù)據(jù)以確定包含一個(gè)視覺(jué)元素序列并隨著 時(shí)間重復(fù)多次的至少一個(gè)視覺(jué)模式的裝置。 述。
、,- 、、 、、、、，5 ,、 、

其他特征和優(yōu)勢(shì)將在隨后僅僅作為非限制性例子并參考附圖的 描述過(guò)程中更加明顯，其中
-圖1表示根據(jù)本發(fā)明的數(shù)據(jù)處理方法的算法；
-圖2是表示根據(jù)本發(fā)明的數(shù)據(jù)處理系統(tǒng)的一個(gè)示意-圖3是表示圖2中所示的測(cè)眼儀16的一個(gè)示意-圖4是一個(gè)可視化屏幕的例子，它將作為前圖實(shí)現(xiàn)的例子的基
礎(chǔ)；
-圖5是一個(gè)作為出現(xiàn)在圖4顯示屏上的事件類型的函數(shù)的表示 出現(xiàn)次數(shù)的柱狀-圖6以示意圖的方式描繪視覺(jué)模式的檢測(cè)；
-圖7在圖4的顯示屏上示意示出圖6中檢測(cè)的視覺(jué)模式；
-圖8以示意方式示出視覺(jué)模式(無(wú)視覺(jué)行為)的檢測(cè)；
-圖9在圖4的顯示屏上示意示出圖8中檢測(cè)的視覺(jué)模式；
-圖10以示意方式以相關(guān)視覺(jué)行為示出視覺(jué)模式的檢測(cè)；
-圖11在圖4的顯示屏上示意示出圖10中檢測(cè)到的視覺(jué)模式。
具體實(shí)施例方式
本發(fā)明在航空器駕駛艙中具有特別意義的應(yīng)用是通過(guò)獲取和處 理測(cè)眼數(shù)據(jù)來(lái)評(píng)價(jià)駕駛員(用戶)和一個(gè)或幾個(gè)艙內(nèi)儀器(工作環(huán)境) 的視覺(jué)交互。
根據(jù)本發(fā)明本方法的通常算法以三個(gè)主要步驟被表示在圖1中。
在第一步驟El過(guò)程中，我們通過(guò)一臺(tái)測(cè)眼設(shè)備進(jìn)行測(cè)眼數(shù)據(jù)的 獲取，該測(cè)眼設(shè)備將在后面參考圖2和圖3作詳細(xì)敘述，。
這些數(shù)據(jù)表示當(dāng)駕駛員與飛機(jī)駕駛艙的一個(gè)或幾個(gè)接口元件交 互時(shí)，駕駛員視線(視覺(jué)路線)在構(gòu)成駕駛員工作環(huán)境的視覺(jué)場(chǎng)景視 覺(jué)元素上隨著時(shí)間的位置。
尤為特別的是，這些數(shù)據(jù)的獲取將可以跟隨瀏覽一個(gè)或幾個(gè)駕駛 艙艙內(nèi)儀器的駕駛員視線并且標(biāo)識(shí)引起駕駛員注意的視覺(jué)元素。我們 將在后面詳細(xì)敘述一個(gè)例子，其中測(cè)眼數(shù)據(jù)表示瀏覽同 一艙內(nèi)儀器的 不同視覺(jué)元素的駕駛員視線的位置。
圖1的算法包括第二步驟E2，在該過(guò)程中人們進(jìn)行先前獲取的 測(cè)眼數(shù)據(jù)的定量處理。
有時(shí)可被忽略的這一步驟可以通過(guò)例如以柱狀圖形式提供被駕 駛員隨著時(shí)間看過(guò)的某些視覺(jué)元素、甚至所有視覺(jué)元素的出現(xiàn)次數(shù)， 進(jìn)行測(cè)眼數(shù)據(jù)的統(tǒng)計(jì)處理。
因此，例如，該統(tǒng)計(jì)處理可以確定駕駛員已看過(guò)飛機(jī)空中軌道 56次而該軌道在地面的投影15次。
這一處理，例如，由一個(gè)由荷蘭瓦赫寧才艮市Noldus Information Technology BV公司發(fā)行的被稱為"The Observer"(觀察者)"的統(tǒng)
計(jì)分類軟件執(zhí)行。
若需關(guān)于該軟件更為詳盡的信息，可參考網(wǎng)站www.noldus.com。 我們?cè)谲浖休斎胍延涗浀臏y(cè)眼數(shù)據(jù)以及實(shí)驗(yàn)記錄，即駕駛員注
視的視覺(jué)場(chǎng)景視覺(jué)元素以及表示為例如注視、掃視或視線跟隨的他的
寺見(jiàn)覺(jué)行為。
然而將注意到，在隨后的數(shù)據(jù)處理中駕駛員視覺(jué)行為的考慮并不 總是必須的。
將注意到，在步驟E2時(shí)，被提供給定量處理模塊的視覺(jué)元素和 行為同樣可以來(lái)源于一個(gè)根據(jù)飛機(jī)駕駛艙建立的認(rèn)知模型。
圖1的算法包括隨后的第三步驟E3，數(shù)據(jù)定性處理，該數(shù)據(jù)或 者是未經(jīng)過(guò)步驟E2定量處理的獲取的測(cè)眼數(shù)椐，或者是在步驟E2 中被定量處理的獲取的測(cè)眼數(shù)據(jù)。
數(shù)據(jù)定性處理根據(jù)一個(gè)或一組已選擇的預(yù)定標(biāo)準(zhǔn)，構(gòu)成視覺(jué)場(chǎng)景 的視覺(jué)元素序列的一個(gè)或多個(gè)視覺(jué)模式，這些模式在指定的時(shí)間間隔 (觀察期間)中以同樣的方式重復(fù)數(shù)次。
因此可能的是，當(dāng)不事先執(zhí)行定量處理時(shí)，盡力獲取在指定時(shí)間 間隔期間產(chǎn)生的所有視覺(jué)模式，而不考慮特定的標(biāo)準(zhǔn)。
然而可能的是，確定包括一個(gè)或多個(gè)指定視覺(jué)元素的這個(gè)或這些 視覺(jué)模式，以便例如在設(shè)計(jì)過(guò)程中評(píng)價(jià)提供給駕駛員的關(guān)于一個(gè)儀器 的信息的用途。
當(dāng)考慮到統(tǒng)計(jì)處理步驟E2的結(jié)果時(shí)，同樣可以確定包括給定視 覺(jué)元素的一個(gè)或多個(gè)視覺(jué)模式，該給定視覺(jué)元素例如是一個(gè)與飛機(jī)軌 跡在地面的投影有關(guān)的視覺(jué)元素。
我們同樣可以搜索包括具有統(tǒng)計(jì)意義的視覺(jué)元素的視覺(jué)模式。
因此，例如可以搜索包括隨著時(shí)間以最大次數(shù)出現(xiàn)(最大出現(xiàn)次 數(shù))的視覺(jué)元素或符合此定義的前二或前三個(gè)視覺(jué)元素的視覺(jué)模式。
同樣可以選擇搜索包括具有另 一種統(tǒng)計(jì)意義，例如那些最不常被 駕駛員看的視覺(jué)元素，的視覺(jué)模式。
步驟E3的定性處理可由前面提及的Noldus公司發(fā)行的被命名為"Theme"的軟件執(zhí)行。
該軟件特別依靠一種事件序列的搜索算法，它開(kāi)始于在一個(gè)指定 的時(shí)間間隔期間搜索一個(gè)特別的第 一事件。
該軟件隨后預(yù)計(jì)，在該指定時(shí)間間隔期間搜索緊隨第 一事件并且 在第一事件出現(xiàn)后的指定時(shí)間內(nèi)產(chǎn)生的第二事件的出現(xiàn)(我們因此定
義第二時(shí)間間隔小于第一時(shí)間間隔)。
一旦標(biāo)識(shí)一組第 一事件和在第二時(shí)間間隔期間產(chǎn)生的第二事件，
我們則同樣著手搜索第三事件在第一時(shí)間間隔期間的出現(xiàn)并且它同 樣在第二事件出現(xiàn)后的指定時(shí)間(第三時(shí)間間隔)內(nèi)在第二事件之后出現(xiàn)。
我們因此用重復(fù)的方式來(lái)標(biāo)識(shí)事件序列。
為了更廣泛的信息，讀者可以參考Magnus S. Magnusson的題 為"發(fā)現(xiàn)行為中隱藏的時(shí)間模式T-模式和它們的檢測(cè) (Discovering hidden time patterns in behavior: T-patterns and their detection)" 的 文 章 , Behavior Research Methods，Instruments&Computers (行為研究方法、儀器及計(jì)算機(jī)) 2000, 32(1)， 93-1 10，第93-110頁(yè)，。
用有益的方式，我們把步驟E2的定性處理執(zhí)行成幾個(gè)子步驟
1 、搜索包括一個(gè)來(lái)自于統(tǒng)計(jì)處理的視覺(jué)元素N( N=l， 2， 3......)
的視覺(jué)模式；同時(shí)這一搜索在一個(gè)單個(gè)元素上進(jìn)行；
2、當(dāng)取得這些模式時(shí)，執(zhí)行以下定性處理
a) 考慮與視覺(jué)行為有關(guān)的數(shù)據(jù)(豐富數(shù)據(jù)庫(kù))，
b) 在第一步驟中被標(biāo)識(shí)的并且包括元素N的視覺(jué)模式中，考慮 視覺(jué)行為以便僅搜索由元素N、 M和R組成的合適的模式，而其他的 模式則例如被看作意義不大。
圖1算法的不同步驟由數(shù)據(jù)處理裝置(中央處理單元)協(xié)同數(shù)據(jù) 獲取以及數(shù)據(jù)存儲(chǔ)裝置(數(shù)據(jù)庫(kù)，存儲(chǔ)器......)執(zhí)行。
如圖2和3所示，測(cè)眼設(shè)備10可以記錄駕駛員視線在視覺(jué)場(chǎng)景 上的位置12，因此可以跟隨駕駛員視線在駕駛艙接口元件，如艙內(nèi)儀
器14以及外部顯示器上瀏覽的不同的視覺(jué)元素。該儀器將在后面參 照?qǐng)D4加以描述。
測(cè)眼設(shè)備IO包括一個(gè)模擬裝置16，即測(cè)眼儀，它記錄駕駛員眼 睛的移動(dòng)并向上面參考圖1描述的處理裝置17提供測(cè)眼數(shù)據(jù)。
測(cè)眼儀包括顯示在圖3上的幾個(gè)部件，即， 一個(gè)記錄眼睛移動(dòng)的 攝像機(jī)18, —個(gè)向眼睛發(fā)射紅外射線的紅外源20和一個(gè)記錄駕駛員 所見(jiàn)到的視覺(jué)場(chǎng)景的攝像機(jī)22。
因此，由攝像機(jī)18獲取的記錄眼睛移動(dòng)的視頻數(shù)據(jù)和由攝像機(jī) 22獲取的記錄駕駛員所見(jiàn)的視覺(jué)場(chǎng)景的視頻數(shù)據(jù)被一個(gè)視頻數(shù)據(jù)處 理單元24疊加在一起，并且駕駛員視線的實(shí)時(shí)位置由一個(gè)在進(jìn)行記 錄時(shí)駕駛員所看到的視覺(jué)場(chǎng)景中移動(dòng)的指針26表示出(例如， 一個(gè) 圓圏或一個(gè)十字針)。
使用單獨(dú)的測(cè)眼儀，雖然對(duì)外部顯示器足夠了，但如果希望記錄 駕駛員視覺(jué)路線特別精細(xì)的細(xì)節(jié)，例如閱讀文本或從例如儀器14的 顯示屏上的特定區(qū)域上獲取信息，則不能提供足夠的精度。
因此，為測(cè)眼儀關(guān)聯(lián)一個(gè)磁場(chǎng)發(fā)生器28以帶來(lái)最大精度(圖2)。
磁場(chǎng)發(fā)生器28被用作在三維空間中的參照以捕獲駕駛員頭部關(guān) 于構(gòu)成其真實(shí)環(huán)境的不同表面和平面的坐標(biāo)的位置。在這一點(diǎn)上，相
關(guān)表面和平面是對(duì)應(yīng)于構(gòu)成關(guān)注區(qū)域的駕駛艙顯示屏和控制板的表 面和平面，關(guān)注區(qū)域可被分解成關(guān)注區(qū)和子區(qū)，如我們之前在每一接 口元件看到的。對(duì)應(yīng)不同表面和平面的坐標(biāo)被測(cè)量并存儲(chǔ)在駕駛員環(huán) 境的3D模型中。
為了分析駕駛員頭部12的移動(dòng)，因此求助于磁場(chǎng)發(fā)生器28以及 一個(gè)借助一個(gè)飛行帽32固定在駕駛員頭部的接收器30和與前述模擬 裝置16 (測(cè)眼儀)相結(jié)合的元件，可獲得用戶視線在一個(gè)如在艙內(nèi)儀 表14上所示的視覺(jué)場(chǎng)景的視覺(jué)元素上的位置的最大精度。
更為特別的是，固定在駕駛員頭部的接收器30提供頭部在三維 模型中的準(zhǔn)確位置。
此頭部接收器30和記錄場(chǎng)景的攝像機(jī)22之間的距離，以及頭部接收器30和駕駛員雙眼12之間的距離隨后被引入三維模型中。前述 第 一段距離的參數(shù)對(duì)于執(zhí)行關(guān)于場(chǎng)景的攝像機(jī)校準(zhǔn)是必需的而第二 段距離對(duì)校準(zhǔn)模擬裝置(測(cè)眼儀)是必需的。
我們將注意到，通過(guò)結(jié)合由駕駛員頭部位置提供的數(shù)據(jù)以及其視 線位置提供的數(shù)據(jù)旨在帶來(lái)最大精確度的駕駛艙中前述測(cè)眼設(shè)備10 的調(diào)整(圖2)考慮到駕駛艙幾何學(xué)研究和駕駛員姿勢(shì)的研究12。
在進(jìn)行駕駛艙幾何學(xué)研究時(shí)，申請(qǐng)人注意到為了在駕駛艙中的一 個(gè)載體上安置磁場(chǎng)發(fā)生器28，應(yīng)該要保證發(fā)生器28和任何金屬表面 之間的距離要足夠大以便把可能與測(cè)眼設(shè)備生成的磁干擾減至最小。
此外，當(dāng)在駕駛艙內(nèi)部配置構(gòu)成測(cè)眼設(shè)備10的不同部件時(shí)，申 請(qǐng)人證實(shí)磁場(chǎng)生成器28和駕駛員頭部位置接收器30之間的距離應(yīng)該 嚴(yán)格小于駕駛員頭部位置接收器30和任何金屬表面之間的距離，這 仍然是為了盡可能減少磁干擾。
應(yīng)該注意駕駛員姿勢(shì)研究12可定義其移動(dòng)量的極限且因此定義 頭部接收器和磁場(chǎng)源之間的距離。
得益于測(cè)眼設(shè)備10，有可能非常精確地記錄構(gòu)成駕駛員觀看如 在儀表14上展示的航空視覺(jué)場(chǎng)景特定元素(駕駛艙面儀表和外部視 覺(jué)資料)的方式特征的諸如注視、掃視和視線跟隨的眼睛移動(dòng)(駕駛 員的視覺(jué)行為)。
構(gòu)成測(cè)眼設(shè)備10的元素，即模擬裝置16，磁場(chǎng)發(fā)生器28和帶 有頭部接收器30的一個(gè)飛4亍帽32，可從SensoMotoric Instruments GmbH, Warthestrasse 21， D-14513 Teltow， Allemagne公司獲得。
需要更多信息，讀者可訪問(wèn)網(wǎng)站www.smi.de
圖2和圖3上所示的艙內(nèi)儀器14以在圖4上詳細(xì)顯示的可視屏 幕的形式表示。
圖4的顯示屏40表示一個(gè)三維合成圖像以使航空器的位置以及 該航空器在其中活動(dòng)的環(huán)境可視化。
這一合成圖象根據(jù)航空器外部的一個(gè)視點(diǎn)建立并且在位于航空 器駕駛艙內(nèi)的可視化屏幕40上顯示該合成圖象可以改善駕駛員所具
有的對(duì)該航空器實(shí)際狀況的意識(shí)。
該可視化屏幕可以是一個(gè)特定的顯示屏或是一個(gè)已經(jīng)存在于航
空器上的顯示屏，例如搶內(nèi)儀器的導(dǎo)航屏幕ND (盎格魯撒克遜術(shù)語(yǔ) 是"Navigation Display")。
在該合成圖象中，多個(gè)圖形元素或符號(hào)被使用 一個(gè)符號(hào)42表 示航空器(飛機(jī)符號(hào))并指出其位置， 一個(gè)表示44描繪航空器在上 方活動(dòng)的地面，在航空器符號(hào)42和它在地面44上的垂直投影之間的 編號(hào)46的一條參考垂線和一個(gè)表示航空器未來(lái)軌跡的符號(hào)48。
符號(hào)42被固定在三維圖象中并當(dāng)駕駛員的視線停駐在可視化顯 示屏40上時(shí)為駕駛員提供一個(gè)持久且直接的參考。
地面44是可移動(dòng)并因此展示航空器模型四周的地形。
符號(hào)42表示航空器在傾斜、俯仰和蛇形飛行時(shí)的真實(shí)姿態(tài)。這 些信息被定性地轉(zhuǎn)到隨著這三個(gè)軸傾斜的這一符號(hào)上。
三維合成圖象還包括一個(gè)表示垂線46和地面44相交的符號(hào)50 以便能夠使航空器在地面上的垂直投影可視化(飛機(jī)符號(hào)在地面的投 影)。
此外我們將注意到垂線46包含由位于這條垂線上的水平刻度 52A組成的刻度尺52 (桅帆刻度"chelle de perroquet))，用于標(biāo) 明航空器下預(yù)定距離。
作為信息，在顯示屏40上還有一個(gè)表示航空器未來(lái)軌跡48在地 面44上垂直投影(投影于地面的軌跡)的符號(hào)54、在位于表示航空 器未來(lái)軌跡的符號(hào)48上的點(diǎn)58和對(duì)應(yīng)于這些點(diǎn)的在地面上的垂直投 影60之間許多垂線56 (軌跡的支撐垂線)。
例如，對(duì)應(yīng)于航空器在不同的時(shí)間或距離間隔中預(yù)計(jì)位置的點(diǎn)58。
我們將注意到合成圖象還包含一個(gè)表示在水平線64之上的航向 刻度尺62。
此外，合成圖象包含補(bǔ)充信息，它們例如被顯示在預(yù)置在三維顯 示上方的可視化顯示屏上的一個(gè)顯示欄66中。這些補(bǔ)充信息尤其可
以對(duì)應(yīng)于通常顯示在一個(gè)導(dǎo)航顯示屏ND上的匯報(bào)信息如風(fēng)(風(fēng)向和 風(fēng)力)、航空器速度、下一路點(diǎn)......
需要關(guān)于圖4所示合成圖象的更多細(xì)節(jié)，讀者可以參考?xì)W洲專利 中請(qǐng)EP1 460 384。
我們現(xiàn)在將借助例子描述圖1算法的分別關(guān)于圖2和圖3所示測(cè) 眼設(shè)備采集的數(shù)據(jù)的定量處理和定性處理的步驟E2和E3，用于ii見(jiàn)看 展示在圖4所示的艙內(nèi)儀器上的情景的駕駛員。
根據(jù)該考慮的情景，駕駛員被置于一個(gè)與對(duì)應(yīng)于接近山區(qū)的階段 的飛行程序的運(yùn)行相關(guān)的情景環(huán)境中。
在對(duì)應(yīng)于該情景的展現(xiàn)期間的指定時(shí)間間隔，駕駛員觀看在眼前 圖4所示類型的合成圖象上展現(xiàn)的情景，而測(cè)眼儀器記錄駕駛員眼睛 在合成圖象上的移動(dòng)。
這一時(shí)間間隔的持續(xù)時(shí)間，例如，等于15分鐘。
通過(guò)向數(shù)據(jù)定量處理軟件提供所考慮場(chǎng)景以及出現(xiàn)在涉及到的 艙內(nèi)儀器的合成圖象上的不同視覺(jué)元素或事件，可以進(jìn)行對(duì)測(cè)眼i殳備 10獲取的測(cè)眼數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析并且這一統(tǒng)計(jì)分析的結(jié)果以表示17 個(gè)所指出的事件的每一個(gè)出現(xiàn)次數(shù)的柱狀圖形式被繪在圖5上。
這些事件的每一個(gè)對(duì)應(yīng)于在駕駛員眼前展開(kāi)的視覺(jué)場(chǎng)景的視覺(jué) 元素及在視覺(jué)場(chǎng)景中吸引其視線的視覺(jué)元素。
這一處理使更有意義的統(tǒng)計(jì)元素和那些較無(wú)意義的統(tǒng)計(jì)元素都 顯示出來(lái)，并且特別是指出了最受駕駛員關(guān)注的元素，換而言之在視 覺(jué)場(chǎng)景展開(kāi)時(shí)被駕駛員看作最為重要的元素，是軌跡的終點(diǎn)，因?yàn)樗?在觀察時(shí)間間隔期間出現(xiàn)34次。
對(duì)應(yīng)右邊洼地頂點(diǎn)的視覺(jué)元素是對(duì)于駕駛員來(lái)說(shuō)根據(jù)重要性順 序位于第二位的事件，因?yàn)樗谟^察期間出現(xiàn)21次。
與這前兩個(gè)元素一致的重要性是根據(jù)在涉及的情景中飛機(jī)被假 定在合成圖象上位于所示飛機(jī)軌跡右邊洼地的一個(gè)山區(qū)降落的事實(shí) 來(lái)解釋的。
根據(jù)該統(tǒng)計(jì)處理的結(jié)果帶，還證實(shí)數(shù)字16和17的視覺(jué)元素或事
件以相同的出現(xiàn)次數(shù)排列于最后位置并分別涉及飛機(jī)符號(hào)在地面的 投影和左邊中部頂點(diǎn)。
在進(jìn)行駕駛員眼睛所視的視覺(jué)場(chǎng)景的視覺(jué)元素的統(tǒng)計(jì)分析之后，
我們轉(zhuǎn)到圖1的步驟E3以對(duì)以統(tǒng)計(jì)方式預(yù)先處理過(guò)的數(shù)據(jù)進(jìn)行一個(gè) 定性處理。
因此搜索在觀察時(shí)間間隔中以相同的方式重復(fù)至少 一 次的由視 覺(jué)場(chǎng)景的視覺(jué)元素構(gòu)成的序列(視覺(jué)模式)。
在具有統(tǒng)計(jì)信息特別是駕駛員對(duì)該事件的重視性信息的情況下， 可以根據(jù)檢測(cè)的對(duì)于某些視覺(jué)元素的重視性進(jìn)行對(duì)這些由視覺(jué)元素 構(gòu)成的系列或序列(視覺(jué)模式)的搜索。
還可以搜索一個(gè)或幾個(gè)視覺(jué)模式，涉及滿足不同于所考慮的視覺(jué) 元素重要性、例如在獲取信息過(guò)程中顏色的恰當(dāng)性的另 一標(biāo)準(zhǔn)的視覺(jué) 元素。
在數(shù)據(jù)定性處理時(shí)(其結(jié)果繪于圖6和圖7上)，并沒(méi)有考慮駕 駛員的視覺(jué)行為而且確定的視覺(jué)模式因此被看作是簡(jiǎn)單模式。
因此，在圖6上顯示了不同的視覺(jué)元素或事件，它們應(yīng)該在搜索 的一個(gè)視覺(jué)模式或一組視覺(jué)模式中找到。
涉及到下列元素
-軌跡支撐垂線，
-軌跡終點(diǎn)，
-左邊洼地頂點(diǎn)，
-地面投影軌跡，
-飛機(jī)符號(hào)。
這些成對(duì)的元素對(duì)應(yīng)于上面提到的定性處理軟件發(fā)現(xiàn)的子模式。 將注意到首先用定性處理軟件搜索包括軌跡終點(diǎn)的視覺(jué)元素。而 后，所述處理使得檢測(cè)在觀察期間關(guān)于軌跡支撐垂線的事件以及關(guān)于 軌跡終點(diǎn)的事件的連續(xù)出現(xiàn)，作為補(bǔ)充限制，在發(fā)生關(guān)于軌跡支撐垂 線的事件后足夠小的給定時(shí)間間隔期間發(fā)生關(guān)于軌跡終點(diǎn)的事件，。 在圖6右邊部分，在彼此上下排列的平行線100, 102， 104, 106，
108上用點(diǎn)表示了涉及的事件對(duì)照每一條線相對(duì)于時(shí)間刻度尺110的 出現(xiàn)，該時(shí)間刻度尺110用點(diǎn)以十分之一秒表示。
因此，數(shù)據(jù)定性處理使同樣重復(fù)三次的同一個(gè)視覺(jué)模式出現(xiàn)，其 由附圖標(biāo)記112， 114, 116標(biāo)識(shí)，其中關(guān)于軌跡支撐垂線的第一事件 被緊接著關(guān)于軌跡終點(diǎn)的第二事件。
同樣地，數(shù)據(jù)定性處理進(jìn)行到以相同的方式具有編號(hào)4和5的、 分別關(guān)于地面投影軌跡和飛機(jī)符號(hào)的兩個(gè)事件，并允許在涉及的觀察 期間標(biāo)識(shí)同一視覺(jué)模式，該視覺(jué)模式以附圖標(biāo)記118， 120， 122重復(fù) 三次，其中連續(xù)出現(xiàn)地面投影軌跡和飛機(jī)符號(hào)。
接續(xù)在軌跡支撐垂線和軌跡終點(diǎn)(l和2)之后且在關(guān)于地面投 影軌跡和飛機(jī)符號(hào)(4和5)的連續(xù)事件之前，加入應(yīng)作為第三元素 出現(xiàn)的關(guān)于左邊洼地頂點(diǎn)的最后事件，數(shù)據(jù)定性處理可確定以同樣的 方式重復(fù)兩次、標(biāo)識(shí)為124和126的纟見(jiàn)覺(jué)才莫式。這一才莫式對(duì)應(yīng)于一個(gè) 由駕駛員在給定觀察期間觀看兩次的視覺(jué)元素構(gòu)成的序列或系列。
圖7示出圖4所示類型的顯示屏并且它表示在駕駛員觀看的情景 展開(kāi)時(shí)飛機(jī)的合成圖象。
表示在圖7屏幕40上的合成圖象使隨著時(shí)間迅速生成的圖6的 視覺(jué)模式124顯示出來(lái)，正如我們能夠根據(jù)圖6的時(shí)間刻度110對(duì)它 進(jìn)行判斷。
因此，在此模式中駕駛員觀看的第 一事件或視覺(jué)元素是表示位于 屏幕底部的軌跡支撐垂線的1號(hào)元素。
被注視的第二元素是飛機(jī)軌跡終點(diǎn)，第三個(gè)對(duì)應(yīng)于左邊洼地頂 點(diǎn)，隨后駕駛員的視線放在地面投影軌跡(元素4)以便最終回到飛 機(jī)符號(hào)(元素5)。
因此確定的視覺(jué)模式長(zhǎng)度為5，因?yàn)樗婕皥?chǎng)景中的5個(gè)視覺(jué)元 素；而該視覺(jué)模式的級(jí)，即等級(jí)數(shù)，是3。
一個(gè)視覺(jué)模式的等級(jí)對(duì)應(yīng)于該模式中的子模式的嵌套數(shù)目且被 表示如下
級(jí)1: (a,b)
級(jí)2: (a(b，c)) 級(jí)3: (a(b(c，d))) 其中(x，y)表示一個(gè)級(jí)1的模式。
可注意到，視覺(jué)元素1和2構(gòu)成級(jí)1的視覺(jué)子模式，元素4和5 也是同樣，且由兩元素4和5構(gòu)成的視覺(jué)子模式與視覺(jué)元素3相結(jié)合 構(gòu)成級(jí)2的視覺(jué)模式。
這樣一個(gè)視覺(jué)模式的確定可以例如標(biāo)識(shí)在培訓(xùn)未來(lái)駕駛員時(shí)應(yīng) 該加以考慮的重要方面。
應(yīng)該注意，在上面提供的實(shí)現(xiàn)例子中跟隨了駕駛員在同一可視化 屏幕上的視覺(jué)路線，但同樣可以以類似的方式向駕駛員展示一個(gè)要求 他觀看兩個(gè)或兩個(gè)以上艙內(nèi)顯示器/儀器的情景。
因此可能的是，在證實(shí)駕駛員的視線從一個(gè)顯示器到另一個(gè)不停 來(lái)回移動(dòng)之后，進(jìn)行一個(gè)匯集被駕駛員在連續(xù)視覺(jué)來(lái)回移動(dòng)過(guò)程中看 過(guò)的元素或視覺(jué)事件的新顯示器的設(shè)計(jì)。
我們現(xiàn)在將描述另一個(gè)實(shí)施例，參照?qǐng)D8至圖ll用比較的方式 展示不考慮駕駛員的視覺(jué)行為和考慮駕駛員視覺(jué)行為時(shí)所獲得的結(jié) 果。
在此例中，我們考慮了以下視覺(jué)模式
-軌跡支撐垂線，
-軌跡終點(diǎn)，
-桅帆刻度尺。
包含這些視覺(jué)元素的視覺(jué)模式已由定性處理軟件在搜索根據(jù)事 先的統(tǒng)計(jì)處理結(jié)果選出的、包含軌跡終點(diǎn)元素的模式時(shí)找到。
以前述參照?qǐng)D6相同的方式， 一條臨時(shí)線對(duì)照每一個(gè)視覺(jué)元素或 事件被表示出，并且根據(jù)時(shí)間刻度110表示了在相應(yīng)線130， 132， 134 上這些事件中的每一個(gè)的出現(xiàn)。
的兩個(gè)事件的數(shù)據(jù)，以便搜索包含這兩個(gè)連續(xù)元素的視覺(jué)模式。
數(shù)據(jù)定性處理因此可以確定同一視覺(jué)才莫式的三次出現(xiàn)136， 138
和140，如圖8所示。
在數(shù)據(jù)定性處理中，隨后加入桅帆刻度事件，這可以標(biāo)識(shí)同一視 覺(jué)^^式的兩次出現(xiàn)142和144，每一個(gè)由以下事件或視覺(jué)元素的時(shí)間 系列構(gòu)成
-軌跡支撐垂線，
-軌跡終點(diǎn)，和
-桅帆刻度
隨后在圖9的可視化屏幕40上表示聯(lián)系駕駛員在觀察時(shí)間間隔 期間注視的連續(xù)的選定的視覺(jué)元素的視覺(jué)模式142。
視覺(jué)模式142在144的時(shí)間以盆開(kāi)的(d&al6e)方式一才莫一樣 地生成。
可以證實(shí)，確定的視覺(jué)模式長(zhǎng)度為3且級(jí)別為2，具有一個(gè)級(jí)l 的視覺(jué)子模式(視覺(jué)模式136)，它以獨(dú)立的方式出現(xiàn)一次(在模式 142之夕卜)。
在這個(gè)質(zhì)量分析第一步驟中，沒(méi)有考慮在處理時(shí)對(duì)應(yīng)于駕駛員視 覺(jué)行為的測(cè)眼數(shù)據(jù)，它使得可以找到上面所述的簡(jiǎn)單視覺(jué)模式。
在第二步驟中，加入對(duì)應(yīng)于駕駛員視覺(jué)行為(可以對(duì)應(yīng)于例如視 線掃視、長(zhǎng)時(shí)間注視或短時(shí)間注視)的數(shù)據(jù)，且搜索包含之前找到的
視覺(jué)模式視覺(jué)元素的視覺(jué)模式。
在圖10中，再現(xiàn)應(yīng)用于數(shù)據(jù)的定性處理結(jié)果，這些數(shù)據(jù)是關(guān)于 之前找到的模式的元素的事件。這些元素是軌跡支撐垂線、軌跡終點(diǎn) 和桅帆刻度。
通過(guò)檢測(cè)包含前述視覺(jué)元素的視覺(jué)模式并考慮駕駛員的視覺(jué)行 為，更大數(shù)量的信息被獲得，如圖IO的左邊部分作為例證，它標(biāo)識(shí)每 一個(gè)都受相關(guān)視覺(jué)行為影響的以下視覺(jué)元素或事件
-聚焦一長(zhǎng)時(shí)間注視
-軌跡支撐垂線 一 掃視
-軌跡一掃視
-軌跡一^豆時(shí)間注3見(jiàn)
-軌跡終點(diǎn) 一 短時(shí)間注視 -桅帆刻度一掃視
數(shù)據(jù)庫(kù)充滿表示駕駛員視覺(jué)行為的數(shù)據(jù)，定性處理可確定更為復(fù) 雜的、插入到這些元素一行為組(例如軌跡 一 掃視組)的模式中的 模式。
用同樣的方法進(jìn)行參照前圖已描述的內(nèi)容，數(shù)據(jù)定性處理軟件搜 索包含前兩個(gè)視覺(jué)元素的視覺(jué)模式，即聚焦一長(zhǎng)注視和軌跡支撐垂線
—掃視，用于標(biāo)識(shí)同一視覺(jué)模式150， 152和154，以及用于最終確定 對(duì)應(yīng)于隨著時(shí)間同樣地生成的同一才莫式的兩次出現(xiàn)156和158。
因此確定的復(fù)雜視覺(jué)模式以結(jié)構(gòu)的方式連接圖IO所示的六個(gè)視 覺(jué)元素或事件。
視覺(jué)模式156僅以數(shù)字的形式被描繪在圖11上，每一個(gè)數(shù)字表 示一個(gè)視覺(jué)元素以便不使示意圖繁瑣。 圏標(biāo)明注3見(jiàn)，而方形標(biāo)明掃#見(jiàn)。
因此確定的視覺(jué)模式長(zhǎng)度為6，級(jí)為3,且隨著時(shí)間自我完全重 復(fù)兩次(圖10的才莫式156和158 )。
在復(fù)雜視覺(jué)模式內(nèi)標(biāo)識(shí)的視覺(jué)子模式152,至于它，自我重復(fù)三 次(150， 152， 154)。
加上關(guān)于駕駛員視覺(jué)行為的視覺(jué)數(shù)據(jù)，因此得到有更為豐富信息 的視覺(jué)模式。駕駛員的視覺(jué)行為此外可以確定對(duì)這個(gè)或那個(gè)視覺(jué)元素 有興趣(長(zhǎng)時(shí)間注視)或無(wú)興趣。
可以減少繪于圖6至圖11中的對(duì)駕駛員一駕駛搶接口元件、這 些接口元件使用程序(例如，飛行程序......)的可能的改善實(shí)施例中
確定的不同視覺(jué)模式，或我們可以利用它來(lái)教授駕駛員自己培訓(xùn)使用 駕駛艙的接口元件。
作為例子，通過(guò)確定一個(gè)或幾個(gè)表征駕駛員對(duì)儀器的使用的視覺(jué) 模式，本發(fā)明可以確定位于駕駛員頭部上方高處的顯示系統(tǒng)(盎格魯 撒克遜語(yǔ)是"Head Up Display") 何時(shí)應(yīng)被用于優(yōu)化使用。本發(fā)明還 可以確定這樣一個(gè)顯示系統(tǒng)在一個(gè)具體類型的交通工具上是否被駕
駛員實(shí)際使用。
在另一例子中，本發(fā)明可考慮駕駛員在思想上建立一個(gè)其交通工 具在空間中位置的三維視覺(jué)表示，而且這僅僅是在艙內(nèi)儀器提供的二 維信息庫(kù)的基礎(chǔ)上。
本發(fā)明因此可以用作設(shè)計(jì) 一 個(gè)提供該交通工具在空間中位置的 三維視覺(jué)表示的新儀器的基礎(chǔ)。
本發(fā)明在確定艙內(nèi)儀表板的接口元件提供的真實(shí)有用信息方面 尤其具有優(yōu)勢(shì)。
事實(shí)上，得益于對(duì)測(cè)眼數(shù)據(jù)的獲取和定性處理，本發(fā)明可以為用 戶把必要的信息從不是特別有用或多余的信息中分離出來(lái)。
此外，本發(fā)明:故應(yīng)用于其他用戶一工作環(huán)境組中，例如與一個(gè)搶 內(nèi)儀表板交互的汽車、火車或輪船駕駛員，或者是與一臺(tái)電腦(鍵盤、 顯示屏......)進(jìn)行交互使其執(zhí)行的計(jì)算機(jī)軟件用戶，甚至是一個(gè)使用
其移動(dòng)電話的用戶......
本發(fā)明因此可以通過(guò)確定反映由用戶對(duì)交通工具、計(jì)算機(jī)、移動(dòng) 電話......接口元件的使用的視覺(jué)模式，評(píng)估用戶一 工作環(huán)境交互，并
且由此例如在用戶工作崗位人體工程學(xué)方面采取行動(dòng)。
權(quán)利要求
1.一種處理表示用戶(12)和其工作環(huán)境(14)之間的交互的數(shù)據(jù)的方法，其特征在于包括以下步驟當(dāng)用戶和工作環(huán)境的至少一個(gè)接口元件交互時(shí)，獲取(E1)表示隨著時(shí)間用戶視線在構(gòu)成其工作環(huán)境的一部分的視覺(jué)場(chǎng)景的視覺(jué)元素上的位置的數(shù)據(jù)，這些數(shù)據(jù)的獲取由測(cè)眼設(shè)備執(zhí)行，處理(E3)由此獲取的數(shù)據(jù)以確定包含一個(gè)視覺(jué)元素序列并隨著時(shí)間重復(fù)多次的至少一個(gè)視覺(jué)模式。
2. 根據(jù)權(quán)利要求1所述的方法，其特征在于所述至少一個(gè)視覺(jué) 模式的至少一個(gè)視覺(jué)元素滿足至少一個(gè)預(yù)定標(biāo)準(zhǔn)。
3. 根據(jù)權(quán)利要求1或2所述的方法，其特征在于包括一個(gè)對(duì)所 述獲取的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)處理的預(yù)先步驟(E2)，并且所述用于確定至 少一個(gè)視覺(jué)模式的數(shù)據(jù)處理步驟根據(jù)該統(tǒng)計(jì)處理步驟的結(jié)果執(zhí)行。
4. 根據(jù)權(quán)利要求3所述的方法，其特征在于所述獲取的數(shù)據(jù)的 統(tǒng)計(jì)處理步驟提供用戶隨著時(shí)間觀看至少一些視覺(jué)元素的發(fā)生次數(shù)。
5. 根據(jù)權(quán)利要求4所述的方法，其特征在于所述用于確定至少 一個(gè)視覺(jué)模式的數(shù)據(jù)處理從發(fā)生次數(shù)最高的視覺(jué)元素開(kāi)始執(zhí)行。
6. 根據(jù)權(quán)利要求1至5中任一項(xiàng)所述的方法，其特征在于所述 數(shù)據(jù)獲取步驟提供關(guān)于與用戶隨著時(shí)間觀看的至少一些視覺(jué)元素相 關(guān)聯(lián)的用戶視覺(jué)行為的數(shù)據(jù)。
7. 根據(jù)權(quán)利要求1至6中任一項(xiàng)所述的方法，其特征在于所述 數(shù)據(jù)獲取步驟在給定時(shí)間間隔期間執(zhí)行。
8. 根據(jù)權(quán)利要求1至7中任一項(xiàng)所述的方法，其特征在于所述 數(shù)椐獲取步驟在一個(gè)與使用用戶工作環(huán)境的給定程序的運(yùn)行相關(guān)聯(lián) 的情景范圍內(nèi)執(zhí)行。
9. 根據(jù)權(quán)利要求1至8中任一項(xiàng)所述的方法，其特征在于所述 用戶是與交通工具的車載儀表板接口元件交互的交通工具駕駛員。
10. 根據(jù)權(quán)利要求9所述的方法，其特征在于所述交通工具是 飛機(jī)。
11. 根據(jù)權(quán)利要求9所述的方法，其特征在于所述交通工具是 機(jī)動(dòng)車。
12. —種用于處理表示用戶(12 )和其工作環(huán)境(14 )之間的 交互的數(shù)據(jù)的系統(tǒng)，其特征在于包括當(dāng)用戶和工作環(huán)境的至少一個(gè)接口元件交互時(shí)，用于獲取表示隨著時(shí)間用戶視線在構(gòu)成其工作環(huán)境的一部分的視覺(jué)場(chǎng)景的視覺(jué)元素 上的位置的測(cè)眼數(shù)據(jù)的獲取設(shè)備(10)，用于處理由此獲取的數(shù)據(jù)以確定包含一個(gè)視覺(jué)元素序列并隨著 時(shí)間重復(fù)多次的至少一個(gè)視覺(jué)模式的裝置(17)。
全文摘要
本發(fā)明涉及一種處理表示用戶(12)和其工作環(huán)境(14)之間的交互的數(shù)據(jù)的方法，其特征在于包括以下步驟當(dāng)用戶與工作環(huán)境的至少一個(gè)接口元件交互時(shí)，獲取(E1)表示隨著時(shí)間用戶視線在構(gòu)成其工作環(huán)境的一部分的視覺(jué)場(chǎng)景的視覺(jué)元素上的位置的數(shù)據(jù)，這些數(shù)據(jù)的獲取是由一個(gè)測(cè)眼設(shè)備執(zhí)行的，處理(E3)由此獲取的數(shù)據(jù)以確定包含一個(gè)視覺(jué)元素序列并隨著時(shí)間重復(fù)多次的至少一個(gè)視覺(jué)模式。
文檔編號(hào)G01C23/00GK101356421SQ200680027037
公開(kāi)日2009年1月28日 申請(qǐng)日期2006年7月25日 優(yōu)先權(quán)日2005年7月25日
發(fā)明者A-L·斯達(dá)福尼 申請(qǐng)人:空中客車公司