專利名稱:圖像顯示系統(tǒng)、顯示裝置和顯示方法
技術領域:
本發(fā)明涉及圖像顯示系統(tǒng)、顯示裝置和顯示方法。具體而言,本 發(fā)明涉及顯示由成像裝置拍攝的圖像的技術,該成像裝置被放置在以 在顯示裝置的一部分上指定的速度移動的可移動體上。
背景技術:
在JP-A-2005-341604中描述了數(shù)據(jù)通信系統(tǒng)的一個例子。 在JP-A-2005-337863中描述了利用由照相機拍攝的圖像更新車 載導航系統(tǒng)所擁有的地形圖的技術。
在JP-T國2004-538681、 JP-T誦2004國537193和JP-T-2004-538679
中公開了擴充已被廣播并記錄到萬維網(wǎng)(WWW)的節(jié)目以享用它們
的嘗試。
發(fā)明內容
然而,目前還未提出一種允許用戶任意地指定可移動體的速度以 使得用戶能夠觀看在以指定速度移動的可移動體上拍攝的圖像的技術。
因此,本發(fā)明被設計用來允許用戶指定速度以觀看由以指定速度 移動的成像裝置實際拍攝的圖像。
根據(jù)本發(fā)明的一個實施例,提供了一種圖像顯示系統(tǒng),包括顯示 裝置、被放置在可移動體上用于拍攝圖像的成像裝置以及服務器裝 置。顯示裝置和成像裝置的每一個都能夠與服務器裝置通信。成像裝 置包括成像部件、速度檢測部件和控制部件,成像部件被配置為拍攝 圖像以獲得圖像數(shù)據(jù),速度檢測部件被配置為檢測可移動體的移動速 度并且生成指示所檢測的移動速度的速度信息,控制部件被配置為執(zhí)
行發(fā)送控制過程,使得由成像部件獲得的圖像數(shù)據(jù)和由速度檢測部件 生成的速度信息被發(fā)送到服務器裝置。服務器裝置包括可移動體速度 管理部件和控制部件,可移動體速度管理部件被配置為利用從成像裝 置發(fā)送來的速度信息管理上面放置有成像裝置的可移動體的移動速 度,控制部件被配置為執(zhí)行照相機識別過程和傳送控制過程,照相機 識別過程基于從顯示裝置發(fā)送來的速度指定信息檢查由可移動體速 度管理部件管理的可移動體的移動速度并識別與速度指定信息相匹 配的成像裝置,傳送控制過程使得圖像數(shù)據(jù)被從所識別的成像裝置發(fā) 送到顯示裝置。顯示裝置包括顯示部件和控制部件,顯示部件被配置 為執(zhí)行圖像顯示,控制部件被配置為執(zhí)行速度指定過程、圖像請求發(fā) 送過程和顯示過程,速度指定過程基于用戶輸入設置速度指定信息, 圖像請求發(fā)送過程向服務器裝置發(fā)送速度指定信息以發(fā)出對圖像數(shù) 據(jù)的請求,顯示過程接收響應于圖像請求發(fā)送過程而從服務器裝置發(fā) 送來的圖像數(shù)據(jù)并使得顯示部件基于所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
根據(jù)本發(fā)明的另一個實施例,提供了一種圖像顯示系統(tǒng),包括顯 示裝置、被放置在可移動體上用于拍攝圖像的成像裝置以及服務器裝 置。顯示裝置和成像裝置的每一個都能夠與服務器裝置通信。成像裝 置包括成像部件、速度檢測部件和控制部件,成像部件被配置為拍攝 圖像以獲得圖像數(shù)據(jù),速度檢測部件被配置為檢測可移動體的移動速 度并且生成指示所檢測的移動速度的速度信息,控制部件被配置為執(zhí) 行發(fā)送控制過程,使得由成像部件獲得的圖像數(shù)據(jù)和至少包括在通過 拍攝圖像獲得圖像數(shù)據(jù)時由速度檢測部件生成的速度信息的附加數(shù) 據(jù)被發(fā)送到服務器裝置。服務器裝置包括存儲部件和控制部件,存儲 部件被配置為存儲從成像裝置發(fā)送來的圖像數(shù)據(jù)和附加數(shù)據(jù),控制部 件被配置為執(zhí)行搜索/發(fā)送控制過程,該過程基于從顯示裝置發(fā)送來的 速度指定信息搜索存儲在存儲部件中的圖像數(shù)據(jù),并且使得找到的圖 像數(shù)據(jù)被從存儲部件讀出并被發(fā)送到顯示裝置。顯示裝置包括顯示部 件和控制部件,顯示部件被配置為執(zhí)行圖像顯示,控制部件被配置為
執(zhí)行速度指定過程、圖像請求發(fā)送過程和顯示過程,速度指定過程基 于用戶輸入設置速度指定信息,圖像請求發(fā)送過程向服務器裝置發(fā)送 速度指定信息以發(fā)出對圖像數(shù)據(jù)的請求,顯示過程接收響應于圖像請 求發(fā)送過程而從服務器裝置發(fā)送來的圖像數(shù)據(jù)并使得顯示部件基于 所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
根據(jù)本發(fā)明的又一個實施例,提供了一種顯示裝置,包括顯示部 件、通信部件和控制部件,顯示部件被配置為執(zhí)行圖像顯示,通信部 件被配置為與外部服務器裝置進行數(shù)據(jù)通信,控制部件被配置為執(zhí)行 速度指定過程、圖像請求發(fā)送過程和顯示過程,速度指定過程基于用 戶輸入設置速度指定信息,圖像請求發(fā)送過程經(jīng)由通信部件向服務器 裝置發(fā)送速度指定信息以發(fā)出對圖像數(shù)據(jù)的請求,顯示過程使得通信 部件接收響應于圖像請求發(fā)送過程而從服務器裝置發(fā)送來的圖像數(shù) 據(jù)并且使得顯示部件基于所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
根據(jù)本發(fā)明的又一個實施例,提供了一種顯示方法,包括以下步
驟基于用戶輸入設置速度指定信息;向外部服務器裝置發(fā)送速度指 定信息以發(fā)出對圖像數(shù)據(jù)的請求;以及接收響應于請求而從服務器裝 置發(fā)送來的圖像數(shù)據(jù),并且基于所接收的圖像數(shù)據(jù)進行顯示。
根據(jù)本發(fā)明,通過指定速度,顯示裝置的用戶能夠看見實際由被 放置在以指定速度移動的可移動體上的成像裝置拍攝的圖像。這種外 部成像裝置的例子包括被另一人佩戴的成像裝置;附接到汽車、火 車等的成像裝置;被放置在動物、鳥類等上的成像裝置。
系統(tǒng)操作的例子包括拍攝的圖像數(shù)據(jù)被實時地通過服務器裝置 從成像裝置傳送到顯示裝置的操作;以及在成像裝置中拍攝的圖像數(shù) 據(jù)被存儲在服務器裝置中,并且所存儲的圖像數(shù)據(jù)被讀出并提供給顯 示裝置的操作。
在實時傳送的情況下,服務器裝置使用可移動體速度管理部件來 辨別每個可移動體的移動速度。因而,當從顯示裝置接收到速度指定 信息時,服務器裝置能夠識別與速度指定信息相匹配的成像裝置。服 務器裝置使得圖像數(shù)據(jù)從所識別的成像裝置被傳送到顯示裝置。顯示裝置接收并顯示圖像數(shù)據(jù)。結果,顯示裝置的用戶可以看見由以與指 定速度相對應的速度移動的成像裝置拍攝的當前場景的顯示圖像。
在圖像數(shù)據(jù)被存儲在服務器裝置中的情況下,由被放置在可移動 體上的成像裝置通過拍攝圖像獲得的圖像數(shù)據(jù)與附加數(shù)據(jù)一 同被發(fā) 送到服務器裝置,附加數(shù)據(jù)包括指示圖像拍攝時的移動速度的速度信 息,并且圖像數(shù)據(jù)和附加數(shù)據(jù)被存儲在服務器裝置中。因此,由多個 場所的大量成像裝置拍攝的圖像的圖像數(shù)據(jù)與其速度信息一同被累 積在服務器裝置中。因而,如果在顯示裝置的一部分上指定一個速度 并且指示指定速度的速度指定信息被發(fā)送到服務器裝置,則服務器裝 置能夠基于速度指定信息搜索存儲在其中的圖像數(shù)據(jù)。服務器裝置取 得與速度指定信息相匹配的圖像數(shù)據(jù),并且將所取得的圖像數(shù)據(jù)發(fā)送 到顯示裝置。顯示裝置接收并顯示圖像數(shù)據(jù)。結果,顯示裝置的用戶 可以看見由以指定速度移動的成像裝置拍攝的過去場景的顯示圖像。
根據(jù)本發(fā)明,通過指定速度,顯示裝置的用戶可以看見由正以(或 者過去以)指定速度移動的成像裝置拍攝的圖像。因而,本發(fā)明允許 用戶體驗可從以多種速度移動的可移動體上看到的場景。
此外,因為用戶能夠利用例如地像指定位置,所以用戶可以 看見在某一位置處以某一速度移動時可以看到的場景。當希望檢查當 在可以指定的某一場所處以某一速度移動時可以看見的場景時,或者 當希望欣賞這一場景時,這是優(yōu)選的。
此外,因為用戶能夠指定日期/時間,所以用戶可以看見當在某 一日期/時間以某一速度移動時可以看見的場景。因而,可以向用戶提 供多種場景。
圖1是示出根據(jù)本發(fā)明一個實施例的成像/顯示裝置的示例性外
觀的圖示;
圖2A和2B是示出根據(jù)本發(fā)明一個實施例的成像裝置和顯示裝 置的示例性外觀的圖示;
圖3是圖示根據(jù)本發(fā)明一個實施例的示例性系統(tǒng)配置的圖4是根據(jù)本發(fā)明一個實施例的成像/顯示裝置的框圖5是根據(jù)本發(fā)明一個實施例的成像裝置的框圖6是根據(jù)本發(fā)明一個實施例的顯示裝置的框圖7是根據(jù)本發(fā)明一個實施例的成像裝置和顯示裝置的框圖8是根據(jù)本發(fā)明一個實施例的服務器裝置的框圖9是根據(jù)本發(fā)明一個實施例的示例性系統(tǒng)操作I的流程圖10是圖示根據(jù)本發(fā)明 一個實施例的照相機位置/速度管理表的
圖11是圖示根據(jù)本發(fā)明 一個實施例的示例性系統(tǒng)操作II的圖; 圖12是圖示根據(jù)本發(fā)明一個實施例的速度圖像數(shù)據(jù)庫的圖; 圖13是根據(jù)本發(fā)明一個實施例的示例性系統(tǒng)操作II的流程圖; 圖14A至14D是在本發(fā)明的一個實施例中當指定位置和速度時 使用的圖像的圖示;以及
圖15A至15D是在本發(fā)明的一個實施例中要顯示的拍攝圖像的圖示。
具體實施例方式
下文中將描述根據(jù)本發(fā)明優(yōu)選實施例的圖像顯示系統(tǒng)、顯示裝置 和顯示方法。根據(jù)優(yōu)選實施例的成像/顯示裝置1和顯示裝置40對應 于權利要求中所記載的顯示裝置,并且在優(yōu)選實施例中,根據(jù)本發(fā)明 的顯示方法表現(xiàn)為成像/顯示裝置1或顯示裝置40的處理過程。同時, 根據(jù)優(yōu)選實施例的成像/顯示裝置1和成像裝置30對應于權利要求中 所記栽的成像裝置。因此,根據(jù)優(yōu)選實施例的成像/顯示裝置1能夠充 當所附權利要求中記栽的顯示裝置和成像裝置。
下面的描迷遵循以下順序。
[1.成像/顯示裝置、成像裝置和顯示裝置的示例性外觀
[2.系統(tǒng)配置
3.成像/顯示裝置、成像裝置、顯示裝置和服務器裝置的示例性
結構I
[4.示例性的系統(tǒng)操作I
5.示例性的系統(tǒng)操作II
6.實施例的效果、示例性的變型和示例性的擴展l
[1.成像/顯示裝置、成像裝置和顯示裝置的示例性外觀
圖1圖示了成像/顯示裝置1的示例性外觀。該成像/顯示裝置1 可以由用戶佩戴作為眼鏡形狀的顯示照相機。
成像/顯示裝置1具有含框架結構的佩戴單元,框架結構例如圍 繞頭部兩側從兩個太陽穴區(qū)域向枕骨區(qū)延伸,并且在被用戶戴上時, 佩戴單元放置在耳朵上,如該圖所示。
成像/顯示裝置1具有被設計用于左眼和右眼的一對顯示面板部 件2a和2b,并且當成像/顯示裝置l被用戶以如圖1所示的方式佩戴 時,顯示面板部件2a和2b布置在用戶眼睛的前部(即,在普通眼鏡 的鏡片所在的位置處)。例如,液晶面板被用于顯示面板部件2a和 2b,并且顯示面板部件2a和2b能夠進入透視(see-through )狀態(tài), 即透明或半透明狀態(tài),如該圖中透射控制所示。顯示面板部件2a和 2b能夠進入透視狀態(tài)的能力允許用戶在他或她佩戴眼鏡的任何時刻 佩戴成像/顯示裝置l,而不會干擾他或她的日常生活。
另外,成像/顯示裝置1具有被布置為面向前方的圖像拾取透鏡 3a,以對處于在成像/顯示裝置1被用戶戴上的同時用戶所看見的方向 上的場景成像。
另外,成像/顯示裝置1具有在圖像拾取透鏡3a拍攝圖像的方向 上提供照明的發(fā)光部件4a。發(fā)光部件4a例如由發(fā)光二極管(LED) 形成。
另外,成像/顯示裝置l具有一對耳機揚聲器5a,當成像/顯示裝 置1被用戶戴上時,這對耳機揚聲器5a可以插入到用戶的右耳孔和 左耳孔中。注意,在圖中只示出了左耳機揚聲器5a。
另外,成像/顯示裝置l具有用于收集外部聲音的麥克風6a和6b。
麥克風6a和6b分別被布置在右顯示面板部件2a的右側和左顯示面 板部件2b的左側。
注意,圖l僅僅示出了一個例子,并且對于用戶佩戴成像/顯示 裝置1來說,各種結構都是可能的。 一般來說,對于佩戴單元的要求 是其呈眼鏡形狀或者是頭戴式類型,以使得顯示面板部件2a和2b例 如被布置在用戶眼睛的前方且靠近用戶眼睛,并且圖像拾取透鏡3a 拍攝圖像的方向是用戶眼睛朝向的方向,即向前方向。還要注意,盡 管這對顯示面板部件2a和2b可以設置用于兩只眼睛,如上所述,但 是可以只提供一個顯示部件以用于一只眼睛。
還要注意,圖像拾取透鏡3a拍攝圖像的方向不一定與用戶眼睛 朝向的方向一致,例如,圖像拾取透鏡3a可以對側向或后向成像。
還要注意,成像/顯示裝置1不一定具有左和右立體聲揚聲器5a, 而是可以只具有一個耳機揚聲器5a以插入到一只耳孔中。還要注意, 麥克風的數(shù)目可以是一個。即,成像/顯示裝置1可以只具有麥克風 6a和6b中的一個。還要注意,成像/顯示裝置1不是一定帶有麥克風 或耳機揚聲器。
還要注意,成像/顯示裝置1不是一定具有發(fā)光部件4a。
盡管成像/顯示裝置1的佩戴單元已被描述為呈眼鏡形狀或者是 頭戴式類型,但是供用戶佩戴成像/顯示裝置的佩戴單元可以是任何類 型的,例如頭戴式耳機型、圍頸型、耳后型等等。另外,成像/顯示裝 置可以經(jīng)由固定設備(例如夾子)附接到普通的眼鏡、帽舌、頭戴式 耳機等等,以使得成像/顯示裝置可以被用戶佩戴。還要注意,成像/ 顯示裝置不一定要戴在用戶的頭部。
圖1中所示的成像/顯示裝置1是用戶要佩戴的設備,在該設備 中,用于成像的組件和用于監(jiān)視圖像的顯示面板部件2a和2b被集成 在一個單元中。然而,存在用戶佩戴的設備的其他示例,例如圖2A 中所示的成像裝置30和圖2B中所示的顯示裝置40。
圖2A中所示的成像裝置30利用預定佩戴框架佩戴在用戶的太 陽穴區(qū)之一上。成像裝置30具有圖像拾取透鏡3a和發(fā)光部件4a,這
兩個部件被布置為面向前方以對處于在成像裝置30被用戶戴上的同 時用戶所看見的方向上的場景成像。另外,成像裝置30具有用于收 集外部聲音的麥克風6a。
即,成像裝置30是不具有顯示能力但是具有在被用戶佩戴時對 用戶視場內的場景成像的能力的設備,與上述成像/顯示裝置1的情況 一樣,成像裝置30可以具有用于佩戴的多種形狀、結構和組件。
圖2B中所示的顯示裝置40是呈腕表形狀的顯示裝置。顯示裝 置40具有顯示面板部件2a,在顯示裝置40利用腕帶被佩戴在用戶手 腕上的同時,用戶可以看見顯示面板部件2a。
盡管圖2B中所示的顯示裝置40假定了腕表的形狀,但是用戶 要佩戴或攜帶的顯示裝置40可以具有用于佩戴或攜帶的多種形狀和 結構。例如,顯示裝置40可以是可被用戶攜帶的小型便攜式設備。 另外,顯示裝置40可以是眼鏡形設備以由用戶佩戴(即,類似于圖1 中所示的成像/顯示裝置1的設備,除了該設備不具有成像能力以外)。
盡管用戶要攜帶的顯示裝置40可以是專用于顯示以進行監(jiān)視的 設備,但是具有顯示能力的其他類型的設備,例如移動電話、便攜式 游戲機和個人數(shù)字助理(PDA),也可以充當根據(jù)本實施例的顯示裝 置40。
另外,除了可以被用戶佩戴或攜帶的這些設備以外,固定顯示裝 置、計算機裝置、電視接收機、車內顯示監(jiān)視器等等也可以用作根據(jù) 本實施例的顯示裝置40。
盡管圖2A中所示的成像裝置30和圖2B中所示的顯示裝置40 可以彼此獨立地使用,但是成像裝置30和顯示裝置40這兩者都可以 被用戶佩戴并且被組合用作成像/顯示裝置。在這種情況下,成像裝置 30和顯示裝置40可以彼此執(zhí)行數(shù)據(jù)通信,以使得顯示裝置40顯示由 成像裝置30拍攝的圖像以進行監(jiān)視,或者顯示例如從外部發(fā)送的圖 像。
在本實施例中假定成像/顯示裝置1和顯示裝置40被人類用戶使 用,并且成像裝置30被放置在包括人在內的多種可移動體上并因此
被使用。盡管圖2A中所示的成像裝置30假定被人佩戴以對該人的視 場內的場景成像,但是存在被放置在除了人以外的其他可移動體上的 多種其他的成像裝置30。
除了人以外的可移動體的示例包括非人類動物、在地面上行進的 設備、在海面上行進的設備、在海面下行進的設備、通過空氣行進的 設備以及在地球大氣層外行進的設備。
非人類動物的示例包括鳥、哺乳動物、爬行動物、兩棲動物、魚、 昆蟲以及多種其他動物。
在地面上行進的設備的例子包括自動車輛(例如小汽車、卡車、 巴士車、出租車和摩托車)以及人力車輛(例如自行車、黃包車和玩 具車)。其他例子包括軌道車輛,例如火車和蒸汽機車。另外的例子 包括在游樂園等中騎馬以及用在工廠或其他場所中的商用車輛。在地 面上行進的設備并不限于人們所乘的可移動體。例如,被設計用于商 用或娛樂用的各種類型的機械和諸如無線電控制的玩具之類的玩具 也是在地面上行進的設備的例子。
在海面上行進的設備的例子包括多種船只,例如海船、小艇、個 人船只、沖浪板、劃艇、救生圏和救生艇。
在海面下行進的設備的例子包括潛水艇、自動水下車輛和諸如水 中呼吸器之類的潛水裝備。
通過空氣行進的設備的例子包括多種飛行器,例如飛機、直升機、 滑翔機、降落傘、氣球和風箏。
在地球大氣層外行進的設備的例子包括火箭、空間探測器和衛(wèi)星。
應當意識到,存在多種其他的可移動體的特定例子。用于放置成 像/顯示裝置1的形狀和結構取決于成像/顯示裝置1被放置在其上的 可移動體。
[2.系統(tǒng)配置
在本實施例中,成像/顯示裝置l或顯示裝置40的用戶指定一個 速度,以便觀看由以指定速度移動的另一個成像/顯示裝置1或成像裝
置30拍攝的當前或過去圖像。在圖3中圖示了用于實現(xiàn)這一操作的 示例性系統(tǒng)配置。
圖3圖示了這樣一種系統(tǒng)配置,其中成像/顯示裝置1、顯示裝置 40、成像裝置30和服務器裝置70經(jīng)由網(wǎng)絡60彼此通信。
網(wǎng)絡60的例子包括諸如因特網(wǎng)之類的廣域網(wǎng)和諸如局域網(wǎng) (LAN)之類的小范圍網(wǎng)絡。
這里假定用戶A、 B和C佩戴例如如圖1中所示的成像/顯示裝 置l。這里還假定用戶D佩戴例如如圖2B中所示的顯示裝置40,而 用戶E佩戴如圖2A中所示的成像裝置30。
進一步假定用戶F既佩戴了如圖2A中所示的成像裝置30,又佩 戴了如圖2B中所示的顯示裝置40,這兩個裝置組合起來充當成像/ 顯示裝置。
還假定安裝在可移動體G和H上的成像裝置30是安裝在諸如汽 車、軌道車輛或飛行器之類的可移動體(除了人以外的可移動體)上 的成像裝置,并且具有用于放置在上面的合適形狀。
下面將描述系統(tǒng)操作的兩個例子(即,示例性系統(tǒng)操作I和II)。 首先,在示例性系統(tǒng)操作I的情況下,用戶E佩戴的成像裝置30以 及安裝在可移動體G和H上的成像裝置30定期地或者在預定時間(例 如當它們的運行速度改變時)經(jīng)由網(wǎng)絡60向服務器裝置70發(fā)送指示 其移動速度的速度信息以及例如照相機ID (即,每個成像裝置30的 標識信息)。
用戶A、 B和C中的每一個佩戴的成像/顯示裝置1也恒定地、 定期地或者在預定時間經(jīng)由網(wǎng)絡60向服務器裝置70發(fā)送照相機ID 及其速度信息。
服務器裝置70管理從成像裝置30和成像/顯示裝置1的每一個 發(fā)送來的速度信息以及其照相機ID,以一直識別成像裝置30和成像/ 顯示裝置1每一個的當前移動速度。
同時,響應于用戶指定速度,用戶A、 B和C佩戴的成像/顯示 裝置1以及用戶D和F佩戴的顯示裝置40中的每一個經(jīng)由網(wǎng)絡60
訪問服務器裝置70,并向服務器裝置70發(fā)送指示指定速度的速度指 定信息以發(fā)出對圖像的請求。
基于速度指定信息,服務器裝置70識別以與速度指定信息相匹 配的速度移動的成像裝置30或成像/顯示裝置1。然后,服務器裝置 70請求所識別的成像裝置30或成像/顯示裝置1發(fā)送這樣拍攝的圖像 的圖像數(shù)據(jù)。在所識別的成像裝置30或成像/顯示裝置1響應于該請 求而開始發(fā)送圖像數(shù)據(jù)之后,服務器裝置70將圖像數(shù)據(jù)轉發(fā)到速度 被指定的顯示裝置40或成像/顯示裝置1。
速度被指定的顯示裝置40或成像/顯示裝置1接收從服務器裝置 70發(fā)送來的圖像數(shù)據(jù),并顯示所接收的圖像數(shù)據(jù)。
以上述方式,用戶A、 B、 C、 D和F能夠通過指定速度來觀看 由以指定速度移動的成像裝置或成像/顯示裝置實際拍攝的場景。
注意,下面將在這樣的假定下描述示例性系統(tǒng)操作I:即成像/ 顯示裝置1或顯示裝置40的用戶不僅指定速度,還指定位置。
接著,在示例性系統(tǒng)操作II的情況下,用戶E佩戴的成像裝置 30以及安裝在可移動體G和H上的成像裝置30中的每一個恒定地、 定期地或者在任意時間將通過拍攝圖像獲得的圖像數(shù)據(jù)和至少包括 指示在拍攝圖像時的速度的速度信息的附加數(shù)據(jù)經(jīng)由網(wǎng)絡60上載到 服務器裝置70。
用戶A、 B和C佩戴的成像/顯示裝置1中的每一個也能夠恒定 地、定期地或者在任意時間將通過拍攝圖像獲得的圖像數(shù)據(jù)和至少包 括指示在成像時的速度的速度信息的附加數(shù)據(jù)經(jīng)由網(wǎng)絡60上載到服 務器裝置70。
服務器裝置70將由成像/顯示裝置1和成像裝置30中的每一個 上載的圖像數(shù)據(jù)和附加數(shù)據(jù)登記并存儲在速度圖像數(shù)據(jù)庫中,這將在 下面描述。
同時,響應于用戶指定速度,用戶A、 B和C佩戴的成像/顯示 裝置1以及用戶D和F所用的顯示裝置40中的每一個經(jīng)由網(wǎng)絡60 訪問服務器裝置70,并向服務器裝置70發(fā)送指示指定速度的速度指
定信息以對圖像發(fā)出請求。
基于速度指定信息,服務器裝置70搜索速度圖像數(shù)據(jù)庫以提取 由成像裝置或成像/顯示裝置拍攝的圖像的圖像數(shù)據(jù),該成像裝置或成 像/顯示裝置正以由速度指定信息指示的指定速度移動。然后,服務器 裝置70將所提取的圖像數(shù)據(jù)發(fā)送到成像/顯示裝置1或顯示裝置40。
成像/顯示裝置1或顯示裝置40接收從服務器裝置70發(fā)送來的 圖像數(shù)據(jù),并顯示所接收的圖像數(shù)據(jù)。
以上述方式,用戶A、 B、 C、 D和F能夠觀看以指定速度移動 的成像裝置或成像/顯示裝置在過去實際拍攝的場景。
注意,下面將在這樣的假定下描述示例性系統(tǒng)操作II:即成像/ 顯示裝置1或顯示裝置40的用戶不僅指定速度,還指定位置。
[3.成像/顯示裝置、成像裝置、顯示裝置和服務器裝置的示例性
結構
下面將參考圖4至8描述成像/顯示裝置1、成像裝置30、顯示 裝置40和服務器裝置70的示例性結構。
首先,下面將參考圖4描述成像/顯示裝置l的示例性結構。
系統(tǒng)控制器10由微計算機形成,微計算機例如包括中央處理單 元(CPU)、只讀存儲器(ROM)、隨機訪問存儲器(RAM)、非 易失性存儲器部件和接口部件,并且控制成像/顯示裝置1的整體操 作?;诒4嬖趦炔縍OM等中的程序,系統(tǒng)控制器10執(zhí)行多種計 算過程,并經(jīng)由總線13與成像/顯示裝置1的每個部分交換控制信號 等等,以使成像/顯示裝置1的每個部分執(zhí)行必要的操作。
成像/顯示裝置l包括成像部件3,用作對處于用戶看見的方向上 的場景成^f象的組件。
成像部件3包括成像光學系統(tǒng)、成像設備部件和成像信號處理部件。
成像部件3中的成像光學系統(tǒng)具有由圖1中所示的圖像拾取透 鏡3a形成的透鏡系統(tǒng)、光圏、變焦透鏡、聚焦透鏡等等;用于允許 透鏡系統(tǒng)執(zhí)行聚焦操作、變焦操作的驅動系統(tǒng);等等。成像部件3中的成像設備部件具有用于檢測由成像光學系統(tǒng)獲
;態(tài)成像器件陣列。、固態(tài)成像器件陣列例如是電荷耦合器件(』CD) 傳感器陣列或互補金屬氧化物半導體(CMOS)傳感器陣列,
成像部件3中的成像信號處理部件包括用于對由固態(tài)成像器件 獲得的信號進行增益控制和波形整形的采樣保持/自動增益控制 (AGC)電路和視頻A/D轉換器,并且獲得數(shù)字形式的拾取圖像數(shù) 據(jù)。成像信號處理部件還對拾取的圖像數(shù)據(jù)執(zhí)行白平衡處理、亮度處 理、彩色信號處理、模糊校正處理等等。
成像由上述包括成像光學系統(tǒng)、成像設備部件和成像信號處理部 件的成像部件3完成,從而通過成像獲得圖像數(shù)據(jù)。
系統(tǒng)控制器10執(zhí)行成像部件3中成像操作的開啟和關閉的控制、 成像光學系統(tǒng)中變焦透鏡和聚焦透鏡的驅動控制、成像設備部件中靈 敏度和幀頻的控制、每一過程的參數(shù)的設置和在成像信號處理部件中 執(zhí)行的過程的設置,等等。
通過成像部件3執(zhí)行的成像操作獲得的拾取圖像數(shù)據(jù)可以經(jīng)由 圖像處理部件15被提供給顯示部件2、存儲部件25或通信部件26。
在系統(tǒng)控制器10的控制下,圖像處理部件15執(zhí)行將拾取的圖像 數(shù)據(jù)轉換為預定圖像數(shù)據(jù)格式的過程,以及用于允許圖像數(shù)據(jù)被顯示 在顯示部件2上以進行監(jiān)視的必要的信號處理。用于允許圖像數(shù)據(jù)被 顯示在顯示部件2上以進行監(jiān)視的信號處理的示例包括亮度電平控
制;色彩校正;對比度控制;尖銳度(邊緣增強)控制;分割屏幕過 程;合成字符圖像的過程;放大或縮小圖像的生成;以及圖像效果的 應用,例如鑲嵌圖像、亮度反轉圖像、軟聚焦、圖像一部分的高亮顯 示和圖像的整體顏色氣氛的變化。
圖像處理部件15還執(zhí)行在成像部件3、顯示部件2、存儲部件 25和通信部件26之間傳送圖像數(shù)據(jù)的過程。具體而言,圖像處理部 件15執(zhí)行將拾取的圖像數(shù)據(jù)從成像部件3提供到顯示部件2、存儲部 件25或通信部件26的過程,將從存儲部件25讀取的圖像數(shù)據(jù)提供
到顯示部件2的過程,以及將由通信部件26接收的圖像數(shù)據(jù)提供到 顯示部件2的過程。
成像/顯示裝置1包括作為用于向用戶呈現(xiàn)顯示的組件的顯示部 件2。顯示部件2具有上述的由液晶面板形成的顯示面板部件2a和 2b以及用于驅動顯示面板部件2a和2b進行顯示的顯示驅動部件。
顯示驅動部件由像素驅動電路形成,其用于允許提供自圖像處理 部件15的圖像信號被顯示在例如形成為液晶顯示器的顯示面板部件 2a和2b上。即,顯示驅動部件利用用于顯示的預定水平/垂直驅動時 序對顯示面板部件2a和2b中呈矩陣形式布置的像素施加基于視頻信 號的驅動信號。作為這一過程的結果,由成像部件3拍攝的圖像、從 存儲部件25讀取的圖像數(shù)據(jù)的圖像、或者由通信部件26接收的圖像 數(shù)據(jù)的圖像被顯示在顯示面板部件2a和2b上。
另外,顯示驅動部件能夠控制顯示面板部件2a和2b中每個像素 的透射以允許像素進入透視狀態(tài)(即,透明或半透明狀態(tài))。
系統(tǒng)控制器10執(zhí)行顯示部件2中顯示操作的開/關(透視)控制、 與要顯示的圖像數(shù)據(jù)有關的過程參數(shù)的指定、屏幕區(qū)域設置控制、用 于字符生成的指示,等等。
成像/顯示裝置1還包括音頻輸入部件6、音頻處理部件16和音 頻輸出部件5。
音頻輸入部件6包括圖1中所示的麥克風6a和6b、用于放大由 麥克風6a和6b獲得的音頻信號的麥克風放大器部件以及A/D轉換 器,并且輸出音頻數(shù)據(jù)。
在音頻輸入部件6處獲得的音頻數(shù)據(jù)被提供給音頻處理部件16。
在系統(tǒng)控制器10的控制下,音頻處理部件16控制音頻數(shù)據(jù)的傳 送。具體而言,音頻處理部件16將在音頻輸入部件6處獲得的音頻 數(shù)據(jù)提供到音頻輸出部件5、存儲部件25或通信部件26。音頻處理 部件16還將從存儲部件25讀取的音頻數(shù)據(jù)和由通信部件26接收的 音頻數(shù)據(jù)提供到音頻輸出部件5。
在系統(tǒng)控制器10的控制下,音頻處理部件16還執(zhí)行諸如音量控
制、音調控制或音效的施加之類的過程。
音頻輸出部件5包括圖1中所示的那對耳機揚聲器5a、用于耳 機揚聲器5a的放大器電路以及D/A轉換器。
即,提供自音頻處理部件16的音頻數(shù)據(jù)被D/A轉換器轉換為模 擬音頻信號,并且該模擬音頻數(shù)信號被放大器電路放大,并經(jīng)由耳機 揚聲器5a作為聲音輸出。因而,用戶能夠聽見外部的聲音、基于從 存儲部件25讀取的音頻數(shù)據(jù)的音頻、或者基于由通信部件26接收的 音頻數(shù)據(jù)的音頻。
注意,音頻輸出部件5可以使用所謂的骨傳導揚聲器。
存儲部件25是用于將圖像數(shù)據(jù)(和音頻數(shù)據(jù))記錄到預定存儲 介質上并從預定存儲介質讀取這些數(shù)據(jù)的單元。例如,存儲部件25 由硬盤驅動器(HDD)形成。當然,可以采用各種類型的存儲介質, 例如如同閃存一類的固態(tài)存儲器、包含固態(tài)存儲器的存儲器卡、光盤、 磁光盤和全息圖存儲器。對于存儲部件25的要求是能夠根據(jù)所采用 的存儲介質進行記錄和讀取。
在系統(tǒng)控制器10的控制下,存儲部件25將通過成像獲得的圖像 數(shù)據(jù)(和音頻數(shù)據(jù))記錄在存儲介質上,或者將由通信部件26接收 的圖像數(shù)據(jù)(和音頻數(shù)據(jù))記錄在存儲介質上。具體而言,存儲部件 25對經(jīng)由圖像處理部件15提供的圖像數(shù)據(jù)和經(jīng)由音頻處理部件16提 供的音頻數(shù)據(jù)或者由通信部件26接收的圖像數(shù)據(jù)和音頻數(shù)據(jù)進行編 碼,以使得它們可以被記錄在存儲介質上,然后將編碼后的數(shù)據(jù)記錄 在存儲介質上。
另外,在系統(tǒng)控制器10的控制下,存儲部件25還能夠讀取所記 錄的圖像數(shù)據(jù)和音頻數(shù)據(jù)。所讀取的圖像數(shù)據(jù)經(jīng)由圖像處理部件15 被提供給顯示部件2,而所讀取的音頻數(shù)據(jù)經(jīng)由音頻處理部件16被提 供給音頻輸出部件5。還可以將所讀取的圖像/音頻數(shù)據(jù)提供到通信部 件26作為要發(fā)送到外部設備的數(shù)據(jù)。
通信部件26經(jīng)由圖3中所示的網(wǎng)絡60向外部設備發(fā)送數(shù)據(jù)或者 從外部設備接收數(shù)據(jù),外部設備具體而言是服務器裝置70。
通信部件26可以被配置為經(jīng)由用于網(wǎng)絡接入點的短距無線通信 執(zhí)行網(wǎng)絡通信,例如根據(jù)諸如無線LAN、藍牙等等的系統(tǒng)。
由成像部件3獲得的拾取圖像數(shù)據(jù)經(jīng)由圖像處理部件15被提供 給通信部件26。另外,由音頻輸入部件6獲得的音頻數(shù)據(jù)經(jīng)由音頻處 理部件16被提供給通信部件26。通信部件26能夠對圖像數(shù)據(jù)和音頻 數(shù)據(jù)編碼以用于通信目的,調制編碼后的數(shù)據(jù)以進行無線電發(fā)送,并 將調制后的數(shù)據(jù)發(fā)送到外部設備。即,通信部件26能夠將通過成像 和聲音收集當前在成像/顯示裝置1中獲得的圖像數(shù)據(jù)和音頻數(shù)據(jù)發(fā) 送到外部設備(例如,服務器裝置70)。
另外,通信部件26還能夠對從存儲部件25讀取的圖像數(shù)據(jù)和音 頻數(shù)據(jù)編碼以用于通信目的,調制編碼后的數(shù)據(jù)以進行無線電發(fā)送, 并將調制后的數(shù)據(jù)發(fā)送到外部設備。
在下面描述的示例性系統(tǒng)操作I中,系統(tǒng)控制器10除了執(zhí)行圖 像/音頻數(shù)據(jù)的發(fā)送以外,還執(zhí)行恒定地、定期地或者在預定時間將速 度檢測部件17檢測到的當前速度信息和位置檢測部件12檢測到的當 前位置信息與照相機ID —起經(jīng)由通信部件26發(fā)送服務器裝置70的 處理過程。照相機ID是唯一地指定給每個設備的標識信息,并且是 可以用于在系統(tǒng)上標識特定的成像/顯示裝置1或成像裝置30的代碼。 照相機ID例如可以存儲在系統(tǒng)控制器10內的非易失性存儲器等中。
當從服務器裝置70接收到對圖像的請求時,執(zhí)行圖像/音頻數(shù)據(jù) 的發(fā)送。
在下面描述的示例性系統(tǒng)操作II中,例如,當在通過成像和聲 音收集當前在成像/顯示裝置1中獲得的圖像/音頻數(shù)據(jù)被發(fā)送到服務 器裝置70時,系統(tǒng)控制器10生成附加數(shù)據(jù),并使得通信部件26對 附加數(shù)據(jù)與圖像/音頻數(shù)據(jù)一起進行編碼并發(fā)送。附加數(shù)據(jù)包括圖像數(shù)
據(jù)的管理信息、下面描述的速度檢測部件n檢測到的當前速度信息、
位置檢測部件12檢測到的當前位置信息以及由日期/時間計算部件28 通過計算獲得的當前日期/時間信息。
另一種可能的操作是以下操作 一旦將通過成像和聲音收集獲得
的圖像/音頻數(shù)據(jù)存儲在存儲部件25中,就在后續(xù)時刻從存儲部件25 中讀取所存儲的圖像/音頻數(shù)據(jù),并經(jīng)由通信部件26將所讀取的圖像/ 音頻數(shù)據(jù)發(fā)送到服務器裝置70。在這一操作的情況下,當在存儲部件 25中存儲圖像/音頻數(shù)據(jù)時,系統(tǒng)控制器10生成包括上述信息片段的 附加數(shù)據(jù),并使得存儲部件25記錄附加數(shù)據(jù)以及圖像/音頻數(shù)據(jù)。當 所記錄的圖像/音頻數(shù)據(jù)被從存儲部件25中讀取并發(fā)送到服務器裝置 70時, 一起記錄的附加數(shù)據(jù)也被發(fā)送到服務器裝置70。
當系統(tǒng)控制器10通過執(zhí)行以上過程將圖像/音頻數(shù)據(jù)發(fā)送到服務 器裝置70時,指示通過拍攝圖像獲得圖像數(shù)據(jù)時的位置的位置信息 以及指示獲得圖像數(shù)據(jù)時的日期和時間的日期/時間信息也被發(fā)送到 服務器裝置70。
另外,通信部件26接收從外部設備(服務器裝置70)發(fā)送來的 圖像/音頻數(shù)據(jù),對所接收的圖像/音頻數(shù)據(jù)進行解調,并將解調后的 圖像/音頻數(shù)據(jù)發(fā)送到圖像處理部件15和音頻處理部件16。在這種情 況下,所接收的圖像和音頻分別經(jīng)由顯示部件2和音頻輸出部件5輸 出。
當然,由通信部件26接收的圖像/音頻數(shù)據(jù)可以^皮提供到存儲部 件25并記錄在存儲介質上。
成像/顯示裝置1還包括照明部件4和照明控制部件14。照明部 件4由圖1中所示的發(fā)光部件4a和用于使發(fā)光部件4a (例如LED ) 發(fā)光的發(fā)光電路形成。基于從系統(tǒng)控制器10發(fā)布的指令,照明控制 部件14使得照明部件4執(zhí)行發(fā)光操作。
因為照明部件4中的發(fā)光部件4a以圖1中所示的方式附接到成 像/顯示裝置1,所以照明部件4提供了圖像拾取透鏡3a拍攝圖像的 方向上的照明。
成像/顯示裝置1還包括用于用戶操作的操作輸入部件11。
操作輸入部件11可包括諸如鍵、撥號盤等之類的操作單元,并 且被配置為檢測諸如鍵操作之類的用戶操作。或者,操作輸入部件ll 可以被配置為檢測用戶的故意行為。
在操作輸入部件11包括操作單元的情況下,操作單元可包括下 面描述的用于電源開/關操作、與成像有關的操作(例如,變焦操作、 與信號處理有關的操作等)、與顯示有關的操作(例如,顯示內容的 選擇、用于控制顯示器的操作等)以及用于指定外部設備的操作的操 作單元。
在操作輸入部件11被配置為檢測用戶行為的情況下,操作輸入 部件11可以具有加速度傳感器、角速度傳感器、振動傳感器、壓力 傳感器等等。
例如,用戶從側面輕拍成像/顯示裝置1的動作可以利用加速度傳感器、振動傳感器等檢測。因而,系統(tǒng)控制器10可以在例如橫向加速度已超過預定值時確定用戶操作已發(fā)生。而且,加速度傳感器、 角速度傳感器等可以用于檢測用戶是從右側輕拍成像/顯示裝置1的側邊(其對應于眼鏡的側部)還是從左側輕拍,并且系統(tǒng)控制器10可以將用戶的這些動作中的每一種視為預定操作。
另外,用戶點頭或搖頭的動作可以利用加速度傳感器、角速度傳感器等檢測。系統(tǒng)控制器10可以將用戶的這些動作中的每一種視為用戶操作。
另外,壓力傳感器可以例如提供在成像/顯示裝置1的左側和右側中的每一側(其對應于眼鏡的側部)上。這樣,系統(tǒng)控制器10可以在用戶利用手指推動成像/顯示裝置1的右側時確定用戶已執(zhí)行了 用于遠距離變焦的操作,并且在用戶利用手指推動成像/顯示裝置1 的左側時確定用戶已執(zhí)行了用于廣角變焦的操作。
另外,操作輸入部件11可以具有用于檢測關于用戶的生物信息 的生物傳感器。在這種情況下,所檢測的生物信息可以被識別為操作 輸入。生物信息的示例包括脈搏速率、心跳速率、心電圖信息、肌動 圖信息、呼吸信息(例如,呼吸速率、呼吸深度、呼氣量等)、排汗、皮膚電響應(GSR)、血壓、血液中的飽和氧濃度、皮膚表面溫度、 腦波(例如,ot波、|3波、0波和5波的信息)、血流變化和眼睛的狀態(tài)。
這樣,系統(tǒng)控制器10可以識別生物傳感器檢測到的信息作為用
戶的操作輸入。用戶的故意行為的一個示例是眼睛的運動(例如,用 戶眼睛導向方向的改變、眨眼等)。例如,當檢測到用戶眨眼三次的
動作時,系統(tǒng)控制器10可以將該動作視為特定的操作輸入。另外,
例如,還可以基于檢測到的生物信息檢測用戶已戴上或摘下成像/顯示
裝置l,或者特定用戶已戴上成像/顯示裝置1。因而,系統(tǒng)控制器IO
可以例如響應于這種動作的檢測開啟或關閉成像/顯示裝置1的電源。
操作輸入部件11向系統(tǒng)控制器IO提供由上述的加速度傳感器、
角速度傳感器、振動傳感器、壓力傳感器、生物傳感器等通過充當操
作單元獲取的信息。系統(tǒng)控制器IO基于所提供的信息檢測用戶操作。 成像/顯示裝置1還包括速度檢測部件17。速度檢測部件17檢測 佩戴成像/顯示裝置1的用戶的移動速度(即,用戶行走或行進的速 度)。當然,在用戶保持靜止時,用戶的移動速度是0。速度檢測部 件17可以利用加速度傳感器等來檢測用戶的移動速度?;蛘撸俣?檢測部件17可以通過分析由成像部件3拍攝的周圍圖像來計算用戶 的移動速度。
成像/顯示裝置1還包括位置檢測部件12。位置檢測部件12例如 是GPS接收機部件。GPS接收機部件接收來自全球定位系統(tǒng)(GPS ) 衛(wèi)星的無線電波,并將當前位置的綷度和經(jīng)度的信息輸出到系統(tǒng)控制 器10。
注意,位置檢測部件12可以采用由移動電話^^司提供的Wi-Fi (無線保真度)或位置信息服務,或者這種服務和GPS的組合。
檢測到的當前位置可以利用速度檢測部件17檢測到的速度來加 以校正。
成像/顯示裝置1還包括日期/時間計算部件28。日期/時間計算 部件28計算當前日期和時間(年、月、日、時、分、秒)。系統(tǒng)控 制器10能夠基于日期/時間計算部件28所計算的值來識別當前日期和 時間。
在示例性系統(tǒng)操作I的情況下,速度檢測部件17檢測到的移動 速度和位置檢測部件12檢測到的當前位置信息被定期地或者在預定
時間經(jīng)由通信部件26發(fā)送到服務器裝置70。
在示例性系統(tǒng)操作II的情況下,當圖像/音頻數(shù)據(jù)和附加數(shù)據(jù)被 發(fā)送到服務器裝置70時,該附加數(shù)據(jù)包括速度檢測部件17檢測到的 速度信息(指示當通過成像獲得發(fā)送的圖像數(shù)據(jù)時用戶的移動速度)、 位置檢測部件12檢測到的位置信息(指示當通過成像獲得發(fā)送的圖 像數(shù)據(jù)時用戶的位置)、以及日期/時間計算部件28獲得的日期/時間 信息(指示當通過成像獲得發(fā)送的圖像數(shù)據(jù)時的日期和時間)。
成像/顯示裝置1能夠在顯示部件2上顯示地像。為了顯示 地像,成像/顯示裝置l還包括地圖數(shù)據(jù)庫29。在存儲部件25例 如由HDD等形成的情況下,地圖數(shù)據(jù)庫29可以存儲在HDD等的部 分區(qū)域中。
地圖數(shù)據(jù)庫29是包含用于在所謂的導航系統(tǒng)中顯示地圖的信 息、用于生成與位置信息相對應的地像的信息、諸如地點名之類 的附加信息、搜索信息等的數(shù)據(jù)庫。
系統(tǒng)控制器10能夠利用地圖數(shù)據(jù)庫29執(zhí)行搜索并顯示適當?shù)牡?圖的過程。
下面將參考圖5描述成像裝置30的結構。注意,在圖5中,在 圖4中具有對應部分的組件與它們在圖4中的對應部分被分派以相同 的標號,并且將省略其描述。圖5中所示的成像裝置30與圖4中所 示的成像/顯示裝置1的不同之處在于成像裝置30不包括用于輸出圖 像的顯示部件2、用于輸出音頻的音頻輸出部件5或用于顯示地圖的 地圖數(shù)據(jù)庫29。
也就是說,在成像裝置30如圖2所示被用戶佩戴或者如上所述 被放置在各種可移動體上的同時,成像裝置30能夠利用成像部件3 進行成像,并經(jīng)由通信部件26將拾取的圖像數(shù)據(jù)發(fā)送到外部設備或 者將拾取的圖像數(shù)據(jù)記錄在存儲部件25中。
系統(tǒng)控制器10控制成像操作、通信操作、記錄操作等。 注意,在成像裝置30被安裝在諸如汽車、軌道車輛、船只或飛 行器之類的可移動體上的情況下,安裝在可移動體中的速度檢測機構
可以被用作速度檢測部件17。
下面將參考圖6描述顯示裝置40的示例性結構。注意,在圖6 中,在圖4中具有對應部分的組件與它們在圖4中的對應部分被指派 給相同的標號,并且將省略其描述。圖6中所示的顯示裝置40與圖4 中所示的成像/顯示裝置1的不同之處在于顯示裝置40不包括用于成 像的成像部件3或用于音頻輸入的音頻輸入部件6。另外,顯示裝置 40不具有幫助成像的照明部件4或照明控制部件14。另外,顯示裝 置40不一定配備有速度檢測部件17。
因為顯示裝置40被設計為不向服務器裝置70發(fā)送圖像/音頻數(shù) 據(jù),所以顯示裝置40不一定配備有用于生成要發(fā)送到服務器裝置70 的位置信息或日期/時間信息的位置檢測部件12或日期/時間計算部件 28。
當然,系統(tǒng)控制器10不是一定具有執(zhí)行控制向服務器裝置70 的圖像/音頻數(shù)據(jù)的發(fā)送的過程的能力。
顯示裝置40是被用戶以圖2B所示的方式佩戴、或者被用戶攜 帶、或者被用戶安裝在房間、汽車等中的設備。顯示裝置40經(jīng)由通 信部件26接收從外部設備(服務器裝置70)發(fā)送來的圖像/音頻數(shù)據(jù)。 然后,顯示裝置40經(jīng)由顯示部件2和音頻輸出部件5輸出所接收的 圖像/音頻數(shù)據(jù),或者將所接收的圖像/音頻數(shù)據(jù)記錄在存儲部件25中。
系統(tǒng)控制器IO控制通信操作、顯示操作、音頻輸出操作、記錄 操作等。
在顯示裝置被固定地安裝在房間等當中的情況下,通信部件26 可以被配置為經(jīng)由有線連接執(zhí)行網(wǎng)絡通信。
圖2A中所示的成像裝置30和圖2B中所示的顯示裝置40可以 被同一用戶使用,如圖3中所示的用戶F,以使得成像裝置30和顯示 裝置40組合起來實現(xiàn)類似于成像/顯示裝置1的功能。
在這種情況下,成像裝置30和顯示裝置40可以具有如圖7所示 的配置。
在圖7的示例性配置中,成像裝置30與圖4中所示的成像/顯示
裝置1具有基本相同的結構,除了成像裝置30不具有顯示部件2而
是具有發(fā)送部件27以外。
發(fā)送部件27將提供自圖像處理部件15的圖像數(shù)據(jù)編碼為要進行
顯示以用于監(jiān)視的圖像數(shù)據(jù),以使得該圖像數(shù)據(jù)可以被發(fā)送到顯示裝
置40。然后,發(fā)送部件27將編碼后的圖像數(shù)據(jù)發(fā)送到顯示裝置40。 顯示裝置40包括接收部件41、顯示控制部件42和顯示部件2。 接收部件41與成像裝置30中的發(fā)送部件27執(zhí)行數(shù)據(jù)通信。接
收部件41接收從成像裝置30發(fā)送來的圖像數(shù)據(jù),并對所接收的圖像
數(shù)據(jù)進行解碼。
由接收部件41解碼的圖像數(shù)據(jù)被提供到顯示控制部件42。顯示 控制部件42執(zhí)行用于呈現(xiàn)關于圖像數(shù)據(jù)的顯示的信號處理、屏幕分 割、字符合成等以生成用于顯示的圖像信號,并將所生成的圖像信號 提供給顯示部件2,顯示部件2具有諸如液晶顯示器之類的顯示面板 部件2a。
根據(jù)用于顯示的圖像信號,顯示部件2利用預定的水平/垂直驅 動時序對顯示面板部件2a中呈矩陣形式布置的像素施加基于視頻信 號的驅動信號以進行顯示。
當成像裝置30和顯示裝置40具有以上配置時,佩戴成像裝置 30和顯示裝置40的用戶(如同圖3中的用戶F)能夠以與使用成像/ 顯示裝置1類似的方式使用這兩個裝置。
下面將參考圖8描迷服務器裝置70的示例性結構。
服務器裝置70包括服務器控制部件72、網(wǎng)絡存儲部件71、通信 部件73、照相機位置/速度管理部件74和地圖數(shù)據(jù)庫75。
網(wǎng)絡存儲部件71例如由HDD等形成,并且被用于緩沖或存儲 圖像數(shù)據(jù)和音頻數(shù)據(jù)或者用于存儲各種類型的信息。在示例性系統(tǒng)操 作II的情況下,下面描述的速度圖像數(shù)據(jù)庫被存儲在網(wǎng)絡存儲部件 71中。如下參考圖12所述,速度圖像數(shù)據(jù)庫是累積有經(jīng)由網(wǎng)絡60從 成像裝置30或成像/顯示裝置1接收的圖像/音頻數(shù)據(jù)和附加數(shù)據(jù)的數(shù) 據(jù)庫。
通信部件73經(jīng)由網(wǎng)絡60與成像/顯示裝置l、成像裝置30和顯 示裝置40中的每一個的通信部件26進行數(shù)據(jù)通信。
服務器控制部件72執(zhí)行服務器裝置70所必需的操作控制。具體 而言,服務器控制部件72控制在成像/顯示裝置1、成像裝置30和顯 示裝置40之間進行的通信操作、將圖像/音頻數(shù)據(jù)存儲在網(wǎng)絡存儲部 件71中的過程、搜索過程等。
照相機位置/速度管理部件74和地圖數(shù)據(jù)庫75是當實現(xiàn)下面描 述的示例性系統(tǒng)操作I時需要的組件。照相機位置/速度管理部件74 執(zhí)行諸如成像/顯示裝置1或成像裝置30 (即,成像/顯示裝置1或成 像裝置30被安裝在其上的可移動體的成像/顯示裝置1或成像裝置 30)的當前位置和速度的管理和搜索之類的過程。具體而言,照相機 位置/速度管理部件74利用例如下面描述的如圖IO所示的照相機位置 /速度管理表來管理從成像/顯示裝置1和成像裝置30定期發(fā)送的速度 信息和位置信息。另外,照相機位置/速度管理部件74能夠通過將其 與存儲在地圖數(shù)據(jù)庫75中的地圖信息相比較來實現(xiàn)對成像/顯示裝置 1和成像裝置30的當前位置的更詳細的管理。
盡管上面已描述了成像/顯示裝置1、成像裝置30、顯示裝置40 和服務器裝置70的結構,但是應當意識到這些結構中的每一個僅僅 是示例。當然,根據(jù)要實現(xiàn)的實際系統(tǒng)操作或功能,可以有多種方式 實現(xiàn)(一個或多個)組件的添加或省略。應當意識到,成像裝置30、 成像/顯示裝置1和顯示裝置40的適當?shù)慕Y構取決于成像裝置30或成 像/顯示裝置1被安裝(放置)在其上的可移動體的類型或者取決于顯 示裝置40的形式(例如,表狀、便攜型、固定型等)。
4.示例性的系統(tǒng)操作I
下文中將描述根據(jù)本實施例的示例性的系統(tǒng)操作。 在下面的描述中將使用"裝置A"和"裝置B,,的稱謂。 稱謂"裝置A,,指如圖3所示的成像/顯示裝置1或顯示裝置40。 稱謂"裝置B"指如圖3所示的成像/顯示裝置1或成像裝置30。
換句話說,"裝置A"指被用戶用來接收并顯示來自服務器裝置 70的、在另一可移動體處拍攝的圖像的設備,并且對應于權利要求中 所記載的"顯示裝置"。
另一方面,"裝置B"指向服務器裝置70發(fā)送圖像并且如前所述 被人、動物、車輛或其他可移動體佩戴或者安裝在人、動物、車輛或 其它可移動體上的設備,并且對應于權利要求中所記栽的"成像裝 置"。
下面將參考圖9和10描述示例性的系統(tǒng)操作I。
在示例性的系統(tǒng)操作I中,由裝置B(即,成像裝置30或成像/ 顯示裝置l)拍攝的圖像的圖像數(shù)據(jù)經(jīng)由服務器裝置70被實時傳送到 裝置A (即,顯示裝置40或成像/顯示裝置1)。
在這種情況下,服務器裝置70使用照相機位置/速度管理部件74 來一直識別每個裝置B (即,裝置B被安裝在其上的每個可移動體) 的移動速度和當前位置。因而,當從裝置A接受到速度指定信息和位 置指定信息時,服務器裝置70能夠基于速度指定信息和位置指定信 息識別期望的裝置B。服務器裝置70請求所識別的裝置B發(fā)送圖像 數(shù)據(jù)。在由裝置B拍攝的圖像的圖像數(shù)據(jù)的發(fā)送開始之后,服務器裝 置70將圖像數(shù)據(jù)轉發(fā)到裝置A。裝置A從服務器裝置70接收圖像數(shù) 據(jù)并顯示所接收的圖像數(shù)據(jù)。結果,裝置A的用戶能夠看見由在指定 位置處以指定速度移動的裝置B拍攝的當前場景的顯示圖像。
圖9圖示了由裝置A(即,成像/顯示裝置1或顯示裝置40)的 系統(tǒng)控制器IO執(zhí)行的處理過程、由服務器裝置70的服務器控制部件 72執(zhí)行的處理過程以及由裝置B (即,成像/顯示裝置1或成像裝置 30)的系統(tǒng)控制器IO執(zhí)行的處理過程。
首先,在步驟FIOO,在裝置A的一部分上,利用地像執(zhí)行 位置指定過程和速度指定過程。
例如,首先,裝置A的系統(tǒng)控制器10利用地圖數(shù)據(jù)庫29中的 數(shù)據(jù)來在顯示部件2上顯示地圖,作為位置指定的準備。根據(jù)用戶操 作,裝置A的系統(tǒng)控制器IO還執(zhí)行對地圖上特定區(qū)域的搜索、滾動 等等。因而,用戶能夠在顯示部件2上查看特定區(qū)域的地像。
例如,當用戶已指定了地點名稱或尺度或者已完成滾動時,系統(tǒng)
控制器10改變顯示的區(qū)域或尺度以使某一區(qū)域的地像被顯示, 例如圖14A所示。
系統(tǒng)控制器IO使得指針PT被顯示在地像上,如圖14B所 示,并且允許指針PT根據(jù)用戶操作在地像上移動。即,通過將 指針PT移動到地像上的期望位置并執(zhí)行預定操作,用戶能夠指 定地像上的特定位置。
注意,指針PT的使用不是必需的。例如,顯示部件2可以被配 置為接受觸摸面板操作,以使得用戶可以通過利用手指觸摸地像 上的期望位置來指定該位置。
響應于用戶以這種方式執(zhí)行指定地像上的某一點的操作,系 統(tǒng)控制器10生成位置指定信息。位置指定信息包括地像上由用 戶指定的點的緯度和經(jīng)度值。
另外,根據(jù)用戶輸入,裝置A的系統(tǒng)控制器10生成速度指定信 息。例如,系統(tǒng)控制器IO使得如圖14C所示的速度選擇屏幕被顯示 在顯示部件2上。因而,例如,用戶被允許選擇零速度(即,不移 動速度);6 km/h或更低的速度,這是人正常行走的速度;6和30 km/h 之間的速度范圍,這是人正常跑步或自行車正常行進的速度;30和 50km/h之間的速度范圍,這是汽車等正常行進的速度;等等。例如, 系統(tǒng)控制器10使得光標K被顯示以便能夠選擇任何選項,并且允許 光標K根據(jù)用戶操作移動。用戶通過執(zhí)行移動光標K以便選擇期望 速度的操作和確定選擇的操作來選擇他或她期望的速度。自然,顯示 部件2可以被配置為接受觸摸面板操作以使得用戶可以通過利用手指 觸摸期望選項(速度)來選擇他或她期望的選項(速度)。
響應于用戶選擇并確定他或她的期望速度的操作,系統(tǒng)控制器 IO設置速度指定信息。
注意,供用戶選擇的選項并不必需按以上示例中準備。例如,系 統(tǒng)控制器10可以使得如圖14D所示的輸入框W被顯示在顯示部件2 上,以便用戶可以輸入用于指定速度的數(shù)值。
還要注意,指定的速度不一定是特定數(shù)值。例如,可以準備容易 辨別的描述性選項,例如"正常行走速度"、"正常自行車速度"、"正 常汽車速度"和"正?;疖囁俣?,以供用戶選擇。
響應于用戶以上述方式輸入特定速度或速度范圍的操作,系統(tǒng)控
制器IO設置該特定速度或速度范圍作為速度指定信息。
在步驟F100處生成了位置指定信息和速度指定信息之后,裝置 A的系統(tǒng)控制器10在步驟F101訪問服務器裝置70。換句話說,裝置 A的系統(tǒng)控制器10建立與服務器裝置70的通信連接。此時,裝置A 的系統(tǒng)控制器10向服務器裝置70發(fā)送圖像請求的信息、速度指定信 息和位置指定信息。
在步驟F300,服務器裝置70的服務器控制部件72建立與裝置 A的通信連接,并接受圖像請求、速度指定信息和位置指定信息。
然后,在步驟F301,服務器控制部件72搜索當前位于由位置指 定信息指示的指定位置的附近并且以由速度指定信息指示的速度移 動(或者以接近該速度的速度移動)的裝置B (成像/顯示裝置1或成 像裝置30 )。
注意,為了易于該搜索,已假定作為潛在圖像源的所有成像/顯 示裝置1和成像裝置30都恒定地或定期地向服務器裝置70發(fā)送它們 自身的當前位置信息(即,它們的當前位置的緯度和經(jīng)度)和當前速 度信息。
在服務器裝置70中,照相機位置/速度管理部件74針對成像/顯 示裝置1和成像裝置30中的每一個管理當前位置信息和當前速度信 息以便與照相機ID相關聯(lián)。
例如,照相機位置/速度管理部件74包括如圖10所示的照相機 位置/速度管理表。照相機位置/速度管理表是其中存儲有當前位置信 息(CP1、 CP2…)和當前速度信息(CV1、 CV2…)以便與照相機 ID (CMOOl、 CM002…)相關聯(lián)的表。
每次在從成像/顯示裝置1和成像裝置30接收到當前位置信息和 當前速度信息時,與發(fā)送所接收的當前位置信息和當前速度信息的成
像/顯示裝置1或成像裝置30的照相機ID相關聯(lián)的當前位置信息和當 前速度信息就在照相機位置/速度管理表中被更新。這使得可以辨別成 像/顯示裝置1和成像裝置30中的每一個(即,所有潛在圖像源)的 當前位置和速度。
例如,假定其照相機ID是"CM001"的裝置B定期地向服務器裝 置70發(fā)送當前位置信息和當前速度信息,則與"CM001"相關聯(lián)的當 前位置信息CP1和當前速度信息CV1就在照相機位置/速度管理表中 被定期更新。
在步驟F301,服務器控制部件72使得照相機位置/速度管理部 件74搜索當前位于其綿度和經(jīng)度被包括在位置指定信息中的位置附 近并且以由速度指定信息指示的速度移動的成像/顯示裝置1或成像 裝置30,并且識別作為當前期望的裝置B的一個成像/顯示裝置1或 成像裝置30。
如果基于速度指定信息和位置指定信息某一個成像/顯示裝置1 或成像裝置30被識別為當前期望的裝置B,則服務器控制部件72在 步驟F302請求該裝置B建立與裝置B的通信連接。然后,服務器控 制部件72告知裝置B來自裝置A的圖像請求。
盡管未在圖9中示出,但是可能出現(xiàn)這樣的情況沒有一個成像 /顯示裝置1或成像裝置30當前正位于由位置指定信息指示的位置附 近。還可能出現(xiàn)這樣的情況盡管一個或多個成像/顯示裝置l或成像 裝置30當前位于由位置指定信息指示的位置附近,但是這些裝置中 沒有一個以由速度指定信息指示的速度移動。
在這樣的情形中,服務器控制部件72向裝置A告知沒有找到與 位置指定信息和速度指定信息相匹配的裝置B,并且提供圖像是不可 能的。作為響應,裝置A向用戶告知提供圖像是不可能的,并且完成 其處理過程。
另夕卜,可能出現(xiàn)這樣的情況找到多個當前位于由位置指定信息 指示的位置附近并且以由速度指定信息指示的速度移動的成像/顯示 裝置1或成像裝置30。在這種情況下,在所找到的裝置中,可以選擇 其照相機位置/速度管理表中的信息是最近被更新的裝置,或者可以選
擇響應于步驟F302處的通信請求最先建立與服務器裝置70的通信連 接的裝置。
在步驟F200,作為由服務器裝置70執(zhí)行的步驟F302的過程的 結果,已接收到連接請求的裝置B的系統(tǒng)控制器10根據(jù)連接請求執(zhí) 行建立與服務器裝置70的通信連接的過程,并且開始與服務器裝置 70通信并接受圖像請求。
在步驟F201,響應于圖像請求,裝置B執(zhí)行發(fā)送圖像的過程。 具體而言,裝置B的系統(tǒng)控制器IO使得通過成像部件3的成像獲得 的圖像數(shù)據(jù)和通過音頻輸入部件6的聲音收集獲得的音頻數(shù)據(jù)被經(jīng)由 通信部件26發(fā)送到服務器裝置70。
在步驟F303,服務器裝置70將從裝置B發(fā)送來的圖像數(shù)據(jù)(和 音頻數(shù)據(jù))轉發(fā)到裝置A。
在步驟F102,裝置A接收通過服務器裝置70從裝置B發(fā)送來 的圖像數(shù)據(jù)(和音頻數(shù)據(jù)),并且顯示所接收的圖像數(shù)據(jù)。具體而言, 裝置A的系統(tǒng)控制器10使得由通信部件26接收并解調的圖像數(shù)據(jù) (和音頻數(shù)據(jù))被提供給圖像處理部件15和音頻處理部件16,并且 使得圖像被顯示在顯示部件2上且音頻經(jīng)由音頻輸出部件5輸出。
裝置A的系統(tǒng)控制器10繼續(xù)經(jīng)由顯示部件2輸出所接收的圖像 數(shù)據(jù)(并且經(jīng)由音頻輸出部件5輸出所接收的音頻數(shù)據(jù)),直到在步 驟F103確定圖像/音頻數(shù)據(jù)的輸出應當終止。同時,裝置B繼續(xù)拍攝 圖像并發(fā)送拍攝的圖像的圖像數(shù)據(jù)(和音頻數(shù)據(jù)),直到接收到通信 終止請求。
因此,在這一時段期間,裝置A的用戶能夠觀看由放置在位于 由用戶指定的位置附近并且以由用戶指定的速度移動的可移動體上 的裝置B拍攝的場景。
在步驟F103,裝置A的系統(tǒng)控制器10確定圖像的顯示是否應當 終止。例如,當用戶已經(jīng)利用操作輸入部件11執(zhí)行了用于終止圖像 顯示的操作時,裝置A的系統(tǒng)控制器10確定圖像的顯示應當終止。 另外,當圖像數(shù)據(jù)的接收和顯示已經(jīng)持續(xù)了預定時間段時,圖像的顯 示可以自動終止。如果基于用戶操作或用于終止的另一條件確定圖像
的顯示應當終止,則控制進行到步驟F104。在步驟F104,裝置A的 系統(tǒng)控制器IO使得通信終止請求被經(jīng)由通信部件26發(fā)送到服務器裝 置70。
服務器裝置70在步驟F303繼續(xù)轉發(fā)過程,直到接收到通信終 止請求。在接收到通信終止請求后,服務器裝置70的服務器控制部 件72從步驟F304進行到步驟F305,并將終止通信的指令發(fā)送到裝 置B。
如果裝置B的系統(tǒng)控制器10在步驟F202辨別出已接收到終止 通信的指令,則其進行到步驟F203。
在步驟F105,裝置A的系統(tǒng)控制器10執(zhí)行終止與服務器裝置 70的通信連接的過程。在步驟F203,裝置B的系統(tǒng)控制器10執(zhí)行終 止與服務器裝置70的通信連接的過程。在步驟F306,服務器裝置70 的服務器控制部件72終止裝置A和B與服務器過程之間的通信。結 果,該系統(tǒng)操作完成。
根據(jù)上述處理過程,通過利用地像指定任意位置并指定任意 速度,裝置A的用戶能夠利用用戶正佩戴或攜帶的裝置A,觀看由安 裝在位于指定位置附近并且以指定速度移動的可移動體上的裝置B
獲得的場景的圖像。
裝置A的用戶可以看見的示例性圖l象如圖15A至15D所示。 參考圖15A和15B,如果裝置A的用戶例如指定地圖上某一條 路上的一點并且指定某一速度,則用戶可以看見從當前正在指定點附 近以指定速度移動的汽車等可以觀察到的場景的圖像。這些圖像例如 是正由附接到例如汽車的成像裝置30拍攝的圖像,或者是正由被在 指定點附近以指定速度移動(或者在指定速度為零的情況下未移動) 的汽車的駕駛者所佩戴的成像裝置30或成像/顯示裝置l拍攝的圖像。 參考圖15C,如果裝置A的用戶例如指定地圖上某一鐵軌上的 一點并且指定某一速度,則用戶可以看見由裝置B拍攝的圖像,裝置
B例如是被放置在當前正在指定點附近行進的軌道車輛上的成像裝置 30,或者是被軌道車輛的駕駛者佩戴的成像裝置30或成像/顯示裝置
參考圖15D,如果裝置A的用戶例如指定地圖上某一旅游勝地 中的一點并且指定人行走速度,則用戶可以看見由裝置B拍攝的圖 像,裝置B例如是被當前正在指定點處行走的人佩戴的成像裝置30 或成<象/顯示裝置1。
如在以上例子中一樣,通過指定地圖上的一點和移動速度,裝置 A的用戶可以看見由在指定點處以指定速度移動的裝置B實際拍攝的 圖像。
盡管在上述示例性操作中假定地圖被顯示在裝置A的一部分上 并且用戶指定地圖上的某一位置,但是地圖的顯示對于本發(fā)明來說并 不是必要的。例如,裝置A的用戶可以輸入特定地名、地址等,以使 得所輸入的地名、地址等作為位置指定信息被發(fā)送到服務器裝置70。 在這種情況下,服務器裝置70可以使用地圖數(shù)據(jù)庫75來識別與地名、 地址等相對應的位蕈(例如,其綿度和經(jīng)度),并且搜索位于所識別 的位置附近的裝置B。
另外,與特定位置不同的是,可以指定非特定位置。例如,諸如 "山地"、"海灘"、"森林"、"海面"、"水下"或"天空,,之類的非特定信 息可以被用作位置指定信息。在這種情況下,服務器裝置70可以搜 索位于與該非特定信息相對應的位置處的裝置B。
[5.示例性的系統(tǒng)操作II
下面將描述示例性的系統(tǒng)操作n。在示例性系統(tǒng)操作ii中,通
過裝置B的成像獲得的圖像數(shù)據(jù)被累積在服務器裝置70中,并且所 累積的圖像數(shù)據(jù)被讀出并提供給裝置A。
在該示例性操作中,通過安裝在可移動體上的裝置B(即,成像 裝置30或成像/顯示裝置1)的成像獲得的圖像數(shù)據(jù)與附加數(shù)據(jù)一同 被發(fā)送到服務器裝置70,附加數(shù)據(jù)包括指示成像時的移動速度的速度 信息和指示成像時的位置的位置信息,并且所發(fā)送的圖像數(shù)據(jù)和附加數(shù)據(jù)被存儲在服務器裝置70中。因此,在服務器裝置70中,通過位 于多個場所處的大量裝置B中的每一個的成像獲得的圖像數(shù)據(jù)與相 應的速度信息和位置信息一同被累積。因而,如果在裝置A(即,顯 示裝置40或成像/顯示裝置1)處指定速度和位置并且速度指定信息 和位置指定信息被發(fā)送到服務器裝置70,則服務器裝置70能夠基于 該速度指定信息和位置指定信息搜索適當?shù)膱D像數(shù)據(jù)。服務器裝置70 搜索并讀取與速度指定信息和位置指定信息相匹配的圖像數(shù)據(jù),并將 所讀取的圖像數(shù)據(jù)發(fā)送到裝置A。裝置A接收并顯示圖像數(shù)據(jù)。結果, 裝置A的用戶可以看見由在指定位置處以指定速度移動的裝置B拍攝 的過去場景的顯示圖像。
下面將參考圖11、 12和13描述示例性系統(tǒng)操作I1。
圖11圖示了充當裝置A的成像/顯示裝置1和顯示裝置40、服 務器裝置70、以及充當裝置B的成像/顯示裝置1和成像裝置30。
充當裝置B的成像裝置30和成像/顯示裝置1執(zhí)行向服務器裝置 70發(fā)送通過成像獲得的圖像數(shù)據(jù)(和音頻數(shù)據(jù))的過程。
例如,充當裝置B的成像裝置30和成像/顯示裝置1可以恒定地 成像并將所拍攝的圖像數(shù)據(jù)(和音頻數(shù)據(jù))發(fā)送到服務器裝置70。在 只在指定時刻處才執(zhí)行成像的情況下,充當裝置B的成像裝置30和 成像/顯示裝置1可以在每次執(zhí)行成像時向服務器裝置70發(fā)送拾取的 圖像數(shù)據(jù)(和音頻數(shù)據(jù))。例如,圖像數(shù)據(jù)的成像和發(fā)送可以定期執(zhí) 行。在裝置B被用戶佩戴的情況下,圖像數(shù)據(jù)的成像和發(fā)送可以基于 用戶操作執(zhí)行。另外,服務器裝置70可以向裝置B發(fā)送用于成像的 請求以及指示指定位置的位置信息。在這種情況下,裝置B的系統(tǒng)控 制器IO可以在系統(tǒng)控制器IO已確定裝置B的當前位置對應于由位置 信息指示的指定位置時自動拍攝圖像數(shù)據(jù),并向服務器裝置70發(fā)送 通過成像獲得的圖像數(shù)據(jù)。
如前所述,充當裝置B的成像裝置30和成像/顯示裝置1在向服 務器裝置70發(fā)送圖像/音頻數(shù)據(jù)時還發(fā)送附加數(shù)據(jù)。
附加數(shù)據(jù)包括關于發(fā)送的圖像/音頻數(shù)據(jù)的圖像管理信息、指示
在通過成像獲得圖像數(shù)據(jù)時的速度的速度信息、指示通過成像獲得圖 像數(shù)據(jù)的位置的位置信息、以及指示在通過成像獲得圖像數(shù)據(jù)時的日 期和時間的日期/時間信息。
服務器裝置70將從成像/顯示裝置1和成像裝置30中的每一個 發(fā)送來的圖像數(shù)據(jù)(和音頻數(shù)據(jù))以及附加數(shù)據(jù)存儲在網(wǎng)絡存儲部件 71內的速度圖像數(shù)據(jù)庫中。
即,在經(jīng)由通信部件73從裝置B接收到圖像數(shù)據(jù)(和音頻數(shù)據(jù)) 以及附加數(shù)據(jù)后,服務器控制部件72執(zhí)行將所接收的數(shù)據(jù)登記在網(wǎng) 絡存儲部件71內的速度圖像數(shù)據(jù)庫中的過程。
圖12示意性地圖示了記錄在速度圖像數(shù)據(jù)庫中的內容。
在速度圖像數(shù)據(jù)庫中,從充當裝置B的成像/顯示裝置1和成像 裝置30中的每一個發(fā)送來的圖像數(shù)據(jù)被分段并登記為條目#1、 #2等 等。圖像數(shù)據(jù)的分段可以基于圖像數(shù)據(jù)的大小、重放時間等進行。例 如,可以確定最大數(shù)據(jù)大小、最大重放時間等。在圖像數(shù)據(jù)作為連續(xù) 視頻被從裝置B發(fā)送的情況下,該連續(xù)視頻可以在指示通過攝像獲得 圖像數(shù)據(jù)的位置的位置信息改變的點處被劃分為不同條目。圖像數(shù)據(jù) 被分段為不同條目的方式可以例如取決于來自裝置B的圖像數(shù)據(jù)的 發(fā)送的形式或發(fā)送的持續(xù)時間而適當確定,或者可以根據(jù)用于速度圖 像數(shù)據(jù)庫的管理信息的方便性或用于由服務器裝置70提供的圖像提
供服務的方便性而適當確定。
參考圖12,在圖像數(shù)據(jù)(和音頻數(shù)據(jù))VD1、 VD2、 VD3等被 作為條目記錄的同時,位置信息Pl、 P2、 P3等,日期/時間信息Datel、 Date2、 Date3等,圖像管理信息C1、 C2、 C3等,以及速度信息V1、 V2、 V3等也被記錄,以便分別與圖像數(shù)據(jù)VD1、 VD2、 VD3等相關 聯(lián)。
位置信息、日期/時間信息、圖像管理信息和速度信息是與圖像 數(shù)據(jù)一同從裝置B發(fā)送來的附加數(shù)據(jù)。
例如,關于條目#1,位置信息Pl是指示在拍攝圖像數(shù)據(jù)VD1 的圖像時的位置的位置信息,并且例如是該位置的綷度和經(jīng)度的信
息。
曰期/時間信息Datel是指示在拍攝圖像數(shù)據(jù)VD1的圖像時的曰 期和時間(年、月、日、時、分、秒)的信息。
速度信息VI是指示在拍攝圖像數(shù)據(jù)VD1的圖像時的移動速度 的信息。
圖像管理信息Cl是圖像數(shù)據(jù)VD1的管理信息,并且例如包括 圖像類型、數(shù)據(jù)大小、壓縮算法、裝置B的標識信息、以及與成像位 置有關的信息,例如拍攝圖像數(shù)據(jù)VD1的圖像的位置名的信息。注 意,與成像位置有關的信息可以基于成像時的當前位置信息從充當裝 置B的成像/顯示裝置1或成像裝置30中的地圖數(shù)據(jù)庫29取得,然 后裝置B的系統(tǒng)控制器10可以將所取得的與成像位置有關的信息添 加到附加數(shù)據(jù)以發(fā)送到服務器裝置70?;蛘?,服務器裝置70可以基 于位置信息Pl從地圖數(shù)據(jù)庫75取得與成像位置有關的信息。
如上所述,充當裝置B的成像/顯示裝置1和成像裝置30中的每 一個向服務器裝置70發(fā)送圖像數(shù)據(jù)和附加數(shù)據(jù),如圖11所示。結果, 在多個場所以多個速度拍攝的圖像的圖像數(shù)據(jù)被累積在速度圖像數(shù) 據(jù)庫中,如圖12所示。
作為在服務器裝置70中累積在多個場所以多個速度拍攝的圖像 的結果,服務器裝置70變得能夠向裝置A的用戶提供圖像提供服務。
下面將描述充當裝置A的成像/顯示裝置1或顯示裝置40與服務 器裝置70通信并從服務器裝置70獲取圖像數(shù)據(jù)以顯示所獲取的圖像 數(shù)據(jù)的示例性操作。換句話說,該示例性操作是裝置A的用戶享用由 服務器裝置70提供的圖像提供服務的操作。
圖13中所示的裝置A的過程可以被認為是由成像/顯示裝置1 或顯示裝置40的系統(tǒng)控制器10執(zhí)行的控制過程,而服務器裝置70 的過程可以被認為是由服務器控制部件72執(zhí)行的控制過程。
首先,在步驟FllO,在裝置A的一部分上,利用地像執(zhí)行 位置指定過程和速度指定過程。
該位置指定過程和速度指定過程類似于在上述的圖9中示例性
系統(tǒng)操作I中的步驟F100處執(zhí)行的過程。例如,系統(tǒng)控制器10基于 如圖14A和14B所示的利用地像的用戶輸入生成位置指定信息, 并基于如圖14C或14D所示的顯示的屏幕的用戶輸入生成速度指定 信息。
在步驟F110處生成了位置指定信息和速度指定信息之后,裝置 A的系統(tǒng)控制器10在步驟F111訪問服務器裝置70。換句話說,裝置 A的系統(tǒng)控制器10建立與服務器裝置70的通信連接。此時,裝置A 的系統(tǒng)控制器10向服務器裝置70發(fā)送圖像請求的信息、位置指定信 息和速度指定信息。
在步驟F310,服務器裝置70的服務器控制部件72建立與裝置 A的通信連接,并且接受圖像請求、位置指定信息和速度指定信息。
然后,在步驟F311,服務器控制部件72識別要讀取的圖像數(shù)據(jù)。 具體而言,基于所接收的位置指定信息和速度指定信息,服務器控制 部件72搜索網(wǎng)絡存儲部件71中的速度圖像數(shù)據(jù)庫,以提取出其位置 信息與位置指定信息相匹配并且其速度信息與速度指定信息相匹配 的條目。
然后,服務器控制部件72將所提取的條目的圖像數(shù)據(jù)識別為要 讀取的圖像數(shù)據(jù)。
注意,位置信息與位置指定信息相匹配的含義并不限于位置信息 的綿度和經(jīng)度與位置指定信息的緯度和經(jīng)度彼此完全一致,而是可以 理解為位置信息的綿度和經(jīng)度落在可被認為是接近由位置指定信息 指示的位置的綿度和經(jīng)度的預定范圍內。該預定范圍可以取決于速度 指定信息的值而變化。例如,優(yōu)選地,該預定范圍隨著指定的速度變 大而變寬。
還要注意,速度信息與速度指定信息相匹配的含義不限于速度信 息的值與由速度指定信息指示的速度值相互一致或者落在由速度指 定信息指示的速度值的范圍內,而是可以理解為速度信息的值落入可 被認為靠近所述速度值的預定范圍內或者落入由速度指定信息指示 的速度值的范圍內。
還要注意,可能找到多個與位置指定信息和速度指定信息相匹配 的條目,在這種情況下,可以參考日期/時間信息,以使得其日期/時 間信息指示最近的日期和時間的條目的圖像數(shù)據(jù)被選為要讀取的圖 像數(shù)據(jù)?;蛘?,所有與位置指定信息和速度指定信息相匹配的條目都 可以被確定為順序讀取。
還要注意,可能找不到任何一個與位置指定信息和速度指定信息
相匹配的條目。這例如發(fā)生在裝置B沒有上載到在由位置指定信息指 示的位置處或者在該位置附近拍攝的圖像的圖像數(shù)據(jù)時,或者發(fā)生在 盡管某些上載的圖像數(shù)據(jù)與位置指定信息相匹配但是這些圖像數(shù)據(jù) 都不與速度指定信息相匹配時。
盡管未在圖13中示出,但是在這樣的情形中,服務器控制部件 72向裝置A告知沒有找到與位置指定信息和速度指定信息相匹配的 圖像數(shù)據(jù),因此,提供圖像是不可能的。作為響應,裝置A向用戶告 知提供圖像是不可能的,并且完成其過程。
在搜索了速度圖像數(shù)據(jù)庫并識別了要讀取的條目(即,圖像數(shù)據(jù)) 之后,服務器控制部件72在步驟F312使得被識別為要讀取的圖像的 圖像數(shù)據(jù)被從網(wǎng)絡存儲部件71讀取,并且使得所讀取的圖像數(shù)據(jù)和 音頻數(shù)據(jù)經(jīng)由通信部件73被發(fā)送到裝置A。
在步驟F112,裝置A接收并顯示從服務器裝置70發(fā)送來的圖像 數(shù)據(jù)。即,裝置A的系統(tǒng)控制器10使得由通信部件26接收并解調的 圖像數(shù)據(jù)(和音頻數(shù)據(jù))被提供給圖像處理部件15和音頻處理部件 16,并且使得圖像數(shù)據(jù)被顯示在顯示部件2上,音頻數(shù)據(jù)經(jīng)由音頻輸 出部件5輸出。
在步驟F113,裝置A的系統(tǒng)控制器10監(jiān)視通信終止請求是否已 從服務器裝置70發(fā)送。
在步驟F114,裝置A的系統(tǒng)控制器10確定圖像的顯示是否應當 終止。例如,當用戶已經(jīng)利用操作輸入部件11執(zhí)行了用于終止圖像 顯示的操作時,裝置A的系統(tǒng)控制器10確定圖像的顯示應當終止。 另外,當圖像數(shù)據(jù)的接收和顯示已持續(xù)了預定時間段時,圖像的顯示
可以自動終止。
裝置A的系統(tǒng)控制器10繼續(xù)顯示在步驟F112接收的圖像數(shù)據(jù) (并且輸出音頻數(shù)據(jù)),直到在步驟F113確定已接收到通信終止請 求或者在步驟F114確定圖像的顯示應當終止為止。
在步驟F313,服務器裝置70監(jiān)視要讀取的條目的圖像數(shù)據(jù)的讀 取是否已完成。在步驟F314,服務器裝置70監(jiān)視是否已從裝置A接 收到通信終止請求。服務器裝置70繼續(xù)讀取并發(fā)送圖像數(shù)據(jù)(和音 頻數(shù)據(jù)),直到在步驟F313確定圖像數(shù)據(jù)的讀取已完成或者在步驟 F314確定已接收到通信終止請求為止。
因此,在這一時段期間,裝置A的用戶能夠觀看由裝置B在過 去拍攝的實際場景的圖像,裝置B位于由用戶利用地像指定的位 置處或者在該位置附近,并且正以指定速度移動。
如果在步驟F114基于用戶操作或用于終止的另 一條件確定圖像 的顯示應當終止,則裝置A的系統(tǒng)控制器10進行到步驟F115,并且 使得通信終止請求經(jīng)由通信部件26被發(fā)送到服務器裝置70,然后進 行到步驟F116。在接收到通信終止請求后,服務器裝置70從步驟F3M 進行到F316。
如果確定要讀取的條目的讀取和發(fā)送已完成,則服務器控制部件 72從步驟F313進行到F315,并且使得通信終止請求經(jīng)由通信部件 73被發(fā)送到裝置A。在接收到通信終止請求后,裝置A的系統(tǒng)控制 器10從步驟F113進行到F116。
然后,在步驟F116,裝置A的系統(tǒng)控制器10執(zhí)行終止與服務器 裝置70的通信連接的過程。在步驟F316,服務器裝置70的服務器控 制部件72終止與裝置A的通信連接以及用于裝置A的服務器過程。 因而,系統(tǒng)操作完成。
根據(jù)上述過程,通過利用地像任意指定某一位置并且指定任 意速度,裝置A的用戶能夠利用用戶佩戴或攜帶的裝置A觀看由位 于指定位置附近并且以指定速度移動的裝置B拍攝的場景的圖像。
參考圖15A和15B,如果裝置A的用戶例如指定地圖上某一條
路上的 一點并且指定某一速度,則用戶可以看見從正在指定點處以指 定速度在過去移動的汽車等觀察到的場景的圖像。這些圖像例如是由
附接到例如汽車的成像裝置30拍攝的圖像,或者是由被在指定點附 近以指定速度移動(或者在指定速度為零的情況下未移動)的汽車的 駕駛者所佩戴的成像裝置30或成像/顯示裝置1拍攝的圖像。
參考圖15C,如果裝置A的用戶例如指定地圖上某一鐵軌上的 一點并且指定某一速度,則用戶可以看見由裝置B拍攝的圖像,裝置 B例如是附接到在指定點處在過去行進的軌道車輛的成像裝置30,或 者是被軌道車輛的駕駛者佩戴的成像裝置30或成像/顯示裝置1。
參考圖15D,如果裝置A的用戶例如指定地圖上某一旅游勝地 中的一點并且指定人行走速度,則用戶可以看見由裝置B拍攝的圖 像,裝置B例如是被在過去在指定點處行走的人佩戴的成像裝置30 或成像/顯示裝置1。
如在以上例子中一樣,通過指定地圖上的一點并指定移動速度, 裝置A的用戶可以看見實際由在過去在指定點處以指定速度移動的 裝置B拍攝的圖像。
盡管在前面的描述中假定裝置A的用戶指定位置和速度,但是 用戶可以被允許在圖13中的步驟F110另外指定日期和時間。
如上所述,在步驟F110,系統(tǒng)控制器IO根據(jù)用戶在地像被 顯示的同時指定位置的操作來生成位置指定信息,并要求用戶利用菜 單或者通過輸入數(shù)值來輸入速度,并且根據(jù)輸入的速度生成速度指定 信息。此時,系統(tǒng)控制器10可以額外要求用戶例如利用菜單或者通 過輸入數(shù)值來指定并輸入日期和時間。
例如,用戶可以被允許指定并輸入特定的年、月和日、特定時間 等,或者指定并輸入某一日期范圍(例如,從某月某日到某月某曰) 或某一時間范圍(例如,從某一時到另一時)。另外,用戶可以被允 許選擇基于所輸入的日期和時間的搜索條件。這種搜索條件的示例包 括"包括指定的日期/時間"、"在指定的日期/時間里"、"在指定的日期 /時間之前"以及"在指定的日期/時間之后"。然后,系統(tǒng)控制器10設置指定的日期/時間或者指定日期/時間和搜索條件的組合,作為日期/ 時間指定信息。
在這種情況下,當在步驟Fill訪問服務器裝置70時,裝置A 的系統(tǒng)控制器10發(fā)送日期/時間指定信息以及位置指定信息和速度指 定信息。在步驟F310,服務器控制部件72接受日期/時間指定信息以 及位置指定信息和速度指定信息。
然后,在步驟F311,服務器控制部件72利用位置指定信息、速 度指定信息和日期/時間指定信息搜索速度圖像數(shù)據(jù)庫。
具體而言,服務器控制部件72提取出其速度圖像數(shù)據(jù)庫中的位 置信息和速度信息分別與位置指定信息和速度指定信息相匹配的條 目,并進一步從其提取出其速度圖像數(shù)據(jù)庫中的日期/時間信息與曰期 /時間指定信息相匹配的條目。
通過以上述方式進行搜索,服務器控制部件72提取出與由用戶 指定的速度、位置和成像日期/時間相匹配的條目,并將該條目的圖像 數(shù)據(jù)識別為要讀取的圖像。
如上所述,通過指定日期/時間,裝置A的用戶能夠選擇性地觀 看在指定日期/時間拍攝的圖像。
例如,裝置A的用戶能夠從在某一場所以某一移動速度拍攝的 場景中,任意選擇并觀看在某一時段內拍攝的場景、在近來拍攝的場 景、在某一時刻之前拍攝的場景、在特定日拍攝的場景、在特定時刻 拍攝的場景、在夜間拍攝的場景,等等。
因而,用戶能夠觀看在任意場所以任意移動速度拍攝的更廣范圍 的場景。
[6.實施例的效果、示例性的變型和示例性的擴展
上面已經(jīng)描述了本發(fā)明的實施例。與裝置A相對應的成像/顯示 裝置1或顯示裝置40的用戶能夠通過指定速度和位置而看見實際由 處于與指定位置和速度相匹配的情形的成像裝置30拍攝的圖像。因 而,實現(xiàn)了滿足用戶的多種需要的系統(tǒng)和裝置。這些需要的示例包括 希望觀看并享受當在某一場所以某一速度行進時可以看見的場景、以
及希望知道在這種情形下觀察到的場景。
人們實際可能體驗的場景將取決于移動速度而給出極為不同的 印象。因此,指定速度并且體驗當以指定速度行進時可以觀察到的場 景的能力可以給予用戶一個享受非常愉快的場景圖像的機會,或者用 戶可以發(fā)現(xiàn)作為有用信息的圖像。
另外,通過指定例如180 km/h或更高的移動速度,用戶能夠觀 看諸如汽車賽或自行車賽之類的賽車運動。
另外,當本發(fā)明被應用于車載導航系統(tǒng)時,用戶能夠預先看見在 任意位置處的場景,就好像用戶是在該位置附近實際駕駛汽車的同時 看見該場景一樣。這對于用戶的向導來說非常有用。
移動速度一般會產(chǎn)生波動,并且可能例如在交通燈前變?yōu)榱?。?此,不僅可以使用瞬時速度,還可以使用各種類型的速度,例如某一 時間段內的平均速度、所謂的標準速度以及最大速度。例如,由服務 器裝置70管理的裝置B的速度信息可以是瞬時速度、平均速度、標 準速度、最大速度等中的一種。或者,裝置B的瞬時速度、平均速度、 標準速度、最大速度等中的兩種或更多種可以由服務器裝置70管理。 另外,由裝置A的用戶指定的速度可以是瞬時速度、平均速度、標準 速度、最大速度中的任何一種。
另外,指定位置并且看見在指定位置處拍攝的圖像的能力允許用 戶知道例如作為指定位置的境況的其地理特征、附近建筑物或天然物 的風景、道路的寬度或小路的數(shù)目、取決于日期和時間而變化的狀態(tài) 等等。因而,當本發(fā)明被應用于所謂的導航系統(tǒng)時,可以提供廣泛的 信息提供服務。
另外,指定位置的能力在用戶希望檢查特定區(qū)域中的當前或過去 場景時是有用的。例如,在示例性系統(tǒng)操作I中,用戶可以指定路上 的某一點以看見指定點附近發(fā)生的擁塞的當前情景,并因而詳細辨別 出擁塞的實際狀態(tài),或者看見事件發(fā)生的某一場所附近的擁塞情景并 因而檢查擁塞。當用戶希望檢查擁塞時,用戶可以例如選擇1 km/h 或更小的移動速度或10 km/h或更小的移動速度以獲得期望場景。
另外,通過看見示出某一旅游勝地的當前情形的實際場景,用戶 能夠檢查天氣狀況、秋天的葉子顏色變了多少,等等。另外,根據(jù)示 例性系統(tǒng)操作II,用戶能夠檢查指定場所的過去場景。
如參考示例性系統(tǒng)操作H所描述的,用戶可以使用日期/時間指 定信息來選擇要提供的圖像數(shù)據(jù)。因而,用戶能夠通過指定不同的日 期/時間信息來觀看不同的圖像。
例如,用戶能夠指定并觀看在過去移動的同時可以觀察到的場景 的圖像、在某一時間之前在某一場所處已經(jīng)拍攝的圖像。
由于充當裝置B的成像/顯示裝置1或成像裝置30可以被放置在 包括人在內的可移動體上,因此不需要提供諸如所謂的固定照相機之 類的固定設備。
被放置在可移動體上的成像/顯示裝置1或成像裝置30在多個場 所處行進的同時自然地拍攝圖像。因此,在示例性系統(tǒng)操作II中,很 容易收集在多個場所處實際拍攝的圖像并且豐富在速度圖像數(shù)據(jù)庫 中登記的圖像。
盡管上面描述了根據(jù)本發(fā)明的圖像顯示系統(tǒng)、顯示裝置和顯示方 法的實施例,但是應當意識到,本發(fā)明并不限于上述實施例,而是有 多種變型和擴展。
充當裝置A的成像/顯示裝置1和顯示裝置40有多種可能的結構 和處理過程,裝置A對應于根據(jù)本發(fā)明的顯示裝置。另外,充當裝置 B的成像/顯示裝置1和成像裝置30有多種可能的結構和處理過程, 裝置B對應于權利要求中所記載的成像裝置。另外,服務器裝置70
有多種可能的結構和處理過程。
在示例性系統(tǒng)操作I和II中假定裝置A的用戶指定速度和位置,
并且與速度指定信息和位置指定信息相對應的圖像數(shù)據(jù)被提供給裝 置A。然而,其中裝置A的用戶只指定速度的過程也是適用的。
具體而言,在這種情況下,只有速度指定信息被發(fā)送到服務器裝 置70作為用于選擇要提供的圖像的條件。在示例性系統(tǒng)操作I的情況 下,服務器裝置70的照相機位置/速度管理部件74至少管理大量裝置 B的當前速度,并且在服務器裝置70中,選擇其當前速度與速度指 定信息相匹配的裝置B。然后,圖像數(shù)據(jù)被從所選的裝置B傳送到裝 置A。
同時,在示例性系統(tǒng)操作II的情況下,服務器裝置70當搜索速 度圖像數(shù)據(jù)庫以找到期望的圖像數(shù)據(jù)時只使用速度指定信息,并且向 裝置A發(fā)送與速度指定信息相匹配的圖像數(shù)據(jù)。
也就是說,在這種情況下,裝置A的用戶可以觀看由被放置在 正以(或者過去以)指定速度移動的可移動體上的裝置B拍攝的圖像。
類似地,其中裝置A的用戶指定速度和日期/時間并且與速度指 定信息和日期/時間指定信息相匹配的圖像數(shù)據(jù)被提供給裝置A的過 程也是可能的。
另外,例如,不僅可以進行正常的成像,還可以進行多種成像操 作以在裝置B中獲得圖像,以使得所得到的圖像數(shù)據(jù)被發(fā)送到服務器 裝置70。另外,對于多種成像操作的請求可以被從裝置A或服務器 裝置70發(fā)送到裝置B。這多種成像操作的示例包括遠距離成像; 廣角成像;涉及在遠距離極限和廣角極限之間的范圍內的放大或縮小 變焦的成像;用于放大圖像的成像;用于縮小圖像的成像;具有變化 的幀頻的成像(例如,具有高幀頻的成像、具有低幀頻的成像,等等); 具有增大的亮度的成像;具有減小的亮度的成像;具有變化的對比度 的成像;具有變化的尖銳度的成像;具有增大的成像靈敏度的成像; 具有增大的紅外成像靈敏度的成像;具有增大的紫外成像靈敏度的成 像;具有特定波長范圍截止的成像;涉及圖像效果的應用的成像,例 如對拾取的圖像數(shù)據(jù)進行鑲嵌、亮度反轉過程、軟聚焦過程、高亮顯 示圖像的一部分或者改變圖像的整個顏色氛圍;以及頻閃成像。
另外,在示例性系統(tǒng)操作ll中,服務器裝置70可以生成看起來 是由以指定速度移動的裝置B拍攝的偽圖像,并向裝置A發(fā)送偽圖像。
例如,假定指示100 km/h的移動速度的速度指定信息被從裝置 A發(fā)送,并且在速度圖像數(shù)據(jù)庫中存在以50km/h的速度拍攝的圖像 的圖像數(shù)據(jù)。在這種情況下,服務器裝置70可以將該圖像數(shù)據(jù)發(fā)送
到裝置A,以使得圖像數(shù)據(jù)將以兩倍速度被重放。以這種方式,看起 來以100 km/h拍攝的偽圖像可以被提供給裝置A的用戶。
另外,在裝置A中,從服務器裝置70發(fā)送來的圖像數(shù)據(jù)可以被 存儲在存儲部件25中。系統(tǒng)控制器10將所接收的圖像數(shù)據(jù)存儲在存 儲部件25中以便與速度信息(例如,在圖9的步驟F100或圖13的 步驟F110設置的速度指定信息)相關聯(lián)。當然,存儲在存儲部件25 中的所接收的圖像數(shù)據(jù)也可以與位置信息相關聯(lián)。
結果,用戶可以通過在任何后續(xù)時刻指定速度來重放存儲在存儲 部件25中的圖像數(shù)據(jù)。
另外,裝置A的用戶可以被允許從某一點起指定移動方向。
在這種情況下,在裝置B中,位置檢測部件12也檢測移動方向, 并且移動方向與速度信息一同被發(fā)送到服務器裝置70。
因而,通過指定移動方向作為附加的搜索條件,裝置A的用戶 能夠請求服務器裝置70選擇由以指定速度在指定移動方向上移動的 裝置B拍攝的圖像的圖像數(shù)據(jù)。
例如,在沿南北方向的某一條路上看見的場景將取決于對場景成 像的裝置B是向北移動還是向南移動而有所不同。當裝置A的用戶指 定移動方向作為附加的搜索條件時,與用戶指定的移動方向相匹配的 圖像數(shù)據(jù)將被取得并提供給裝置A。
在上述實施例中,用戶利用地像指定位置。地像的示例 不僅包括示出地面上的道路、地理特征、建筑物、天然物等的"地圖" 的圖像,還包括可以用于指定特定位置的多種圖的圖像,例如海圖、 水下地形圖、航空圖和空間圖。
也就是說,盡管在上述實施例中假定用戶利用地面地圖指定位 置,但是海圖、水下地形圖、航空圖和空間圖等也可以用于指定某一 位置。
例如,在示例性系統(tǒng)操作II的情況下,服務器裝置70可以將在 船只、潛水艇、航空器、衛(wèi)星等上拍攝的圖像的圖像數(shù)據(jù)與它們的速 度信息、位置信息等一同登記在速度圖像數(shù)據(jù)庫中。在這種情況下,
服務器裝置70能夠基于由用戶利用海圖、水下地形圖、航空圖和空 間圖等指定的位置搜索適當?shù)膱D像,并將找到的圖像提供給裝置A。 應當意識到,關于水下、空中、太空中等的位置的位置信息不僅可包 括煒度和經(jīng)度的信息,還可包括高度或深度的信息。
在示例性系統(tǒng)操作I的情況下,作為用戶例如利用海圖指定位置 并且指定速度的結果,可以選擇安裝在正在與指定位置相對應的海域 內以與指定速度相對應的速度行進的船只上的裝置B ,以使得由所選 的裝置B拍攝的圖像的圖像數(shù)據(jù)被發(fā)送到裝置A。類似地,用戶可以 例如利用空間圖指定衛(wèi)星的軌道上的某一位置并且指定速度,以觀看 在指定位置處或在指定位置附近以指定速度移動的衛(wèi)星拍攝的圖像。
在上述實施例中已假定圖像數(shù)據(jù)和音頻數(shù)據(jù)被從裝置B經(jīng)由服 務器裝置70提供到裝置A。然而,注意,在本發(fā)明的另一個實施例 中可以只提供圖像數(shù)據(jù)。
還要注意,本發(fā)明可以被應用于只處理音頻數(shù)據(jù)的系統(tǒng)。
本發(fā)明包含與2006年12月7日向日本專利局提交的日本專利申 請JP 2006-330833有關的主題,該申請的全部內容通過引用結合于 此。
權利要求
1.一種圖像顯示系統(tǒng),包括顯示裝置;被放置在可移動體上用于成像的成像裝置;以及服務器裝置,其中所述顯示裝置和所述成像裝置的每一個都能夠與所述服務器裝置通信,所述成像裝置包括成像部件,被配置為拍攝圖像以獲得圖像數(shù)據(jù),速度檢測部件,被配置為檢測所述可移動體的移動速度并且生成指示所檢測的移動速度的速度信息,以及控制部件,被配置為執(zhí)行發(fā)送控制過程,使得由所述成像部件獲得的圖像數(shù)據(jù)和由所述速度檢測部件生成的速度信息被發(fā)送到所述服務器裝置,所述服務器裝置包括可移動體速度管理部件,被配置為利用從所述成像裝置發(fā)送來的速度信息管理上面放置有所述成像裝置的可移動體的移動速度,以及控制部件,被配置為執(zhí)行照相機識別過程和傳送控制過程,所述照相機識別過程基于從所述顯示裝置發(fā)送來的速度指定信息檢查由所述可移動體速度管理部件管理的可移動體的移動速度并識別與所述速度指定信息相匹配的成像裝置,所述傳送控制過程使得圖像數(shù)據(jù)被從所識別的成像裝置發(fā)送到所述顯示裝置,并且所述顯示裝置包括顯示部件,被配置為執(zhí)行圖像顯示,以及控制部件,被配置為執(zhí)行速度指定過程、圖像請求發(fā)送過程和顯示過程,所述速度指定過程基于用戶輸入設置所述速度指定信息,所述圖像請求發(fā)送過程向所述服務器裝置發(fā)送所述速度指定信息以發(fā)出對圖像數(shù)據(jù)的請求,所述顯示過程接收響應于所述圖像請求發(fā)送過程而從所述服務器裝置發(fā)送來的圖像數(shù)據(jù)并使得所述顯示部件基于所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
2. 如權利要求1所述的圖像顯示系統(tǒng),其中 所述成像裝置還包括位置檢測部件,被配置為檢測位置信息,并且作為所述發(fā)送控制 過程,所述成像裝置的控制部件另外還執(zhí)行使得由所迷位置檢測部件 檢測到的位置信息被發(fā)送到所述服務器裝置的過程,所述服務器裝置的可移動體速度管理部件利用從所述成像裝置 發(fā)送來的速度信息和位置信息管理上面放置有所述成像裝置的可移 動體的移動速度和位置,所述顯示裝置的控制部件執(zhí)行設置用于指定位置的位置指定信 息的位置指定過程,并且在所述圖像請求發(fā)送過程中,向所述服務器 裝置發(fā)送所述速度指定信息和所述位置指定信息,并且在所述照相機識別過程中,所述服務器裝置的控制部件基于從所 述顯示裝置發(fā)送來的速度指定信息和位置指定信息識別所述成像裝 置。
3. 如權利要求1所述的圖像顯示系統(tǒng),其中所述可移動體是人、 非人類動物、在地面上行進的設備、在海面上行進的設備、在海面下 行進的設備、在空氣中行進的設備以及在地球大氣層外行進的設備中 的一種。
4. 一種圖像顯示系統(tǒng),包括 顯示裝置;被放置在可移動體上用于成像的成像裝置;以及 服務器裝置,其中所述顯示裝置和所述成像裝置的每一個都能夠與所述服務器裝 置通信,所述成像裝置包括成像部件,被配置為拍攝圖像以獲得圖像數(shù)據(jù), 速度檢測部件,被配置為檢測所述可移動體的移動速度并且生成指示所檢測的移動速度的速度信息,以及控制部件,被配置為執(zhí)行發(fā)送控制過程,使得由所述成像部件獲得的圖像數(shù)據(jù)和至少包括在通過成像獲得圖像數(shù)據(jù)時由所述速度檢測部件生成的速度信息的附加數(shù)據(jù)被發(fā)送到所述服務器裝置,所述服務器裝置包括存儲部件,被配置為存儲從所述成像裝置發(fā)送來的圖像數(shù) 據(jù)和附加數(shù)據(jù),以及控制部件,被配置為執(zhí)行搜索/發(fā)送控制過程,該過程基于 從所述顯示裝置發(fā)送來的速度指定信息搜索存儲在所述存儲部 件中的圖像數(shù)據(jù),并且使得找到的圖像數(shù)據(jù)被從所述存儲部件讀 出并被發(fā)送到所述顯示裝置, 并且所述顯示裝置包括顯示部件,被配置為執(zhí)行圖像顯示,以及 控制部件,被配置為執(zhí)行速度指定過程、圖像請求發(fā)送過 程和顯示過程,所述速度指定過程基于用戶輸入設置所述速度指 定信息,所述圖像請求發(fā)送過程向所述服務器裝置發(fā)送所述速度 指定信息以發(fā)出對圖像數(shù)據(jù)的請求,所述顯示過程接收響應于所 述圖像請求發(fā)送過程而從所述服務器裝置發(fā)送來的圖像數(shù)據(jù)并 使得所述顯示部件基于所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
5.如權利要求4所述的圖像顯示系統(tǒng),其中 所述成像裝置還包括位置檢測部件,被配置為檢測位置信息,并且所述成像裝置的控 制部件允許所述附加數(shù)據(jù)包括當通過成像獲得所述圖像數(shù)據(jù)時由所 述位置檢測部件檢測到的位置信息,所述顯示裝置的控制部件執(zhí)行設置用于指定位置的位置指定信息的位置指定過程,并且在所述圖像請求發(fā)送過程中,向所述服務器 裝置發(fā)送所述速度指定信息和所述位置指定信息,并且在所述搜索/發(fā)送控制過程中,所述服務器裝置的控制部件利用 從所述顯示裝置發(fā)送來的速度指定信息和位置指定信息搜索存儲在 所述存儲部件中的圖像數(shù)據(jù)。
6. 如權利要求4所述的圖像顯示系統(tǒng),其中 所述成像裝置還包括日期/時間檢測部件,被配置為檢測當前日期和時間并且生成指 示所檢測的當前日期和時間的日期/時間信息,并且所述成像裝置的控 制部件允許所述附加數(shù)據(jù)包括當拍攝所述圖像數(shù)據(jù)時由所述日期/時 間檢測部件生成的日期/時間信息,所述顯示裝置的控制部件執(zhí)行設置用于指定日期和時間的日期/ 時間指定信息的日期/時間指定過程,并且在所述圖像請求發(fā)送過程 中,向所述服務器裝置發(fā)送所述速度指定信息和所述日期/時間指定信 息,并且在所述搜索/發(fā)送控制過程中,所述服務器裝置的控制部件利用 從所述顯示裝置發(fā)送來的速度指定信息和日期/時間指定信息搜索存 儲在所述存儲部件中的圖像數(shù)據(jù)。
7. 如權利要求4所述的圖像顯示系統(tǒng),其中所述可移動體是人、 非人類動物、在地面上行進的設備、在海面上行進的設備、在海面下 行進的設備、在空氣中行進的設備以及在地球大氣層外行進的設備中 的一種。
8. —種顯示裝置,包括 顯示部件,被配置為執(zhí)行圖像顯示;通信部件,被配置為與外部服務器裝置之間進行數(shù)據(jù)通信;以及 控制部件,被配置為執(zhí)行速度指定過程、圖像請求發(fā)送過程和顯 示過程,所述速度指定過程基于用戶輸入設置速度指定信息,所述圖 像請求發(fā)送過程經(jīng)由所述通信部件向所述服務器裝置發(fā)送所述速度 指定信息以發(fā)出對圖像數(shù)據(jù)的請求,所述顯示過程使得所述通信部件接收響應于所述圖像請求發(fā)送過程而從所述服務器裝置發(fā)送來的圖 像數(shù)據(jù)并且使得所述顯示部件基于所接收的圖像數(shù)據(jù)執(zhí)行顯示操作。
9. 如權利要求8所述的顯示裝置,其中所述控制部件還執(zhí)行設 置位置指定信息的位置指定過程,并且在所述圖像請求發(fā)送過程中, 執(zhí)行向所述服務器裝置發(fā)送所述速度指定信息和所述位置指定信息 的過程。
10. 如權利要求8所述的顯示裝置,其中所述控制部件還執(zhí)行使 得所述顯示部件顯示地像的地圖顯示過程和基于對所述地像的用戶輸入設置位置指定信息的位置指定過程,并且在所述圖像請 求發(fā)送過程中,執(zhí)行向所述服務器裝置發(fā)送所述速度指定信息和所述 位置指定信息的過程。
11. 如權利要求10所述的顯示裝置,其中由所述控制部件在所 述位置指定過程中設置的位置指定信息是對所述地像指定的點 的綽度和經(jīng)度的信息。
12. 如權利要求8所述的顯示裝置,其中所述控制部件還執(zhí)行設 置用于指定日期和時間的日期/時間指定信息的日期/時間指定過程, 并且在所述圖像請求發(fā)送過程中,執(zhí)行向所述服務器裝置發(fā)送所述速 度指定信息和所述日期/時間指定信息的過程。
13. 如權利要求8所述的顯示裝置,其中所述顯示部件被配置為 設在用戶眼睛前方進行圖像顯示。
14. 如權利要求8所述的顯示裝置,還包括 成像部件,被配置為拍攝圖像以獲得圖像數(shù)據(jù);以及 速度檢測部件,被配置為檢測移動速度并且生成指示所檢測的移動速度的速度信息,其中所述控制部件能夠執(zhí)行發(fā)送控制過程,使得由所述成像部件獲得 的圖像數(shù)據(jù)和由所述速度檢測部件生成的速度信息經(jīng)由所述通信部 件被發(fā)送到所述服務器裝置。
15. —種顯示方法,包括以下步驟 基于用戶輸入設置速度指定信息;向外部服務器裝置發(fā)送所述速度指定信息以發(fā)出對圖像數(shù)據(jù)的請求;以及接收響應于所述請求而從所述服務器裝置發(fā)送來的圖像數(shù)據(jù),并 且基于所接收的圖像數(shù)據(jù)執(zhí)行顯示。
16. 如權利要求15所述的顯示方法,還包括以下步驟 在成像裝置上設置位置指定信息,其中在所述發(fā)送步驟中,執(zhí)行向所述服務器裝置發(fā)送所述速度指定信 息和所述位置指定信息的過程。
17. 如權利要求16所迷的顯示方法,還包括以下步驟 顯示地像,其中在所述設置位置指定信息的步驟中,所述位置指定信息是基于對 所述地像的用戶輸入而設置的。
18. 如權利要求15所述的顯示方法,還包括以下步驟 設置用于指定日期和時間的日期/時間指定信息,其中 在所述發(fā)送步驟中,執(zhí)行向所述服務器裝置發(fā)送所述速度指定信息和所述日期/時間指定信息的過程。
全文摘要
本發(fā)明公開了一種圖像顯示系統(tǒng)、顯示裝置和顯示方法。該圖像顯示系統(tǒng)包括顯示裝置、被放置在可移動體上的成像裝置以及服務器裝置。顯示裝置和成像裝置能夠與服務器裝置通信。成像裝置包括成像部件、速度檢測部件和控制向服務器裝置的圖像數(shù)據(jù)和速度信息的發(fā)送的控制部件。服務器裝置包括利用速度信息管理可移動體的移動速度的可移動體速度管理部件和控制部件,控制部件識別與速度指定信息相匹配的成像裝置,并且使得圖像數(shù)據(jù)被從所識別的成像裝置發(fā)送到顯示裝置。顯示裝置包括顯示部件以及執(zhí)行速度指定過程、圖像請求發(fā)送過程和顯示過程的控制部件。
文檔編號H04N7/18GK101207804SQ20071019892
公開日2008年6月25日 申請日期2007年12月7日 優(yōu)先權日2006年12月7日
發(fā)明者伊藤大二, 佐古曜一郎, 關澤英彥, 尾崎望, 戶塚米太郎, 木村敬治, 杉野彰信, 飛鳥井正道, 鶴田雅明 申請人:索尼株式會社