專利名稱:圖像數(shù)據(jù)分發(fā)的制作方法
技術(shù)領(lǐng)域:
本發(fā)明涉及對從連接到網(wǎng)絡(luò)的攝影裝置提供的圖像數(shù)據(jù)施加變更并分發(fā)給圖像顯示裝置的技術(shù)。
背景技術(shù):
在日本專利申請公開特開平10-040185號公報中公開一種提供可經(jīng)由互聯(lián)網(wǎng)等網(wǎng)絡(luò)觀看在遠處所配置的攝像機的圖像的功能的攝像機。下面將具有這種網(wǎng)絡(luò)功能的攝像機叫做攝像機服務(wù)器裝置。在此現(xiàn)有例子中,在個人計算機等多個終端裝置中不僅可同時觀看來自攝像機服務(wù)器裝置的圖像,還可使用多個終端裝置從遠程控制攝像機的搖鏡頭、傾斜角度以及縮放倍率。
在這種還許可攝像機控制的攝像機服務(wù)器裝置系統(tǒng)中,在多個終端裝置上許可控制1臺攝像機時,物理上需要調(diào)停僅控制1臺攝像機的權(quán)限。關(guān)于這一點,通過導(dǎo)入在日本專利申請公開特開平10-042278號公報中公開的所謂控制權(quán)限的概念,就可僅在用戶具有控制權(quán)限期間進行攝像機控制。另一方面,在來自這種攝像機服務(wù)器裝置的圖像上重疊信息的技術(shù)在日本專利申請公開特開平11-196404號公報中得以公開。
近年來,隨著便攜電話、便攜終端技術(shù)的進步,也可能這樣從設(shè)備觀看或操作攝像機圖像。但是,當來自這種攝像機服務(wù)器裝置的圖像不僅分發(fā)到個人計算機等終端,還分發(fā)到便攜電話等終端裝置等時,因為個人計算機等終端與便攜終端中圖像傳送方法和圖像格式等是不同,所以攝像機服務(wù)器裝置需要持有雙方的接口,就出現(xiàn)攝像機服務(wù)器裝置成本增大的問題。這對于攝像機控制也同樣,在攝像機服務(wù)器裝置側(cè)需要另外具有便攜終端的攝像機控制用的專用接口,就使得攝像機服務(wù)器裝置復(fù)雜化并且成本增加。
另一方面,對于來自不具有在圖像上重疊廣告等的功能的攝像機服務(wù)器裝置的圖像,以后就不能靈活地重疊廣告。另外,在想重疊的信息非常大時,攝像機服務(wù)器裝置上保持重疊信息是與以往的圖像分發(fā)這種目的不同的功能,從成本方面看不現(xiàn)實。進而,已有技術(shù)中不能做到例如在便攜電話中重疊廣告信息,而在以往那樣的終端中不重疊廣告信息。
在經(jīng)由網(wǎng)絡(luò)控制遠處的攝像機并取得·顯示圖像的技術(shù)中,具有攝像機的搖鏡頭、傾斜、縮放、逆光校正等與攝像機控制有關(guān)的自由度高的特征。一般使用在以圖像和語音作為一組、經(jīng)由網(wǎng)絡(luò)收發(fā)多個地點中的圖像和語音的電視會議系統(tǒng)中。經(jīng)由網(wǎng)絡(luò)一邊下載圖像、語音一邊進行再現(xiàn)的技術(shù)叫作流化技術(shù),利用同時進行圖像和語音的編碼、網(wǎng)絡(luò)分發(fā)、接收和再現(xiàn)的實況分發(fā)技術(shù)。
關(guān)于圖像和語音的對應(yīng),在日本專利申請公開特開平11-305318號公報中,有將攝像機參數(shù)和語音對應(yīng)起來輸出圖像和語音的攝影裝置。在日本專利申請公開特開平08-56326號公報中公開了選擇并輸出圖像和語音的裝置。日本專利申請公開特開平10-93941號公報公開了連接多個地點、切換使用圖像和語音的電視會議系統(tǒng)的例子。
在經(jīng)由網(wǎng)絡(luò)控制遠處的攝像機所謂網(wǎng)絡(luò)攝像機中,一般僅可取得圖像而沒有語音。另一方面,電視會議系統(tǒng)中除攝像機控制外還能夠收發(fā)圖像和語音,但用途上圖像和語音采用在同一地點中輸入到相同的雙向通信裝置的方式。一般是圖像和語音的連接目標由終端用戶特意進行指定的使用方法。
圖像流化技術(shù)是將一個帶語音圖像分發(fā)到多個接收裝置,組合任意的圖像和語音通常不進行。在以往公開的圖像和語音的選擇、組合裝置中,不能在網(wǎng)絡(luò)上進行任意的組合。
通過互聯(lián)網(wǎng)、內(nèi)部網(wǎng)等數(shù)據(jù)傳輸媒體連續(xù)分發(fā)圖像的圖像分發(fā)系統(tǒng)已經(jīng)在全社會得以普及,用于實況圖像的發(fā)送、室內(nèi)外的監(jiān)視、動植物的觀察等各種領(lǐng)域。
在這些圖像分發(fā)系統(tǒng)中,利用用于分發(fā)圖像的圖像分發(fā)服務(wù)器,該圖像分發(fā)服務(wù)器多數(shù)采用JPEG編碼方式(由ISO/IEC 10918所規(guī)定的世界標準的圖像編碼方式)作為圖像編碼方式。
另一方面,從圖像分發(fā)服務(wù)器發(fā)送的遵循JPEG編碼方式的編碼圖像數(shù)據(jù)(JPEG編碼數(shù)據(jù))由客戶終端接收,解碼后在畫面上顯示。因為當前正普及的PC(個人計算機)、PDA(個人數(shù)據(jù)助理)多數(shù)具有作為標準功能的JPEG編碼數(shù)據(jù)的解碼功能,所以PC和PDA作為客戶終端得以利用。
但是,近年來便攜電話迅速普及,作為日本國內(nèi)使用的便攜終端,便攜電話的普及率比筆記本型PC和PDA還要高。進而,便攜電話的功能迅速提高,最近在日本國內(nèi)實用化的對應(yīng)第三代通信方式的便攜電話中作為標準功能搭載有遵循MPEG4編碼方式(由ISO/IEC14496所規(guī)定的世界標準的語音圖像編碼方式)的編碼數(shù)據(jù)(MPEG4編碼數(shù)據(jù))的解碼功能。但是,由于便攜電話中通常不搭載JPEG編碼數(shù)據(jù)的解碼功能,故不能直接從上述圖像分發(fā)服務(wù)器向便攜電話發(fā)送JPEG編碼數(shù)據(jù)。
針對該問題,考慮2個解決方法。第一個解決方法是改善圖像分發(fā)服務(wù)器,可發(fā)送MPEG4編碼數(shù)據(jù)的方法。但是,在這種方法中需要將現(xiàn)有的圖像分發(fā)服務(wù)器置換為新的圖像分發(fā)服務(wù)器,與圖像分發(fā)服務(wù)器的設(shè)置臺數(shù)成比例地進行置換用的成本將花費巨大。
第二個解決方法是在圖像分發(fā)服務(wù)器和便攜電話的通信通路的途中設(shè)置中繼服務(wù)器,通過該中繼服務(wù)器進行從JPEG編碼數(shù)據(jù)向MPEG4編碼數(shù)據(jù)的編碼數(shù)據(jù)變換的方法。該方法的優(yōu)點是通過將多臺圖像分發(fā)服務(wù)器連接到1臺中繼服務(wù)器,可大大降低中繼服務(wù)器的設(shè)置臺數(shù),由此設(shè)置用的成本也可大大得以抑制。
但是,設(shè)置中繼服務(wù)器的方法也有缺點。這是因為相對于以往的圖像分發(fā)服務(wù)器通常處理的圖像大小為QVGA(Quarter VGA)大小(橫向320像素、縱向240像素)或1/16VGA大小(橫向160像素、縱向120像素),便攜電話通常可解碼的圖像大小為QCIF(QuarterCIF)大小(橫向176像素、縱向144像素),所以必須將QVGA大小或1/16VGA大小的JPEG編碼數(shù)據(jù)變換為QCIF大小的MPEG4編碼數(shù)據(jù),就擔(dān)心由此編碼數(shù)據(jù)變換而引起圖像質(zhì)量的劣化。
例如,以往的JPEG編碼數(shù)據(jù)的分辨率變換方式如日本專利申請公開特開平4-229382號所公開那樣,構(gòu)成為通過在JPEG圖像解碼處理中得到的1塊中的正交變換數(shù)據(jù)中,僅取出低次的系數(shù)成分進行反正交變換,將圖像大小縮小為橫向的m/8倍、縱向的n/8倍(m、n都是大于等于1小于等于7的整數(shù))。但是,因為從QVGA大小向QCIF大小的變換是橫向0.55倍(4.4/8)、縱向0.6(4.8/8)倍,從1/16VGA大小向QCIF大小的變換是橫向1.1倍(8.8/8)、縱向1.2(9.6/8)倍,所以m、n都沒有成為整數(shù),不能進行從QVGA大小或1/16VGA大小向QCIF大小的變換。
進而,作為以往的一般的圖像分辨率變換方法,有將圖像按一定比率間疏像素(縮小)或反復(fù)插入相同像素(擴大)的方法,和計算相鄰的多個像素的加權(quán)平均值來生成新的像素值的方法等,任一方法都可按任意倍率來變換圖像大小。但是,這些已有技術(shù)中產(chǎn)生使用從圖44到圖47在下面進行說明那樣的問題點。
圖44是表示根據(jù)已有技術(shù)將QVGA大小的圖像變換為QCIF大小時的變換前和變換后的圖像范圍的對應(yīng)關(guān)系的圖。如該圖所示,橫向320像素、縱向240像素的圖像范圍縮小為橫向176像素、縱向144像素的圖像范圍。如上所述,這是橫向0.55倍(4.4/8)、縱向0.6(4.8/8)倍的變換倍率。
圖45是說明通過圖44的圖像大小變換引起的塊邊界線移動的圖。在同一圖中,實線表示橫向8像素間隔、縱向8像素間隔的邊界線的位置,虛線表示橫向4.4(=8×0.55)像素間隔、縱向4.8(=8×0.6)像素間隔的邊界線的位置。即通過圖44的圖像大小變換,存在于變換前的圖像中的塊邊界線位置從實線位置向虛線位置移動。然后變換后的圖像再次沿著實線位置的塊邊界線被分割進行MPEG4圖像編碼,因此在MPEG4圖像解碼所得到的圖像中虛線位置和實線位置雙方都存在塊邊界線。
但是,虛線位置的塊邊界線是由圖像分發(fā)服務(wù)器中的JPEG編碼所生成,因此隨著JPEG編碼的壓縮率提高,在虛線位置中出現(xiàn)塊失真。加之,實線位置的塊邊界線是由中繼服務(wù)器的MPEG4圖像編碼所生成,因此隨著MPEG4圖像編碼的壓縮率提高,在實線位置中也出現(xiàn)塊失真。
當前,圖像分發(fā)服務(wù)器和便攜電話之間的通信容量為每秒數(shù)十到數(shù)百千比特左右,為了傳輸動作平滑的圖像,通信容量不充分,因此通常將圖像的壓縮率設(shè)定得較高。為此,上述圖45所示的虛線位置和實線位置雙方中會明顯出現(xiàn)塊失真,便攜電話用戶看到的圖像畫質(zhì)就大大降低。
圖46是表示通過已有技術(shù)將1/16VGA大小的圖像變換為QCIF大小時的變換前和變換后的圖像范圍的對應(yīng)關(guān)系的圖。如該圖所示,橫向160像素、縱向120像素的圖像范圍放大為橫向176像素、縱向144像素的圖像范圍。如上所述,這是橫向1.1倍(8.8/8)、縱向1.2(9.6/8)倍的變換倍率。
圖47是說明由圖46的圖像大小變換而引起的塊邊界線移動的圖。在同一圖中,實線表示橫向8像素間隔、縱向8像素間隔的邊界線的位置,虛線表示橫向8.8(=8×1.1)像素間隔、縱向9.6(=8×1.2)像素間隔的邊界線的位置。即通過圖46的圖像大小變換,存在于變換前的圖像中的塊邊界線位置從實線位置向虛線位置移動。然后變換后的圖像再次沿著實線位置的塊邊界線被分割進行MPEG4圖像編碼,因此在MPEG4圖像解碼所得到的圖像中虛線位置和實線位置雙方都存在塊邊界線。
也就是,在1/16VGA大小的圖像的情況下,虛線位置和實線位置雙方中也會出現(xiàn)塊失真,便攜電話用戶看到的圖像畫質(zhì)就大大降低。
發(fā)明內(nèi)容
本發(fā)明就是鑒于上述問題而完成的,目的是不需要另外設(shè)置攝像機服務(wù)器和便攜終端等通信用的接口,可以避免攝像機服務(wù)器裝置的成本增加。
另外,第二目的是不需要另外設(shè)置攝像機服務(wù)器控制用的專用接口,可以避免攝像機服務(wù)器裝置的成本增加。
進而,第三目的是使攝像機服務(wù)器裝置不具有信息重疊處理等的多余功能,可以避免攝像機服務(wù)器裝置的成本增加。
為了達到上述目的,本發(fā)明提供一種圖像處理裝置,其特征在于,具有圖像信息接收裝置,從可向第一圖像顯示裝置分發(fā)圖像信息的攝影裝置接收通過攝影所取得的圖像信息;以及圖像信息分發(fā)裝置,把用上述圖像信息接收裝置接收的上述圖像信息,變換為針對與上述第一圖像顯示裝置不同種類的第二圖像顯示裝置的格式,并分發(fā)給上述第二圖像顯示裝置。
另外,第四目的是可在經(jīng)由網(wǎng)絡(luò)控制遠處的攝像機并取得圖像的系統(tǒng)中,將位于網(wǎng)絡(luò)上各別場所的圖像數(shù)據(jù)和語音數(shù)據(jù)編碼為帶語音圖像并發(fā)送給接收裝置。
為達到上述目的,本發(fā)明提供一種信息分發(fā)裝置,其特征在于,具有圖像數(shù)據(jù)接收裝置,從可發(fā)送圖像數(shù)據(jù)的多個圖像發(fā)送裝置接收上述圖像數(shù)據(jù);語音數(shù)據(jù)接收裝置,從可發(fā)送語音數(shù)據(jù)的多個語音發(fā)送裝置接收上述語音數(shù)據(jù);編碼裝置,有選擇地組合用上述圖像數(shù)據(jù)接收裝置所接收的上述圖像數(shù)據(jù)和用上述語音數(shù)據(jù)接收裝置所接收的上述語音數(shù)據(jù),并作為帶語音圖像數(shù)據(jù)進行編碼;以及分發(fā)裝置,將由上述編碼裝置所生成的上述帶語音圖像數(shù)據(jù)分發(fā)給接收裝置。
另外,第五目的是在中繼服務(wù)器中將從圖像分發(fā)服務(wù)器發(fā)送的編碼數(shù)據(jù)變換為不同數(shù)據(jù)形式時,將由變換而產(chǎn)生的圖像質(zhì)量惡化、尤其是塊失真的明顯增大抑制到最小限度。
為達到上述目的,本發(fā)明提供一種變換處理方法,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理方法的特征在于從上述第一大小的圖像數(shù)據(jù)沿著上述第一塊的邊界切出上述第二大小的圖像數(shù)據(jù);通過第二編碼方式對所切出的上述第二大小的圖像數(shù)據(jù)進行編碼。
本發(fā)明的其他特征以及優(yōu)點,通過以附圖為參照的下面的說明將會弄明白。此外,在附圖中,對相同或相似的結(jié)構(gòu)附加相同的參照標號。
附圖包含在說明書中,構(gòu)成其一部分,表示本發(fā)明的實施形式,并與說明書的記述一起用于說明本發(fā)明的原理。
圖1是表示本發(fā)明的第一實施例的信息分發(fā)系統(tǒng)的物理結(jié)構(gòu)的概要圖;圖2是表示本發(fā)明的第一實施例的攝像機服務(wù)器裝置的結(jié)構(gòu)的框圖;圖3是表示顯示操作終端的用戶界面畫面的一例的圖;圖4是表示便攜顯示終端的外觀的一例的圖;圖5是表示著眼于本發(fā)明的第一實施例的數(shù)據(jù)流程的信息分發(fā)系統(tǒng)的邏輯結(jié)構(gòu)的圖;圖6是表示本發(fā)明的第一實施例的變換服務(wù)器的圖像變換單元的動作的流程圖;圖7是表示本發(fā)明的第一實施例的廣告服務(wù)器的數(shù)據(jù)庫結(jié)構(gòu)的圖;圖8是表示從本發(fā)明的第一實施例的攝像機控制權(quán)限取得到發(fā)出攝像機控制命令的流程的流程圖;圖9是表示本發(fā)明的第一實施例的攝像機控制權(quán)限請求和攝像機控制命令的數(shù)據(jù)格式的圖;圖10是表示從發(fā)出本發(fā)明的第一實施例的控制命令語音到接收應(yīng)答語音的流程的圖;圖11A和11B是本發(fā)明的第一實施例的鍵按鈕和攝像機控制命令、來自攝像機服務(wù)器裝置的應(yīng)答和便攜顯示終端再現(xiàn)的應(yīng)答語音的對應(yīng)表;圖12是表示與本發(fā)明的第一實施例的攝像機服務(wù)器裝置的控制命令相應(yīng)的應(yīng)答動作的流程的流程圖;圖13是表示本發(fā)明的第一實施例的攝像機控制命令的數(shù)據(jù)格式的圖;圖14是表示在本發(fā)明的第一實施例的分發(fā)服務(wù)器裝置和變換服務(wù)器裝置之間進行交換的語音數(shù)據(jù)的格式的圖;圖15是表示在本發(fā)明的第一實施例的分發(fā)服務(wù)器裝置和變換服務(wù)器裝置之間進行交換的語音數(shù)據(jù)的格式的圖;圖16是表示本發(fā)明的第一實施例的變換服務(wù)器裝置的控制權(quán)限管理·語音變換單元的控制權(quán)限請求時的流程的概況的流程圖;圖17是表示本發(fā)明的第二實施例的攝像機切換控制的流程的流程圖;圖18是本發(fā)明的第二實施例的攝像機序號、攝像機名、攝像機地址對應(yīng)表;圖19是本發(fā)明的第三實施例的廣告信息表的構(gòu)成;圖20是表示本發(fā)明的第四實施例的信息分發(fā)系統(tǒng)的結(jié)構(gòu)的框圖;圖21是表示本發(fā)明的第五實施例的變換服務(wù)器裝置的動作的流程圖;圖22是表示本發(fā)明的第六實施例的信息分發(fā)系統(tǒng)的簡要結(jié)構(gòu)的框圖;圖23是表示本發(fā)明的第六實施例的圖像服務(wù)器和語音服務(wù)器的硬件結(jié)構(gòu)的框圖;圖24是表示本發(fā)明的第六實施例的信息分發(fā)系統(tǒng)的軟件結(jié)構(gòu)的框圖;
圖25是表示本發(fā)明的第六實施例的信息分發(fā)系統(tǒng)的軟件模塊的動作過程的圖;圖26A~26C是表示本發(fā)明的第六實施例的中繼服務(wù)器管理圖像信息、語音信息和圖像語音對應(yīng)用的表結(jié)構(gòu)的圖;圖27是表示本發(fā)明的第六實施例的中繼服務(wù)器的請求處理過程的處理順序的流程圖;圖28是表示本發(fā)明的第六實施例的中繼服務(wù)器的圖像接收過程的處理順序的流程圖;圖29是表示本發(fā)明的第六實施例的中繼服務(wù)器的語音接收過程的處理順序的流程圖;圖30是表示本發(fā)明的第六實施例的中繼服務(wù)器的圖像語音合成發(fā)送過程的處理順序的流程圖;圖31A和31B是表示本發(fā)明的第七實施例的中繼服務(wù)器管理條件信息和圖像語音對應(yīng)用的表結(jié)構(gòu)的圖;圖32是表示本發(fā)明的第七實施例的中繼服務(wù)器的請求處理過程的處理順序的流程圖;圖33是表示本發(fā)明的第八實施例的信息分發(fā)系統(tǒng)的簡要結(jié)構(gòu)的框圖;圖34是表示本發(fā)明的第十實施例的信息分發(fā)系統(tǒng)的構(gòu)成圖;圖35是表示本發(fā)明的第十實施例的變換處理的流程圖;圖36是用于說明本發(fā)明的第十實施例的圖像大小變換的圖;圖37是表示本發(fā)明的第十一實施例的變換處理的流程圖;圖38是用于說明本發(fā)明的第十一實施例的圖像大小變換的圖;圖39是表示本發(fā)明的第十二實施例的變換處理的流程圖;圖40是表示本發(fā)明的第十三實施例的變換處理的流程圖;圖41是表示本發(fā)明的第十四實施例的變換處理的流程圖;圖42是表示把本發(fā)明的第十四實施例的圖像大小在橫向縱向的任一方向上縮小到1/2時產(chǎn)生的塊失真的增大的狀況的圖;圖43是表示本發(fā)明的第十五實施例的變換處理的流程圖;
圖44是用于說明以往的圖像大小變換的圖;圖45是用于說明以往變換圖像大小時的塊失真的圖;圖46是用于說明以往的圖像大小變換的圖;圖47是用于說明以往變換圖像大小時的塊失真的圖。
具體實施例方式
下面參考附圖詳細說明本發(fā)明的優(yōu)選實施例。
<第一實施例>
本第一實施例是將用可遠程控制的攝像機服務(wù)器裝置所取入的圖像,用分發(fā)途中的變換服務(wù)器裝置在圖像上重疊廣告等的信息,將圖像分發(fā)給便攜顯示終端,進而可以進行從便攜顯示終端的攝像機控制。
圖1是該第一實施例的物理圖像分發(fā)系統(tǒng)的結(jié)構(gòu)的簡圖。如圖1所示,與由攝像機服務(wù)器裝置111、顯示操作終端112和第一網(wǎng)絡(luò)113組成的攝像機服務(wù)器裝置系統(tǒng)一起,還有變換服務(wù)器裝置114、廣告服務(wù)器裝置115、第二網(wǎng)絡(luò)116、分發(fā)服務(wù)器裝置117、第三網(wǎng)絡(luò)118、便攜顯示終端119構(gòu)成了圖像分發(fā)系統(tǒng)。
攝像機服務(wù)器裝置系統(tǒng)中,經(jīng)由第一網(wǎng)絡(luò)113從顯示操作終端112指定攝像機服務(wù)器裝置111的地址并進行連接,得到攝像機服務(wù)器裝置111所攝影的實時圖像,同時根據(jù)需要取得攝像機控制權(quán)限進行攝像機控制。如果顯示操作終端112、攝像機服務(wù)器裝置111在網(wǎng)絡(luò)上可相互識別,則可存在多個。
圖2是表示攝像機服務(wù)器裝置111的結(jié)構(gòu)的框圖,用圖像取入壓縮單元122將攝影單元121,即攝像機所攝影的圖像作為數(shù)字數(shù)據(jù)取入,生成Motion JPEG形式的壓縮圖像,通過圖像通信單元125把圖像分發(fā)到有連接請求的顯示操作終端。如果連接請求來自多個顯示操作終端,則同時對多個顯示操作終端分發(fā)圖像。獲得控制攝像機的權(quán)限(控制權(quán)限)的顯示操作終端對攝像機控制單元123發(fā)出攝像機控制命令,進行搖鏡頭、傾斜、縮放等的攝像機控制。攝像機控制通信單元126控制這樣的攝像機控制命令的生成、解釋、應(yīng)答??刂茩?quán)限管理單元124管理獲得當前控制權(quán)限的顯示操作終端可以控制攝影單元121的剩余時間、請求控制權(quán)限的顯示操作終端的列表、優(yōu)先順序等的與控制權(quán)限相關(guān)的信息。通信控制單元127控制與圖像通信單元125、攝像機控制通信單元126和外部的通信。
顯示操作終端112在該第一實施例中由可進行圖形的畫面操作的個人計算機這樣的裝置構(gòu)成。當從顯示操作終端112指定攝像機服務(wù)器裝置111的地址并連接到攝像機服務(wù)器裝置時,顯示圖3那樣的用戶界面畫面。圖3中,131是圖像顯示單元,把攝像機服務(wù)器裝置111取得的圖像解壓縮并進行顯示。進行攝像機控制時,在按下按鈕135獲得控制權(quán)限后,操作用于攝像機搖鏡頭的滾動稈132、用于攝像機傾斜的滾動稈133、用于攝像機縮放的滾動稈134來進行攝像機控制。用于攝像機操作的控制權(quán)限對每個攝像機服務(wù)器裝置111同時只能由1個客戶機取得。對應(yīng)這種操作發(fā)出攝像機控制命令,這里使用的攝像機控制命令和攝像機服務(wù)器裝置的應(yīng)答如圖9所示。關(guān)于命令在后面詳細說明。
變換服務(wù)器裝置114把從攝像機服務(wù)器裝置111取得的MotionJPEG形式的壓縮圖像變換為可在便攜顯示終端119顯示的壓縮圖像格式(該第一實施例中為MPEG4),同時根據(jù)需要把從廣告服務(wù)器裝置115取得的信息重疊在圖像上,通過第二網(wǎng)絡(luò)116分發(fā)到分發(fā)服務(wù)器裝置117。
分發(fā)服務(wù)器裝置117中,把圖像分發(fā)到連接中的多個便攜顯示終端119,各便攜顯示終端119中,對接收到的MPEG4圖像進行解碼顯示。假定便攜顯示終端119,例如用便攜電話或便攜信息終端(PDA)可高速接收例如64kbps左右的數(shù)字圖像并進行顯示。圖4表示便攜顯示終端的例子。141是圖像·信息顯示單元,142是鍵按鈕單元。
該第一實施例中,變換服務(wù)器裝置114進行從Motion JPEG圖像向MPEG4圖像的變換。因此,作為系統(tǒng)中所使用的圖像格式,假定有從攝像機服務(wù)器裝置111到變換服務(wù)器裝置114或顯示操作終端112的系統(tǒng)中為Motion JPEG,從變換服務(wù)器裝置114到便攜顯示終端119的系統(tǒng)為MPEG4的可視部分的簡單輪廓。
但是,該第一實施例中,并不局限于圖像的壓縮形式,只要是滿足在變換服務(wù)器裝置114中可將從攝像機服務(wù)器裝置接收的壓縮圖像格式變換為能夠在便攜顯示終端119顯示的壓縮圖像格式的條件的系統(tǒng)即可。不一定要進行格式變換,只要圖像能夠正確分發(fā)并顯示,可以重疊信息即可。如果從處理和網(wǎng)絡(luò)負擔(dān)方面考慮,不進行圖像壓縮也可以的話,也可以是非壓縮圖像。
關(guān)于攝像機控制,從便攜顯示終端119向攝像機服務(wù)器裝置111請求·獲得控制權(quán)限,發(fā)出控制命令,經(jīng)由分發(fā)服務(wù)器裝置117、變換服務(wù)器裝置114把控制命令傳送到攝像機服務(wù)器裝置111。從便攜顯示終端119到分發(fā)服務(wù)器裝置117、變換服務(wù)器裝置114的系統(tǒng)中,在該第一實施例中,說明使用通話用的雙向聲道分發(fā)控制信號和其應(yīng)答的情況。關(guān)于這一點在后面詳細說明。
如果從攝像機服務(wù)器裝置111看,變換服務(wù)器裝置114就可看作除去一部分外與顯示操作終端同等。該第一實施例中所述的各裝置中除便攜顯示終端119外都分發(fā)了IP地址(下面叫做地址),作為在網(wǎng)絡(luò)上相互可唯一確定的識別地址。但是,網(wǎng)絡(luò)上的便攜顯示終端119的識別可以使用便攜電話特有的方案,即使用電話號碼進行識別。但是,只要能識別相互的裝置、終端并可通信,任何識別方案都可使用。
第一網(wǎng)絡(luò)113只要是用于在位于網(wǎng)絡(luò)上的多個操作顯示終端112、變換服務(wù)器裝置114、攝像機服務(wù)器裝置111之間相互傳遞攝像機控制命令、圖像具有足夠頻帶的互聯(lián)網(wǎng)、企業(yè)網(wǎng)等的數(shù)字網(wǎng)絡(luò)即可。該第一實施例中經(jīng)過第一網(wǎng)絡(luò)113的圖像是被分組化的MotionJPEG,攝像機控制命令和其應(yīng)答也對每個命令分組化。
第二網(wǎng)絡(luò)116只要是用于在變換服務(wù)器裝置114和分發(fā)服務(wù)器裝置117之間傳遞圖像和攝像機控制命令及應(yīng)答具有足夠頻帶的互聯(lián)網(wǎng)、企業(yè)網(wǎng)等的數(shù)字網(wǎng)絡(luò)即可。該第一實施例中經(jīng)過第二網(wǎng)絡(luò)116的圖像是被分組化的MPEG4圖像,攝像機控制命令和應(yīng)答是如后所述那樣將語音數(shù)據(jù)數(shù)字化并分組化的雙向數(shù)字語音數(shù)據(jù)。
第三網(wǎng)絡(luò)118在第一實施例中假定為用于從分發(fā)服務(wù)器裝置117向便攜顯示終端119傳遞圖像和攝像機控制命令具有足夠頻帶的,在便攜顯示終端119一側(cè)是無線的便攜電話網(wǎng),理論上只要能夠確保分發(fā)服務(wù)器裝置117和便攜顯示終端119之間的通信需要的足夠的頻帶,并不拘泥于其物理結(jié)構(gòu)。該第一實施例中經(jīng)過第三網(wǎng)絡(luò)118的圖像是將MPEG4圖像分組化的圖像,攝像機控制命令和應(yīng)答是如后所述那樣在第二和第三網(wǎng)絡(luò)116、118中作為通話用的雙向聲道的語音進行傳遞。變換服務(wù)器裝置114和廣告服務(wù)器裝置115之間只要用具有對傳遞廣告信息足夠頻帶的網(wǎng)絡(luò)連接即可。
圖5表示著眼于數(shù)據(jù)流程的理論結(jié)構(gòu)。圖5中,與圖1相同的構(gòu)成附加相同參考標號。對于攝像機服務(wù)器裝置111而言操作顯示終端112是客戶機。攝像機服務(wù)器裝置111由攝像機操作單元161、顯示單元162構(gòu)成。圖3的操作畫面中,攝像機操作單元161對應(yīng)133~135、顯示單元162對應(yīng)131。分別與各個攝像機服務(wù)器裝置111的攝像機控制通信單元127、圖像通信單元125交換數(shù)據(jù),在顯示單元162顯示圖像,并使用攝像機操作單元161進行攝像機控制。此外,如上所述那樣,多個操作顯示終端112可同時連接到1個攝像機服務(wù)器裝置111。
變換服務(wù)器裝置114由實施變換圖像的壓縮格式的流變換和在圖像上重疊從廣告服務(wù)器裝置115取得的廣告信息的變換的圖像變換單元164,和將后述的控制權(quán)限管理和特定的數(shù)字語音數(shù)據(jù)變換為攝像機控制命令的控制權(quán)限管理·語音變換單元163構(gòu)成。當啟動變換服務(wù)器裝置114時,分別對分發(fā)服務(wù)器裝置117、廣告服務(wù)器裝置115、攝像機服務(wù)器裝置111指定地址并進行連接。各個連接目標的地址保存在連接管理單元165中,使用其進行連接。關(guān)于連接目標的裝置,會有在網(wǎng)絡(luò)上分別有多臺分發(fā)服務(wù)器裝置117、廣告服務(wù)器裝置115、攝像機服務(wù)器裝置111的情況。此時,從各裝置中各自指定1臺即可。
分發(fā)服務(wù)器裝置117由語音分發(fā)單元166和圖像分發(fā)單元167構(gòu)成,與變換服務(wù)器裝置114一對一連接,但可以同時與多臺便攜顯示終端119連接,進行數(shù)據(jù)交換。語音分發(fā)單元166將來自便攜顯示終端119的數(shù)字語音數(shù)據(jù)傳遞到變換服務(wù)器裝置114的控制權(quán)限管理·語音變換單元163,同時將從控制權(quán)限管理·語音變換單元163返回的攝像機服務(wù)器裝置111的應(yīng)答(數(shù)字語音數(shù)據(jù))分發(fā)到必要的便攜顯示終端119。圖像分發(fā)單元167將從變換服務(wù)器裝置114分發(fā)的MPEG4圖像流同時分發(fā)到連接到分發(fā)服務(wù)器裝置117的多臺便攜顯示終端119。
便攜顯示終端119分別由操作控制單元171和顯示控制單元172構(gòu)成,操作控制單元171將通過按下圖4的鍵按鈕142作為鍵按下語音產(chǎn)生的音調(diào)(tone)信號(輸出時為數(shù)字語音數(shù)據(jù))發(fā)送到分發(fā)服務(wù)器裝置117,同時顯示控制單元172進行把從分發(fā)服務(wù)器裝置117送來的MPEG流等的圖像和文字顯示在顯示單元14上的控制。
首先著眼于圖像的流程對圖5的動作稍微詳細地進行說明。攝像機服務(wù)器裝置111對連接到攝像機服務(wù)器裝置111的所有客戶機,即操作顯示終端112和變換服務(wù)器裝置114分發(fā)用攝影單元121所取入的被Motion JPEG壓縮的圖像。盡管操作顯示終端112和變換服務(wù)器裝置114在圖5中為1個那樣進行記述,但當然也可以分別為多個。
圖6中表示變換服務(wù)器裝置114的圖像變換單元164的流程。首先步驟S111中,從攝像機服務(wù)器111取得圖像,立刻用圖像變換單元164對接收到的Motion JPEG壓縮圖像一幀一幀地解壓縮(步驟S112),在需要廣告重疊時(步驟S113為是),進行向圖像廣告重疊處理(步驟S114),再次MPEG4壓縮圖像(步驟S115),發(fā)送到分發(fā)服務(wù)器裝置117(步驟S116)。此時,在步驟S114中的廣告重疊處理中,向廣告服務(wù)器裝置115傳遞在變換服務(wù)器裝置114的控制權(quán)限管理·語音變換單元163中保持的PTZ值(搖鏡頭角度、傾斜角度、縮放倍率),從廣告數(shù)據(jù)庫170取得與該PTZ值對應(yīng)的必要廣告信息,使用該廣告信息重疊在圖像上。分發(fā)服務(wù)器裝置117中,把所接收的MPEG4圖像流同時分發(fā)到連接到分發(fā)服務(wù)器裝置117的多臺便攜顯示終端(圖5中為119)。由于從后面說明的圖7得到的廣告信息根據(jù)時間段和攝像機的PTZ值有沒有內(nèi)容的情況,故在此情況下,就不重疊廣告。也就是,步驟S113中廣告重疊為否。
廣告信息是廣告文件和重疊位置的組合。廣告服務(wù)器裝置115內(nèi)具有數(shù)據(jù)庫,當提供現(xiàn)在時刻和攝像機的PTZ值進行詢問時,就得到廣告文件和重疊位置。數(shù)據(jù)庫中,從項目序號小的一方檢索圖7那樣的表形式,獲得適合對應(yīng)時刻、PTZ范圍的最初所發(fā)現(xiàn)的項目的廣告文件和重疊位置。*意味著無范圍指定(總是適合)。作為所得到的廣告文件,有圖片放映機(telop)字符串、靜止圖像、活動圖像剪輯等。
關(guān)于靜止圖像、活動圖像剪輯,具有α平面信息,如有必要,可以進行重疊以使作為背景的圖像部分透明可見?;顒訄D像的情況下,在各幀中使時間上同步地進行重疊。此外,盡管在該第一實施例中,是廣告信息,但并不局限于廣告信息,可以是想在中途附加到圖像的信息。例如,也可以重疊控制權(quán)限等待人數(shù)、控制權(quán)限等待時間、搖鏡頭·傾斜·縮放值等從連接目標攝像機服務(wù)器裝置得到的攝像機服務(wù)器裝置的控制狀態(tài)信息。步驟S114的廣告重疊處理中,以重疊位置信息為基礎(chǔ)決定重疊位置(上下左右中央等)和廣告信息顯示大小(大·中·小)。
分發(fā)服務(wù)器裝置117作為便攜顯示終端119側(cè)的網(wǎng)絡(luò)接口具有電話號碼,當便攜顯示終端119對該電話號碼打電話時,連接就建立,從分發(fā)服務(wù)器裝置117傳遞圖像,故將其解壓縮并顯示在顯示控制單元172上。即使在從多個便攜顯示終端119連接的情況下,也可用相同的電話號碼同時進行連接。分發(fā)服務(wù)器裝置117具有對多個便攜顯示終端119傳遞圖像和后述的雙向語音的能力。這里,也可以不用電話號碼的連接,而用通過作為NTT DoCoMo公司的服務(wù)的i-mode(R)服務(wù)這種互聯(lián)網(wǎng)連接中的IP地址的指定、和WWW的連接目標指定方法中的URL(Uniform Resource Locator)指定。
接著著眼于控制流程詳細說明圖5的動作。圖8中表示從攝像機控制權(quán)限取得開始到攝像機控制命令發(fā)出的流程。便攜顯示終端119、變換服務(wù)器裝置114、顯示操作終端112每個都在攝像機控制時對攝像機服務(wù)器裝置111發(fā)出控制權(quán)限取得的請求(步驟S121),取得控制權(quán)限以后(步驟S122為是),直到失去控制權(quán)限之前(由于步驟S124中為否),都反復(fù)對于攝像機服務(wù)器裝置111的操作的控制命令的發(fā)送和其應(yīng)答的收發(fā)(步驟S125、S126)。這樣與攝像機控制相關(guān)的部分的流程基本上相同。但是,在連接中的多個便攜顯示終端119中,使用雙向語音數(shù)據(jù)信道這一點不同。
圖9表示攝像機控制權(quán)限請求和攝像機控制命令。圖9中表示控制權(quán)利請求、搖鏡頭角度、傾斜角度、縮放變更等的命令和其應(yīng)答。但是,在多個便攜顯示終端119的情況下,并非直接發(fā)出這些命令,而是使用圖4的鍵按鈕單元142的各種鍵按鈕發(fā)出與控制命令對應(yīng)的語音數(shù)據(jù),由變換服務(wù)器裝置114變換為圖9的攝像機控制命令,進行攝像機控制??刂茩?quán)利請求也同樣。
圖10中表示控制命令的流程。當按下對應(yīng)便攜顯示終端的鍵按鈕單元142的控制操作的各種鍵按鈕時,產(chǎn)生音調(diào)信號語音(控制命令語音)。由操作控制單元171將其變換為GSM AMR等編碼的數(shù)據(jù)語音數(shù)據(jù),傳遞到分發(fā)服務(wù)器裝置117的語音分發(fā)單元166中。語音分發(fā)單元166中,將原樣的語音數(shù)據(jù)傳送到變換服務(wù)器裝置114的控制權(quán)限管理·語音變換單元163。
在控制權(quán)限管理·語音變換單元163中,取得此語音數(shù)據(jù),將其變換為對應(yīng)的攝像機控制命令,發(fā)出到攝像機服務(wù)器裝置111來進行攝像機控制。對攝像機控制的應(yīng)答為與此相反的流程。圖11A中表示鍵按鈕和攝像機控制命令的對應(yīng)表。通過鍵按鈕的組合操作,生成控制命令語音。搖鏡頭、傾斜、縮放值用數(shù)字鍵輸入。圖12是表示與攝像機服務(wù)器裝置111的控制命令相應(yīng)的應(yīng)答動作的流程的圖。當攝像機服務(wù)器裝置111判斷為對象裝置有控制權(quán)限時(步驟S131),接受控制命令(步驟S132),發(fā)送應(yīng)答信息(步驟S133)。另一方面,當從沒有控制權(quán)限的裝置接收到控制命令時,發(fā)送不接受控制意思的應(yīng)答(步驟S134)。
圖11B中表示來自攝像機服務(wù)器裝置111的應(yīng)答和便攜顯示終端119再現(xiàn)的應(yīng)答語音的對應(yīng)表。當可應(yīng)答時,產(chǎn)生讀出對應(yīng)表中的語句的語音。圖11B中θ、φ、z是表示搖鏡頭、傾斜角度、縮放倍率的數(shù)字。
舉出攝像機控制的例子。在可獲得控制權(quán)限的狀態(tài)下,當連續(xù)三次按下鍵按鈕4、2、0,生成變換服務(wù)器裝置114向左搖鏡頭20單位如圖13所示那樣的攝像機控制命令,并傳遞到攝像機服務(wù)器裝置111。-20是從當前位置向左搖鏡頭20單位的含義。如果是+20,則是向右搖鏡頭20單位的命令。
圖9的攝像機控制命令和應(yīng)答中,作為第一、第二項目的發(fā)送源地址、發(fā)送目標地址分別表示命令、應(yīng)答的發(fā)送源裝置、發(fā)送目標裝置的地址,第三項目是命令或應(yīng)答的種類的識別文字串。搖鏡頭、傾斜角度變更、縮放倍率變更分別用相對值指定變更角度。數(shù)值的+表示向右搖鏡頭、上傾斜、變焦擴大,-則為相反。數(shù)值本身設(shè)最小控制量為1單位。攝像機控制應(yīng)答中,用數(shù)值返回所控制的結(jié)果的搖鏡頭、傾斜角度、縮放倍率。
應(yīng)答僅分別返回到發(fā)出控制命令語音的便攜顯示終端,但僅攝像機控制應(yīng)答返回到連接中的所有便攜顯示終端以用語音通知攝像機的搖鏡頭、傾斜角度、縮放狀態(tài)。分發(fā)服務(wù)器裝置117和變換服務(wù)器裝置114之間交換的語音的數(shù)據(jù)形式在圖14示出。
盡管實際發(fā)送時可以分割為小分組,但上述那樣形式的數(shù)據(jù)是雙向進行交換。在從分發(fā)服務(wù)器裝置117將語音數(shù)據(jù)傳遞到變換服務(wù)器裝置114時,由與控制命令語音對應(yīng)的數(shù)字語音數(shù)據(jù)和控制命令語音發(fā)出源的便攜顯示終端識別符(電話號碼)構(gòu)成,相反在從變換服務(wù)器裝置114將語音數(shù)據(jù)傳遞到分發(fā)服務(wù)器裝置117時,由數(shù)字化的讀出語音和發(fā)送語音的目標的便攜顯示終端識別符(電話號碼)構(gòu)成。在如攝像機控制應(yīng)答那樣,把語音數(shù)據(jù)返回連接中的所有便攜顯示終端119時,作為便攜顯示終端識別符(電話號碼),如圖15所示那樣設(shè)全部號碼為0等,唯一地表示沒有傳遞到特定便攜顯示終端的語音數(shù)據(jù)。
接著在圖16中表示變換服務(wù)器裝置114的控制權(quán)限管理·語音變換單元163的控制權(quán)限請求時的流程的概況。變換服務(wù)器裝置114具有便攜顯示終端119的識別符(電話號碼)的等待隊列,當從便攜顯示終端119重新有語音的控制權(quán)限請求時,變換為對應(yīng)的攝像機控制命令并發(fā)送到攝像機服務(wù)器裝置111(步驟S171)。然后,在可以立刻取得控制權(quán)限時(步驟S172為是),進入后面說明的步驟S178。另一方面,在不能立刻獲得控制權(quán)限時(步驟S172為否),將識別電話號碼登錄在等待隊列的最后(步驟S173)。步驟S174中,當從攝像機服務(wù)器裝置111通知可向控制權(quán)限等待隊列追加或不可追加時,步驟S175中把與該通知對應(yīng)的語音發(fā)送向便攜顯示終端119。之后,當賦予控制權(quán)限的應(yīng)答從攝像機服務(wù)器裝置111返回時(步驟S176為是),從等待隊列的開頭取出識別電話號碼(步驟S177),把對應(yīng)語音返回到對應(yīng)的便攜顯示終端119(步驟S178)。步驟S179中,接受來自獲得了控制權(quán)限的便攜顯示終端119的電話號碼的控制。
當在步驟S180中從攝像機服務(wù)器裝置111通知控制權(quán)限的有效時間結(jié)束等的控制權(quán)限結(jié)束時,在步驟S181中向具有控制權(quán)限的便攜顯示終端119發(fā)送通知控制權(quán)限結(jié)束的語音。
關(guān)于用變換服務(wù)器裝置114、分發(fā)服務(wù)器裝置117、廣告服務(wù)器裝置115實現(xiàn)的功能,只要可以實現(xiàn)各自的功能,則不拘泥于物理的裝置結(jié)構(gòu),例如全部功能可在相同的裝置上實現(xiàn)。
根據(jù)該第一實施例,通過分發(fā)途中的通路中使用變換服務(wù)器裝置114,就能夠僅對必要終端分發(fā)重疊了廣告信息那樣的附加信息的不同圖像,攝像機服務(wù)器裝置111就不需要保持便攜顯示終端119用的內(nèi)容。通過與廣告服務(wù)器裝置115的協(xié)同動作,該附加信息可切換重疊因時刻、攝像機控制值(PTZ值)而不同的信息。附加信息中不僅使用靜止圖像還可以使用活動圖像、文本。
進而,第一實施例中,對不直接接受來自便攜電話那樣的鍵按鈕的控制的攝像機服務(wù)器裝置111這樣的控制裝置,通過由變換服務(wù)器裝置114將鍵按鈕的語音數(shù)據(jù)變換為控制命令,就可用鍵按鈕進行攝像機控制權(quán)限獲得和攝像機控制操作。由于將來自攝像機服務(wù)器裝置111的應(yīng)答變換為語音,因此可用語音來確認控制內(nèi)容。攝像機的搖鏡頭、傾斜、縮放的狀態(tài)也可用語音進行確認。
<第二實施例>
第一實施例中,分發(fā)服務(wù)器裝置117、變換服務(wù)器裝置114中連接目標攝像機在啟動時決定。第二實施例,從外部切換變換服務(wù)器裝置114連接的攝像機服務(wù)器裝置111。這里,說明從便攜顯示終端119切換的方法。
基本上與上述第一實施例相同,但變換服務(wù)器裝置114的動作有若干不同,因此僅說明與第一實施例的不同之處。圖17表示從便攜顯示終端119看到的攝像機切換控制的流程。在連接到分發(fā)服務(wù)器裝置117的便攜顯示終端119中,發(fā)出攝像機切換命令。攝像機切換命令由圖4所示的鍵按鈕單元142的鍵按鈕的組合來指定。這里,是按下#(步驟S191)。于是,與第一實施例的控制權(quán)限請求和攝像機控制命令同樣地將數(shù)字語音傳遞到變換服務(wù)器裝置114的控制權(quán)限管理·語音變換單元163。
控制權(quán)限管理·語音變換單元163中,當將其解釋為攝像機服務(wù)器裝置切換命令時,進行語音應(yīng)答,詢問口令(步驟S192)。這里用便攜顯示終端119輸入口令,如果口令正確(步驟S193),則返回語音應(yīng)答(步驟S194),輸入切換目標的攝像機序號??刂茩?quán)限管理語音變換單元163具有圖18那樣的攝像機序號-攝像機名(有語音數(shù)據(jù))-攝像機地址對應(yīng)表,使用該信息得到應(yīng)答語音和攝像機服務(wù)器裝置111的地址。
當輸入攝像機序號時(步驟S195),控制權(quán)限管理·語音變換單元163中,使用圖18變換為對應(yīng)的攝像機服務(wù)器裝置111的地址(例如設(shè)為100.20.30.102),一旦結(jié)束至今所連接的與攝像機服務(wù)器裝置111的連接,新連接到具有100.20.30.102的地址的攝像機服務(wù)器裝置111。由此就可從便攜顯示終端119切換攝像機服務(wù)器裝置111。最后在步驟S196中用語音將切換目標的攝像機通知給便攜顯示終端119。
通過在變換服務(wù)器裝置113中準備附加的連接口,變更連接攝像機服務(wù)器裝置的地址,再連接到不同的攝像機服務(wù)器裝置111,也可實現(xiàn)攝像機服務(wù)器裝置切換。
<第三實施例>
第三實施例,如第二實施例那樣在切換攝像機服務(wù)器裝置時,依照連接的攝像機服務(wù)器裝置來切換廣告。
除從外部切換變換服務(wù)器裝置114的連接目標攝像機這一點和廣告服務(wù)器裝置115的廣告信息表不同這一點外,基本與第一實施例相同。攝像機切換方法可用第二實施例說明的方法實現(xiàn)。此時,作為廣告服務(wù)器裝置115的數(shù)據(jù)庫,如果替代圖7具有圖19那樣的廣告信息表,則作為從變換服務(wù)器裝置114傳遞到廣告數(shù)據(jù)庫170中的數(shù)據(jù),除了當前時刻和攝像機的PTZ值,還傳遞連接中的攝像機服務(wù)器裝置的地址,將在圖19的表中最初與攝像機服務(wù)器裝置的地址一致的項目的廣告信息,即重疊位置和廣告文件拿到變換服務(wù)器裝置114。由此,就可以依照連接的攝像機服務(wù)器裝置111來切換顯示的廣告信息。
<第四實施例>
第四實施例是在第一實施例的結(jié)構(gòu)中考慮從便攜信息終端119到攝像機服務(wù)器裝置111的連接通路時,可多個通路選擇分發(fā)服務(wù)器裝置117、變換服務(wù)器裝置114、廣告服務(wù)器裝置115的組合。
圖20中表示第四實施例的結(jié)構(gòu)。各裝置、終端都存在于多個網(wǎng)絡(luò)上,與第一實施例同樣可相互唯一地進行識別。由于基本的各裝置的動作與第一實施例相同,故關(guān)于各結(jié)構(gòu),對與圖1相同的附加相同參考序號,這里僅說明作為系統(tǒng)的不同。
便攜顯示終端119打電話給分發(fā)服務(wù)器裝置的電話號碼進行連接,進行圖像顯示和攝像機控制,但對存在多個的分發(fā)服務(wù)器裝置117的每一個分發(fā)不同的連接電話號碼。因此,如果連接到不同的分發(fā)服務(wù)器裝置117,就連接到不同的變換服務(wù)器裝置114、不同的廣告服務(wù)器裝置115。例如圖20中,當連接到分發(fā)服務(wù)器裝置117a時,使用變換服務(wù)器裝置114a、廣告服務(wù)器裝置115a,當連接到分發(fā)服務(wù)器裝置117b時,使用變換服務(wù)器裝置114b、廣告服務(wù)器裝置115b。如果變換服務(wù)器裝置114a和114b連接到相同的攝像機服務(wù)器裝置111,則看到的圖像相同,攝像機控制也同樣。
但是,如果廣告服務(wù)器裝置115具有的圖7的廣告信息表內(nèi)容不同,則即便連接相同攝像機,重疊的信息也將不同。
由此,例如在希望登載的廣告對于攝像機服務(wù)器裝置過多的情況下,通過采用這種結(jié)構(gòu),即便是相同的攝像機服務(wù)器裝置圖像,也可以切換廣告內(nèi)容。
<第五實施例>
第五實施例是在第一實施例中,不在圖像上重疊信息而是切換圖像進行顯示。說明與第一實施例的不同。
在變換服務(wù)器裝置114中,不將圖6的步驟S113,S114設(shè)為廣告重疊,而是暫時中斷攝像機圖像、將圖像切換為從廣告數(shù)據(jù)庫檢索到的影像、圖像、文本或從攝像機服務(wù)器裝置取得的控制狀態(tài)信息等即可。作為切換為這樣的廣告信息的定時,由于攝像機控制中圖像滾動難以觀看的情況很多,故在攝像機服務(wù)器裝置111根據(jù)控制信息進行控制期間中,切換為廣告信息即可。因此,新追加圖21所示的流程。也就是,把開始PTZ控制且不停止PTZ動作的狀態(tài),即攝像機動作中的狀態(tài)從攝像機服務(wù)器裝置111返回到變換服務(wù)器裝置114(步驟S201)。攝像機動作中狀態(tài)包含在Motion JPEG圖像的各幀首標內(nèi)。然后,在圖21的流程中,檢測此攝像機動作中狀態(tài)(步驟S202),在攝像機動作中輸入廣告即可(步驟S203)。
盡管第五實施例中,在攝像機動作中切換為廣告信息并進行顯示,但此外也可以是1)在攝像機控制等待期間,切換為廣告信息并進行顯示。
2)變換服務(wù)器裝置連接到攝像機服務(wù)器裝置,圖像數(shù)據(jù)到達變換服務(wù)器裝置期間切換為廣告信息并進行顯示。
3)定期切換為廣告信息并進行顯示。等在圖像中插入廣告信息并進行顯示。
在以上所有的第一到第五實施例中,顯示信息未必是廣告信息,由于數(shù)據(jù)量大、最好中途插入等理由,也可以是不應(yīng)置于攝像機服務(wù)器裝置中的信息或不能置于其中的信息,只要是應(yīng)在中途進行重疊的信息,則可以是任何信息。
根據(jù)以上實施例,通過在分發(fā)途中的通路上使用變換服務(wù)器裝置,就可以僅對必要的終端重疊廣告信息這樣的附加信息,或者在特定的定時分發(fā)包含了不同的附加信息的圖像,攝像機服務(wù)器裝置111就不需要保持便攜顯示終端119用的內(nèi)容。通過廣告服務(wù)器裝置的協(xié)同動作,該附加信息可切換重疊·切換顯示因時刻、攝像機控制值(PTZ值)而不同的信息。附加信息中不僅使用靜止圖像還可以使用活動圖像、文本等。
<第六實施例>
該第六實施例中,構(gòu)成一種信息分發(fā)系統(tǒng),在網(wǎng)絡(luò)上配置控制攝像機并發(fā)送圖像的圖像服務(wù)器、發(fā)送語音的語音服務(wù)器、把圖像服務(wù)器和語音服務(wù)器的數(shù)據(jù)編碼為帶語音圖像并發(fā)送到接收終端的中繼服務(wù)器,當接收終端對中繼服務(wù)器請求特定的攝像機圖像時,把所希望的攝像機圖像和預(yù)先在中繼服務(wù)器內(nèi)所決定的語音數(shù)據(jù)編碼為帶語音圖像并返回。
該第六實施例的信息分發(fā)系統(tǒng)的整體結(jié)構(gòu)如圖22所示。為在網(wǎng)絡(luò)218上連接中繼服務(wù)器211和圖像服務(wù)器212、語音服務(wù)器213、客戶機219的結(jié)構(gòu)。
圖像服務(wù)器212上連接攝像機214,客戶機219可經(jīng)由網(wǎng)絡(luò)218操作攝像機214或取得圖像。這就是當對圖像服務(wù)器212通過HTTP(超文本鏈接協(xié)議)發(fā)送例如進行了URL編碼的命令時,圖像服務(wù)器212返回多幀圖像的方式。盡管在圖像數(shù)據(jù)中存在運動JPEG和H.261,MPEG等多個編碼方式,但不用說本發(fā)明并不依賴于編碼方式。
語音服務(wù)器213上連接麥克風(fēng)215、和存儲語音數(shù)據(jù)的語音檔案216,把語音發(fā)送到網(wǎng)絡(luò)218上。語音檔案216的語音數(shù)據(jù)也可放置于語音服務(wù)器213的內(nèi)部存儲裝置中。向語音服務(wù)器213的命令也以與圖像服務(wù)器212同樣的方式進行,當發(fā)送請求時,語音服務(wù)器213返回一定時間長度的語音數(shù)據(jù)。盡管這里語音數(shù)據(jù)的編碼方式有G.711、G.726、G.729、GSM-AMR等多種方式,但不用說本發(fā)明并不依賴于編碼方式。
客戶機219通過撥號或?qū)拵нB接而連接到網(wǎng)絡(luò)218。當客戶機219對中繼服務(wù)器211請求圖像發(fā)送時,中繼服務(wù)器211對圖像服務(wù)器212請求圖像。另一方面,參考預(yù)先持有的圖像和語音的對應(yīng)表217,向持有與該圖像對應(yīng)的語音的語音服務(wù)器請求語音數(shù)據(jù)。圖像服務(wù)器212和語音服務(wù)器213基于請求將圖像數(shù)據(jù)和語音數(shù)據(jù)送回中繼服務(wù)器211。中繼服務(wù)器211把圖像數(shù)據(jù)和語音數(shù)據(jù)編碼為1個帶語音圖像數(shù)據(jù),送回客戶機219??蛻魴C219接收并再現(xiàn)數(shù)據(jù)。
客戶機219除圖像外還向中繼服務(wù)器211請求攝像機控制,但這種情況下中繼服務(wù)器211將該請求原樣送到圖像服務(wù)器212,委托進行對應(yīng)的攝像機的控制。
接著使用圖23說明服務(wù)器的硬件結(jié)構(gòu)。圖23中圖像服務(wù)器212、語音服務(wù)器213、中繼服務(wù)器211連接到網(wǎng)絡(luò)250。
圖像服務(wù)器212具有CPU221、RAM222、ROM223、二次存儲裝置226。具有顯示畫面用的視頻RAM(VRAM)225,并連接監(jiān)視器231。具有外圍設(shè)備用的外圍設(shè)備接口224,連接操作用的鍵盤232、鼠標等的定位設(shè)備233以及帶或不帶工作臺的攝像機214。為和網(wǎng)絡(luò)250連接,具有網(wǎng)絡(luò)接口227。外圍設(shè)備接口224中存在PS/2RS-232C、USB、IEEE1394等規(guī)格,但本實施例不依賴于這些規(guī)格。
CPU221、RAM222、ROM223、二次存儲裝置226、VRAM225、外圍設(shè)備接口224、網(wǎng)絡(luò)接口227連接到內(nèi)部總線。以上所說明那樣的圖像服務(wù)器的結(jié)構(gòu)可使用市場銷售的個人計算機簡單地實現(xiàn),但也可經(jīng)由網(wǎng)絡(luò)從外部操作,因此采用沒有VRAM225、監(jiān)視器231、鍵盤232、鼠標233的所謂機頂盒形式也沒有任何問題。
語音服務(wù)器213也是與圖像服務(wù)器212大致相同的結(jié)構(gòu),僅連接的輸入設(shè)備不同。除CPU241、RAM242、ROM243、二次存儲裝置244、VRAM246、監(jiān)視器251、外圍設(shè)備接口247、網(wǎng)絡(luò)接口245、鍵盤252、定位設(shè)備253外,還由麥克風(fēng)215和語音監(jiān)視用的揚聲器254構(gòu)成。語音服務(wù)器213也可使用市場銷售的個人計算機簡單地實現(xiàn)。與圖像服務(wù)器212同樣,采用沒有VRAM246、監(jiān)視器251、鍵盤252、鼠標253、揚聲器254的機頂盒形式也沒有任何問題。當語音服務(wù)器213在內(nèi)部存儲裝置中持有語音檔案216,不使用外部聲源的情況下,就為不連接麥克風(fēng)215的結(jié)構(gòu)。
最后中繼服務(wù)器211是從圖像服務(wù)器212除去帶工作臺攝像機214的結(jié)構(gòu),或者沒有帶工作臺攝像機214、VRAM215、監(jiān)視器231、鍵盤232、鼠標233的機頂盒結(jié)構(gòu),因此省略說明。
接著在圖24中表示該第六實施例的軟件結(jié)構(gòu)例。圖像服務(wù)器212中圖像服務(wù)器過程261動作,語音服務(wù)器213中語音服務(wù)器過程262動作,中繼服務(wù)器211中請求處理過程265、圖像接收過程263、語音接收過程264、圖像語音發(fā)送過程266動作,客戶機中客戶過程267分別進行動作。這里所謂過程意味著多任務(wù)操作系統(tǒng)中進行動作的程序單位。
使用圖25說明各過程的動作概要??蛻暨^程267在啟動時,對中繼服務(wù)器211的請求處理過程265請求圖像列表(S211)。請求處理過程265返回圖像列表(S212)。圖像列表具有圖26A所示那樣的信息,關(guān)于內(nèi)容在后面進行說明。接收到列表的客戶機顯示圖像的一覽,用戶從其中選操作一個。于是客戶過程267對請求處理過程265請求圖像接連(S213)。在用戶直接把圖像的接連目標輸入到客戶機219時,步驟S211和S212就不需要。
接受圖像接連請求的中繼服務(wù)器211的請求處理過程265參照語音和圖像的對應(yīng)表217進行語音服務(wù)器213和語音的選擇(S214)。然后指定圖像服務(wù)器212和攝像機214并啟動圖像接收過程263,另外指定語音服務(wù)器213和麥克風(fēng)215或語音文件名等啟動語音接收過程264。啟動將接收到圖像和語音數(shù)據(jù)編碼為一個帶語音圖像數(shù)據(jù)進行發(fā)送的圖像語音發(fā)送過程266。圖像接收過程263對圖像服務(wù)器212請求圖像(S215)。語音接收過程264對語音服務(wù)器213請求語音(S216)。
接受請求的圖像服務(wù)器過程261從該攝像機214取得圖像(S217),對中繼服務(wù)器211的圖像接收過程263返回。另外語音接收過程264也同樣從麥克風(fēng)215和語音檔案216取得該語音數(shù)據(jù)并返回語音接收過程264(S218)。所返回的圖像和語音數(shù)據(jù)在圖像語音發(fā)送過程266中編碼為一個帶語音圖像數(shù)據(jù)(S219),返回客戶過程267(S220)??蛻暨^程267接收帶語音圖像數(shù)據(jù)后進行解碼并再現(xiàn)(S221)。
接著使用圖26A~26C說明與中繼服務(wù)器保持的圖像和語音有關(guān)的信息和與圖像和語音的對應(yīng)有關(guān)的信息。信息有圖26A所示的圖像表271、圖26B所示的語音表272和圖26C所示的對應(yīng)表273三種,圖像表271中對連接到圖像服務(wù)器212的每個攝像機214分配圖像序號和圖像名,并將圖像服務(wù)器212的IP地址、端口序號、攝像機名作為屬性進行管理??蛻魴C219選擇圖像名并指定所希望的攝像機的圖像。語音表272也同樣對每個麥克風(fēng)215或文件分配語音序號和語音名,并將語音服務(wù)器213的IP地址、端口序號、麥克風(fēng)名或文件名作為屬性進行管理。
對應(yīng)表273表示圖像序號和語音序號的對應(yīng)關(guān)系,保持與各圖像序號對應(yīng)的多個語音序號。當用戶請求指定了圖像名的圖像時,中繼服務(wù)器211從圖像表271求出圖像序號,接著在對應(yīng)表273中參照該圖像序號,從成組的語音序號參照語音表272,來確定語音在網(wǎng)絡(luò)上的位置。這里,語音可登錄多個,在用戶長時間連續(xù)觀看圖像時,依次分發(fā)這些多個語音。在由于某些原因不可連接語音時,切換為分配給相同圖像的其他語音。圖中N/A表示沒有數(shù)據(jù)。
以上是該第六實施例的服務(wù)器組的動作概要,使用圖27~33的流程圖詳細說明在該第六實施例中發(fā)揮中心的作用的中繼服務(wù)器211的各過程的動作過程。中繼服務(wù)器211由請求處理過程265、圖像接收過程263、語音接收過程264、圖像語音發(fā)送過程266構(gòu)成,請求處理過程265以外的3個過程對1個客戶機生成1個,各自獨立進行動作。
圖27是表示中繼服務(wù)器211的請求處理過程265的處理過程的流程圖。開始后,步驟S231中進行初始化,步驟S232中等待事件。當發(fā)生事件時,進行事件處理。這里事件僅關(guān)于來自客戶過程267的事件進行說明,省略依賴OS的事件等的說明。
在事件是圖像請求時(步驟S232為是),步驟S234中判斷是否為已經(jīng)連接的客戶機。在已連接的情況下(步驟S234為否),步驟S235中分別對圖像服務(wù)器212和語音服務(wù)器213發(fā)出圖像請求事件和語音請求事件,返回步驟S602等待下一事件。在未連接的客戶機的情況下(步驟S234為是),進入步驟S236確認是否等于或小于最大連接數(shù)。在超過最大連接數(shù)時(步驟S236為否),步驟S237中對客戶機通知連接拒絕,返回步驟S232,等待下一事件。此外,最大連接數(shù)是考慮中繼服務(wù)器211的處理能力預(yù)先確定好的。
在等于或者小于最大連接數(shù)的情況下(步驟S236為是),步驟S238中作為客戶機219的登錄處理,登錄客戶機的IP地址。另外在客戶機219的個人信息同時送來的情況下,也對其進行登錄。接著,求出與圖像對應(yīng)的語音,分別在步驟S239中將圖像接收過程、步驟S240中將語音接收過程、步驟S241中將圖像語音發(fā)送過程啟動,返回步驟步驟S232,等待下一事件。
在步驟S233中沒有連接請求事件的情況下,進入步驟S242,判斷是否為連接結(jié)束事件。該事件有客戶機219發(fā)送的情形,或者在圖像語音發(fā)送過程266中不能向客戶機發(fā)送的情況下作為例外事件發(fā)生的情形。在這樣的情況下(步驟S242為是),進入步驟S243進行連接結(jié)束處理。連接結(jié)束處理中結(jié)束在連接開始時所啟動的圖像接收過程263、語音接收過程264、圖像語音發(fā)送過程266。接著進入步驟S244,從連接客戶機的一覽表刪除該客戶機,返回步驟S232,等待下一事件。
在不是連接結(jié)束事件的情況下(步驟S242為否),進入步驟S245,判斷是否為攝像機控制請求事件。是的情況下,進入步驟S246,把來自客戶機的攝像機控制命令傳送到圖像服務(wù)器212,結(jié)束后進行步驟S232,等待下一事件。
在不是攝像機控制請求事件的情況下(步驟S245為否),進入步驟S247,判斷是否為圖像列表請求事件。是的情況下,步驟S248中把圖像列表返回客戶機以后,返回步驟S232,等待下一事件。在不是圖像列表請求事件的情況下(步驟S246為否),返回步驟S232,等待下一事件。
接著說明中繼服務(wù)器211中的圖像接收過程263和語音接收過程264的動作過程。圖28是圖像接收過程的動作過程、圖29是語音接收過程的動作過程。
語音接收過程264在處理開始后在步驟S251中進行待機直到從請求處理過程265發(fā)生圖像請求事件。當發(fā)生圖像請求事件時(步驟S251為是),在步驟S252中對圖像服務(wù)器212指定攝像機名并請求圖像,步驟S253中接收至少1幀的圖像。這里幀數(shù)可以從客戶機過程267請求,也可設(shè)定為固定了的幀數(shù)。
接著在步驟S254中,判斷步驟S252和S253中是否沒有異常順利地得到圖像。所謂異常是接收途中由于網(wǎng)絡(luò)切斷等原因不能完全接收的情況。在有異常時(步驟S254為否),進入步驟S257,如果等于或小于最大嘗試次數(shù),則返回步驟S252,嘗試再度取得圖像。如果超過最大嘗試次數(shù),則進入步驟S258,發(fā)出例外發(fā)生事件并結(jié)束。
在步驟S254中沒有異常時,進入步驟S255,把接收到的圖像保存在緩沖器中。接著在步驟S256中確認是否正發(fā)出結(jié)束命令。這是圖27的步驟S243中發(fā)生的命令。在正發(fā)出該命令的情況下,結(jié)束處理。沒有發(fā)出的情況下,返回步驟S251并繼續(xù)處理。
語音接收過程264在處理開始后在步驟S260中進行待機直到從請求處理過程265發(fā)生的語音請求事件。當發(fā)生語音請求事件時(步驟S260為是),在步驟S261中對語音服務(wù)器213指定麥克風(fēng)215或文件名并請求語音。接著步驟S262中在所請求的語音是語音文件時,確認是否已結(jié)束語音。這可通過對于語音請求的返答得知。在語音已結(jié)束的情況下,步驟S263中參照對應(yīng)表217,在對應(yīng)多個語音的情況下,對語音服務(wù)器213請求選擇其他的語音。接著在步驟S264中接收一定時間的語音。這里,時間數(shù)設(shè)定為與圖像接收過程263一次接收的幀數(shù)對應(yīng)的時間。
接著在步驟S265中,判斷步驟S261和S264中是否沒有異常順利地得到圖像。這里所謂異常是接收途中由于網(wǎng)絡(luò)切斷等原因不能完全接收的情況。有異常時,進入步驟S268,在等于或者小于最大嘗試次數(shù)時,返回步驟S261,再度嘗試取得語音。若超過最大嘗試次數(shù),則進入步驟S269,發(fā)出例外發(fā)生事件,并結(jié)束。
在沒有異常時(步驟S265中為是),進入步驟S266,把接收到的語音保存在緩沖器中。接著在步驟S267中確認是否發(fā)出結(jié)束命令。這是圖27的步驟S243中發(fā)生的命令。在發(fā)出該命令的情況下,結(jié)束處理。沒有發(fā)出的情況下,返回步驟S260并繼續(xù)處理。
接著使用圖30說明圖像語音發(fā)送過程266的動作過程。處理開始后,步驟S271中,判斷在圖像緩沖器和語音緩沖器中是否有圖像語音數(shù)據(jù)。哪個數(shù)據(jù)都不存在的情況下,進入步驟S272。當步驟S272中超過最大嘗試次數(shù),判斷為沒有圖像語音數(shù)據(jù)時,進入步驟S278,向客戶機219發(fā)送錯誤,步驟S279中發(fā)生例外事件并結(jié)束。如果等于或小于最大嘗試次數(shù),在經(jīng)過等待時間后,再次執(zhí)行步驟S271。
步驟S271中有圖像語音數(shù)據(jù)的情況下,進入步驟S273,將各個圖像和語音作為帶語音圖像生成編碼數(shù)據(jù)。盡管這里,編碼方式存在MPEG、RealVideo、Windows(R)Media等多種方式,但本發(fā)明并不依賴于編碼方式。在圖像·語音任一存在的情況下,也可進行編碼。編碼后在步驟S274中對客戶機219發(fā)送編碼數(shù)據(jù)。
接著在步驟S275中判斷在發(fā)送時有無異常。有異常時,步驟S277中判斷是否超過預(yù)先決定的發(fā)送的最大嘗試次數(shù)。超過時,進入步驟S278在進行了錯誤發(fā)送后,在步驟S279中發(fā)生例外事件并結(jié)束。在等于或小于最大嘗試次數(shù)時,返回步驟S274并再次進行發(fā)送。
步驟S275中判斷為發(fā)送時沒有異常時,步驟S276中判斷有無結(jié)束命令。這有在圖27的步驟S243中發(fā)生的情況,或者在圖像接收過程263或語音接收過程264中作為例外事件發(fā)生的情況。有結(jié)束命令時結(jié)束處理。沒有結(jié)束命令時返回步驟S273,進行編碼接著發(fā)送。
從以上說明可知,根據(jù)該第六實施例,能夠構(gòu)筑可用語音附加圖像說明和廣告的網(wǎng)絡(luò)攝像機系統(tǒng)和信息分發(fā)系統(tǒng)。
<第七實施例>
接著對本發(fā)明的第七實施例進行說明。該第七實施例在第六實施例中把中繼服務(wù)器211具有的對應(yīng)表217高功能化、可處理更詳細的對應(yīng)關(guān)系。所謂詳細的對應(yīng)關(guān)系,是在對應(yīng)圖像和語音時,利用搖鏡頭、傾斜、縮放等的攝像機參數(shù)、時間段、用戶年齡、性別、住所等個人數(shù)據(jù)等來限制對應(yīng)。該第七實施例的硬件結(jié)構(gòu)和軟件結(jié)構(gòu)與第六實施例相同,中繼服務(wù)器211管理的對應(yīng)表217和請求處理過程265的動作不同。因此下面僅說明與第六實施例不同的部分。
圖31表示本實施例中中繼服務(wù)器保持的對應(yīng)表和條件表的例子。圖31A是條件表281的例子,圖31B是對應(yīng)表282的例子。條件表281將一行作為一個條件分配序號,對每個條件序號將時間段、搖鏡頭、傾斜、縮放等的攝像機參數(shù)、年齡、性別、住所等與用戶的個人信息有關(guān)的條件作為值和值的范圍來保持。
對應(yīng)表282的例子與第六實施例的對應(yīng)表282相比較,對各圖像序號添加將連接條件作為條件序號進行保持的列。在條件欄為None時,意味著無條件進行對應(yīng)。然后在用戶指定了某圖像時,僅在附帶的條件全部一致的情況下許可圖像和語音的對應(yīng)。在不一致的情況下,可以不發(fā)送語音,也可以預(yù)先決定與這種情況對應(yīng)的語音。
接著圖32中表示在該第七實施例的中繼服務(wù)器211上進行動作的請求處理過程265的動作過程。在圖32中對與圖27相同的動作附加相同步驟序號,僅對不同的部分進行說明。
對于步驟S233以下的圖像請求事件的處理,在條件表281中有與攝像機參數(shù)有關(guān)的條件的情況下,步驟S280中參照圖26A的表271從該圖像服務(wù)器212取得攝像機狀態(tài)。這是取得與客戶機所希望的圖像對應(yīng)的攝像機的攝像機參數(shù)的處理。接著參照條件表281的條件,將與以攝像機參數(shù)為首的條件一致的組從條件表281檢索出來,從圖31B的對應(yīng)表282選擇相應(yīng)的條件序號的語音。然后,中繼服務(wù)器211對與在步驟S239中所選擇的語音對應(yīng)的語音服務(wù)器213發(fā)出該語音數(shù)據(jù)的取得請求,并接收該語音數(shù)據(jù)。
在條件表281中有用戶個人信息時,客戶機219需要發(fā)送用戶的個人信息。此時,與從客戶機219對中繼服務(wù)器211發(fā)送的圖像連接請求同時發(fā)送個人信息。中繼服務(wù)器211基于接收到的個人數(shù)據(jù)把與條件一致的組從條件表281檢索出來,從對應(yīng)表282選擇相應(yīng)的條件序號的語音。然后,中繼服務(wù)器211,對與在步驟S239中所選擇的語音對應(yīng)的語音服務(wù)器213發(fā)出該語音數(shù)據(jù)的取得請求,并接收該語音數(shù)據(jù)。
在條件表281中有時刻信息時,中繼服務(wù)器211把包含在從客戶機219有圖像數(shù)據(jù)的取得請求時的時刻中的時間段的組從條件表281檢索出來,從對應(yīng)表282選擇相應(yīng)的條件序號的語音。然后,中繼服務(wù)器211對與在步驟S239中所選擇的語音對應(yīng)的語音服務(wù)器213發(fā)出該語音數(shù)據(jù)的取得請求,并接收該語音數(shù)據(jù)。
在從客戶機有攝像機控制請求時(步驟S245為是),步驟S282中對圖像服務(wù)器212發(fā)出該攝像機的控制命令。接著步驟S283中取得攝像機的參數(shù)信息。然后步驟S284中判斷關(guān)于語音是否需要再次連接。這是為了通過再次參照圖31A的條件表281來確認在許可當前的連接時的條件,在攝像機控制后是否繼續(xù)成立。如果成立,進入步驟S232,等待下一事件。如果不成立,由于需要再次連接,故再次參考圖31A的條件表281從圖31B的對應(yīng)表281查看相應(yīng)的條件序號的語音序號,在步驟S285中進行再次連接處理。這是指定語音服務(wù)器212和麥克風(fēng)215或文件并再次啟動語音接收過程的處理。
如上所述那樣,根據(jù)第七實施例,通過指定時間、攝像機參數(shù)、用戶的個人信息等的條件等,可更詳細決定對應(yīng)關(guān)系,其結(jié)果是可以在用語音進行圖像說明時用語音明確說明畫面中所顯示的東西,或者在語音廣告等中對圖像附加有效果的語音。
<第八實施例>
接著說明本發(fā)明的第八實施例。該第八實施例在第六或第七實施例中除PC客戶機之外還可利用便攜電話等的移動終端。該第八實施例的系統(tǒng)結(jié)構(gòu)如圖33所示。
圖33在圖22中增加了移動通信網(wǎng)和便攜電話客戶機。在圖33中對與圖22相同的結(jié)構(gòu)附加相同參考符號省略說明,僅說明不同點。便攜終端客戶機292經(jīng)由移動通信網(wǎng)291連接到移動通信載波的分發(fā)中心290的網(wǎng)關(guān)。然后網(wǎng)關(guān)把移動通信網(wǎng)的通信方式變換為網(wǎng)絡(luò)218上的通信方式,交換信息。便攜終端客戶機292和網(wǎng)關(guān)的通信方式中有利用線路交換方式的方式和利用分組通信方式的方式。
因此,在作為終端使用便攜電話時,在分發(fā)中心290內(nèi)的網(wǎng)關(guān)中,對由各攝像機214所攝影的每個圖像分配電話號碼,在有從終端向與圖像對應(yīng)的電話號碼的呼叫時,從分發(fā)中心290內(nèi)的網(wǎng)關(guān)向中繼服務(wù)器211請求對應(yīng)的圖像。接著如果把來自中繼服務(wù)器211的帶語音圖像在網(wǎng)關(guān)中變換為針對移動通信的圖像列表,就可由終端接收進行再現(xiàn)。
在利用分組通信方式的連接中,如果使用再現(xiàn)活動圖像剪輯的公知的服務(wù),則當對中繼服務(wù)器211指定攝像機214時,由中繼服務(wù)器211生成并返回對圖像與對應(yīng)的語音進行了合成的視頻剪輯,因此可經(jīng)由網(wǎng)關(guān)用終端對其進行接收并再現(xiàn)。
在線路交換和分組交換可同時連接的情況下,可在便攜電話終端上的畫面上進行攝像機操作,一邊取得靜止圖像一邊接收語音數(shù)據(jù)。此時,從中繼服務(wù)器211返回的帶語音圖像數(shù)據(jù)在網(wǎng)關(guān)中分割為分組通信用的靜止圖像數(shù)據(jù)和線路交換用的語音數(shù)據(jù)并發(fā)送到終端。
如上所述那樣,根據(jù)該第八實施例,可在第六實施例中進行將利用移動通信網(wǎng)的便攜終端作為客戶機的帶語音的網(wǎng)絡(luò)攝像機操作。
<第九實施例>
接著說明本發(fā)明的第九實施例。第九實施例在第六或第七實施例中可變更中繼服務(wù)器211具有的圖像和語音的對應(yīng)表217(273或282)、條件表281。這通過向中繼服務(wù)器211發(fā)送追加、更新、刪除等的請求來實現(xiàn)。
例如,考慮圖26C的對應(yīng)表273的變更。變更命令的種類有追加更新、刪除兩種。追加和更新的區(qū)別是在與所指定的圖像序號有關(guān)的數(shù)據(jù)不存在的情況下進行追加,在存在的情況下進行更新。對中繼服務(wù)器211的請求如第六實施例所述那樣,例如采用URL編碼的HTTP請求和應(yīng)答的形式。下面舉出請求和應(yīng)答的例子。
a)向?qū)?yīng)表的追加·更新1請求http//host-addressport/addctbl?video=id&amp;sound=id[&amp;sound=id...]其中video=id時id是圖像序號、sound=id時id是語音序號(可指定多個)。應(yīng)答HTTP/1.0 200 OKContent-Type text/plain¥r¥nOKvideo_id其中video_id是圖像序號。
b)來自對應(yīng)表的刪除請求http//host-addressport/delctbl?video=id[&amp;video=id...]其中,video=id時id是圖像序號(可指定多個)。應(yīng)答HTTP/1.0 200OKContent-Type text/plain¥r¥nOK。
向?qū)?yīng)表的追加·更新請求中,指定圖像序號和與圖像對應(yīng)的語音序號。語音序號可指定多個。刪除請求中指定圖像序號并刪除對應(yīng)數(shù)據(jù)。刪除的圖像序號可指定多個。在客戶機對已刪除的圖像序號請求連接時,僅中繼圖像或預(yù)先決定對應(yīng)規(guī)定的語音。
接著關(guān)于向圖31A所示條件表281的追加、更新、刪除,可規(guī)定下面的請求和應(yīng)答來進行。
c)向條件表的追加·更新請求http//host-addressport/addqtbl?qid=num&amp;attr=val1+val2[&amp;attr=val1+val2...]其中qid=num的num是條件序號。attr=val1+val2的attr是屬性名,val1和val2是下限值和上限值。attr的例子是pan,tilt,zoom,time,age,sex等。應(yīng)答HTTP/1.0 200 OKContent-Typetext/plain¥r¥nOKqid=qualiy_id,其中qualify_id是條件序號。
d)來自條件表的刪除請求http//host-addressport/delqtbl?qid=num[&amp;qid=num...]其中,qid=id的id是條件序號(可指定多個)。應(yīng)答(成功時)HTTP/1.0200 OKContent-Type text/plain¥r¥nOK。
在條件表281的追加更新時,如果有指定了條件序號的條件,則更新,沒有則追加。在沒有指定條件序號時,附加新的條件序號并返回。在指定了條件表的刪除時,如果有與條件序號相當?shù)臈l件則刪除。
接著當在圖31B的對應(yīng)表282的追加/更新中,進行附帶的條件的更新時,如果在上述的追加更新請求的表達式中追加與條件有關(guān)的屬性,即,如下修正向上述對應(yīng)表273的追加·更新1。
e)向?qū)?yīng)表的追加更新2請求http//host-addressport/addctbl?video=id[&amp;qid=id][&amp;sound=id[&amp;sound=id...]]其中,video=id的id是圖像序號、sound=id的id是語音序號(可指定多個)。qid=id的id是條件序號。
用于實現(xiàn)更新的中繼服務(wù)器211的動作,向圖32的中繼服務(wù)器的動作過程增加對應(yīng)表和條件表的更新手續(xù)即可。即,當在事件處理中,有從上述a)到e)的請求時,進行對應(yīng)表273或282和/或條件表281的追加·更新、刪除等的變更處理,并進行下一事件的等待即可。
如上所述那樣,根據(jù)該第九實施例,通過在第六和第七實施例中,對由中繼服務(wù)器使用的圖像和語音的對應(yīng)表、條件表施加追加·更新、刪除等的變更處理,就可動態(tài)變更對應(yīng)和對應(yīng)條件。
如上所述,能夠構(gòu)筑可從圖像發(fā)送裝置和語音發(fā)送裝置分別接收圖像數(shù)據(jù)、語音數(shù)據(jù),并將組合了它們的帶語音圖像數(shù)據(jù)分發(fā)到接收裝置的系統(tǒng)。
<第十實施例>
圖34是表示第十實施例中使用作為變換圖像數(shù)據(jù)的編碼方式的變換裝置的中繼服務(wù)器的圖像分發(fā)系統(tǒng)的一例的圖。
在圖34中,攝像機301實時取得圖像,在圖像分發(fā)服務(wù)器302中將圖像數(shù)據(jù)變換為QVGA或1/16VGA大小,進而將圖像數(shù)據(jù)編碼成JPEG方式。中繼服務(wù)器303為了向便攜電話線路網(wǎng)306分發(fā)圖像,通過后述方法把圖像數(shù)據(jù)從QVGA或1/16VGA大小變換為QCIF的圖像大小,同時將圖像數(shù)據(jù)的編碼方式從JPEG方式變換成MPEG方式。通過上面的系統(tǒng),就可向攜電話304a,304b,304c,....中分發(fā)攝像機的圖像。
此外,盡管在下面說明的第十實施例中,設(shè)編碼變換前的圖像的編碼方式為JPEG編碼方式,編碼變換后的圖像的編碼方式為MPEG圖像編碼方式,但對于包含塊分割、正交變換以及熵編碼的各處理過程的其他編碼方式的組合也是有效的,進而,編碼變換前后的圖像也可以是相同的編碼方式。
圖35是表示在本發(fā)明的第十實施例中從QVGA的圖像顯示大小(橫向320像素、縱向240像素)變換為比其還小的QCIF的圖像顯示大小(橫向176像素、縱向144像素)的利用中繼服務(wù)器303的編碼數(shù)據(jù)變換方式的處理過程的流程圖。
此外,下面說明的實施例中,只要編碼變換后的圖像大小比編碼變換前的圖像大小小,則對其他圖像大小的組合也有效。
在圖35的步驟S311中,通過將QVGA大小的圖像的JPEG編碼數(shù)據(jù)進行JPEG熵解碼(霍夫曼解碼或算術(shù)解碼),生成QVGA大小的圖像的正交變換數(shù)據(jù)(更正確地說是生成對每個在QVGA大小的圖像范圍中包含的MCU(Minimum Coding Unit)所得到的各塊的正交變換數(shù)據(jù))。
步驟S312中如使用圖36后面所述那樣,通過從QVGA大小的圖像數(shù)據(jù)的范圍沿著部分MCU邊界線(更一般地說是部分塊邊界線)切出QCIF大小的圖像數(shù)據(jù)的范圍,取得QCIF大小的正交變換數(shù)據(jù)(更正確地說是分別取得對每個包含在QCIF大小的圖像范圍中的MCU所得到的塊的正交變換數(shù)據(jù))。
這里使用圖36說明從QVGA大小的圖像數(shù)據(jù)切出QCIF大小的圖像數(shù)據(jù)。
圖36是表示從QVGA大小的圖像范圍切出QCIF大小的圖像范圍時的圖像范圍的對應(yīng)關(guān)系的圖。當設(shè)QVGA大小的圖像范圍的左上角的坐標為(0,0)、右下角的坐標為(319,239)時,在從這里切出的圖像范圍的左上角坐標為(x1,y1)時,右下角的坐標就是(x1+175,y1+143)。其中,x1和y1必須分別是JPEG編碼的最小處理塊MCU(Minimum Coding Unit)大小的倍數(shù)。例如在MCU對應(yīng)橫向16像素、縱向16像素的圖像范圍時,x1和y1必須都是16的倍數(shù),此時,x1的候補值為0,16,32,48,64,80,96,112,128,155之一,y1的候補值為0,16,32,48,64,80,96之一。在圖36中作為一例,表示切出左上角的坐標為(64,48),右下角的坐標為(239,191)的圖像范圍的情況。
返回圖35的說明,步驟S313中把步驟S312中所取得的QCIF大小的正交變換圖像數(shù)據(jù)存儲在幀存儲器中,同時將存儲在幀存儲器的1幀之前的正交變換圖像數(shù)據(jù)和步驟S312中所取得的當前幀的正交變換數(shù)據(jù)按MPEG4中的塊(包含橫向16像素、縱向16像素的圖像范圍)單位進行比較,計算每個塊的正交變換數(shù)據(jù)的幀間相差量。
步驟S314中比較步驟S313中所計算的幀間相差量和預(yù)定的閾值,在幀間相差量比預(yù)定的閾值還大時,進入步驟S315,在幀間相差量等于或小于預(yù)定閾值時,進入步驟S316。
即,依照幀間相差量按塊單位選擇步驟S315和步驟S316的處理,進行圖像數(shù)據(jù)的處理。
在步驟S315中,把步驟S312中取得的正交變換數(shù)據(jù)以INTRA模式(使用當前幀內(nèi)的圖像數(shù)據(jù)進行編碼的模式)進行MPEG4熵編碼(MPEG4規(guī)定的霍夫曼編碼或算術(shù)編碼)。另一方面,步驟S316中,判斷為沒有幀間的預(yù)測誤差,以Inter模式(幀間預(yù)測編碼方式)基于幀間預(yù)測誤差信息進行MPEG4熵編碼。
步驟S317中通過順序排列步驟S315或步驟S316中所生成的塊單位的MPEG4編碼數(shù)據(jù),生成不具有首標的QCIF大小的不完全的MPEG4編碼數(shù)據(jù),通過生成適當?shù)腗PEG4編碼數(shù)據(jù)首標并追加到數(shù)據(jù)的開頭,從而生成QCIF大小的MPEG4編碼數(shù)據(jù)。
這樣從QVGA大小的JPEG圖像數(shù)據(jù)向QCIF大小的MPEG圖像數(shù)據(jù)的編碼變換處理就結(jié)束。
此外,從步驟S313到步驟S316的處理未必全部需要。在用INTRA模式處理所有的塊時,省略步驟S313,S314和S316僅保留步驟S315即可。但是,與用INTRA模式處理所有的塊相比,利用了Inter模式的編碼數(shù)據(jù)的壓縮率要高。
<第十一實施例>
下面使用圖37和圖38說明利用第十一實施例的圖像分發(fā)服務(wù)器的圖像的編碼數(shù)據(jù)變換方式的處理。
圖37是表示在本發(fā)明的第十一實施例中從1/16VGA的圖像顯示大小(橫向160像素、縱向120像素)變換為比其還大的QCIF的圖像顯示大小(橫向176像素、縱向144像素)的服務(wù)器的編碼數(shù)據(jù)變換方式的處理過程的流程圖。
此外,在下面將要說明的第十一實施例中,只要編碼變換后的圖像大小比編碼變換前的圖像大小大,則對其他圖像大小的組合也有效。
圖37的步驟S321中,通過對1/16VGA大小的圖像的JPEG編碼數(shù)據(jù)進行JPEG熵解碼(霍夫曼解碼或算術(shù)解碼),生成1/16VGA大小的圖像的正交變換數(shù)據(jù)(更正確地說是生成對每個在1/16VGA大小的圖像范圍中包含的MCU(Minimum Coding Unit)所得到的各塊的正交變換數(shù)據(jù))。
在步驟S322中如圖38所述那樣,通過將1/16VGA大小的圖像范圍整體沿著QCIF大小的圖像范圍的部分MCU邊界線(更一般地說的是部分塊邊界線)進行插入,向剩余部分插入偽數(shù)據(jù)(持有預(yù)先所決定的值的正交變換數(shù)據(jù)),來生成QCIF大小的正交變換數(shù)據(jù)(更正確地說是分別生成對每個包含在QCIF大小的圖像范圍中的MCU所得到的塊的正交變換數(shù)據(jù))。
這里使用圖38說明從QVGA大小的圖像數(shù)據(jù)生成QCIF大小的圖像數(shù)據(jù)。
圖38是表示把1/16VGA大小的整個圖像范圍插入QCIF大小的圖像范圍時的圖像范圍的對應(yīng)關(guān)系的圖。當設(shè)QCIF大小的圖像范圍的左上角的坐標為(0,0)、右下角的坐標為(175,143)時,在向這里插入的1/16VGA大小的圖像范圍的左上角坐標為(x2,y2)時,右下角的坐標就是(x2+159,y2+119)。但是,x2和y2必須分別是JPEG編碼的最小處理塊MCU(Minimum Coding Unit)大小的倍數(shù)。例如在MCU對應(yīng)寬16像素、高8線的圖像范圍時,x2必須是16的倍數(shù),y2必須是8的倍數(shù),此時x2的候補值為0或16,y2的候補值為0,8,16,24之一。圖38中作為一例,表示出把1/16VGA大小的圖像范圍插入左上角的坐標為(0,16),右下角的坐標為(159,135)的位置的情況。在用斜線表示的剩余圖像范圍中插入偽數(shù)據(jù)。
返回圖35的說明,步驟S323中把步驟S32中所生成的QCIF大小的正交變換圖像數(shù)據(jù)存儲在幀存儲器中,同時將在幀存儲器中所存儲的1幀之前的正交變換圖像數(shù)據(jù)和步驟S322中所生成的當前幀的正交變換圖像數(shù)據(jù)按MPEG4中的塊(包含寬16像素、高8線的圖像范圍)單位進行比較,計算每個塊的正交變換圖像數(shù)據(jù)的幀間相差量。
步驟S324中比較步驟S323中所計算的幀間相差量和預(yù)定的閾值,在幀間相差量比預(yù)定的閾值還大時,進入步驟S325,在幀間相差量等于或小于預(yù)定的閾值時,進入步驟S326。
步驟S325中和步驟S326中都按塊單位進行處理。步驟S325中,把步驟S322中所生成的正交變換數(shù)據(jù)以INTRA模式(使用當前幀內(nèi)的圖像數(shù)據(jù)進行編碼的模式)進行MPEG4熵編碼(MPEG4規(guī)定的霍夫曼編碼或算術(shù)編碼)。另一方面,步驟S326中判斷為沒有幀間的預(yù)測誤差,以Inter模式(幀間預(yù)測編碼模式)基于幀間預(yù)測誤差信息進行MPEG4熵編碼。
步驟S327中通過順序排列在步驟S325或步驟S326中所生成的塊單位的MPEG4編碼數(shù)據(jù),生成QCIF大小的不完全的MPEG4編碼數(shù)據(jù),通過生成適當?shù)腗PEG4編碼數(shù)據(jù)首標并追加到數(shù)據(jù)的開頭,生成QCIF大小的MPEG4編碼數(shù)據(jù)。
這樣從1/16VGA大小的JPEG圖像數(shù)據(jù)向QCIF大小的MPEG圖像數(shù)據(jù)的編碼變換處理就結(jié)束。
此外,可組合上述第十、第十一實施例來構(gòu)成服務(wù)器。例如預(yù)先判斷編碼變換前的圖像顯示大小比變換后的圖像顯示大小大還是小,根據(jù)該判斷來決定是進行第十實施例的處理還是第十一實施例的處理即可。
<第十二實施例>
圖39是表示在第十二實施例中利用從QVGA的圖像顯示大小(橫向320像素、縱向240像素)變換為比其還小的QCIF圖像顯示大小(橫向176像素、縱向144像素)的服務(wù)器進行的編碼數(shù)據(jù)變換方式的另一處理過程的流程圖。
相對于第十實施例中取得在切出的圖像范圍中包含的正交變換數(shù)據(jù),該第十二實施例中取得在切出的圖像范圍中包含的JPEG編碼數(shù)據(jù)這一點不同。
盡管假定在JPEG編碼方式或MPEG4圖像編碼方式的之一中,作為熵編碼方式使用霍夫曼編碼方式的情況,但對于包含塊分割、正交變換和熵編碼的各處理過程的其他編碼方式的組合也可實現(xiàn)大致相同的處理過程。
在下面將說明的第十二實施例中,與第十實施例同樣,只要編碼變換后的圖像大小比編碼變換前的圖像大小小,則對于其他圖像大小的組合也是有效的。
圖39的步驟S333中,如圖36所示,通過從QVGA大小的圖像范圍沿著任意MCU邊界線(更一般地說的是塊邊界線)切出QCIF大小的圖像范圍,取得QCIF大小的JPEG編碼圖像數(shù)據(jù)(更正確地說是取得包含在QCIF大小的圖像范圍中的JPEG編碼圖像數(shù)據(jù))。
在步驟S332中從包含在步驟S331中所取得的JPEG編碼圖像數(shù)據(jù)中的JPEG用霍夫曼編碼(JPEG編碼方式中使用的霍夫曼編碼)向INTRA模式的MPEG4用霍夫曼編碼(MPEG4圖像編碼方式的INTRA模式編碼中使用的霍夫曼編碼)進行變換。這里為了實現(xiàn)步驟S332,必須預(yù)先識別JPEG用霍夫曼編碼表的內(nèi)容和MPEG4用霍夫曼編碼表的內(nèi)容。
此外,設(shè)MPEG4用霍夫曼編碼表由于應(yīng)用該第十二實施例的裝置(中繼服務(wù)器)或軟件自身準備故預(yù)先被識別。另一方面JPEG用霍夫曼編碼表由于在JPEG編碼數(shù)據(jù)的首標部分中被定義,故通過在圖39的處理之前分析JPEG編碼數(shù)據(jù)的首標部分而得到?;蛘咴谥腊l(fā)送JPEG編碼數(shù)據(jù)的圖像分發(fā)服務(wù)器通常使用相同內(nèi)容的JPEG用霍夫曼編碼表時,簡單存儲該JPEG用霍夫曼編碼表即可。
當將步驟S332中所得到的MPEG4用霍夫曼代碼串匯總成1幀時,就得到QCIF大小的不完全的(沒有首標)MPEG4用編碼數(shù)據(jù)。步驟S333中,把步驟S332中得到的MPEG4用霍夫曼代碼串依次存儲到幀存儲器,同時將在幀存儲器中所存儲的1幀之前的MPEG4用霍夫曼代碼串和步驟S332中所得到的當前幀的MPEG4用霍夫曼代碼串按MPEG4的塊(橫向縱向均16像素的范圍)單位進行比較,檢查每個塊的MPEG4用霍夫曼代碼串的幀間是否有差別。
步驟S334中依照步驟S333中所檢查的幀間差別的有無,有幀間差別時,直接進入步驟S336(無追加處理),在沒有幀間相差時,進入步驟S335(有追加處理)。步驟S335中,把當前處理中的宏塊中包含的MPEG4用霍夫曼代碼串全部置換為意味著Inter模式的預(yù)測誤差為0的MPEG4用霍夫曼代碼串。
步驟S336中,把步驟S332或步驟S335中所得到的MPEG4用霍夫曼代碼串匯總成1幀并生成QCIF大小的MPEG4編碼數(shù)據(jù),通過生成適當?shù)腗PEG4編碼數(shù)據(jù)首標并追加到數(shù)據(jù)的開頭,生成QCIF大小的MPEG4編碼數(shù)據(jù)。
這樣從QVGA大小的JPEG圖像數(shù)據(jù)向QCIF大小的MPEG圖像數(shù)據(jù)的編碼變換處理就結(jié)束。
此外,從步驟S333到步驟S335的處理未必需要。在用INTRA模式處理全部的宏塊時,可以省略步驟S333到S335的所有處理。但是,與用INTRA模式處理全部的宏塊相比,利用了Inter模式的編碼數(shù)據(jù)的壓縮率要高。
<第十三實施例>
圖39是表示在本實施例中利用從1/16VGA的圖像顯示大小(橫向160像素、縱向120像素)變換為比其大的QCIF的圖像顯示大小(橫向176像素、縱向144像素)的服務(wù)器的編碼數(shù)據(jù)變換方式的處理過程的流程圖。
相對于第十一實施例中將正交變換數(shù)據(jù)插入到QCIF大小的圖像范圍,在該第十三實施例中,在QCIF大小的圖像范圍中插入MPEG4用霍夫曼代碼串這一點不同。
盡管假定在JPEG編碼方式或MPEG4圖像編碼方式之一中,作為熵編碼方式使用霍夫曼編碼方式的情況,但對于包含塊分割、正交變換和熵編碼的各處理過程的其他編碼方式的組合也可實現(xiàn)大致相同的處理過程。
在下面將說明的第十三實施例中,與第十一實施例同樣,只要編碼變換后的圖像大小比編碼變換前的圖像大小大,則對于其他圖像顯示大小的組合也是有效的。
圖40的步驟S341中,從1/16VGA大小的JPEG編圖像數(shù)據(jù)中包含的JPEG用霍夫曼編碼(JPEG編碼方式中使用的霍夫曼編碼)向INTRA模式編碼的MPEG4用霍夫曼編碼(MPEG4圖像編碼方式的INTRA模式編碼中使用的霍夫曼編碼)進行變換。這里,為了實現(xiàn)步驟S341,必須預(yù)先知道JPEG用霍夫曼編碼表的內(nèi)容和MPEG4用霍夫曼編碼表的內(nèi)容,這些與第十二實施例同樣預(yù)先被準備。
步驟S342中如圖38所示那樣,通過把1/16VGA大小的圖像范圍整體(中包含的MPEG4用霍夫曼代碼串)沿著QCIF大小的圖像范圍的任意MCU邊界線(更一般地說的是部分塊邊界線)進行插入。然后向剩余的圖像范圍插入偽數(shù)據(jù)(持有預(yù)先決定的值的MPEG4用霍夫曼代碼串),生成QCIF大小的不完全的(沒有首標)MPEG4編碼數(shù)據(jù)(更正確地說是生成在QCIF大小的圖像范圍中包含的MPEG4用霍夫曼代碼串)。
然后圖40的步驟S333~S336表示與圖39相同的處理,省略該說明。
<第十四實施例>
圖41是表示在第十四實施例中,利用把QVGA的圖像顯示大小(橫向320像素、縱向240像素)變換為比其小的QCIF圖像顯示大小(橫向176像素、縱向144像素)的服務(wù)器的編碼數(shù)據(jù)變換方式的處理過程的流程圖。
該第十四實施例中,預(yù)先在編碼方式變換前把圖像大小設(shè)為1/2、插入偽數(shù)據(jù),這一點與第十實施例不同。
圖41的步驟S361中,通過JPEG圖像解碼QVGA大小的JPEG編碼數(shù)據(jù),來生成QVGA大小的圖像數(shù)據(jù)。
步驟S362中進行圖像的間疏處理,在縱橫方向上都將圖像數(shù)據(jù)縮小為1/2(只要是比QCIF的圖像大小還小那樣的1/n的倍率都可以),生成1/16VGA大小的圖像數(shù)據(jù)。
圖42是表示在縱橫方向上都把圖像大小縮小為1/2時產(chǎn)生的塊失真的增大的狀況的圖。在該圖中,實線位置(寬8像素間隔、高8線間隔)上存在JPEG編碼所引起的塊失真。當在縱橫方向上都把圖像大小縮小為1/2時,JPEG編碼所引起的塊失真就向?qū)嵕€和虛線的位置(寬4像素間隔、高4線間隔)移動。進而當對該圖像進行MPEG4圖像編碼時,就有再次在實線所示位置上追加MPEG4圖像編碼所引起的塊失真的可能性。也就是,由于圖像的縮小就會在虛線位置上產(chǎn)生新的塊失真。
返回圖41,在步驟S363中,為了使在圖42所述的虛線位置上新產(chǎn)生的塊失真不明顯,對位于圖42的虛線位置(各塊的縱向橫向的各自方向的中心軸)附近的各像素進行平滑化處理。
然后在步驟S364中如圖38所示那樣,通過把1/16VGA大小的圖像范圍整體的數(shù)據(jù)沿著QCIF大小的圖像范圍的任意MCU邊界線(更一般地說是部分塊邊界線)進行插入,在剩余部分中插入偽數(shù)據(jù)(持有預(yù)先決定的值的圖像數(shù)據(jù)),生成QCIF大小的圖像數(shù)據(jù)。步驟S365中通過對QCIF大小的圖像數(shù)據(jù)進行MPEG4圖像編碼,生成QCIF大小的MPEG4編碼圖像數(shù)據(jù)。
這條從QVGA大小的JPEG圖像數(shù)據(jù)向QCIF大小的MPEG圖像的編碼變換處理就結(jié)束。
<第十五實施例>
圖43是表示在第十五實施例中利用從1/16VGA的圖像顯示大小(橫向160像素、縱向120像素)變換為比其還大的QCIF的圖像顯示大小(橫向176像素、縱向144像素)的服務(wù)器的編碼數(shù)據(jù)變換方式的處理過程的流程圖。
該第十五實施例中,預(yù)先在編碼方式變換前把圖像大小設(shè)為2倍、切出QCIF大小的圖像,這一點與第十一實施例不同。
在圖43的步驟S351中,通過JPEG圖像解碼QVGA大小的JPEG編碼數(shù)據(jù)來生成QVGA大小的圖像數(shù)據(jù)。
步驟S352中進行圖像的插值處理,在縱橫方向上都將圖像數(shù)據(jù)放大為2倍(只要是比QCIF的圖像顯示大小還大那樣的倍率都可以),生成QVGA大小的圖像數(shù)據(jù)。
在步驟S353中,如圖36所示那樣,通過從按QVGA大小所生成的圖像數(shù)據(jù)沿著任意MCU邊界線(更一般地說是部分塊邊界線)切出QCIF大小的圖像范圍,就得到QCIF大小的圖像數(shù)據(jù)。
步驟S354中通過對QCIF大小的圖像數(shù)據(jù)進行MPEG4圖像編碼,生成QCIF大小的MPEG4編碼圖像數(shù)據(jù)。
這樣從1/16VGA大小的JPEG圖像數(shù)據(jù)向QCIF大小的MPEG圖像的編碼變換處理就結(jié)束。
如以上所說明那樣,根據(jù)第十~第十五實施例,在把編碼數(shù)據(jù)變換為不同數(shù)據(jù)形式時,通過想辦法使在變換前后塊邊界線盡可能不移動,就可以抑制由變換引起的塊失真的圖像質(zhì)量的惡化。
<其他實施例>
無需贅言,本發(fā)明的目的也是可以這樣達到的,通過將記錄了實現(xiàn)上述實施形式的功能的軟件程序代碼的存儲介質(zhì)提供給計算機系統(tǒng)或者裝置(例如,個人計算機),該系統(tǒng)或者裝置,使用CPU或者MPU讀出并執(zhí)行保存在存儲介質(zhì)中的程序代碼。
這種情況下,就成了從存儲介質(zhì)讀出的程序代碼自身將實現(xiàn)上述的實施形式的功能,存儲該程序代碼的存儲介質(zhì)就構(gòu)成了本發(fā)明。
另外,為了提供程序代碼,可以使用例如,軟盤、硬盤、光盤、磁光盤、CD-ROM、CD-R、磁帶、非易失性存儲卡和ROM等的存儲介質(zhì),或者LAN(局域網(wǎng))和WAN(廣域網(wǎng))等的計算機網(wǎng)絡(luò)。
另外無需贅言,不僅包含通過執(zhí)行計算機所讀出的程序代碼,上述的實施形式的功能得以實現(xiàn)的情況,也包含根據(jù)該程序代碼的指示,在計算機上運行的操作系統(tǒng)(0S)等進行實際處理的部分或者全部,通過該處理前面所說的實施形式的功能得以實現(xiàn)的情況。
進而無需贅言,也包含當從存儲介質(zhì)讀出的程序代碼,被寫入到插入計算機的功能擴展卡和/或連接到計算機的功能擴展單元上所具備的存儲器以后,根據(jù)該程序代碼的指示,該功能擴展卡和/或功能擴展單元上所具備的CPU等進行實際處理的部分或者全部,通過該處理前面所說的實施形式的功能得以實現(xiàn)的情況。
在本發(fā)明適用于上述存儲介質(zhì)的情況下,與先前說明了流程圖相對應(yīng)的程序代碼就保存在該存儲介質(zhì)中。
本發(fā)明并不限于上述實施形式,在不脫離本發(fā)明的精神和范圍內(nèi)可以進行各種變更和變形。因此,為了公開本發(fā)明的范圍,附加以下的權(quán)利要求項。
權(quán)利要求
1.一種圖像處理裝置,其特征在于,具有圖像信息接收裝置,從可向第一圖像顯示裝置分發(fā)圖像信息的攝影裝置接收通過攝影所取得的圖像信息;以及圖像信息分發(fā)裝置,把用上述圖像信息接收裝置接收的上述圖像信息,變換為針對與上述第一圖像顯示裝置不同種類的第二圖像顯示裝置的格式,并分發(fā)給上述第二圖像顯示裝置。
2.根據(jù)權(quán)利請求1所述的圖像處理裝置,其特征在于上述圖像信息分發(fā)裝置,把上述圖像信息以外的其他信息分發(fā)給上述第二圖像顯示裝置。
3.根據(jù)權(quán)利請求2所述的圖像處理裝置,其特征在于具有在上述圖像信息上重疊上述其他信息的圖像加工裝置;上述圖像信息分發(fā)裝置把由上述圖像加工裝置重疊了上述其他信息的上述圖像信息分發(fā)給上述第二圖像顯示裝置。
4.根據(jù)權(quán)利請求2所述的圖像處理裝置,其特征在于在控制上述攝影裝置的動作的期間將上述其他信息分發(fā)給上述第二圖像顯示裝置。
5.根據(jù)權(quán)利請求2所述的圖像處理裝置,其特征在于上述圖像信息分發(fā)裝置,在直到該圖像處理裝置連接到上述攝影裝置之前的期間,將上述其他信息分發(fā)給上述第二圖像顯示裝置。
6.根據(jù)權(quán)利請求1所述的圖像處理裝置,其特征在于還具有把對于上述控制信息的來自上述圖像裝置的應(yīng)答信息變換為針對上述第二圖像顯示裝置的語音數(shù)據(jù),將該語音數(shù)據(jù)發(fā)送給上述第二圖像顯示裝置的語音數(shù)據(jù)發(fā)送裝置。
7.根據(jù)權(quán)利請求1所述的圖像處理裝置,其特征在于還具有將依照保持各種信息的信息保持裝置控制上述攝影裝置的攝影動作用的控制信息所檢索到的上述其他信息,從上述信息保持裝置取得的第一信息取得裝置;上述圖像信息分發(fā)裝置將用上述第一信息取得裝置所取得的上述其他信息分發(fā)給上述第二圖像顯示裝置。
8.根據(jù)權(quán)利請求7所述的圖像處理裝置,其特征在于上述控制信息至少包含用于控制上述攝影裝置的攝影動作中的搖鏡頭和/或傾斜角度的信息。
9.根據(jù)權(quán)利請求7所述的圖像處理裝置,其特征在于上述控制信息至少包含用于控制上述攝影裝置的攝影動作中的縮放倍率的信息。
10.根據(jù)權(quán)利請求7所述的圖像處理裝置,其特征在于上述第一信息取得裝置,取得上述信息保持裝置依照當前時刻所檢索到的上述其他信息。
11.根據(jù)權(quán)利請求7所述的圖像處理裝置,其特征在于上述第一信息取得裝置。取得上述信息保持裝置依照上述攝影裝置所檢索到的上述其他信息。
12.根據(jù)權(quán)利請求2所述的圖像處理裝置,其特征在于具有將表示與上述攝影裝置的攝影動作相關(guān)的控制狀態(tài)的信息作為上述其他信息進行取得的第二信息取得裝置;上述圖像信息分發(fā)裝置,將用上述第二信息取得裝置所取得的上述其他信息分發(fā)給上述第二圖像顯示裝置。
13.一種圖像分發(fā)系統(tǒng),其特征在于,具有攝影裝置,可將通過攝影所取得的圖像信息分發(fā)到第一圖像顯示裝置;與上述第一圖像顯示裝置不同種類的第二圖像顯示裝置,請求由上述攝影裝置所攝影的上述圖像信息;以及圖像處理裝置,通過接受來自上述第二圖像顯示裝置的上述圖像信息的請求,從上述攝影裝置取得上述圖像信息,將上述圖像信息分發(fā)給上述第二圖像顯示裝置。
14.根據(jù)權(quán)利請求13所述的圖像分發(fā)系統(tǒng),其特征在于上述圖像處理裝置,把其他信息重疊在上述圖像信息上向上述第二圖像顯示裝置分發(fā)。
15.一種圖像分發(fā)系統(tǒng),其特征在于,具有攝影裝置,可將通過攝影所取得的圖像信息分發(fā)給第一圖像顯示裝置;與上述第一圖像顯示裝置不同種類的第二圖像顯示裝置,發(fā)送請求由上述攝影裝置所攝影的上述圖像信息的意思的語音數(shù)據(jù);以及圖像處理裝置,將來自上述第二圖像顯示裝置的上述語音數(shù)據(jù)變換為針對上述攝影裝置的控制命令,將上述控制命令發(fā)送到上述圖像裝置;上述圖像處理裝置,接收依照上述控制命令從上述攝影裝置發(fā)送的上述圖像信息,將上述圖像信息分發(fā)給上述第二圖像顯示裝置。
16.根據(jù)權(quán)利請求15所述的圖像分發(fā)系統(tǒng),其特征在于上述圖像處理裝置,將來自上述攝影裝置的對于上述控制命令的應(yīng)答信息變換為針對上述第二圖像顯示裝置的語音數(shù)據(jù),將該語音數(shù)據(jù)發(fā)送給上述第二圖像顯示裝置。
17.一種圖像處理方法,其特征在于從可向第一圖像顯示裝置分發(fā)通過攝影所取得的圖像信息的攝影裝置進行接收;把接收到的圖像信息分發(fā)給與上述第一圖像顯示裝置不同種類的第二圖像顯示裝置。
18.一種信息處理裝置可讀取的存儲介質(zhì),其特征在于存儲了信息處理裝置可執(zhí)行的程序,該程序的特征是具有用于實現(xiàn)權(quán)利請求17所述的圖像處理方法的程序代碼。
19.一種信息分發(fā)裝置,其特征在于,具有圖像數(shù)據(jù)接收裝置,從可發(fā)送圖像數(shù)據(jù)的多個圖像發(fā)送裝置接收上述圖像數(shù)據(jù);語音數(shù)據(jù)接收裝置,從可發(fā)送語音數(shù)據(jù)的多個語音發(fā)送裝置接收上述語音數(shù)據(jù);編碼裝置,有選擇地組合用上述圖像數(shù)據(jù)接收裝置所接收的上述圖像數(shù)據(jù)和用上述語音數(shù)據(jù)接收裝置所接收的上述語音數(shù)據(jù),并作為帶語音圖像數(shù)據(jù)進行編碼;以及分發(fā)裝置,將由上述編碼裝置所生成的上述帶語音圖像數(shù)據(jù)分發(fā)給接收裝置。
20.根據(jù)權(quán)利請求19所述的信息分發(fā)裝置,其特征在于還具有信息保持裝置,至少將預(yù)先決定的一個或多個條件,以及上述條件與各種語音數(shù)據(jù)的對應(yīng)作為信息進行保持。
21.根據(jù)權(quán)利請求20所述的信息分發(fā)裝置,其特征在于上述預(yù)先決定的一個或多個條件,包含與上述圖像發(fā)送裝置狀態(tài)相關(guān)的條件、與用戶個人信息相關(guān)的條件、與時刻相關(guān)的條件內(nèi)的至少一個。
22.根據(jù)權(quán)利請求20所述的信息分發(fā)裝置,其特征在于具有變更裝置,根據(jù)來自上述接收裝置的請求來變更用上述信息保持裝置所保持的信息的內(nèi)容。
23.根據(jù)權(quán)利請求19所述的信息分發(fā)裝置,其特征在于上述圖像數(shù)據(jù)接收裝置和上述語音數(shù)據(jù)接收裝置是從上述信息分發(fā)裝置獨立出來連接到網(wǎng)絡(luò)上的裝置。
24.一種信息分發(fā)系統(tǒng),具有可發(fā)送圖像數(shù)據(jù)的多個圖像發(fā)送裝置,可發(fā)送語音數(shù)據(jù)的多個語音發(fā)送裝置,分發(fā)信息的多個信息分發(fā)裝置以及接收從上述信息分發(fā)裝置分發(fā)的上述信息的接收裝置,所述信息分發(fā)系統(tǒng)的特征在于上述信息分發(fā)裝置具有,從上述圖像發(fā)送裝置接收上述圖像數(shù)據(jù)的圖像數(shù)據(jù)接收裝置;從上述語音發(fā)送裝置接收上述語音數(shù)據(jù)的語音數(shù)據(jù)接收裝置;有選擇地組合用上述圖像數(shù)據(jù)接收裝置所接收的上述圖像數(shù)據(jù)和用上述語音數(shù)據(jù)接收裝置所接收的上述語音數(shù)據(jù),并作為帶語音圖像數(shù)據(jù)進行編碼的編碼裝置;以及分發(fā)由上述編碼裝置所生成的上述帶語音圖像數(shù)據(jù)的分發(fā)裝置;上述接收裝置將由上述信息分發(fā)裝置的上述分發(fā)裝置所分發(fā)的上述帶語音圖像數(shù)據(jù)作為上述信息進行接收。
25.一種信息分發(fā)方法,其特征在于從可發(fā)送圖像數(shù)據(jù)的多個圖像發(fā)送裝置接收上述圖像數(shù)據(jù);從可發(fā)送語音數(shù)據(jù)的多個語音發(fā)送裝置接收上述語音數(shù)據(jù);有選擇地組合所接收的圖像數(shù)據(jù)和語音數(shù)據(jù)并作為帶語音圖像數(shù)據(jù)進行編碼;將所編碼的上述帶語音圖像數(shù)據(jù)分發(fā)給接收裝置。
26.一種信息處理裝置可讀取的存儲介質(zhì),其特征在于存儲了信息處理裝置可執(zhí)行的程序,該程序的特征是具有用于實現(xiàn)權(quán)利請求25所述的信息分發(fā)方法的程序代碼。
27.一種變換處理方法,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理方法的特征在于從上述第一大小的圖像數(shù)據(jù)沿著上述第一塊的邊界切出上述第二大小的圖像數(shù)據(jù);通過第二編碼方式對所切出的上述第二大小的圖像數(shù)據(jù)進行編碼。
28.根據(jù)權(quán)利請求27所述的變換處理方法,其特征在于進而在上述切出之前,通過與上述第一編碼方式對應(yīng)的解碼方式對上述第一大小的圖像數(shù)據(jù)進行解碼。
29.根據(jù)權(quán)利請求27所述的變換處理方法,其特征在于上述切出時,在通過上述第一編碼方式進行編碼的狀態(tài)下切出圖像數(shù)據(jù),上述編碼時,把用上述第一編碼方式所編碼的圖像數(shù)據(jù)變換為上述第二編碼方式編碼的圖像數(shù)據(jù)。
30.根據(jù)權(quán)利請求27所述的變換處理方法,其特征在于進而在上述第一大小比上述第二大小小時,通過插值處理把上述第一大小的圖像數(shù)據(jù)擴大n倍,上述切出時,從上述擴大了n倍的圖像數(shù)據(jù)沿著上述第一塊的邊界切出上述第二大小的圖像數(shù)據(jù)。
31.根據(jù)權(quán)利請求27所述的變換處理方法,其特征在于通過按每個塊單位比較過去幀的圖像數(shù)據(jù)和當前幀的圖像數(shù)據(jù)進行幀間預(yù)測;依照上述幀間預(yù)測,選擇是使用當前幀內(nèi)的圖像數(shù)據(jù)進行利用上述第二編碼方式的編碼,還是使用幀間的預(yù)測誤差信息進行利用上述第二編碼方式的編碼。
32.根據(jù)權(quán)利請求27所述的變換處理方法,其特征在于上述第一編碼方式是JPEG編碼方式,上述第二編碼方式是MPEG編碼方式。
33.一種變換處理方法,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理方式的特征在于在上述第一大小的圖像數(shù)據(jù)周圍,按上述第二塊單位插入預(yù)定的數(shù)據(jù)使得成為上述第二圖像大小,并生成上述第二大小的圖像數(shù)據(jù);通過第二編碼方式對所生成的上述第二大小的圖像數(shù)據(jù)進行編碼。
34.根據(jù)權(quán)利請求33所述的變換處理方法,其特征在于進而在上述插入之前,通過與上述第一編碼方式對應(yīng)的解碼方式對上述第一大小的圖像數(shù)據(jù)進行解碼。
35.根據(jù)權(quán)利請求33所述的變換處理方法,其特征在于進而在上述第一大小比上述第二大小大時,通過間疏處理把上述第一大小的圖像數(shù)據(jù)縮小1/n倍;對上述所縮小的圖像數(shù)據(jù)塊的邊界的像素進行平滑化處理;在上述圖像數(shù)據(jù)生成時,使用實施了上述平滑化處理的圖像數(shù)據(jù)。
36.根據(jù)權(quán)利請求33所述的變換處理方法,其特征在于上述切出時,在通過上述第一編碼方式進行編碼的狀態(tài)下切出圖像數(shù)據(jù),上述編碼時,把用上述第一編碼方式所編碼的圖像數(shù)據(jù)變換為上述第二編碼方式的圖像數(shù)據(jù)。
37.根據(jù)權(quán)利請求33所述的變換處理方法,其特征在于通過按每個塊單位比較過去幀的圖像數(shù)據(jù)和當前幀的圖像數(shù)據(jù)進行幀間預(yù)測;依照上述幀間預(yù)測,選擇是使用當前幀內(nèi)的圖像數(shù)據(jù)進行利用上述第二編碼方式的編碼,還是使用幀間的預(yù)測誤差信息進行利用上述第二編碼方式的編碼。
38.根據(jù)權(quán)利請求33所述的變換處理方法,其特征在于上述第一編碼方式是JPEG編碼方式,上述第二編碼方式是MPEG編碼方式。
39.一種變換處理方法,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理方法的特征在于將上述第一大小的圖像數(shù)據(jù)變換為上述第二編碼方式的圖像數(shù)據(jù);在所變換的上述第一大小的圖像數(shù)據(jù)的周圍,按上述第二塊單位插入通過上述第二編碼方式所編碼的預(yù)定的數(shù)據(jù)使得成為上述第二圖像大小。
40.根據(jù)權(quán)利請求39所述的變換處理方法,其特征在于上述第一編碼方式是JPEG編碼方式,上述第二編碼方式是MPEG編碼方式。41.一種變換處理裝置,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理裝置的特征在于,具有從上述第一大小的圖像數(shù)據(jù)沿著上述第一塊的邊界切出上述第二大小的圖像數(shù)據(jù)的切出裝置;以及通過第二編碼方式對所切出的上述第二大小的圖像數(shù)據(jù)進行編碼的編碼裝置。
42.一種變換處理裝置,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所變換處理裝置的特征在于,具有在上述第一大小的圖像數(shù)據(jù)周圍,按上述第二塊單位插入預(yù)定的數(shù)據(jù)使得成為上述第二圖像大小,并生成上述第二大小的圖像數(shù)據(jù)的生成裝置;以及通過第二編碼方式對所生成的上述第二大小的圖像數(shù)據(jù)進行編碼的編碼裝置。
43.一種變換處理裝置,將通過按第一塊單位進行分割編碼的第一編碼方式所編碼的第一大小的圖像數(shù)據(jù),變換為通過按第二塊單位進行分割編碼的第二編碼方式所編碼的第二大小的圖像數(shù)據(jù),所述變換處理裝置的特征在于,具有將上述第一大小的圖像數(shù)據(jù)變換為上述第二編碼方式的圖像數(shù)據(jù)的變換裝置;以及在所變換的上述第一大小的圖像數(shù)據(jù)的周圍,按上述第二塊單位插入通過上述第二編碼方式所編碼的預(yù)定的數(shù)據(jù)使得成為上述第二圖像大小的插入裝置。
44.一種信息處理裝置可讀取的存儲介質(zhì),其特征在于存儲了信息處理裝置可執(zhí)行的程序,該程序的特征是具有用于實現(xiàn)權(quán)利請求27所述的變換處理方法的程序代碼。
45.一種信息處理裝置可讀取的存儲介質(zhì),其特征在于存儲了信息處理裝置可執(zhí)行的程序,該程序的特征是具有用于實現(xiàn)權(quán)利請求33所述的變換處理方法的程序代碼。
46.一種信息處理裝置可讀取的存儲介質(zhì),其特征在于存儲了信息處理裝置可執(zhí)行的程序,該程序的特征是具有用于實現(xiàn)權(quán)利請求39所述的變換處理方法的程序代碼。
全文摘要
提供一種圖像處理裝置、圖像分發(fā)系統(tǒng)、信息分發(fā)裝置、信息分發(fā)方法以及變換裝置。變換裝置連接到將拍攝取得的圖像信息分發(fā)給顯示操作終端的攝像機服務(wù)器,從攝像機服務(wù)器接收圖像信息,將接收到的上述圖像信息變換為針對便攜顯示終端的格式,并分發(fā)給便攜顯示終端。
文檔編號H04N7/18GK1450808SQ0312148
公開日2003年10月22日 申請日期2003年3月28日 優(yōu)先權(quán)日2002年3月29日
發(fā)明者河合智明, 飯塚義夫, 大矢崇 申請人:佳能株式會社