亚洲成年人黄色一级片,日本香港三级亚洲三级,黄色成人小视频,国产青草视频,国产一区二区久久精品,91在线免费公开视频,成年轻人网站色直接看

圖像處理裝置和圖像處理方法

文檔序號:1291685閱讀:189來源:國知局
圖像處理裝置和圖像處理方法
【專利摘要】提供能夠利用過去實(shí)施的膠囊型內(nèi)窺鏡檢查的檢查結(jié)果進(jìn)行觀察的圖像處理裝置等。圖像處理裝置(5)具有:圖像提取部(54c),其從通過本次檢查而得到的本次圖像群和通過過去檢查而得到的過去圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第2特征圖像;攝像時(shí)間取得部(54d),其取得與從本次圖像群中提取出的第1和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第1量、以及與從過去圖像群中提取出的第1和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第2量;比較部(54e),其對第1量和第2量進(jìn)行比較;以及顯示控制部(55),其在第1量與第2量之差為規(guī)定的基準(zhǔn)值以上的情況下,對本次圖像群進(jìn)行基于比較部(54e)的比較結(jié)果的顯示控制。
【專利說明】圖像處理裝置和圖像處理方法

【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及對由膠囊型內(nèi)窺鏡取得的圖像進(jìn)行處理的圖像處理裝置和圖像處理 方法,其中,該膠囊型內(nèi)窺鏡被導(dǎo)入到被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像。

【背景技術(shù)】
[0002] 近年來,在內(nèi)窺鏡的領(lǐng)域中,公知有使用導(dǎo)入到患者等被檢體內(nèi)并對被檢體內(nèi)進(jìn) 行攝像的膠囊型內(nèi)窺鏡的檢查。膠囊型內(nèi)窺鏡是在形成為能夠?qū)氲奖粰z體的消化道內(nèi)的 大小的膠囊形狀的殼體內(nèi)內(nèi)置攝像功能和無線通信功能等的裝置,將通過對被檢體內(nèi)進(jìn)行 攝像而生成的圖像數(shù)據(jù)依次無線發(fā)送到被檢體外。從膠囊型內(nèi)窺鏡無線發(fā)送的一連串圖像 數(shù)據(jù)暫時(shí)蓄積在設(shè)于被檢體外的接收裝置中,從接收裝置轉(zhuǎn)送(下載)到工作站等圖像處 理裝置,在圖像處理裝置中實(shí)施各種圖像處理。由此,生成拍攝到了被檢體內(nèi)的臟器等的一 連串圖像。
[0003] 利用虛擬動態(tài)圖像或靜態(tài)圖像一覽等形式在畫面中顯示這些圖像。醫(yī)療從事人員 (醫(yī)師)觀察畫面中顯示的圖像,通過選出存在異常的圖像,進(jìn)行被檢體的診斷。
[0004] 這里,使用膠囊型內(nèi)窺鏡的1次檢查大約為8小時(shí)以上,并且,在該期間內(nèi)取得的 圖像大約為6萬張以上。因此,觀察全部這些圖像非常花費(fèi)時(shí)間,并且需要集中力。因此, 在圖像處理裝置中,準(zhǔn)備自動提取例如紅色成分較多的圖像那樣醫(yī)學(xué)上認(rèn)為存在異常的圖 像的異常部提取功能,以輔助觀察作業(yè)。關(guān)于異常部提取功能,一般將具有收集醫(yī)療從事人 員判斷為醫(yī)學(xué)上存在異常的圖像、并提取具有與這些圖像相同的特征量的圖像的算法的軟 件組入工作站等硬件中。
[0005] 作為與通過檢查而得到的圖像的顯示相關(guān)聯(lián)的技術(shù),例如在專利文獻(xiàn)1中公開了 如下的醫(yī)療圖像診斷裝置:在同一畫面中顯示CT裝置、MR裝置、超聲波診斷裝置等醫(yī)療診 斷裝置中實(shí)時(shí)拍攝的診斷圖像和過去拍攝的診斷圖像。
[0006] 現(xiàn)有技術(shù)文獻(xiàn)
[0007] 專利文獻(xiàn)
[0008] 專利文獻(xiàn)1 :日本特開2005-288043號公報(bào)


【發(fā)明內(nèi)容】

[0009] 發(fā)明要解決的課題
[0010] 但是,當(dāng)使用膠囊型內(nèi)窺鏡進(jìn)行檢查時(shí),通常,僅對當(dāng)時(shí)取得的圖像進(jìn)行觀察作 業(yè)。即,僅確認(rèn)本次取得的圖像群中是否存在異常,不參照與過去實(shí)施的使用膠囊型內(nèi)窺鏡 的檢查和其他種類的檢查有關(guān)的信息。但是,認(rèn)為過去檢查中發(fā)現(xiàn)的異常部位殘留在本次 檢查中的可能性較高。因此,醫(yī)療從事人員希望參照與過去檢查有關(guān)的信息進(jìn)行經(jīng)過觀察。 [0011] 但是,與CT裝置等醫(yī)療診斷裝置不同,由于膠囊型內(nèi)窺鏡通過小腸等的蠕動運(yùn)動 在被檢體內(nèi)(消化道內(nèi))移動并進(jìn)行攝像,所以,被檢體內(nèi)的膠囊型內(nèi)窺鏡的位置控制自不 必說,確定位置也是很困難的。因此,即使在針對某個(gè)被檢體的檢查中發(fā)現(xiàn)一次異常部位, 在此后的檢查中確定相同異常部位的位置也是非常困難的。因此,以往,即使在對相同被檢 體進(jìn)行多次檢查以用于經(jīng)過觀察的情況下,也無法利用過去的檢查結(jié)果,醫(yī)療從事人員需 要與全新被檢體同樣地進(jìn)行檢查,需要以與初次檢查相同的集中力觀察全部圖像。
[0012] 本發(fā)明是鑒于上述情況而完成的,其目的在于,提供圖像處理裝置和圖像處理方 法,在對同一被檢體實(shí)施多次使用膠囊型內(nèi)窺鏡的檢查的情況下,能夠利用過去的檢查結(jié) 果進(jìn)行觀察。
[0013] 用于解決課題的手段
[0014] 為了解決上述課題并實(shí)現(xiàn)目的,本發(fā)明的圖像處理裝置對由膠囊型內(nèi)窺鏡取得的 被檢體內(nèi)的圖像進(jìn)行處理,該膠囊型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝 像,其特征在于,該圖像處理裝置具有:圖像提取部,其從通過所述膠囊型內(nèi)窺鏡依次對所 述被檢體內(nèi)進(jìn)行攝像而得到的第1圖像群、以及在所述第1圖像群之前依次對與所述被檢 體相同的被檢體內(nèi)進(jìn)行攝像而得到的第2圖像群中,分別提取表示第1特征的第1特征圖 像和表示第2特征的第2特征圖像;攝像時(shí)間取得部,其取得與從所述第1圖像群中提取出 的所述第1特征圖像和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第1量、以及與從所述第2 圖像群中提取出的所述第1特征圖像和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第2量;t匕 較部,其對所述第1量和所述第2量進(jìn)行比較;以及顯示控制部,其在所述第1量與所述第 2量之差為基準(zhǔn)值以上的情況下,對所述第1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯 示控制。
[0015] 并且,本發(fā)明的圖像處理裝置對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處 理,該膠囊型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像 處理裝置具有:圖像提取部,其從通過所述膠囊型內(nèi)窺鏡依次對所述被檢體內(nèi)進(jìn)行攝像而 得到的第1圖像群、以及在所述第1圖像群之前依次對與所述被檢體相同的被檢體內(nèi)進(jìn)行 攝像而得到的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第 2特征圖像;特征量取得部,其取得對從所述第1圖像群中提取出的所述第1特征圖像與所 述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予特征的第1特征量、以及對從所述第 2圖像群中提取出的所述第1特征圖像與所述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的移 動賦予特征的第2特征量;比較部,其對所述第1特征量和所述第2特征量進(jìn)行比較;以及 顯示控制部,其在所述第1特征量與所述第2特征量之差為基準(zhǔn)值以上的情況下,對所述第 1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
[0016] 在上述圖像處理裝置中,其特征在于,所述顯示控制部進(jìn)行如下控制:在所述差為 所述基準(zhǔn)值以上的情況下,顯示所述第1圖像群的所述第1特征圖像與所述第2特征圖像 之間的一連串圖像作為觀察注意圖像。
[0017] 上述圖像處理裝置的特征在于,所述圖像處理裝置還具有圖像處理部,在所述差 為規(guī)定基準(zhǔn)值以上的情況下,該圖像處理部對所述第1圖像群的所述第1特征圖像與所述 第2特征圖像之間的一連串圖像實(shí)施規(guī)定圖像處理。
[0018] 上述圖像處理裝置的特征在于,所述圖像處理裝置還具有:圖像數(shù)據(jù)取得部,其取 得與所述第1圖像群對應(yīng)的圖像數(shù)據(jù);存儲部,其存儲所述第2圖像群;以及圖像處理部, 其分別對所述第1圖像群和第2圖像群實(shí)施檢測所述第1特征和第2特征的圖像處理。 [0019] 上述圖像處理裝置的特征在于,所述圖像處理裝置還具有圖像選擇部,該圖像選 擇部根據(jù)從外部輸入的選擇信號,從所述第1圖像群中選擇圖像,所述圖像提取部從所述 第2圖像群中提取與由所述圖像選擇部選擇出的圖像對應(yīng)的圖像。
[0020] 在上述圖像處理裝置中,其特征在于,所述第1量和第2量是所述第1特征圖像的 攝像時(shí)刻與所述第2特征圖像的攝像時(shí)刻之間的時(shí)間。
[0021] 在上述圖像處理裝置中,其特征在于,所述第1量和第2量是在所述第1特征圖像 的攝像時(shí)刻與所述第2特征圖像的攝像時(shí)刻之間由所述膠囊型內(nèi)窺鏡進(jìn)行攝像而得到的 圖像的張數(shù)。
[0022] 在上述圖像處理裝置中,其特征在于,所述第1特征量和第2特征量是表示所述第 1特征圖像與所述第2特征圖像之間的一連串圖像的平均顏色的參數(shù)的統(tǒng)計(jì)值、或表示該 平均顏色的變化的參數(shù)。
[0023] 在上述圖像處理裝置中,其特征在于,所述第1特征量和第2特征量是表示所述第 1特征圖像與所述第2特征圖像之間的一連串圖像中的各個(gè)圖像中有無特定形狀的參數(shù)的 統(tǒng)計(jì)值。
[0024] 在上述圖像處理裝置中,其特征在于,所述第1特征量和第2特征量是從所述第1 特征圖像與所述第2特征圖像之間的一連串圖像中檢測到的病變的數(shù)量。
[0025] 在上述圖像處理裝置中,其特征在于,所述第1特征量和第2特征量是表示所述第 1特征圖像的攝像時(shí)刻與所述第2特征圖像的攝像時(shí)刻之間的所述膠囊型內(nèi)窺鏡的運(yùn)動的 參數(shù)。
[0026] 在上述圖像處理裝置中,其特征在于,表示所述膠囊型內(nèi)窺鏡的運(yùn)動的參數(shù)是所 述膠囊型內(nèi)窺鏡的移動距離、所述膠囊型內(nèi)窺鏡停止的次數(shù)、所述膠囊型內(nèi)窺鏡停止的時(shí) 間、所述膠囊型內(nèi)窺鏡的最大移動速度和所述膠囊型內(nèi)窺鏡的旋轉(zhuǎn)次數(shù)中的任意一方。
[0027] 本發(fā)明的圖像處理方法對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠 囊型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理方 法包括以下步驟:圖像提取步驟,從通過所述膠囊型內(nèi)窺鏡依次對所述被檢體內(nèi)進(jìn)行攝像 而得到的第1圖像群、以及在所述第1圖像群之前依次對與所述被檢體相同的被檢體內(nèi)進(jìn) 行攝像而得到的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的 第2特征圖像;攝像時(shí)間取得步驟,取得與從所述第1圖像群中提取出的所述第1特征圖像 和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第1量、以及與從所述第2圖像群中提取出的所 述第1特征圖像和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第2量;比較步驟,對所述第1量 和所述第2量進(jìn)行比較;以及顯示控制步驟,在所述第1量與所述第2量之差為基準(zhǔn)值以上 的情況下,對所述第1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
[0028] 本發(fā)明的圖像處理方法對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠 囊型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理方 法包括以下步驟:圖像提取步驟,從通過所述膠囊型內(nèi)窺鏡依次對所述被檢體內(nèi)進(jìn)行攝像 而得到的第1圖像群、以及在所述第1圖像群之前依次對與所述被檢體相同的被檢體內(nèi)進(jìn) 行攝像而得到的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的 第2特征圖像;特征量取得步驟,取得對從所述第1圖像群中提取出的所述第1特征圖像與 所述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予特征的第1特征量、以及對從所述 第2圖像群中提取出的所述第1特征圖像與所述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的 移動賦予特征的第2特征量;比較步驟,對所述第1特征量和所述第2特征量進(jìn)行比較;以 及顯示控制步驟,在所述第1特征量與所述第2特征量之差為基準(zhǔn)值以上的情況下,對所述 第1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
[0029] 發(fā)明效果
[0030] 根據(jù)本發(fā)明,對從本次檢查的圖像群中取得的攝像時(shí)間或特征量和從過去檢查的 圖像群中取得的攝像時(shí)間或特征量進(jìn)行比較,在兩者之差為基準(zhǔn)值以上的情況下,對本次 檢查的圖像群進(jìn)行基于比較結(jié)果的顯示控制,所以,能夠利用過去的檢查結(jié)果進(jìn)行觀察。由 此,能夠提高異常部位的發(fā)現(xiàn)效率,并且能夠縮短觀察時(shí)間。

【專利附圖】

【附圖說明】
[0031] 圖1是示出包含本發(fā)明的實(shí)施方式1的圖像處理裝置的膠囊型內(nèi)窺鏡系統(tǒng)的概略 結(jié)構(gòu)的示意圖。
[0032] 圖2是示出圖1所示的膠囊型內(nèi)窺鏡和接收裝置的概略結(jié)構(gòu)的圖。
[0033] 圖3是示出圖1所示的圖像處理裝置的概略結(jié)構(gòu)的框圖。
[0034] 圖4是示出圖3所示的圖像處理裝置的動作的流程圖。
[0035] 圖5是用于說明圖3所示的圖像處理裝置的動作的示意圖。
[0036] 圖6是示出圖1所示的顯示裝置中顯示的觀察畫面的一例的示意圖。
[0037] 圖7是示出本發(fā)明的實(shí)施方式1的變形例1-4中的觀察畫面的顯示例的示意圖。
[0038] 圖8是示出本發(fā)明的實(shí)施方式1的變形例1-5中的觀察畫面的顯示例的示意圖。
[0039] 圖9是示出本發(fā)明的實(shí)施方式1的變形例1-6中的觀察畫面的顯示例的示意圖。
[0040] 圖10是示出本發(fā)明的實(shí)施方式1的變形例1-7中的觀察畫面的顯示例的示意圖。
[0041] 圖11是示出本發(fā)明的實(shí)施方式1的變形例1-8中的觀察畫面的顯示例的示意圖。
[0042] 圖12是示出本發(fā)明的實(shí)施方式1的變形例1-8中的觀察畫面的另一個(gè)顯示例的 示意圖。
[0043] 圖13是示出本發(fā)明的實(shí)施方式2的圖像處理裝置的概略結(jié)構(gòu)的框圖。
[0044] 圖14是示出圖13所示的圖像處理裝置的動作的流程圖。
[0045] 圖15是示出本發(fā)明的實(shí)施方式3的圖像處理裝置的概略結(jié)構(gòu)的框圖。
[0046] 圖16是示出圖15所示的圖像處理裝置的動作的流程圖。
[0047] 圖17是示出本發(fā)明的實(shí)施方式1?3的變形例4中的觀察畫面的顯示例的示意 圖。

【具體實(shí)施方式】
[0048] 下面,參照附圖對本發(fā)明的實(shí)施方式的圖像處理裝置和圖像處理方法進(jìn)行說明。 另外,本發(fā)明不由這些實(shí)施方式限定。并且,在各附圖的記載中,對相同部分標(biāo)注相同標(biāo)號 進(jìn)行表示。
[0049] (實(shí)施方式1)
[0050] 圖1是示出包含本發(fā)明的實(shí)施方式1的圖像處理裝置的膠囊型內(nèi)窺鏡系統(tǒng)的概略 結(jié)構(gòu)的示意圖。圖1所示的膠囊型內(nèi)窺鏡系統(tǒng)1具有:膠囊型內(nèi)窺鏡2,其被導(dǎo)入到被檢體 10內(nèi),通過對該被檢體10內(nèi)進(jìn)行攝像而生成圖像數(shù)據(jù),將該圖像數(shù)據(jù)重疊在無線信號中進(jìn) 行發(fā)送;接收裝置3,其經(jīng)由佩戴在被檢體10上的接收天線單元4接收從膠囊型內(nèi)窺鏡2發(fā) 送的無線信號;以及圖像處理裝置5,其從接收裝置3取得圖像數(shù)據(jù)并實(shí)施規(guī)定圖像處理。
[0051] 圖2是示出膠囊型內(nèi)窺鏡2和接收裝置3的概略結(jié)構(gòu)的框圖。
[0052] 膠囊型內(nèi)窺鏡2是在被檢體10能夠咽下的大小的膠囊形狀的殼體中內(nèi)置了攝像 元件等各種部件的裝置,該膠囊型內(nèi)窺鏡2具有對被檢體10內(nèi)進(jìn)行攝像的攝像部21、對被 檢體10內(nèi)進(jìn)行照明的照明部22、信號處理部23、作為膠囊型內(nèi)窺鏡2的姿勢檢測單元的加 速度傳感器24、存儲器25、發(fā)送部26和天線27、電池28。
[0053] 攝像部21例如包括根據(jù)受光面上成像的光學(xué)像生成表示被檢體內(nèi)的攝像信號并 進(jìn)行輸出的CCD或CMOS等攝像元件、以及配設(shè)在該攝像元件的受光面?zhèn)鹊奈镧R等光學(xué)系 統(tǒng)。
[0054] 照明部22由在攝像時(shí)朝向被檢體10內(nèi)放射光的LED (Light Emitting Diode :發(fā) 光二極管)等實(shí)現(xiàn)。
[0055] 膠囊型內(nèi)窺鏡2內(nèi)置有電路基板(未圖示),該電路基板形成有分別對這些攝像部 21和照明部22進(jìn)行驅(qū)動的驅(qū)動電路等,攝像部21和照明部22以使視野從膠囊型內(nèi)窺鏡2 的一端部朝向外側(cè)的狀態(tài)固定在該電路基板上。
[0056] 信號處理部23對膠囊型內(nèi)窺鏡2內(nèi)的各部進(jìn)行控制,并且,對從攝像部21輸出的 攝像信號進(jìn)行A/D轉(zhuǎn)換并生成數(shù)字圖像數(shù)據(jù),進(jìn)而實(shí)施規(guī)定的信號處理。
[0057] 加速度傳感器24例如配設(shè)在膠囊型內(nèi)窺鏡2的殼體的中央部附近,檢測對膠囊型 內(nèi)窺鏡2施加的3軸方向的加速度并輸出檢測信號。與此時(shí)生成的圖像數(shù)據(jù)相關(guān)聯(lián)地存儲 所輸出的檢測信號。
[0058] 存儲器25暫時(shí)存儲由信號處理部23執(zhí)行的各種動作、在信號處理部23中實(shí)施了 信號處理后的圖像數(shù)據(jù)。
[0059] 發(fā)送部26和天線27將存儲器25中存儲的圖像數(shù)據(jù)與關(guān)聯(lián)信息一起重疊在無線 信號中發(fā)送到外部。
[0060] 電池28對膠囊型內(nèi)窺鏡2內(nèi)的各部供給電力。另外,設(shè)電池28包括對從按鈕電 池等一次電池或二次電池供給的電力進(jìn)行升壓等的電源電路。
[0061] 膠囊型內(nèi)窺鏡2在被被檢體10咽下后,通過臟器的蠕動運(yùn)動等在被檢體10的消 化道內(nèi)移動,并以規(guī)定的時(shí)間間隔(例如0.5秒間隔)依次對活體部位(食道、胃、小腸和 大腸等)進(jìn)行攝像。然后,將通過該攝像動作而生成的圖像數(shù)據(jù)和關(guān)聯(lián)信息依次無線發(fā)送 到接收裝置3。另外,在關(guān)聯(lián)信息中包含有為了識別膠囊型內(nèi)窺鏡2的個(gè)體而被分配的識別 信息(例如序列號)等。
[0062] 接收裝置3經(jīng)由具有多個(gè)(圖1中為8個(gè))接收天線4a?4h的接收天線單元4 接收從膠囊型內(nèi)窺鏡2無線發(fā)送的圖像數(shù)據(jù)和關(guān)聯(lián)信息。各接收天線4a?4h例如使用環(huán) 形天線實(shí)現(xiàn),配置在被檢體10的體外表面上的規(guī)定位置(例如與作為膠囊型內(nèi)窺鏡2的經(jīng) 過路徑的被檢體10內(nèi)的各臟器對應(yīng)的位置)。
[0063] 如圖2所示,接收裝置3具有接收部31、信號處理部32、存儲器33、數(shù)據(jù)發(fā)送部34、 操作部35、顯示部36、控制部37、電池38。
[0064] 接收部31經(jīng)由接收天線4a?4h接收從膠囊型內(nèi)窺鏡2無線發(fā)送的圖像數(shù)據(jù)。
[0065] 信號處理部32對接收部31接收到的圖像數(shù)據(jù)實(shí)施規(guī)定信號處理。
[0066] 存儲器33存儲在信號處理部32中被實(shí)施了信號處理后的圖像數(shù)據(jù)及其關(guān)聯(lián)信 息。
[0067] 數(shù)據(jù)發(fā)送部34是能夠與USB或有線LAN、無線LAN等通信線路連接的接口,在控制 部37的控制下,將存儲器33中存儲的圖像數(shù)據(jù)和關(guān)聯(lián)信息發(fā)送到圖像處理裝置5。
[0068] 在用戶輸入各種設(shè)定信息等時(shí)使用操作部35。
[0069] 顯示部36顯示與檢查有關(guān)的登記信息(檢查信息、患者信息等)以及用戶輸入的 各種設(shè)定信息等。
[0070] 控制部37對接收裝置3內(nèi)的這些各部的動作進(jìn)行控制。
[0071] 電池38對接收裝置3內(nèi)的各部供給電力。
[0072] 在通過膠囊型內(nèi)窺鏡2進(jìn)行攝像的期間內(nèi)(例如膠囊型內(nèi)窺鏡2被被檢體10咽 下后經(jīng)過消化道內(nèi)到排出之前的期間內(nèi)),接收裝置3被佩戴在被檢體10上進(jìn)行攜帶。在 該期間內(nèi),接收裝置3還對經(jīng)由接收天線單元4接收到的圖像數(shù)據(jù)附加各接收天線4a?4h 中的接收強(qiáng)度信息和接收時(shí)刻信息等關(guān)聯(lián)信息,并將這些圖像數(shù)據(jù)和關(guān)聯(lián)信息存儲在存儲 器33中。在基于膠囊型內(nèi)窺鏡2的攝像結(jié)束后,從被檢體10上取下接收裝置3,然后與圖 像處理裝置5連接,將存儲器33中存儲的圖像數(shù)據(jù)和關(guān)聯(lián)信息轉(zhuǎn)送到圖像處理裝置5。另 夕卜,在圖1中,通過在圖像處理裝置5的USB端口上連接托架3a并在該托架3a上放置接收 裝置3,來連接接收裝置3和圖像處理裝置5。
[0073] 例如使用具有CRT顯示器或液晶顯示器等顯示裝置5a的工作站構(gòu)成圖像處理裝 置5。圖像處理裝置5對經(jīng)由接收裝置3取得的被檢體10內(nèi)的圖像實(shí)施規(guī)定圖像處理,生 成規(guī)定形式的觀察畫面并顯示在顯示裝置5a中。
[0074] 圖3是示出圖像處理裝置5的概略結(jié)構(gòu)的框圖。如圖3所示,圖像處理裝置5具 有輸入部51、圖像數(shù)據(jù)取得部52、存儲部53、運(yùn)算部54、顯示控制部55、控制部56。
[0075] 輸入部51例如由鍵盤、鼠標(biāo)、觸摸面板、各種開關(guān)等輸入器件實(shí)現(xiàn)。輸入部51受 理與用戶操作對應(yīng)的信息和命令的輸入。
[0076] 圖像數(shù)據(jù)取得部52是能夠與USB或有線LAN、無線LAN等通信線路連接的接口,包 含USB端口和LAN端口等。在實(shí)施方式1中,圖像數(shù)據(jù)取得部52作為經(jīng)由與USB端口連接 的托架3a等外部設(shè)備或各種通信線路從接收裝置3取得圖像數(shù)據(jù)和關(guān)聯(lián)信息的數(shù)據(jù)取得 部發(fā)揮功能。
[0077] 存儲部53由閃存、狀11、1?01等半導(dǎo)體存儲器、冊0、1?)、〇)-1?、0¥0-1?等記錄介質(zhì)和 針對該記錄介質(zhì)進(jìn)行信息寫入和讀取的寫入讀取裝置等實(shí)現(xiàn)。存儲部53存儲用于使圖像 處理裝置5進(jìn)行動作并執(zhí)行各種功能的程序和各種信息、以及通過膠囊型內(nèi)窺鏡檢查而取 得的圖像數(shù)據(jù)等。更詳細(xì)地講,存儲部53包括存儲通過本次檢查而生成并從接收裝置3取 得的圖像數(shù)據(jù)和關(guān)聯(lián)信息的本次圖像數(shù)據(jù)存儲部53a、以及存儲在過去檢查中取得并實(shí)施 了后述圖像處理后的圖像數(shù)據(jù)的過去圖像數(shù)據(jù)存儲部53b。
[0078] 運(yùn)算部54由CPU等硬件實(shí)現(xiàn),通過讀入存儲部53中存儲的規(guī)定的程序,對由圖像 數(shù)據(jù)取得部52取得的圖像數(shù)據(jù)實(shí)施規(guī)定的圖像處理,生成用于以規(guī)定形式顯示圖像的圖 像數(shù)據(jù),并且執(zhí)行用于生成觀察畫面的規(guī)定的處理。
[0079] 更詳細(xì)地講,運(yùn)算部54具有圖像處理部54a、位置和姿勢估計(jì)部54b、圖像提取部 54c、攝像時(shí)間取得部54d、比較部54e。
[0080] 圖像處理部54a通過對本次圖像數(shù)據(jù)存儲部53a中存儲的圖像數(shù)據(jù)實(shí)施白平衡處 理、去馬賽克、顏色轉(zhuǎn)換、濃度轉(zhuǎn)換(伽馬轉(zhuǎn)換等)、平滑化(噪聲去除等)、清晰化(邊緣強(qiáng) 調(diào)等)等圖像處理(以下也稱為顯示用圖像處理),生成顯示用圖像數(shù)據(jù),并且實(shí)施平均顏 色計(jì)算處理、病變檢測處理、紅色檢測處理、臟器檢測處理、規(guī)定特征檢測處理等圖像處理。 另外,將這些圖像處理的結(jié)果即平均顏色、病變檢測結(jié)果、紅色檢測結(jié)果、臟器檢測結(jié)果、規(guī) 定特征檢測結(jié)果等信息(以下也稱為特征檢測信息)與圖像數(shù)據(jù)關(guān)聯(lián)起來,與圖像數(shù)據(jù)一 起存儲在存儲部53中。
[0081] 位置和姿勢估計(jì)部54b根據(jù)作為圖像數(shù)據(jù)的關(guān)聯(lián)信息而取得的接收強(qiáng)度信息、接 收時(shí)刻信息,估計(jì)膠囊型內(nèi)窺鏡2在圖像的攝像時(shí)刻所處的被檢體10內(nèi)的位置。并且,位 置的估計(jì)方法可以使用公知的各種方法。并且,位置和姿勢估計(jì)部54b根據(jù)作為圖像數(shù)據(jù) 的關(guān)聯(lián)信息而取得的加速度的檢測信號,估計(jì)膠囊型內(nèi)窺鏡2相對于膠囊型內(nèi)窺鏡2的行 進(jìn)方向的姿勢。將位置和姿勢的估計(jì)結(jié)果與圖像數(shù)據(jù)關(guān)聯(lián)起來存儲在存儲部53中。
[0082] 圖像提取部54c根據(jù)與本次圖像數(shù)據(jù)存儲部53a中存儲的圖像數(shù)據(jù)相關(guān)聯(lián)的特征 檢測信息,從與該圖像數(shù)據(jù)對應(yīng)的圖像群(以下稱為本次圖像群)中提取多個(gè)表示規(guī)定特 征的圖像(以下稱為特征圖像)。并且,圖像提取部54c根據(jù)與過去圖像數(shù)據(jù)存儲部53b中 存儲的圖像數(shù)據(jù)相關(guān)聯(lián)的特征檢測結(jié)果,從與該圖像數(shù)據(jù)對應(yīng)的圖像群(以下稱為過去圖 像群)中提取與從本次圖像群中提取出的特征圖像對應(yīng)的特征圖像。
[0083] 這里,由于膠囊型內(nèi)窺鏡2通過被檢體10的消化道的蠕動運(yùn)動而在該消化道內(nèi)移 動,所以,很難控制膠囊型內(nèi)窺鏡2的位置和姿勢,很少在本次檢查和過去檢查中得到相同 構(gòu)圖的圖像。并且,小腸不停進(jìn)行蠕動運(yùn)動,沒有固定形狀,所以,也很難確定膠囊型內(nèi)窺鏡 2的位置。
[0084] 但是,即使是消化道內(nèi),關(guān)于胃的入口那樣能夠利用顏色進(jìn)行識別的部位、幽門、 十二指腸球部、法特氏乳頭、淋巴集結(jié)、回盲瓣t >弁)等那樣具有特征性形狀的部 位、被檢體10特有的潰瘍或使用夾鉗的部位等,即使構(gòu)圖不同,也比較容易確定部位。并 且,雖然小腸進(jìn)行蠕動運(yùn)動,但例如位于右上腹部的部分不會運(yùn)動到左下腹部,而是停留在 某個(gè)范圍內(nèi)的位置變化,所以,上述特征性部位在本次檢查和過去檢查中應(yīng)該存在于大致 接近的位置。因此,如果是拍攝到上述例示的部位的圖像,則能夠在相互不同的檢查之間給 出對應(yīng)關(guān)系。因此,在實(shí)施方式1中,提取拍攝到上述部位的圖像作為界標(biāo)。具體而言,提 取以下例示的圖像。
[0085] (1)開始進(jìn)行攝像的部位的圖像
[0086] 是指圖像群的最初的圖像。
[0087] (2)胃的入口(與食道之間的邊界)的圖像
[0088] 食道的顏色平均為桃色系,與此相對,胃的顏色平均為紅色系,所以,例如能夠根 據(jù)圖像的平均顏色的變化來識別胃的入口的圖像。
[0089] (3)幽門圖像
[0090] 幽門是與十二指腸連接的胃的部分。這里,胃的圖像的平均顏色為紅色系,十二指 腸的圖像的平均顏色為黃色系,所以,例如能夠根據(jù)圖像的平均顏色的變化來識別拍攝到 幽門的圖像。
[0091] ⑷十二指腸球部圖像
[0092] 十二指腸球部是十二指腸的入口,呈球狀膨脹的形狀。例如能夠根據(jù)形狀來識別 圖像內(nèi)拍攝到的十二指腸球部。
[0093] (5)法特氏乳頭圖像
[0094] 法特氏乳頭是主膽管和主胰管在十二指腸匯合并開口的部分。例如能夠根據(jù)形狀 來識別圖像內(nèi)拍攝到的法特氏乳頭。
[0095] (6)淋巴集結(jié)圖像
[0096] 淋巴集結(jié)是絨毛不發(fā)達(dá)的區(qū)域呈拼湊狀零散存在的區(qū)域,根據(jù)有無淋巴集結(jié)而在 圖像中識別小腸(十二指腸、空腸、回腸)中的空腸和回腸。例如能夠根據(jù)形狀或紋理來識 別拍攝到淋巴集結(jié)的圖像。
[0097] (7)回盲瓣圖像
[0098] 回盲瓣是位于回腸與盲腸的邊界處的瓣,表示回腸的末端。例如能夠根據(jù)形狀來 識別拍攝到回盲瓣的圖像。
[0099] (8)潰瘍圖像
[0100] 例如能夠通過紅色檢測處理來提取拍攝到潰瘍的圖像。
[0101] (9)使用夾鉗的部位的圖像(夾鉗圖像)
[0102] 例如能夠通過將特定夾鉗形狀作為模板的匹配處理來提取拍攝到夾鉗的圖像。
[0103] 另外,要提取的圖像不限于上述(1)?(9),例如,也可以計(jì)算表示異常部位(不存 在絨毛的區(qū)域、絨毛隆起的區(qū)域、絨毛的形狀變化(肥大等))的參數(shù),提取該參數(shù)在規(guī)定范 圍內(nèi)的圖像作為特征圖像。
[0104] 攝像時(shí)間取得部54d取得從本次圖像群中提取出的多個(gè)特征圖像彼此的攝像時(shí) 刻的間隔(攝像時(shí)間)。并且,針對過去圖像群,攝像時(shí)間取得部54d也同樣取得所提取出 的特征圖像彼此的攝像時(shí)刻的間隔(攝像時(shí)間)。
[0105] 比較部54e對由攝像時(shí)間取得部54d從本次圖像群中取得的攝像時(shí)間和從過去圖 像群中取得的攝像時(shí)間進(jìn)行比較,判定兩者之差是否為規(guī)定基準(zhǔn)值以上,在兩者之差為規(guī) 定基準(zhǔn)值以上的情況下,對從本次圖像群中提取出的特征圖像及其之間的圖像附加規(guī)定標(biāo) 〇
[0106] 顯示控制部55進(jìn)行使顯示裝置5a以規(guī)定形式顯示包含本次圖像的觀察畫面的控 制。此時(shí),顯示控制部55根據(jù)比較部54e的比較結(jié)果,以喚起用戶注意的形式顯示附加了 上述規(guī)定標(biāo)志的圖像。
[0107] 控制部56由CPU等硬件實(shí)現(xiàn),通過讀入存儲部53中存儲的各種程序,根據(jù)經(jīng)由輸 入部51輸入的信號、圖像數(shù)據(jù)取得部52取得的圖像數(shù)據(jù)等,針對構(gòu)成圖像處理裝置5的各 部進(jìn)行指示和數(shù)據(jù)的轉(zhuǎn)送等,總括地控制圖像處理裝置5整體的動作。
[0108] 接著,對圖像處理裝置5的動作進(jìn)行說明。圖4是示出圖像處理裝置5的動作的 流程圖。并且,圖5是用于說明圖像處理裝置5的動作的示意圖。
[0109] 首先,在步驟S10中,圖像處理裝置5從接收裝置3取得通過本次進(jìn)行的膠囊型內(nèi) 窺鏡檢查而生成的圖像數(shù)據(jù)(本次圖像數(shù)據(jù)),暫時(shí)將其存儲在存儲部53中。
[0110] 在接下來的步驟S11中,圖像處理部54a從存儲部53取入本次圖像數(shù)據(jù)并實(shí)施 顯示用圖像處理,進(jìn)而,實(shí)施平均顏色計(jì)算處理、病變檢測處理、紅色檢測處理、臟器檢測處 理、規(guī)定特征檢測處理等圖像處理,生成特征檢測信息。并且,位置和姿勢估計(jì)部54b根據(jù) 圖像數(shù)據(jù)的關(guān)聯(lián)信息(接收強(qiáng)度信息、接收時(shí)刻信息、加速度的檢測信號),估計(jì)膠囊型內(nèi) 窺鏡2在各圖像的攝像時(shí)刻的位置和姿勢。
[0111] 在步驟S12中,圖像提取部54c從本次圖像群Ml、M2、…中提取2個(gè)以上的上述 (1)?(9)所例示的特征圖像。在實(shí)施方式1中,如圖5所例示的那樣,提取幽門圖像M(a)、 夾鉗圖像M(b)、法特氏乳頭圖像M(c)和回盲瓣圖像M(d)。
[0112] 在步驟S13中,攝像時(shí)間取得部54d取得從本次圖像群中提取出的特征圖像間的 攝像時(shí)間。具體而言,如圖5所示,計(jì)算幽門圖像M(a)和夾鉗圖像M(b)的攝像時(shí)刻的間 隔即攝像時(shí)間Λ T1、夾鉗圖像M(b)和法特氏乳頭圖像M(c)的攝像時(shí)刻的間隔即攝像時(shí)間 Λ T2、以及法特氏乳頭圖像M(c)和回盲瓣圖像M(d)的攝像時(shí)刻的間隔即攝像時(shí)間Λ T3。
[0113] 在接下來的步驟S14中,運(yùn)算部54從存儲部53中讀出過去檢查中取得的圖像數(shù) 據(jù)。另外,此時(shí),在還未對與過去圖像數(shù)據(jù)對應(yīng)的過去圖像群進(jìn)行規(guī)定特征檢測處理等的情 況下,圖像處理部54a也可以在該時(shí)刻執(zhí)行該處理,生成特征檢測信息。
[0114] 在接下來的步驟S15中,圖像提取部54c根據(jù)各圖像的特征檢測信息,從過去圖 像群中提取與從本次圖像群中提取出的特征圖像對應(yīng)的特征圖像。具體而言,如圖5所例 示的那樣,從過去圖像群ml、m2、…中提取幽門圖像m(a)、夾鉗圖像m(b)、法特氏乳頭圖像 m(c)和回盲瓣圖像m(d)。另外,如果不能從過去圖像群中檢測到與從本次圖像群M1、M2、··· 中提取出的特征圖像對應(yīng)的特征圖像,則也可以不進(jìn)行檢測。
[0115] 在步驟S16中,攝像時(shí)間取得部54d取得從過去圖像群中提取出的特征圖像間的 攝像時(shí)間。在圖5的情況下,計(jì)算幽門圖像m(a)與夾鉗圖像m(b)之間的攝像時(shí)間Atl、夾 鉗圖像m(b)與法特氏乳頭圖像m(c)之間的攝像時(shí)間At2、以及法特氏乳頭圖像m(c)與回 盲瓣圖像m(d)之間的攝像時(shí)間At3。
[0116] 接著,比較部54e按照本次圖像群和過去圖像群中相互對應(yīng)的攝像時(shí)間進(jìn)行步驟 S17和S18的處理。具體而言,在圖5的情況下,幽門圖像M(a)、m(a)與夾鉗圖像M(b)、m(b) 之間的攝像時(shí)間ΔΤ1、Atl、夾鉗圖像M(b)、m(b)與法特氏乳頭圖像M(c)、m(c)之間的攝 像時(shí)間ΛΤ2、At2、以及法特氏乳頭圖像M(c)、m(c)與回盲瓣圖像M(d)、m(d)之間的攝像 時(shí)間Λ T3、Λ t3成為分別對應(yīng)的攝像時(shí)間。
[0117] 在步驟S17中,比較部54e分別計(jì)算從本次圖像群取得的攝像時(shí)間與從過去圖像 群取得的攝像時(shí)間之差,判定該差是否為規(guī)定基準(zhǔn)值以上。作為基準(zhǔn)值,例如如"從過去圖 像群取得的攝像時(shí)間的30%"那樣確定為相對值即可。
[0118] 在攝像時(shí)間之差為規(guī)定的基準(zhǔn)值以上的情況下(步驟S17 :是),比較部54e對本 次檢查中在該攝像時(shí)間內(nèi)進(jìn)行攝像而得到的一連串圖像附加表示是觀察注意圖像的觀察 注意標(biāo)志(步驟S18)。例如在圖5的情況下,由于本次的攝像時(shí)間Λ T2遠(yuǎn)遠(yuǎn)長于過去的攝 像時(shí)間At2,所以,對本次圖像群內(nèi)的夾鉗圖像M(b)?法特氏乳頭圖像M(c)之間的圖像附 加觀察注意標(biāo)志。
[0119] 這里,附加觀察注意標(biāo)志的理由是,在本次圖像群和過去圖像群中共同的界標(biāo) (夾鉗圖像M(b)、m(b)和法特氏乳頭圖像M(c)、m(c))之間攝像時(shí)間大幅延長的情況下,認(rèn) 為可能在被檢體10內(nèi)的相應(yīng)部位新產(chǎn)生妨礙膠囊型內(nèi)窺鏡2移動的要因(腫瘤、形狀的變 化、殘?jiān)臏舻龋?br> [0120] 另一方面,在攝像時(shí)間之差小于規(guī)定的基準(zhǔn)值的情況下(步驟S17 :否),處理直 接轉(zhuǎn)移到下一個(gè)步驟。例如在圖5的情況下,由于在攝像時(shí)間Λ ΤΙ、Λ tl彼此和攝像時(shí)間 ΛΤ3、At3彼此中未發(fā)現(xiàn)較大差異,所以,不特意對幽門圖像M(a)?夾鉗圖像(b)、以及法 特氏乳頭圖像(c)?回盲瓣圖像M(d)的圖像附加標(biāo)志。
[0121] 在步驟S19中,顯示控制部55生成包含本次圖像群的觀察畫面,并顯示在顯示裝 置5a中。此時(shí),顯示控制部55進(jìn)行如下控制:以與其他圖像不同的形式顯示附加了觀察注 意標(biāo)志的圖像,以喚起醫(yī)療從事人員的注意并使其集中進(jìn)行觀察。
[0122] 圖6是示出顯示裝置5a中顯示的觀察畫面的一例的示意圖。圖6所示的觀察畫 面D1包括:顯示檢查ID和檢查日等檢查信息的檢查信息顯示欄dl ;顯示患者ID、患者姓 名、出生日期等患者信息的患者信息顯示欄d2 ;利用虛擬動態(tài)圖像依次顯示通過本次檢查 而取得的本次圖像Mmain的主顯示區(qū)域d3 ;用戶進(jìn)行主顯示區(qū)域d3中依次顯示的本次圖像 群的再現(xiàn)動作時(shí)使用的再現(xiàn)操作按鈕群d4 ;用戶輸入捕獲主顯示區(qū)域d3中正在顯示的圖 像的指示時(shí)使用的捕獲按鈕d5 ;用戶輸入將觀察畫面D1中顯示的本次圖像群的顯示形式 從虛擬動態(tài)圖像形式切換為靜態(tài)圖像一覽顯示形式的指示時(shí)使用的概觀(overview)按鈕 d6〇
[0123] 在主顯示區(qū)域d3的下方設(shè)有表示主顯示區(qū)域d3中正在顯示的本次圖像MMin的攝 像時(shí)刻的時(shí)間條d7和滑塊d8、以及一覽顯示所捕獲的圖像作為縮略圖的捕獲圖像顯示區(qū) 域d9。另外,為了表示所捕獲的各圖像Μ μρ的攝像時(shí)刻,也可以顯示連接各圖像Μμρ和與攝 像時(shí)刻對應(yīng)的時(shí)間條d7上的位置的線。
[0124] 在時(shí)間條d7上,在與附加了觀察注意標(biāo)志的圖像對應(yīng)的區(qū)域dlO、dll中進(jìn)行能 夠與其他區(qū)域進(jìn)行識別的顯示。具體而言,以與其他區(qū)域不同的顏色顯示該區(qū)域dl0、dll。 另外,在圖6中,利用有無陰影來表示顏色的不同?;蛘?,也可以閃爍顯示該區(qū)域dl0、dll。 用戶通過參照這樣的時(shí)間條d7,能夠掌握本次圖像群中的應(yīng)該注意觀察的圖像。
[0125] 在這種觀察畫面D1中,通過使用輸入部51(鼠標(biāo)等)對再現(xiàn)操作按鈕群d4進(jìn)行 指針操作,當(dāng)在圖像處理裝置5中輸入了指示開始再現(xiàn)本次圖像群的信號后,在主顯示區(qū) 域d3中以規(guī)定的顯示幀率依次切換顯示一連串本次圖像。
[0126] 在成為附加了觀察注意標(biāo)志的圖像的顯示順序后,顯示控制部55降低主顯示區(qū) 域d3中的顯示幀率,延長每1張圖像的顯示時(shí)間。由此,用戶能夠注意附加了觀察注意標(biāo) 志的圖像并集中進(jìn)行觀察。
[0127] 并且,在成為附加了觀察注意標(biāo)志的圖像的顯示順序時(shí),顯示控制部55也可以暫 時(shí)停止再現(xiàn)圖像、或在觀察畫面D1中顯示是觀察注意圖像的消息等,喚起用戶的注意。
[0128] 或者,顯示控制部55也可以通過以規(guī)定的速率間隔剔除地顯示未附加觀察注意 標(biāo)志的圖像來提高顯示速度,在成為附加了觀察注意標(biāo)志的圖像的顯示順序時(shí),停止間隔 剔除地顯示,依次顯示全部圖像。該情況下,用戶能夠集中觀察附加了觀察注意標(biāo)志的全部 圖像,簡單觀察除此之外的圖像,所以,能夠提高觀察效率。
[0129] 進(jìn)而,顯示控制部55也可以將附加了觀察注意標(biāo)志的圖像作為縮略圖而并列顯 示在捕獲圖像顯示區(qū)域d9中。該情況下,用戶能夠一目了然地掌握觀察注意圖像的全部內(nèi) 容。
[0130] 在這種觀察畫面D1的顯示后,圖像處理裝置5的動作結(jié)束。
[0131] 如以上說明的那樣,在實(shí)施方式1中,在本次圖像群與過去圖像群之間,對特征圖 像間的攝像時(shí)間大幅不同的區(qū)域的圖像進(jìn)行強(qiáng)調(diào),或者以用戶能夠識別的形式進(jìn)行顯示。 因此,用戶能夠集中觀察從過去檢查時(shí)到本次檢查時(shí)之間被檢體內(nèi)的可能產(chǎn)生某些變化的 部位的圖像并進(jìn)行診斷。因此,能夠提高異常部位的發(fā)現(xiàn)效率,并且能夠整體上縮短觀察時(shí) 間,能夠提高觀察效率。
[0132] (變形例 1-1)
[0133] 接著,對本發(fā)明的實(shí)施方式1的變形例1-1進(jìn)行說明。
[0134] 在上述實(shí)施方式1中,取得了攝像時(shí)間,來作為與從本次圖像群和過去圖像群中 分別提取出的多個(gè)特征圖像的攝像時(shí)刻間的時(shí)間對應(yīng)的量(參照步驟S13和S16)。但是, 代替攝像時(shí)間,也可以取得在某個(gè)特征圖像與另一個(gè)特征圖像之間進(jìn)行攝像而得到的一連 串圖像的張數(shù)。這里,由于在膠囊型內(nèi)窺鏡2中通常以固定攝像幀率進(jìn)行攝像,所以,攝像 時(shí)間和圖像張數(shù)成為對應(yīng)的量。該情況下,在圖4的步驟S17中,判定從本次圖像群取得的 某個(gè)區(qū)間的圖像張數(shù)與從過去圖像群取得的對應(yīng)區(qū)間的圖像張數(shù)之差是否為規(guī)定基準(zhǔn)值 以上。
[0135] (變形例 1-2)
[0136] 接著,對本發(fā)明的實(shí)施方式1的變形例1-2進(jìn)行說明。
[0137] 在觀察圖像D1中顯示附加了觀察注意標(biāo)志的圖像時(shí),也可以在進(jìn)一步對該圖像 實(shí)施規(guī)定圖像處理后進(jìn)行顯示。例如,也可以對附加了觀察注意標(biāo)志的圖像實(shí)施提取規(guī)定 的病變區(qū)域的圖像解析處理,在主顯示區(qū)域d3中顯示該圖像時(shí),一并顯示其解析結(jié)果。
[0138] 除此之外,也可以使用觀察注意標(biāo)志作為生成和顯示觀察畫面時(shí)的各種輔助功能 的參數(shù)。
[0139] (變形例 1-3)
[0140] 接著,對本發(fā)明的實(shí)施方式1的變形例1-3進(jìn)行說明。
[0141] 在圖6所示的觀察畫面D1中顯示表示時(shí)刻刻度的時(shí)間條d7,但是,代替時(shí)間條 d7,也可以顯示沿著時(shí)間軸排列本次圖像群中包含的各圖像的平均顏色的平均顏色條。該 情況下,用戶通過目視平均顏色條,能夠確認(rèn)與圖像的平均顏色對應(yīng)的臟器的種類的變化。 并且,該情況下,使與附加了觀察注意標(biāo)志的圖像對應(yīng)的平均顏色條上的區(qū)域進(jìn)行閃爍等, 喚起用戶的注意即可。
[0142] (變形例 1-4)
[0143] 接著,對本發(fā)明的實(shí)施方式1的變形例1-4進(jìn)行說明。
[0144] 圖7是示出變形例1-4中的觀察畫面的顯示例的示意圖。在圖6所示的觀察畫面 D1中僅顯示本次圖像群,但是,也可以與本次圖像群一起,在相同畫面中顯示過去圖像群。
[0145] 在圖7所示的觀察畫面D2中,相對于觀察畫面D1,還設(shè)有顯示過去圖像mraf作為 參照圖像的過去圖像顯示區(qū)域dl2。在該過去圖像顯示區(qū)域dl2中還設(shè)有用于滾動過去圖 像m Mf的滾動條dl3。另外,還可以在時(shí)間條d7上的與過去圖像顯示區(qū)域dl2中顯示的過 去圖像mMf的攝像時(shí)刻對應(yīng)的位置上顯示標(biāo)記dl4。
[0146] 作為過去圖像顯示區(qū)域dl2中顯示的過去圖像mMf,可以是對該過去圖像群進(jìn)行 觀察時(shí)捕獲的圖像,也可以是與本次圖像群中附加了觀察注意標(biāo)志的圖像對應(yīng)(即,步驟 S17中對攝像時(shí)間進(jìn)行了比較)的過去圖像群中的圖像,還可以是在過去進(jìn)行的觀察中判 斷為異常而附加了規(guī)定標(biāo)簽的圖像。
[0147] (變形例 1-5)
[0148] 接著,對本發(fā)明的實(shí)施方式1的變形例1-5進(jìn)行說明。
[0149] 圖8是示出變形例1-5中的觀察畫面的顯示例的示意圖。在圖8所示的觀察畫面 D3中,相對于圖6所示的觀察畫面D1,還設(shè)有顯示與主顯示區(qū)域d3中正在顯示的本次圖像 應(yīng)的過去圖像mMf的過去圖像顯示區(qū)域dl5。例如,通過按比例分配本次圖像群和過 去圖像群中對應(yīng)的特征圖像的攝像時(shí)刻的間隔(參照圖5),能夠估計(jì)與正在顯示的本次圖 像1咖對應(yīng)的過去圖像m#??梢栽诋嬅嬷惺冀K顯示這種過去圖像顯示區(qū)域dl5,也可以僅 在主顯示區(qū)域d3中顯示附加了觀察注意標(biāo)志的圖像的期間內(nèi)顯示這種過去圖像顯示區(qū)域 dl5。或者,可以通過用戶的操作來切換顯示/不顯示。
[0150] (變形例 1_6)
[0151] 接著,對本發(fā)明的實(shí)施方式1的變形例1-6進(jìn)行說明。
[0152] 圖9是示出變形例1-6中的觀察畫面的顯示例的示意圖。在圖9所示的觀察畫面 D4中,代替圖6所示的時(shí)間條d7和捕獲圖像顯示區(qū)域d9,設(shè)有根據(jù)本次圖像群生成的平均 顏色條dl6和根據(jù)過去圖像群生成的平均顏色條dl7。利用連結(jié)相互對應(yīng)的特征圖像的攝 像時(shí)刻彼此的線來連接這些平均顏色條dl6和平均顏色條dl7。另外,在圖9中,利用陰影 種類的不同來表示顏色的不同。
[0153] 這樣,通過以能夠?qū)Ρ鹊姆绞斤@示2個(gè)平均顏色條dl6、dl7,醫(yī)療從事人員能夠掌 握過去檢查時(shí)和本次檢查時(shí)在被檢體10中存在變化的部位。
[0154] (變形例 1_7)
[0155] 接著,對本發(fā)明的實(shí)施方式1的變形例1-7進(jìn)行說明。
[0156] 圖10是示出變形例1-7中的觀察畫面的顯示例的示意圖。圖10所示的觀察畫面 D5相對于圖6所示的觀察畫面D1,設(shè)有顯示膠囊型內(nèi)窺鏡2在被檢體10內(nèi)的軌跡的軌跡 顯示區(qū)域dl8。在軌跡顯示區(qū)域dl8中,通過點(diǎn)狀的標(biāo)記P表示由位置和姿勢估計(jì)部54b估 計(jì)出的各圖像的攝像時(shí)刻的膠囊型內(nèi)窺鏡2的位置。
[0157] 針對這種軌跡顯示區(qū)域dl8,在本變形例1-7中,以比表示其他圖像的位置的標(biāo)記 P更密的方式顯示表示附加了觀察注意標(biāo)志的圖像的位置的標(biāo)記P。由此,醫(yī)療從事人員能 夠更加準(zhǔn)確地掌握應(yīng)該集中觀察的圖像在被檢體10內(nèi)的位置。
[0158] (變形例 1_8)
[0159] 接著,對本發(fā)明的實(shí)施方式1的變形例1-8進(jìn)行說明。
[0160] 圖11是示出變形例1-8中的觀察畫面的顯示例的示意圖。在圖11所示的觀察畫 面D6中設(shè)有本次圖像一覽顯示區(qū)域d21和過去圖像一覽顯示區(qū)域d22。本次圖像一覽顯示 區(qū)域d21是以靜態(tài)圖像一覽顯示附加了觀察注意標(biāo)志的多個(gè)本次圖像%的區(qū)域。并且,過 去圖像一覽顯示區(qū)域d22是以靜態(tài)圖像一覽顯示與本次圖像一覽顯示區(qū)域d21中顯示的本 次圖像%對應(yīng)的多個(gè)過去圖像%的區(qū)域。
[0161] 在本次圖像一覽顯示區(qū)域d21中設(shè)有用于滾動該區(qū)域的滾動條d23。并且,在過去 圖像一覽顯示區(qū)域d22中設(shè)有用于滾動該區(qū)域的滾動條d24。這些滾動條d23、d24可以設(shè) 定為相互聯(lián)動進(jìn)行動作,也可以設(shè)定為分別獨(dú)立進(jìn)行動作。通過對概觀按鈕d6進(jìn)行指示操 作,例如能夠從圖6所示的觀察畫面D1轉(zhuǎn)移到這種觀察畫面D6。
[0162] 用戶通過這種觀察畫面D6對應(yīng)該集中觀察的本次圖像%和與它們對應(yīng)的過去圖 像mj進(jìn)行比較,能夠掌握癥狀的經(jīng)過等。
[0163] 這里,即使是本次檢查和過去檢查中對被檢體10內(nèi)的相同部位進(jìn)行攝像而得到 的圖像,如圖5所示的夾鉗圖像M(b)、m(b)?法特氏乳頭圖像M(c)、m(c)之間那樣,進(jìn)行攝 像而得到的圖像的張數(shù)有時(shí)也不同。這種情況下,如圖12所示,也可以將本次圖像群和過 去圖像群中相互對應(yīng)的特征圖像M s、ms和特征圖像Mt、mt作為界標(biāo),僅在過去圖像一覽顯示 區(qū)域d22中顯示與本次圖像一覽顯示區(qū)域d21中顯示的本次圖像M s?Mt對應(yīng)的范圍的過 去圖像ms?mt。
[0164] (實(shí)施方式2)
[0165] 接著,對本發(fā)明的實(shí)施方式2進(jìn)行說明。
[0166] 圖13是示出本發(fā)明的實(shí)施方式2的圖像處理裝置的概略結(jié)構(gòu)的框圖。如圖13所 示,實(shí)施方式2的圖像處理裝置5-2相對于圖3所示的圖像處理裝置5,具有代替攝像時(shí)間 取得部54d而具有特征量取得部54f的運(yùn)算部54-2。另外,特征量取得部54f以外的運(yùn)算 部54-2和圖像處理裝置5-2整體的結(jié)構(gòu)與圖3所示的結(jié)構(gòu)相同。
[0167] 特征量取得部54f取得在由圖像提取部54c從本次圖像群和過去圖像群中分別提 取出的多個(gè)特征圖像間對膠囊型內(nèi)窺鏡2的移動賦予特征的特征量。以下,將從本次圖像 群取得的特征量稱為本次特征量,將從過去圖像群取得的特征量稱為過去特征量。
[0168] 并且,在實(shí)施方式2中,比較部54e對由特征量取得部54f取得的本次特征量和過 去特征量進(jìn)行比較,判定兩者之差是否為規(guī)定基準(zhǔn)值以上。
[0169] 作為對膠囊型內(nèi)窺鏡2的移動賦予特征的特征量,如以下所例示的那樣,舉出表 示由圖像處理部54a計(jì)算出的圖像的特征量的變化的參數(shù)、表示由位置和姿勢估計(jì)部54b 計(jì)算出的膠囊型內(nèi)窺鏡2的位置的變化和運(yùn)動的參數(shù)等。另外,以下,第1特征圖像是從本 次圖像群(或過去圖像群)中提取出的任意的特征圖像,第2特征圖像是相對于第1特征 圖像按照攝像時(shí)刻順序下一個(gè)提取出的特征圖像。
[0170] (1)圖像的平均顏色的統(tǒng)計(jì)值
[0171] 計(jì)算第1特征圖像與第2特征圖像之間的各圖像的平均顏色,將表示該平均顏色 的參數(shù)的統(tǒng)計(jì)值(平均值、最頻值等)作為特征量。在作為本次特征量而計(jì)算出的統(tǒng)計(jì)值 與作為過去特征量而計(jì)算出的統(tǒng)計(jì)值之差較大的情況下,可以認(rèn)為在與這些圖像對應(yīng)的被 檢體10內(nèi)的部位,可能在過去檢查時(shí)與本次檢查時(shí)之間產(chǎn)生某些新的變化。
[0172] (2)表示顏色變化的參數(shù)
[0173] 計(jì)算第1特征圖像與第2特征圖像之間的各圖像的平均顏色,將表示這些平均顏 色的變化的參數(shù)作為特征量。例如,在相對于上一個(gè)圖像的平均顏色的變化(R成分或G成 分的變化)的比例為規(guī)定值以上的情況下,判斷為存在顏色變化的圖像,通過計(jì)入在第1特 征圖像與第2特征圖像之間存在顏色變化的圖像的張數(shù)(即存在顏色變化的次數(shù)),取得表 示平均顏色的變化的參數(shù)。這里,認(rèn)為在被檢體10內(nèi)顏色變化劇烈的區(qū)域中可能產(chǎn)生某些 異常。因此,在作為本次特征量而計(jì)算出的參數(shù)與作為過去特征量而計(jì)算出的參數(shù)之差較 大的情況下,可以認(rèn)為在與這些圖像對應(yīng)的被檢體10內(nèi)的部位,可能新產(chǎn)生某些異?;虍?常消失。
[0174] (3)表示有無特定形狀的參數(shù)的統(tǒng)計(jì)值
[0175] 針對第1特征圖像與第2特征圖像之間的各圖像進(jìn)行將特定形狀作為模板的匹配 處理,將由此取得的匹配度等參數(shù)的統(tǒng)計(jì)值(平均值、最頻值等)作為特征量。此時(shí),通過 將作為檢測對象的特定形狀設(shè)為表示特定病變的形狀,能夠掌握過去檢查時(shí)與本次檢查時(shí) 之間的該病變的進(jìn)展?fàn)顩r等。
[0176] (4)病變圖像(通過紅色檢測處理而提取出的圖像等)的數(shù)量
[0177] 將第1特征圖像與第2特征圖像之間提取出的病變圖像的數(shù)量作為特征量。在作 為本次特征量而計(jì)算出的病變圖像的數(shù)量與作為過去特征量而計(jì)算出的該病變圖像的數(shù) 量之差較大的情況下,可以認(rèn)為在過去檢查時(shí)與本次檢查時(shí)之間,該病變可能產(chǎn)生某些變 化。
[0178] (5)膠囊型內(nèi)窺鏡2的移動距離
[0179] 將第1特征圖像與第2特征圖像之間的膠囊型內(nèi)窺鏡2的移動距離作為特征量。 可以根據(jù)依次連接各圖像的攝像時(shí)刻的膠囊型內(nèi)窺鏡2的位置得到的軌跡來估計(jì)膠囊型 內(nèi)窺鏡2的移動距離。在作為本次特征量而估計(jì)出的移動距離與作為過去特征量而估計(jì)出 的移動距離之差較大的情況下,可以認(rèn)為與這些圖像對應(yīng)的被檢體10內(nèi)的部位(例如小 腸)的形狀(伸縮等)和位置可能產(chǎn)生某些變化。
[0180] (6)膠囊型內(nèi)窺鏡2停止的時(shí)間
[0181] 將在第1特征圖像與第2特征圖像之間膠囊型內(nèi)窺鏡2停止的時(shí)間作為特征量。 例如,可以根據(jù)相對于上一個(gè)圖像的類似度為規(guī)定值(例如99%)以上的圖像的張數(shù)來估 計(jì)膠囊型內(nèi)窺鏡2的停止時(shí)間。在作為本次特征量而取得的停止時(shí)間與作為上次特征量而 取得的停止時(shí)間之差較大的情況下,可以認(rèn)為在與這些圖像對應(yīng)的被檢體10內(nèi)的部位,可 能新產(chǎn)生妨礙膠囊型內(nèi)窺鏡2移動的要因(腫瘤、形狀的變化、殘?jiān)臏舻龋┗蛟撘蛳?失。
[0182] (7)膠囊型內(nèi)窺鏡2停止的次數(shù)
[0183] 將在第1特征圖像與第2特征圖像之間膠囊型內(nèi)窺鏡2停止的次數(shù)作為特征量。 例如,可以根據(jù)相對于上一個(gè)圖像的類似度為規(guī)定值(例如99%)以上、且類似度的變化率 為規(guī)定值以上的圖像的張數(shù)來判斷膠囊型內(nèi)窺鏡2停止的次數(shù)。在作為本次特征量而取得 的停止次數(shù)與作為上次特征量而取得的停止次數(shù)之差較大的情況下,可以認(rèn)為可能新產(chǎn)生 妨礙膠囊型內(nèi)窺鏡2移動的要因或該要因消失。
[0184] (8)膠囊型內(nèi)窺鏡2的最大移動速度
[0185] 將第1特征圖像與第2特征圖像之間的膠囊型內(nèi)窺鏡2的移動速度的最大值作為 特征量??梢愿鶕?jù)時(shí)間序列上相互相鄰的圖像的攝像時(shí)刻和膠囊型內(nèi)窺鏡2的位置變化來 估計(jì)膠囊型內(nèi)窺鏡2的移動速度。在作為本次特征量而取得的最大移動速度與作為過去特 征量而取得的最大移動速度之差較大的情況下,可以認(rèn)為可能產(chǎn)生改變膠囊型內(nèi)窺鏡2的 速度的要因。
[0186] (9)膠囊型內(nèi)窺鏡2的旋轉(zhuǎn)次數(shù)
[0187] 將在第1特征圖像與第2特征圖像之間膠囊型內(nèi)窺鏡2旋轉(zhuǎn)的次數(shù)作為特征量。 可以根據(jù)作為圖像數(shù)據(jù)的關(guān)聯(lián)信息的膠囊型內(nèi)窺鏡2的加速度的檢測信號來估計(jì)膠囊型 內(nèi)窺鏡2的旋轉(zhuǎn)。在作為本次特征量而取得的旋轉(zhuǎn)次數(shù)與作為過去特征量而取得的旋轉(zhuǎn)次 數(shù)之差較大的情況下(大幅增加的情況下),可以認(rèn)為可能產(chǎn)生妨礙膠囊型內(nèi)窺鏡2行進(jìn)并 使其在此處旋轉(zhuǎn)的某些要因。
[0188] 接著,對圖像處理裝置5-2的動作進(jìn)行說明。圖14是示出圖像處理裝置5-2的動 作的流程圖。如圖14所示,在實(shí)施方式2中,僅步驟S21、S22和S23中的動作與實(shí)施方式 1(參照圖4)不同。
[0189] 在接著步驟S12的步驟S21中,特征量取得部54f從本次圖像群中取得本次特征 量。
[0190] 并且,在接著步驟S15的步驟S22中,特征量取得部54f從過去圖像群中取得過去 特征量。
[0191] 然后,比較部54e按照本次圖像群和過去圖像群中相互對應(yīng)的圖像區(qū)間(第1特 征圖像和第2特征圖像的區(qū)間)進(jìn)行循環(huán)B的處理。即,在本次特征量與過去特征量之差 為規(guī)定基準(zhǔn)值以上的情況下(步驟S23 :是),在本次圖像群中對該圖像區(qū)間中包含的一連 串圖像附加觀察注意標(biāo)志(步驟S18)。
[0192] 此后的動作(步驟S19)與實(shí)施方式1相同。
[0193] 如以上說明的那樣,根據(jù)實(shí)施方式2,根據(jù)對本次圖像群和過去圖像群中對應(yīng)的特 征圖像的區(qū)間中計(jì)算出的膠囊型內(nèi)窺鏡2的移動賦予特征的量來確定觀察注意圖像,在觀 察畫面中顯示這些圖像以喚起用戶的注意。因此,用戶能夠集中觀察從過去檢查時(shí)到本次 檢查時(shí)之間可能產(chǎn)生某些變化的被檢體內(nèi)的區(qū)域的圖像,能夠提高觀察效率。
[0194] (實(shí)施方式3)
[0195] 接著,對本發(fā)明的實(shí)施方式3進(jìn)行說明。
[0196] 本實(shí)施方式3的特征在于,用戶能夠從本次圖像群內(nèi)選擇期望的圖像作為特征圖 像。
[0197] 圖15是示出本發(fā)明的實(shí)施方式3的圖像處理裝置的概略結(jié)構(gòu)的框圖。如圖15所 示,實(shí)施方式3的圖像處理裝置5-3相對于圖3所示的圖像處理裝置5具有運(yùn)算部54-3,該 運(yùn)算部54-3還具有圖像選擇部54g和標(biāo)簽附加部54h。另外,圖像選擇部54g和標(biāo)簽附加 部54h以外的運(yùn)算部54-3和圖像處理裝置5-3整體的結(jié)構(gòu)與圖3所示的結(jié)構(gòu)相同。
[0198] 圖像選擇部54g受理與使用輸入部51進(jìn)行的用戶操作對應(yīng)的選擇信號的輸入,從 本次圖像群內(nèi)選擇與該選擇信號對應(yīng)的圖像并附加選擇標(biāo)志。以下,將根據(jù)用戶操作而從 本次圖像群內(nèi)選擇出的圖像稱為標(biāo)記圖像。
[0199] 這里,例如根據(jù)針對圖6?圖12所例示的觀察畫面D1?D6的規(guī)定指針操作,來 進(jìn)行選擇信號的輸入。具體而言,可以是針對圖6所示的主顯示區(qū)域d3中正在顯示的圖像 M main的點(diǎn)擊操作,也可以是針對捕獲按鈕d5的操作,還可以是針對圖11所示的期望的本次 圖像吣的點(diǎn)擊操作。
[0200] 在從本次圖像群中選擇出標(biāo)記圖像時(shí),標(biāo)簽附加部54h對該標(biāo)記圖像附加表示標(biāo) 記圖像的特征的標(biāo)簽。作為標(biāo)簽的種類,例如除了胃的入口、幽門、十二指腸球部、法特氏乳 頭、淋巴集結(jié)、回盲瓣、使用夾鉗的部位等表示能夠識別為被檢體10內(nèi)的界標(biāo)的特征的標(biāo) 簽以外,還舉出腫瘤或出血等表示病變癥狀的標(biāo)簽。
[0201] 此時(shí),標(biāo)簽附加部54h也可以根據(jù)基于圖像處理部54a的圖像處理結(jié)果而生成的 特征檢測信息來附加上述標(biāo)簽?;蛘?,標(biāo)簽附加部54h也可以根據(jù)與使用輸入部51的用戶 操作對應(yīng)的輸入信號來附加標(biāo)簽。該情況下,標(biāo)簽附加部54h受理的輸入信號可以是從鍵 盤等輸入設(shè)備輸入的文本信息,也可以是根據(jù)使用輸入部51進(jìn)行的用戶操作而從規(guī)定的 多個(gè)標(biāo)簽候選內(nèi)選擇的選擇信號。在后者的情況下,在用戶進(jìn)行了標(biāo)記圖像的選擇操作時(shí), 在畫面中顯示與上述特征對應(yīng)的文本信息或標(biāo)記所示的圖標(biāo),用戶使用鼠標(biāo)等輸入設(shè)備進(jìn) 行選擇即可。
[0202] 并且,在實(shí)施方式3中,圖像提取部54c根據(jù)對標(biāo)記圖像附加的標(biāo)簽,從過去圖像 群中提取附加了相同標(biāo)簽的圖像。
[0203] 接著,對圖像處理裝置5-3的動作進(jìn)行說明。圖16是示出圖像處理裝置5-3的動 作的流程圖。如圖16所示,在實(shí)施方式3中,僅步驟S31和S32中的動作與實(shí)施方式1 (參 照圖4)不同。
[0204] 在接著步驟S11的步驟S31中,圖像選擇部54g根據(jù)用戶使用輸入部51進(jìn)行的標(biāo) 記操作,對標(biāo)記圖像附加選擇標(biāo)志和標(biāo)簽。
[0205] 在接下來的步驟S13中,攝像時(shí)間取得部54d將根據(jù)選擇標(biāo)志提取出的標(biāo)記圖像 作為特征圖像進(jìn)行處理,取得這些圖像間的攝像時(shí)間。
[0206] 并且,在接著步驟S14的步驟S32中,圖像提取部54c根據(jù)對標(biāo)記圖像附加的標(biāo) 簽,從過去圖像群中提取與標(biāo)記圖像對應(yīng)的過去圖像。
[0207] 此后的動作(步驟S16?)與實(shí)施方式1相同。
[0208] 如以上說明的那樣,根據(jù)實(shí)施方式3,與特征圖像同樣對本次圖像群中判斷為用戶 應(yīng)該關(guān)注的圖像進(jìn)行處理,在與過去圖像群之間進(jìn)行攝像時(shí)間的比較,所以,用戶能夠在自 身關(guān)注的圖像附近集中觀察可能從過去檢查時(shí)起產(chǎn)生某些變化的圖像。
[0209] 另外,在實(shí)施方式3中,代替由圖像提取部54c從本次圖像群中自動提取特征圖像 (參照圖4的步驟S12),而由用戶選擇標(biāo)記圖像,但是,也可以一起進(jìn)行圖像提取部54c對 特征圖像的自動提取以及用戶對標(biāo)記圖像的選擇。
[0210] 并且,也可以在圖13所示的運(yùn)算部54-2中追加設(shè)置上述圖像選擇部54g和標(biāo)簽 附加部54h。
[0211] (變形例 3-1)
[0212] 接著,對本發(fā)明的實(shí)施方式3的變形例3-1進(jìn)行說明。
[0213] 在上述實(shí)施方式3中,根據(jù)對標(biāo)記圖像附加的標(biāo)簽來提取與標(biāo)記圖像對應(yīng)的過去 圖像。但是,也可以通過以下例示的方法來提取過去圖像。
[0214] 作為一例,首先,圖像選擇部54g針對本次圖像群計(jì)算以檢查開始時(shí)刻為基準(zhǔn)的 標(biāo)記圖像的攝像時(shí)刻。然后,圖像選擇部54g從過去圖像群內(nèi)篩選與標(biāo)記圖像的攝像時(shí)刻 相同程度的攝像時(shí)刻的多個(gè)過去圖像。此時(shí),在過去圖像群中,也使用以檢查開始時(shí)刻為基 準(zhǔn)的攝像時(shí)刻。然后,從利用攝像時(shí)刻篩選出的多個(gè)圖像內(nèi)提取在過去觀察時(shí)附加了選擇 標(biāo)志的圖像。
[0215] 作為另一例,圖像選擇部54g也可以從如上所述利用攝像時(shí)刻篩選出的多個(gè)過去 圖像內(nèi)提取在過去觀察時(shí)捕獲的圖像。
[0216] 作為又一例,圖像選擇部54g也可以對利用攝像時(shí)刻篩選出的多個(gè)過去圖像進(jìn)行 類似圖像判別處理,提取與標(biāo)記圖像的類似度最高的過去圖像。
[0217] 或者,圖像選擇部54g也可以根據(jù)標(biāo)記圖像計(jì)算表示規(guī)定特征(異常部位等)的 參數(shù),參照該參數(shù)從利用攝像時(shí)刻篩選出的多個(gè)過去圖像內(nèi)提取與標(biāo)記圖像對應(yīng)的過去圖 像。
[0218] (變形例4)
[0219] 接著,對本發(fā)明的實(shí)施方式1?3的變形例4進(jìn)行說明。
[0220] 在本變形例4中,其特征在于,針對基于本次檢查結(jié)果的觀察畫面,顯示與過去檢 查有關(guān)的信息作為參照。另外,本變形例4可以應(yīng)用于圖3、圖13、圖15所示的圖像處理裝 置5、5-2、5-3中的任意一方。
[0221] 圖17是示出變形例4中的觀察畫面的示意圖。圖17所示的觀察畫面D7相對于 圖7所示的觀察畫面D2還設(shè)有上次結(jié)果按鈕d25和上次結(jié)果顯示區(qū)域d26。
[0222] 上次結(jié)果按鈕d25是用于供用戶輸入在觀察畫面D7中顯示過去檢查的結(jié)果的指 示的按鈕。根據(jù)針對該上次結(jié)果按鈕d25的指示操作,切換上次結(jié)果顯示區(qū)域d26的顯示 /不顯示。
[0223] 上次結(jié)果顯示區(qū)域d26是除了過去檢查的檢查日以外、還顯示根據(jù)由圖像選擇部 54g選擇出的過去圖像的攝像時(shí)刻而計(jì)算出的各種所需時(shí)間等的區(qū)域。具體而言,顯示膠 囊型內(nèi)窺鏡2被被檢體10咽下后到達(dá)胃為止所需要的時(shí)間(胃到達(dá)時(shí)間)、經(jīng)過胃為止所 需要的時(shí)間(胃經(jīng)過時(shí)間)、到達(dá)小腸為止所需要的時(shí)間(小腸到達(dá)時(shí)間)、經(jīng)過小腸為止 所需要的時(shí)間(小腸經(jīng)過時(shí)間)等信息。另外,以膠囊型內(nèi)窺鏡2的咽下時(shí)刻為基準(zhǔn)(檢 查開始時(shí)刻),根據(jù)各圖像的攝像時(shí)刻計(jì)算這些各時(shí)間,但是,例如,也可以以攝像開始時(shí)刻 (第1張圖像的攝像時(shí)刻)或幽門經(jīng)過時(shí)刻(胃到達(dá)時(shí)刻)為基準(zhǔn)來計(jì)算這些各時(shí)間。
[0224] 并且,在上次結(jié)果顯示區(qū)域d26中,除了上述列舉的時(shí)刻以外,還可以顯示捕獲圖 像數(shù)量、對捕獲圖像附加的標(biāo)簽、用戶輸入的觀察結(jié)果(所見)等。進(jìn)而,用戶可以通過設(shè) 定來定制這些各項(xiàng)目。
[0225] 如以上說明的那樣,根據(jù)變形例4,由于利用文字信息在畫面中顯示過去檢查中的 詳細(xì)信息,所以,用戶不用額外參照過去檢查的記錄,就能夠掌握過去檢查與本次檢查的差 異。
[0226] 另外,也可以僅在本次圖像群和過去圖像群中對應(yīng)的攝像時(shí)間(或特征量)存在 規(guī)定基準(zhǔn)值以上的差的情況下,在觀察畫面D7中顯示上次結(jié)果顯示區(qū)域d26。或者,也可以 是,能夠設(shè)定為,在觀察畫面D7中的任意一個(gè)位置始終顯示上次結(jié)果顯示區(qū)域d26。
[0227] (變形例5)
[0228] 接著,對本發(fā)明的實(shí)施方式1?3的變形例5進(jìn)行說明。
[0229] 在上述實(shí)施方式1中說明的觀察畫面D2?D4和D6中,根據(jù)正在顯示的本次圖像 提取過去圖像,并顯示在過去圖像顯示區(qū)域dl2、dl5、d22中。但是,也可以根據(jù)特定的過去 圖像在本次圖像群內(nèi)進(jìn)行檢索,從而提取主顯示區(qū)域d3或本次圖像一覽顯示區(qū)域d21中顯 示的本次圖像。
[0230] 例如,在存在針對過去圖像群的過去觀察時(shí)由用戶判斷為異常部位并附加了表示 存在異常部位的標(biāo)簽(以下稱為異常標(biāo)簽)的過去圖像的情況下,圖像提取部54c也可以 從本次圖像群中提取與附加了異常標(biāo)簽的過去圖像對應(yīng)的本次圖像。
[0231] 作為提取方法,例如可以使用如下方法:根據(jù)以檢查開始時(shí)刻(或幽門經(jīng)過時(shí)刻) 為基準(zhǔn)的過去圖像的攝像時(shí)刻,篩選出攝像時(shí)刻接近的本次圖像后,進(jìn)行類似圖像判別處 理,選擇與過去圖像的類似度最高的本次圖像。此時(shí),也可以不計(jì)算圖像整體的類似度,而 僅對存在異常的部位計(jì)算類似度?;蛘?,在根據(jù)攝像時(shí)刻篩選出本次圖像后,使用表示與過 去圖像相同的特征(例如異常部位等)的參數(shù)提取本次圖像。進(jìn)而,還可以根據(jù)過去圖像 的位置信息提取具有附近位置信息的本次圖像。
[0232] 顯示控制部55以喚起用戶注意的形式在觀察畫面中顯示這樣提取出的本次圖 像。例如,在主顯示區(qū)域d3中利用虛擬動態(tài)圖像顯示本次圖像的情況下,在成為與附加了 異常標(biāo)簽的過去圖像對應(yīng)的本次圖像的顯示定時(shí)時(shí),可以降低顯示幀率而慢慢進(jìn)行顯示。 并且,也可以生成僅一覽顯示與附加了異常標(biāo)簽的過去圖像對應(yīng)的本次圖像的畫面。進(jìn)而, 針對時(shí)間條d7 (例如參照圖6)和平均顏色條dl6 (參照圖9),也可以對與附加了異常標(biāo)簽 的過去圖像對應(yīng)地提取出的本次圖像的區(qū)域附加標(biāo)記,或進(jìn)行閃爍顯示等。
[0233] 根據(jù)以上說明的變形例5,由于以喚起用戶注意的形式顯示與過去附加了異常標(biāo) 簽的過去圖像對應(yīng)的本次圖像,所以,用戶能夠集中觀察過去判斷為異常的部位的經(jīng)過。
[0234] (變形例6)
[0235] 接著,對本發(fā)明的實(shí)施方式1?3的變形例6進(jìn)行說明。
[0236] 在上述實(shí)施方式1?3中,說明了過去檢查僅為1次的情況。但是,在過去對相同 被檢體10進(jìn)行了多次檢查的情況下,如下所述進(jìn)行過去圖像的提取和顯示即可。
[0237] 在希望診斷被檢體10最近的狀態(tài)的情況下,僅將通過多次過去檢查中的最新檢 查而取得的過去圖像群作為對象來提取圖像即可。
[0238] 另一方面,在希望診斷被檢體10的狀態(tài)的變化傾向的情況下,從多次的過去圖像 群中分別提取圖像即可。該情況下,例如可以在圖7所示的過去圖像顯示區(qū)域dl2、圖8和 圖9所示的過去圖像顯示區(qū)域dl5中依次切換顯示從各過去圖像群中提取出的過去圖像。 并且,也可以在1個(gè)畫面中設(shè)置多個(gè)過去圖像顯示區(qū)域dl5,以時(shí)間序列并列顯示與從本次 圖像群中提取出的特征圖像(或標(biāo)記圖像)對應(yīng)的多個(gè)過去圖像。該情況下,可以根據(jù)檢查 次數(shù)來設(shè)置圖9所示的平均顏色條dl6、dl7,按照時(shí)間序列順序并列進(jìn)行顯示。或者,也可 以根據(jù)檢查次數(shù)來設(shè)置圖10所示的軌跡顯示區(qū)域dl8,按照時(shí)間序列順序并列進(jìn)行顯示。
[0239] 并且,如變形例4中說明的那樣,在觀察畫面中設(shè)置上次結(jié)果顯示區(qū)域d26的情況 下,也可以顯示過去多次檢查的結(jié)果的平均值,還可以按照過去的每個(gè)檢查來設(shè)置上次結(jié) 果顯示區(qū)域d26,在1個(gè)觀察畫面中按照時(shí)間序列順序并列進(jìn)行顯示。
[0240] (變形例7)
[0241] 接著,對本發(fā)明的實(shí)施方式1?3的變形例7進(jìn)行說明。
[0242] 在上述實(shí)施方式1?3中,將過去圖像數(shù)據(jù)存儲在內(nèi)置于圖像處理裝置5、5-2、5-3 的存儲部53中,但是,也可以將過去圖像數(shù)據(jù)存儲在能夠與圖像處理裝置5、5-2、5-3連接 的外部存儲裝置中?;蛘?,還可以將過去圖像數(shù)據(jù)存儲在服務(wù)器等中,經(jīng)由有線或無線LAN 等網(wǎng)絡(luò)將過去圖像數(shù)據(jù)取入到圖像處理裝置5、5-2、5-3中。
[0243] 以上說明的本發(fā)明不限于實(shí)施方式1?3和它們的變形例,通過適當(dāng)組合各實(shí)施 方式和變形例所公開的多個(gè)結(jié)構(gòu)要素,能夠形成各種發(fā)明。例如,可以從各實(shí)施方式和變形 例所示的全部結(jié)構(gòu)要素中刪除若干個(gè)結(jié)構(gòu)要素來形成,也可以適當(dāng)組合不同實(shí)施方式和變 形例所示的結(jié)構(gòu)要素來形成。
[0244] 標(biāo)號說明
[0245] 1 :膠囊型內(nèi)窺鏡系統(tǒng);2 :膠囊型內(nèi)窺鏡;3 :接收裝置;3a :托架;4 :接收天線單 元;4a?4h :接收天線;5、5-2、5-3 :圖像處理裝置;5a:顯示裝置;10 :被檢體;21 :攝像 部;22 :照明部;23 :信號處理部;24 :加速度傳感器;25 :存儲器;26 :發(fā)送部;27 :天線;28 : 電池;31 :接收部;32 :信號處理部;33 :存儲器;34 :數(shù)據(jù)發(fā)送部;35 :操作部;36 :顯示部; 37 :控制部;38 :電池;51 :輸入部;52 :圖像數(shù)據(jù)取得部;53 :存儲部;53a :本次圖像數(shù)據(jù)存 儲部;53b :過去圖像數(shù)據(jù)存儲部;54 :運(yùn)算部;54a :圖像處理部;54b :位置和姿勢估計(jì)部; 54c :圖像提取部;54d :攝像時(shí)間取得部;54e :比較部;54f :特征量取得部;54g :圖像選擇 部;54h :標(biāo)簽附加部;55 :顯示控制部;56 :控制部。
【權(quán)利要求】
1. 一種圖像處理裝置,其對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠囊 型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并在該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理裝置 具有: 圖像提取部,其從通過所述膠囊型內(nèi)窺鏡依次在所述被檢體內(nèi)進(jìn)行攝像而得到的第1 圖像群、以及在所述第1圖像群之前依次在與所述被檢體相同的被檢體內(nèi)進(jìn)行攝像而得到 的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第2特征圖像; 攝像時(shí)間取得部,其取得與從所述第1圖像群中提取出的所述第1特征圖像和第2特 征圖像的攝像時(shí)刻的間隔對應(yīng)的第1量、以及與從所述第2圖像群中提取出的所述第1特 征圖像和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第2量; 比較部,其對所述第1量和所述第2量進(jìn)行比較;以及 顯示控制部,其在所述第1量與所述第2量之差為基準(zhǔn)值以上的情況下,對所述第1圖 像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
2. -種圖像處理裝置,其對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠囊 型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理裝置 具有: 圖像提取部,其從通過所述膠囊型內(nèi)窺鏡依次對所述被檢體內(nèi)進(jìn)行攝像而得到的第1 圖像群、以及在所述第1圖像群之前依次在與所述被檢體相同的被檢體內(nèi)進(jìn)行攝像而得到 的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第2特征圖像; 特征量取得部,其取得對從所述第1圖像群中提取出的所述第1特征圖像與所述第2 特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予特征的第1特征量、以及對從所述第2圖像 群中提取出的所述第1特征圖像與所述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予 特征的第2特征量; 比較部,其對所述第1特征量和所述第2特征量進(jìn)行比較;以及 顯示控制部,其在所述第1特征量與所述第2特征量之差為基準(zhǔn)值以上的情況下,對所 述第1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
3. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述顯示控制部進(jìn)行如下控制:在所述差為所述基準(zhǔn)值以上的情況下,顯示所述第1 圖像群的所述第1特征圖像與所述第2特征圖像之間的一連串圖像作為觀察注意圖像。
4. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述圖像處理裝置還具有圖像處理部,在所述差為規(guī)定基準(zhǔn)值以上的情況下,該圖像 處理部對所述第1圖像群的所述第1特征圖像與所述第2特征圖像之間的一連串圖像實(shí)施 規(guī)定的圖像處理。
5. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述圖像處理裝置還具有: 圖像數(shù)據(jù)取得部,其取得與所述第1圖像群對應(yīng)的圖像數(shù)據(jù); 存儲部,其存儲所述第2圖像群;以及 圖像處理部,其分別對所述第1圖像群和第2圖像群實(shí)施檢測所述第1特征和第2特 征的圖像處理。
6. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述圖像處理裝置還具有圖像選擇部,該圖像選擇部根據(jù)從外部輸入的選擇信號,從 所述第1圖像群中選擇圖像, 所述圖像提取部從所述第2圖像群中提取與由所述圖像選擇部選擇出的圖像對應(yīng)的 圖像。
7. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述第1量和第2量是所述第1特征圖像的攝像時(shí)刻與所述第2特征圖像的攝像時(shí)刻 之間的時(shí)間。
8. 根據(jù)權(quán)利要求1所述的圖像處理裝置,其特征在于, 所述第1量和第2量是在所述第1特征圖像的攝像時(shí)刻與所述第2特征圖像的攝像時(shí) 刻之間由所述膠囊型內(nèi)窺鏡進(jìn)行攝像而得到的圖像的張數(shù)。
9. 根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于, 所述第1特征量和第2特征量是表示所述第1特征圖像與所述第2特征圖像之間的一 連串圖像的平均顏色的參數(shù)的統(tǒng)計(jì)值、或表示該平均顏色的變化的參數(shù)。
10. 根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于, 所述第1特征量和第2特征量是表示所述第1特征圖像與所述第2特征圖像之間的一 連串圖像中的各個(gè)圖像有無特定形狀的參數(shù)的統(tǒng)計(jì)值。
11. 根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于, 所述第1特征量和第2特征量是從所述第1特征圖像與所述第2特征圖像之間的一連 串圖像中檢測到的病變的數(shù)量。
12. 根據(jù)權(quán)利要求2所述的圖像處理裝置,其特征在于, 所述第1特征量和第2特征量是表示所述第1特征圖像的攝像時(shí)刻與所述第2特征圖 像的攝像時(shí)刻之間的所述膠囊型內(nèi)窺鏡的運(yùn)動的參數(shù)。
13. 根據(jù)權(quán)利要求12所述的圖像處理裝置,其特征在于, 表示所述膠囊型內(nèi)窺鏡的運(yùn)動的參數(shù)是所述膠囊型內(nèi)窺鏡的移動距離、所述膠囊型內(nèi) 窺鏡停止的次數(shù)、所述膠囊型內(nèi)窺鏡停止的時(shí)間、所述膠囊型內(nèi)窺鏡的最大移動速度和所 述膠囊型內(nèi)窺鏡的旋轉(zhuǎn)次數(shù)中的任意一方。
14. 一種圖像處理方法,其對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠囊 型內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并在該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理方法 包括以下步驟: 圖像提取步驟,從通過所述膠囊型內(nèi)窺鏡依次在所述被檢體內(nèi)進(jìn)行攝像而得到的第1 圖像群、以及在所述第1圖像群之前依次在與所述被檢體相同的被檢體內(nèi)進(jìn)行攝像而得到 的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第2特征圖像; 攝像時(shí)間取得步驟,取得與從所述第1圖像群中提取出的所述第1特征圖像和第2特 征圖像的攝像時(shí)刻的間隔對應(yīng)的第1量、以及與從所述第2圖像群中提取出的所述第1特 征圖像和第2特征圖像的攝像時(shí)刻的間隔對應(yīng)的第2量; 比較步驟,對所述第1量和所述第2量進(jìn)行比較;以及 顯示控制步驟,在所述第1量與所述第2量之差為基準(zhǔn)值以上的情況下,對所述第1圖 像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
15. -種圖像處理方法,對由膠囊型內(nèi)窺鏡取得的被檢體內(nèi)的圖像進(jìn)行處理,該膠囊型 內(nèi)窺鏡被導(dǎo)入到所述被檢體內(nèi)并對該被檢體內(nèi)進(jìn)行攝像,其特征在于,該圖像處理方法包 括以下步驟: 圖像提取步驟,從通過所述膠囊型內(nèi)窺鏡依次對所述被檢體內(nèi)進(jìn)行攝像而得到的第1 圖像群、以及在所述第1圖像群之前依次在與所述被檢體相同的被檢體內(nèi)進(jìn)行攝像而得到 的第2圖像群中,分別提取表示第1特征的第1特征圖像和表示第2特征的第2特征圖像; 特征量取得步驟,取得對從所述第1圖像群中提取出的所述第1特征圖像與所述第2 特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予特征的第1特征量、以及對從所述第2圖像 群中提取出的所述第1特征圖像與所述第2特征圖像之間的所述膠囊型內(nèi)窺鏡的移動賦予 特征的第2特征量; 比較步驟,對所述第1特征量和所述第2特征量進(jìn)行比較;以及 顯示控制步驟,在所述第1特征量與所述第2特征量之差為基準(zhǔn)值以上的情況下,對所 述第1圖像群進(jìn)行基于所述比較部的比較結(jié)果的顯示控制。
【文檔編號】A61B1/00GK104114077SQ201380009876
【公開日】2014年10月22日 申請日期:2013年10月10日 優(yōu)先權(quán)日:2012年10月18日
【發(fā)明者】谷口勝義 申請人:奧林巴斯醫(yī)療株式會社
網(wǎng)友詢問留言 已有0條留言
  • 還沒有人留言評論。精彩留言會獲得點(diǎn)贊!
1