本發(fā)明涉及一種類似病例檢索裝置、類似病例檢索方法及類似病例檢索程序。
背景技術(shù):
已知在醫(yī)療領(lǐng)域中根據(jù)檢查圖像檢索與檢查圖像類似的以往病例的類似病例檢索裝置(例如,參考日本特開2010-237930號公報、日本特開2012-118583號公報(美國公開公報US2012/134555號))。檢查圖像為例如通過進(jìn)行斷層拍攝的CT(Computed Tomography)裝置或拍攝簡單透視圖像的一般的X射線攝影裝置等醫(yī)學(xué)影像設(shè)備(modality)拍攝的圖像,用于進(jìn)行患者的疾患的確定等患者的診斷。在基于一般的X射線攝影裝置的1次檢查中,有僅拍攝1張檢查圖像的情況,也有拍攝多張的情況。并且,在基于CT裝置的1次檢查中,獲取多張斷層圖像(切片圖像)。因此,1件檢查數(shù)據(jù)中包含1張以上檢查圖像。病例大多通過以往檢查數(shù)據(jù)的集聚而創(chuàng)建,因此1件病例數(shù)據(jù)中也包含1張以上病例圖像。
進(jìn)行類似病例檢索時,首先由醫(yī)生等用戶在檢查圖像內(nèi)指定關(guān)注區(qū)域。關(guān)注區(qū)域為在檢查圖像內(nèi)醫(yī)生特別關(guān)注的區(qū)域,是包含成為診斷對象的病變的區(qū)域。類似病例檢索裝置對將在檢查圖像內(nèi)指定的1個關(guān)注區(qū)域的特征數(shù)值化的特征量與將存在于病例圖像內(nèi)的1個病變的特征數(shù)值化的特征量進(jìn)行比較,由此判定兩者的類似度。在此,為了便于說明,將檢查圖像的關(guān)注區(qū)域內(nèi)包含的病變稱為對象病變,將病例圖像中包含的病變稱為病例病變。并且,類似病例檢索裝置從存儲有多個病例的病例數(shù)據(jù)庫中檢索包含與關(guān)注區(qū)域類似的病例病變的病例。
日本特開2010-237930號公報中公開有以抑制檢索偏差為目的的發(fā)明,如包含對象病變的關(guān)注區(qū)域的指定方法會根據(jù)每個用戶而存在個人差異,由于個人差異引起的檢索結(jié)果產(chǎn)生偏差。具體而言,即使將包含相同的1個對象病變的區(qū)域指定為關(guān)注區(qū)域時,由于所指定的用戶的個人差異等原因,根據(jù)關(guān)注區(qū)域的指定方法,所指定的區(qū)域的形狀和大小也會發(fā)生變化,因此有時會導(dǎo)致特征量發(fā)生變化。若特征量發(fā)生變化,則類似度也發(fā)生變化,因此會產(chǎn)生如每個用戶的檢索結(jié)果發(fā)生變化的檢索偏差。日本特開2010-237930號公報中,為了抑制這種檢索偏差,作為1例,對于針對1個對象病變的指定方法不同的多個關(guān)注區(qū)域,按每個關(guān)注區(qū)域計算特征量,根據(jù)計算出的多個關(guān)注區(qū)域的特征量的平均值計算類似度,由此進(jìn)行類似圖像檢索。由此,能夠抑制因每個用戶的個人差異引起的檢索偏差。
日本特開2012-118583號公報(美國公開公報US2012/134555號)涉及一種對用戶覺得類似的主觀感覺輸出更適合的檢索結(jié)果的技術(shù)。具體而言,相同種類的對象病變存在于多個檢查圖像的情況下,指定關(guān)注區(qū)域時,將包含用戶覺得類似的相同種類的多個對象病變的關(guān)注區(qū)域作為相同種類組來組合為1個組。并且,在1件檢查數(shù)據(jù)中求出包含屬于相同種類組的多個對象病變的所有特征量的特征量范圍,并將該特征量范圍作為檢索條件來進(jìn)行類似病例檢索。認(rèn)為相同種類組的特征量范圍與用戶在主觀上覺得類似的范圍一致,因此檢索結(jié)果也能夠成為對用戶的主觀感覺更適合的結(jié)果。
技術(shù)實現(xiàn)要素:
發(fā)明要解決的技術(shù)課題
但是,根據(jù)疾患的不同,有時在檢查圖像中出現(xiàn)的多個對象病變成為確定疾患的依據(jù)。例如,結(jié)核病的情況下,有時會通過在檢查圖像中出現(xiàn)空洞陰影、點(diǎn)狀陰影、毛玻璃陰影這三種對象病變來確定疾患,彌漫性泛細(xì)支氣管炎的情況下,有時會通過出現(xiàn)支氣管異常陰影及點(diǎn)狀陰影這兩種對象病變來確定疾患。癌癥的情況下,進(jìn)行單一對象病變中的類似檢索即可,但當(dāng)為癌癥以外的非癌癥疾患的情況下,需要進(jìn)行這些多個對象病變中的類似病例檢索。
日本特開2010-237930號公報及日本特開2012-118583號公報(美國公開公報US2012/134555號)中記載的現(xiàn)有的類似病例檢索裝置均著眼于檢查圖像中包含的1個對象病變,并根據(jù)包含所著眼的1個對象病變的關(guān)注區(qū)域的特征量檢索類似病例,并未考慮著眼于檢查圖像中包含的多個對象病變中的每一個。
如上所述,日本特開2010-237930號公報中,按每個關(guān)注區(qū)域計算出特征量,但多個關(guān)注區(qū)域僅僅是指定方法不同的同一個對象病變的關(guān)注區(qū)域,并未公開有關(guān)著眼于不同對象病變的每個關(guān)注區(qū)域的特征量而檢索類似病例的內(nèi)容。并且,日本特開2012-118583號公報(美國公開公報US2012/134555號)中,對多個檢查圖像中包含的多個對象病變,針對相同種類的對象病變被組化的1個相同種類組創(chuàng)建1個檢索條件,并以所創(chuàng)建的檢索條件檢索類似病例??梢哉f日本特開2012-118583號公報(美國公開公報US2012/134555號)僅計算出在包含相同種類的多個對象病變的各個關(guān)注區(qū)域中共同的特征量以符合用戶的嗜好,并未公開有關(guān)著眼于多個對象病變中的每個關(guān)注區(qū)域的特征量而檢索類似病例的內(nèi)容。
如日本特開2010-237930號公報及日本特開2012-118583號公報(美國公開公報US2012/134555號),著眼于1個關(guān)注區(qū)域的特征量的技術(shù)中,存在多個關(guān)注區(qū)域時,無法檢索適當(dāng)?shù)念愃撇±?。因此,發(fā)明人對存在多個關(guān)注區(qū)域時,著眼于多個關(guān)注區(qū)域,從登記有多個病例病變的病例中檢索類似的病例的技術(shù)進(jìn)行了深入研究。但是,為了著眼于多個關(guān)注區(qū)域,必須將多個關(guān)注區(qū)域與多個病例病變的每一個對應(yīng)來比較兩者的特征量。此時,得知使其對應(yīng)的組合圖案增多,因此產(chǎn)生如檢索處理需要時間的新課題。關(guān)注區(qū)域的數(shù)量越增加,這種問題越顯著。
本發(fā)明的目的在于即使存在多個關(guān)注區(qū)域時,也能夠在短時間內(nèi)檢索適當(dāng)?shù)念愃撇±龣z索的類似病例檢索裝置、類似病例檢索方法及類似病例檢索程序。
用于解決技術(shù)課題的手段
本發(fā)明的類似病例檢索裝置為從登記有多件包含1張以上病例圖像的病例的病例數(shù)據(jù)庫中檢索與用于患者的診斷的檢查圖像類似的類似病例的裝置,具備特征量獲取部、個別類似度計算部、綜合類似度計算部、類似病例檢索部。特征量獲取部針對分別包含1個以上不同對象病變的多個關(guān)注區(qū)域獲取每個所述關(guān)注區(qū)域的特征量,所述關(guān)注區(qū)域為在包含1張以上所述檢查圖像的檢查數(shù)據(jù)中指定且以包含存在于檢查圖像內(nèi)的病變即對象病變的方式指定的關(guān)注區(qū)域。個別類似度計算部使關(guān)注區(qū)域與存在于病例圖像內(nèi)的多件病例病變一一對應(yīng)來比較所對應(yīng)的關(guān)注區(qū)域的特征量與病例病變的特征量,由此分別計算每個關(guān)注區(qū)域的個別類似度。綜合類似度計算部根據(jù)分別對多個關(guān)注區(qū)域計算出的多個個別類似度計算綜合類似度,該綜合類似度計算部僅對分別組合同一病例內(nèi)的不同種類的多個病例病變與多個關(guān)注區(qū)域而構(gòu)成的完全不同種類的組合,利用個別類似度計算綜合類似度。類似病例檢索部根據(jù)與完全不同種類的組合對應(yīng)的綜合類似度檢索所述類似病例。
在此,存在于病例圖像內(nèi)的多件病例病變包括:1張病例圖像內(nèi)存在多個的情況;及存在于多張病例圖像內(nèi)的病例病變的總計為多個的情況,例如在2張病例圖像中的每一張中各自存在1個病例病變的情況。
優(yōu)選綜合類似度計算部關(guān)于完全不同種類的組合創(chuàng)建與關(guān)注區(qū)域的個數(shù)、病例病變的種類數(shù)及個數(shù)對應(yīng)的數(shù)量的組合,按完全不同種類的每個組合計算綜合類似度。具體而言,綜合類似度計算部可按每1件病例求出針對該病例中包含的病例病變的個別類似度,創(chuàng)建針對所求出的個別類似度的完全不同種類的組合來求出綜合類似度。并且,首先分別求出針對所有病例的病例病變的個別類似度,之后,按每個病例創(chuàng)建針對個別類似度的完全不同種類的組合。無論哪種方法,均在計算出個別類似度ISM之后創(chuàng)建針對個別類似度ISM的完全不同種類的組合。
關(guān)于同一病例內(nèi)包含的多個不同種類的病例病變中的至少1種,存在多個相同種類的病例病變時,優(yōu)選綜合類似度計算部區(qū)分相同種類的多個病例病變,并按所區(qū)分的相同種類的每個病例病變創(chuàng)建完全不同種類的組合。
優(yōu)選類似病例檢索部根據(jù)綜合類似度創(chuàng)建將與多件類似病例相關(guān)的信息列表化的類似病例列表。并且,類似病例列表中,優(yōu)選類似病例按綜合類似度順序進(jìn)行排序。
優(yōu)選類似病例列表的顯示項目中包含綜合類似度值和與綜合類似度相關(guān)的明細(xì)信息,明細(xì)信息包含用于計算個別類似度的關(guān)注區(qū)域與病例病變之間的對應(yīng)關(guān)系。優(yōu)選類似病例列表中除了綜合類似度值以外,還顯示有成為綜合類似度的計算要素的多個個別類似度值。并且,優(yōu)選類似病例列表中顯示關(guān)注區(qū)域和病例病變的各圖像。
優(yōu)選病例數(shù)據(jù)庫中存儲有病例病變種類的信息。優(yōu)選綜合類似度為完全不同種類的組合中包含的多個個別類似度的總和。
個別類似度計算部可創(chuàng)建記錄有按每個關(guān)注區(qū)域?qū)⒍鄠€病例病變對應(yīng)來計算出的多個個別類似度的個別類似度表。綜合類似度計算部可從每個關(guān)注區(qū)域的多個個別類似度表中的每一個中逐一讀取個別類似度,將所讀取的多個個別類似度作為要素來創(chuàng)建完全不同種類的組合。
優(yōu)選個別類似度計算部在病例中至少將病例病變的種類為多個的病例作為個別類似度的計算對象,將病例病變的種類為1種的病例作為個別類似度的計算對象之外。
綜合類似度計算部可根據(jù)成為計算綜合類似度的要素的個別類似度的值對綜合類似度進(jìn)行加權(quán)處理。優(yōu)選加權(quán)處理為當(dāng)個別類似度為閾值以上時,提高綜合類似度的處理。
類似病例檢索部可針對病例病變的種類數(shù)小于關(guān)注區(qū)域的數(shù)量的病例作為檢索對象之外。并且,針對病例病變的種類數(shù)小于關(guān)注區(qū)域的數(shù)量的病例,當(dāng)病例病變的種類數(shù)有多個時,類似病例檢索部也可將其作為檢索對象。
優(yōu)選所述類似病例檢索裝置具有代表值判定部,其在通過將1個關(guān)注區(qū)域與1件病例中包含的多個病例病變對應(yīng)來計算出多個綜合類似度時,從多個綜合類似度中判定1個代表值,類似病例檢索部根據(jù)代表值檢索類似病例。
本發(fā)明的類似病例檢索方法從登記有多件包含1張以上病例圖像的病例的病例數(shù)據(jù)庫中檢索與用于患者的診斷的檢查圖像類似的類似病例,所述類似病例檢索方法具備特征量獲取步驟、個別類似度計算步驟、綜合類似度計算步驟及類似病例檢索步驟。特征量獲取步驟中,針對分別包含1個以上不同對象病變的多個關(guān)注區(qū)域獲取每個關(guān)注區(qū)域的特征量,所述關(guān)注區(qū)域為在包含1張以上檢查圖像的檢查數(shù)據(jù)中指定且以包含存在于檢查圖像內(nèi)的病變即對象病變的方式指定的關(guān)注區(qū)域。個別類似度計算步驟中,將關(guān)注區(qū)域與存在于病例圖像內(nèi)的多件病例病變一一對應(yīng)來比較所對應(yīng)的關(guān)注區(qū)域的特征量與病例病變的特征量,由此分別計算每個關(guān)注區(qū)域的個別類似度。綜合類似度計算步驟中,根據(jù)分別對多個關(guān)注區(qū)域計算出的多個個別類似度計算綜合類似度,該綜合類似度計算步驟僅對分別組合同一病例內(nèi)的不同種類的多個病例病變與多個關(guān)注區(qū)域而構(gòu)成的完全不同種類的組合,利用個別類似度計算綜合類似度。類似病例檢索步驟中,根據(jù)與完全不同種類的組合對應(yīng)的綜合類似度檢索類似病例。
綜合類似度計算步驟可按每個病例創(chuàng)建針對病例病變的完全不同種類的組合,并求出與所創(chuàng)建的組合對應(yīng)的個別類似度,首先求出所有病例的個別類似度,之后按每個病例創(chuàng)建個別類似度的完全不同種類的組合。無論哪種方法,均在計算出個別類似度ISM之后,創(chuàng)建針對個別類似度ISM的完全不同種類的組合。
本發(fā)明的類似病例檢索程序使計算機(jī)執(zhí)行如下處理,即,從登記有多件包含1張以上病例的病例圖像的病例數(shù)據(jù)庫中檢索與用于患者的診斷的檢查圖像類似的類似病例,所述類似病例檢索程序包括特征量獲取步驟、個別類似度計算步驟、綜合類似度計算步驟及類似病例檢索步驟。特征量獲取步驟中,針對分別包含1個以上不同對象病變的多個關(guān)注區(qū)域獲取每個關(guān)注區(qū)域的特征量,所述關(guān)注區(qū)域為在包含1張以上檢查圖像的檢查數(shù)據(jù)中指定且以包含存在于檢查圖像內(nèi)的病變即對象病變的方式指定的關(guān)注區(qū)域。個別類似度計算步驟中,將關(guān)注區(qū)域與存在于病例圖像內(nèi)的多件病例病變一一對應(yīng)來比較所對應(yīng)的關(guān)注區(qū)域的特征量與病例病變的特征量,由此分別計算每個關(guān)注區(qū)域的個別類似度。綜合類似度計算步驟中,根據(jù)分別對多個關(guān)注區(qū)域計算出的多個個別類似度計算綜合類似度,該綜合類似度計算步驟僅對分別組合同一病例內(nèi)的不同種類的多個病例病變與多個關(guān)注區(qū)域而構(gòu)成的完全不同種類的組合,利用個別類似度計算綜合類似度。類似病例檢索步驟中,根據(jù)與完全不同種類的組合對應(yīng)的綜合類似度檢索類似病例。
發(fā)明效果
本發(fā)明能夠提供一種類似病例檢索裝置、類似病例檢索方法及類似病例檢索程序,所述類似病例檢索裝置對每個關(guān)注區(qū)域的特征量與病例病變的特征量進(jìn)行比較,由此計算每個關(guān)注區(qū)域的個別類似度,僅對分別組合同一病例內(nèi)的不同種類的多個病例病變與多個關(guān)注區(qū)域而構(gòu)成的完全不同種類的組合,利用個別類似度計算綜合類似度,并根據(jù)計算出的綜合類似度檢索類似病例,因此即使存在多個關(guān)注區(qū)域時,也能夠在短時間內(nèi)檢索適當(dāng)?shù)念愃撇±龣z索。
附圖說明
圖1是表示包含類似病例檢索服務(wù)器的醫(yī)療信息系統(tǒng)的結(jié)構(gòu)圖。
圖2是表示由多張檢查圖像構(gòu)成的檢查數(shù)據(jù)的概要的說明圖。
圖3是表示由1張檢查圖像構(gòu)成的檢查數(shù)據(jù)的概要的說明圖。
圖4是說明診療科、檢查科、檢查圖像DB服務(wù)器及病例DB服務(wù)器的功能的說明圖。
圖5是病例DB的說明圖。
圖6是表示病變種類的圖像圖案的說明圖。
圖7是類似病例檢索服務(wù)器的功能概要的說明圖。
圖8是表示構(gòu)成各DB服務(wù)器和各終端的計算機(jī)的結(jié)構(gòu)圖。
圖9是表示診療科終端的概要的結(jié)構(gòu)圖。
圖10是指定關(guān)注區(qū)域的檢查圖像顯示畫面的說明圖。
圖11是針對關(guān)注區(qū)域的指定方法,示出與圖9不同的例子的說明圖。
圖12是表示類似病例檢索服務(wù)器的概要的結(jié)構(gòu)圖。
圖13是關(guān)注區(qū)域的特征量的說明圖。
圖14是特征量計算部的結(jié)構(gòu)圖。
圖15是病例病變的特征量的說明圖。
圖16是個別類似度計算部的說明圖。
圖17是個別類似度計算方法的說明圖。
圖18是病例病變?yōu)?種3個時的個別類似度的說明圖。
圖19是病例病變?yōu)?種5個時的個別類似度的說明圖。
圖20是病例病變?yōu)?種4個時的個別類似度的說明圖。
圖21是病例病變?yōu)?種4個時的個別類似度的說明圖。
圖22是病例病變?yōu)?種5個時的個別類似度的說明圖。
圖23是表示個別類似度表的概要的說明圖。
圖24是按每個關(guān)注區(qū)域創(chuàng)建的個別類似度表的說明圖。
圖25是綜合類似度表的說明圖。
圖26是表示綜合類似度的計算方法的說明圖。
圖27是表示圖19的例子的完全不同種類的組合的說明圖。
圖28是與圖27的完全不同種類的組合對應(yīng)的綜合類似度的說明圖。
圖29是表示3種5個病例病變時的完全不同種類的組合的說明圖。
圖30是圖29的例子中成為計算對象之外的組合的說明圖。
圖31是表示圖22的例子的完全不同種類的組合的說明圖。
圖32是圖31的例子中成為計算對象之外的組合的說明圖。
圖33是成為檢索對象之外的病例的說明圖。
圖34是成為檢索對象之外的另一病例的說明圖。
圖35是說明成為檢索對象和對象之外的病例的表。
圖36是表示計算出綜合類似度的綜合類似度表的說明圖。
圖37是表示按每個病例判定綜合類似度的代表值的方法的說明圖。
圖38是將每個病例的代表值排列于表的說明圖。
圖39是表示將每個病例的代表值進(jìn)行排序的表的說明圖。
圖40是表示顯示有類似病例列表的畫面的說明圖。
圖41是表示類似病例圖像檢索裝置的步驟的流程圖。
圖42是表示類似病例檢索的步驟的流程圖。
圖43是表示顯示綜合類似度和個別類似度這兩者的例子的說明圖。
圖44是第2實施方式的說明圖。
圖45是第2實施方式中的2種2個病例的完全不同種類的組合的說明圖。
圖46是第2實施方式的檢索結(jié)果顯示畫面的說明圖。
圖47是第3實施方式的說明圖。
圖48是病變種類判定部的說明圖。
圖49是第3實施方式的個別類似度計算部的說明圖。
圖50是第3實施方式的完全不同種類的組合表的說明圖。
圖51是表示在診療科終端具備特征量計算部的另一例子的說明圖。
圖52是圖51中說明的診療科終端與類似病例檢索服務(wù)器的說明圖。
具體實施方式
[第1實施方式]
圖1所示的醫(yī)療信息系統(tǒng)9構(gòu)建于醫(yī)院等醫(yī)療設(shè)施中。醫(yī)療信息系統(tǒng)9具有配置于診療科10的診療科終端11、設(shè)置于檢查科12的醫(yī)學(xué)影像設(shè)備(modality)(醫(yī)用圖像攝影裝置)13、申請單(order)管理終端14、檢查圖像數(shù)據(jù)庫(以下稱為“DB”)服務(wù)器15、病例DB服務(wù)器16及類似病例檢索服務(wù)器17。這些通過網(wǎng)絡(luò)18可通信地連接。網(wǎng)絡(luò)18例如為鋪設(shè)于院內(nèi)的LAN(Local Area Network)。醫(yī)學(xué)影像設(shè)備13例如包含拍攝斷層圖像的CT(Computed Tomography)裝置或MRI(Magnetic Resonance Imaging)裝置及拍攝簡單透視圖像的一般的X射線攝影裝置(DR:Digital Radiography或CR:Computed Radiography等)等。
診療科終端11由診療科10的醫(yī)生(圖中賦有Dr符號)操作,除了用于電子病例的輸入和閱覽以外,還用于向檢查科12開出用于申請檢查的檢查申請單。并且,診療科終端11還用作圖像顯示終端,其用于顯示通過檢查科12拍攝并保存于檢查圖像DB服務(wù)器15的檢查圖像19,從而使醫(yī)生閱覽檢查圖像19。
檢查科12中,申請單管理終端14接收來自診療科10的檢查申請單,并管理所接收的檢查申請單。檢查科12的技師根據(jù)檢查申請單內(nèi)容,通過醫(yī)學(xué)影像設(shè)備13對患者進(jìn)行拍攝。檢查圖像19針對1件檢查申請單拍攝1張或多張。若拍攝結(jié)束,則醫(yī)學(xué)影像設(shè)備13將所拍攝的檢查圖像19發(fā)送至檢查圖像DB服務(wù)器15。若檢查結(jié)束,則從檢查科12向診療科10的醫(yī)生通知檢查結(jié)束,并且通知檢查圖像DB服務(wù)器15內(nèi)的檢查圖像19的保存處。診療科10的醫(yī)生通過診療科終端11訪問檢查圖像DB服務(wù)器15,通過診療科終端11閱覽檢查圖像19。
檢查圖像DB服務(wù)器15具有存儲有多張檢查圖像19的檢查圖像DB20,是所謂的PACS(Picture Archiving and Communication System)服務(wù)器。檢查圖像DB20是能夠通過關(guān)鍵詞進(jìn)行檢索的數(shù)據(jù)庫,根據(jù)診療科終端11等的檢索請求和傳送請求,傳送與檢索條件匹配的檢查圖像19或指定的檢查圖像19。
如圖2及圖3所示,檢查圖像DB20中,將1件檢查申請單與包含1張以上檢查圖像19的1件檢查數(shù)據(jù)21相關(guān)聯(lián)地存儲。如圖2所示,通過CT裝置或MRI裝置拍攝的檢查圖像19為斷層圖像(還稱為切片圖像),1件檢查數(shù)據(jù)21中包含多張檢查圖像19。如圖3所示,當(dāng)為通過一般的X射線攝影裝置拍攝的檢查圖像19時,是簡單透視圖像,存在1件檢查數(shù)據(jù)21中僅有1張檢查圖像19的情況也有多張的情況。
檢查申請單中,包含診療科10的醫(yī)生的ID(Identification Data)和科別等申請人信息、患者信息、檢查類別等。檢查圖像19的圖像文件具有圖像數(shù)據(jù)及DICOM(Digital Imaging and COmmunication in Medicine)小標(biāo)題(header)等附帶信息。檢查申請單的信息存儲為檢查圖像19的附帶信息。并且,附帶信息中包含檢查ID或分別賦予1張檢查圖像19的圖像ID。圖2、圖3的例子中,如檢查ID為“O901”、“O902”且圖像ID為“O901-03”、“O901-01”,以對檢查ID添加用于識別1張檢查圖像19的序列號的形態(tài)賦予。檢查圖像DB服務(wù)器15能夠?qū)⑦@種包含于DICOM標(biāo)簽(tag)的項目作為檢索關(guān)鍵字來進(jìn)行檢索。
類似病例檢索服務(wù)器17作為檢索條件接收檢查圖像19,并檢索包含與所接收的檢查圖像19類似的病例圖像22的病例。病例圖像22為以往用于診斷的檢查圖像。病例DB服務(wù)器16具有以能夠檢索的方式存儲有多件病例的病例DB23。類似病例檢索服務(wù)器17訪問病例DB服務(wù)器16而逐件讀取病例,并進(jìn)行作為檢索條件而接收的檢查圖像19與病例內(nèi)的病例圖像22的比較對照,由此檢索與檢查圖像19類似的病例。
如圖4所示,診療科10的醫(yī)生操作診療科終端11訪問檢查圖像DB服務(wù)器15以下載包含檢查圖像19的檢查數(shù)據(jù)21。診療科終端11中顯示檢查圖像19,由醫(yī)生閱覽?;颊呋疾r,患者的檢查圖像19中包含顯露疾患癥狀的病變(稱為對象病變OL)。診療科10的醫(yī)生從檢查數(shù)據(jù)21中包含的檢查圖像19中選擇包含對象病變OL的檢查圖像19。檢查圖像19附加于由診療科終端11向類似病例檢索服務(wù)器17發(fā)出的類似病例檢索請求,并發(fā)送至類似病例檢索服務(wù)器17。類似病例檢索服務(wù)器17若接收到類似病例檢索請求,則從病例DB服務(wù)器16中檢索與檢查圖像19類似的病例,并將檢索結(jié)果傳送至申請人的診療科終端11。
診療科10的醫(yī)生確認(rèn)檢查結(jié)果中包含的病例。病例中包含附帶于病例圖像22的影像解讀(radiologic interpretations)報告單。醫(yī)生參考記載于影像解讀報告單中的對病例圖像22的意見等來做出確定檢查圖像19的疾患等確診。
如圖5所示,病例DB23中設(shè)置有病例圖像DB23A及特征量DB23B。病例圖像DB23A是以可檢索的方式存儲病例圖像22的數(shù)據(jù)庫。病例中針對每1件賦有病例ID。病例ID相當(dāng)于檢查圖像19中的檢查ID。1件病例中包含1張以上病例圖像22。并且,與檢查圖像19同樣地,各病例圖像22中賦有對病例ID加上序列號的圖像ID。圖5中,病例ID為“C101”的病例數(shù)據(jù)24中例如包含60張斷層圖像。
病例圖像22中包含表示疾患癥狀的病變(病例病變CL)。1件病例中登記有1個以上病例病變CL。本例中,病例ID“C101”中登記有No1~No3的3個病例病變CL,“C102”登記有2個病例病變CL,“C103”中登記有1個病例病變CL。病例病變CL為病例圖像22在以往作為檢查圖像而用于診斷時由醫(yī)生指定為病變的區(qū)域,并經(jīng)過醫(yī)生的確診而登記為病例病變CL的病變。對于病例病變CL的指定方法,例如與后述的關(guān)注區(qū)域ROI相同。
特征量DB23B為存儲病例病變CL的圖像的特征量CAC的數(shù)據(jù)庫。特征量CAC上賦有由病例ID及病變No構(gòu)成的識別ID。例如,病例ID“C101”中有3個病例病變CL,各病例病變CL上分別賦有1件病例內(nèi)的序列號即No1~No3。特征量CAC后面的數(shù)字與病例內(nèi)的序列號對應(yīng)。
并且,特征量DB23B中存儲有與各病例病變CL的病變種類相關(guān)的信息(種類信息)。如圖6所示,作為典型的病變圖像圖案的病變圖案例如分類為A~H的8種。即,A:低呼吸區(qū)的異常陰影(氣腫、氣胸、大皰等);B:空洞;C:支氣管的異常陰影(支氣管壁肥厚、支氣管擴(kuò)張、牽拉性支氣管擴(kuò)張、支氣管透亮影等);D:蜂窩肺;E:毛玻璃狀陰影;F:點(diǎn)狀陰影(粒狀陰影、TIB等);G:高吸收區(qū)的異常陰影(實變(Consolidation)、結(jié)節(jié)、支氣管粘液腺等);及H:線狀、網(wǎng)狀陰影。
病例病變CL的病變種類根據(jù)病例病變CL的圖像圖案最接近這8種病變圖案的哪一圖案來判定。病例病變CL的種類根據(jù)特征量CAC判定。與后述的關(guān)注區(qū)域ROI相同,特征量CAC為由與8種病變圖案對應(yīng)的8種鑒別器的輸出值構(gòu)成的8維的特征矢量。病例病變CL的種類信息與特征量CAC一同存儲于特征量DB23B。另外,本例中,以將典型的病變圖案分類為8種,與其對應(yīng)地將病變種類也分類為8種的例子進(jìn)行了說明,但可小于8種也可以是8種以上。
如圖7所示,通過診療科終端11發(fā)出類似病例檢索請求時,由醫(yī)生將檢查圖像19內(nèi)的包含對象病變OL的區(qū)域指定為關(guān)注區(qū)域ROI。類似病例檢索請求中附加包含對象病變OL的檢查圖像19及與所指定的關(guān)注區(qū)域ROI對應(yīng)的檢查圖像19內(nèi)的區(qū)域信息(例如,檢查圖像19內(nèi)的坐標(biāo)信息)。類似病例檢索服務(wù)器17若接收到類似病例檢索請求,則根據(jù)檢查圖像19的圖像數(shù)據(jù)及區(qū)域信息確定關(guān)注區(qū)域ROI。并且,計算關(guān)注區(qū)域ROI的特征量。計算出特征量之后,類似病例檢索服務(wù)器17從病例DB服務(wù)器16中逐件讀取病例,對關(guān)注區(qū)域ROI與病例病變CL的特征量進(jìn)行比較,由此檢索類似病例。并且,創(chuàng)建與類似的多件病例相關(guān)的信息被列表化的類似病例列表,將此作為檢索結(jié)果傳送至診療科終端11。
診療科終端11、申請單管理終端14、檢查圖像DB服務(wù)器15、病例DB服務(wù)器16及類似病例檢索服務(wù)器17通過以個人計算機(jī)、服務(wù)器用計算機(jī)、工作站等計算機(jī)為基礎(chǔ),并安裝操作系統(tǒng)等控制程序和客戶程序或服務(wù)器程序等應(yīng)用程序來構(gòu)成。
如圖8所示,各DB服務(wù)器15~17和構(gòu)成各終端11、14的計算機(jī)的基本結(jié)構(gòu)相同,分別具備CPU(Central Processing Unit)41、存儲器42、存儲設(shè)備43、通信I/F44及輸入輸出部46。它們經(jīng)由數(shù)據(jù)總線47連接。輸入輸出部46由顯示部48及鍵盤或鼠標(biāo)等輸入設(shè)備49構(gòu)成。
存儲設(shè)備43例如為HDD(Hard Disk Drive),存儲有控制程序和應(yīng)用程序(以下,稱為AP)50。并且,構(gòu)建DB的服務(wù)器中,與存儲程序的HDD不同地,作為DB用存儲設(shè)備43例如設(shè)置有聯(lián)裝多臺HDD的磁盤陣列。磁盤陣列可內(nèi)置于服務(wù)器主體,也可與服務(wù)器主體分開始設(shè)置并通過電纜或網(wǎng)絡(luò)與服務(wù)器主體連接。
存儲器42為用于使CPU41執(zhí)行處理的工作存儲器。CPU41將存儲于存儲設(shè)備43的控制程序加載于存儲器42來執(zhí)行依照程序的處理,由此總括控制計算機(jī)的各部。通信I/F44為進(jìn)行與網(wǎng)絡(luò)18之間的傳輸控制的網(wǎng)絡(luò)接口。
診療科終端11中,作為AP50安裝有進(jìn)行電子病例的閱覽和編輯的電子病例軟件和用于閱覽檢查圖像或類似病例列表的瀏覽器軟件(viwer software)等客戶程序。瀏覽器軟件例如可以是專用軟件也可以是通用的WEB瀏覽器等。
如圖9所示,診療科終端11中,若顯示檢查圖像19的瀏覽器軟件啟動,則診療科終端11的顯示部48A上顯示具備基于GUI(Graphical User Interface)的操作功能的檢查圖像顯示畫面52。診療科終端11的CPU41A作為GUI控制部53及檢索請求發(fā)出部54發(fā)揮作用。檢查圖像顯示畫面52中,能夠進(jìn)行對檢查圖像19的關(guān)注區(qū)域ROI的指定及類似病例檢索請求的發(fā)出命令。GUI控制部53從通過檢查圖像顯示畫面52的輸入設(shè)備49A接收操作命令,并根據(jù)所接收的操作命令進(jìn)行畫面控制。并且,若輸入有發(fā)出類似病例檢索請求的命令,則所輸入的發(fā)出命令從GUI控制部53輸入至檢索請求發(fā)出部54。檢索請求發(fā)出部54向類似病例檢索請求中附加所指定的檢查圖像19和關(guān)注區(qū)域ROI的區(qū)域信息,發(fā)出類似病例檢索請求。
如圖10所示,檢查圖像顯示畫面52具有顯示檢查圖像19的圖像顯示區(qū)域52A及各種操作部。圖像顯示區(qū)域52A中例如排列顯示3張檢查圖像19。通過滾動操作或逐幀播放操作,能夠切換所顯示的檢查圖像19。圖像顯示區(qū)域52A的上方設(shè)置有輸入檢查ID的輸入框52B。若在輸入框52B中輸入檢查ID,則所輸入的檢查ID的檢查數(shù)據(jù)21從檢查圖像DB服務(wù)器15中被下載,并在圖像顯示區(qū)域52A顯示檢查圖像19。圖像顯示區(qū)域52A的下方設(shè)置有區(qū)域指定按鈕52C、清除按鈕52D及類似病例檢索按鈕52E。
區(qū)域指定按鈕52C為用于在檢查圖像19內(nèi)指定關(guān)注區(qū)域ROI的操作按鈕。區(qū)域指定按鈕52C若被鼠標(biāo)的指針56點(diǎn)擊操作,則能夠進(jìn)行指定檢查圖像19內(nèi)的任意區(qū)域的區(qū)域指定操作。該狀態(tài)下,對指針56進(jìn)行操作來例如通過樣條指定包含對象病變OL的區(qū)域的外周。樣條是通過所指定的多個控制點(diǎn)的平滑的曲線,通過用指針56指定控制點(diǎn)來輸入。通過這種操作,包含對象病變OL的區(qū)域被指定為關(guān)注區(qū)域ROI。清除按鈕52D為用于取消所指定的關(guān)注區(qū)域ROI的按鈕。
關(guān)注區(qū)域ROI能夠指定多個。圖10的例子中,對圖像ID為“O901-01”至“O901-03”的3張檢查圖像19中分別各指定有1個No1~No3的關(guān)注區(qū)域ROI。檢查ID“901”的檢查數(shù)據(jù)21中,若沒有其他關(guān)注區(qū)域ROI的指定,則在1件檢查數(shù)據(jù)21中共計指定3個關(guān)注區(qū)域ROI。并且,圖11的例子中,圖像ID為“O906-01”的檢查圖像19內(nèi)指定有2個關(guān)注區(qū)域ROI(No1、No2),圖像ID為“O906-02”、“O906-03”的檢查圖像19內(nèi)各指定有1個關(guān)注區(qū)域ROI(No3、No4)。No3的關(guān)注區(qū)域ROI中包含2個對象病變OL(No3、No4)。如此,可將包含多個對象病變OL的區(qū)域指定為1個關(guān)注區(qū)域ROI。檢查ID“906”的檢查數(shù)據(jù)21中,若沒有其他關(guān)注區(qū)域ROI的指定,則在1件檢查數(shù)據(jù)21中共計指定4個關(guān)注區(qū)域ROI。如此指定的各個關(guān)注區(qū)域ROI中分別包含1個以上不同的對象病變OL。
如圖12所示,類似病例檢索服務(wù)器17中作為AP50安裝有類似病例檢索服務(wù)器程序,若執(zhí)行程序,則類似病例檢索服務(wù)器17的CPU41B作為請求接收部61、特征量計算部62、個別類似度計算部65、綜合類似度計算部66、類似病例檢索部67及輸出控制部69發(fā)揮作用。
請求接收部61接收從診療科終端11發(fā)送的類似病例檢索請求,并將所接收的檢查圖像19及關(guān)注區(qū)域ROI的區(qū)域信息存儲于類似病例檢索服務(wù)器17的存儲設(shè)備43等。特征量計算部62根據(jù)所接收的檢查圖像19及區(qū)域信息計算關(guān)注區(qū)域ROI的特征量。其中,特征量計算部62作為特征量獲取部發(fā)揮作用。
如圖13所示,存在多個關(guān)注區(qū)域ROI時,如No1的關(guān)注區(qū)域ROI的特征量為“RAC1”,No2的關(guān)注區(qū)域ROI的特征量為“RAC2”,No3的關(guān)注區(qū)域ROI為“RAC3”,按每個關(guān)注區(qū)域ROI計算關(guān)注區(qū)域ROI的特征量RAC。特征量RAC為由與預(yù)先設(shè)定為典型的病變圖像圖案的多種病變圖案對應(yīng)的多維的數(shù)值(后述的鑒別器輸出值)構(gòu)成的特征矢量。如圖6中說明,典型的病變圖案例如分類為A~H的8種。
如圖14所示,特征量計算部62具有與典型的8種病變圖案對應(yīng)的鑒別器62A~62H。各鑒別器62A~62H根據(jù)關(guān)注區(qū)域ROI的圖像圖案輸出與典型的各病變圖案對應(yīng)的數(shù)值。各鑒別器62A~62H輸出的各數(shù)值為構(gòu)成特征矢量的多維數(shù)值,在此,將各數(shù)值稱為鑒別器輸出值。本例中,與各鑒別器62A~62H對應(yīng)地有8種鑒別器輸出值,特征矢量由8維構(gòu)成。另外,本利中,典型的病變圖案的種類并不限定于8種,根據(jù)病變圖案的種類,還可適當(dāng)確定鑒別器的種類、特征矢量的維數(shù)。
鑒別器輸出值表示典型的病變圖案相似度,是表示在關(guān)注區(qū)域ROI內(nèi)存在典型的病變圖案的程度的值。因此,鑒別器輸出值越大,表示關(guān)注區(qū)域ROI中存在典型的病變圖案的程度越高,鑒別器輸出值越小,表示存在的程度越低。更詳細(xì)而言,“+”的鑒別器輸出值表示典型的病變圖案存在于關(guān)注區(qū)域ROI內(nèi),“-”的鑒別器輸出值表示不存在于關(guān)注區(qū)域ROI內(nèi)。并且,顯示“+”的鑒別器輸出值且鑒別器輸出值越大,表示存在的程度越高。
圖14的例子中,“B:空洞”的病變圖案的鑒別器62B和“G:高吸收區(qū)”的鑒別器62G顯示“+”的輸出值,“B:空洞”的輸出值最大,因此可知關(guān)注區(qū)域ROI包含“B:空洞”和“G:高吸收區(qū)”的病變圖案,且8種病變圖案中,“B:空洞”占主導(dǎo)的圖像圖案。
另外,對典型的病變圖案的各鑒別器例如可利用記載于“資料名:Computer Vision and Image Understanding 88卷119頁~151頁,發(fā)行年度2002年12月Using Human Perceptual Categories for Content-Based Retrieval from a Medical Image Database著者Chi-Ren Shyu,Christina Pavlopoulou Avinash C.kak,and Cala E.Brodley”等的周知的特征量,通過“Ada-boost”等機(jī)器學(xué)習(xí)算法創(chuàng)建。
特征量計算部62針對附加于類似病例檢索請求的檢查數(shù)據(jù)21中指定的多個關(guān)注區(qū)域ROI中的所有關(guān)注區(qū)域,按每個關(guān)注區(qū)域ROI計算特征量RAC。
如圖15所示,關(guān)于存儲于病例DB23內(nèi)的特征量DB23B的各病例病變CL的特征量CAC,也由與上述8種病變圖案對應(yīng)的特征矢量構(gòu)成。關(guān)于這種特征量CAC,也由與圖14中說明的特征量計算部62相同的結(jié)構(gòu)計算且通過由各鑒別器62A~62H的8種輸出值構(gòu)成的8維的特征矢量構(gòu)成。另外,各病例病變CL中存儲有已建立對應(yīng)關(guān)聯(lián)來存儲的病變種類。
如圖16所示,個別類似度計算部65進(jìn)行關(guān)注區(qū)域ROI的特征量RAC與病例病變CL的特征量CAC的比較,由此計算個別類似度ISM。具體而言,對特征量RAC和特征量CAC中包含的8維的特征矢量進(jìn)行比較,由此計算個別類似度ISM。個別類似度ISM值例如通過最小二乘距離或相關(guān)性計算。前者時,值越小關(guān)注區(qū)域ROI與病例病變CL的類似度越高,后者時,值越大關(guān)注區(qū)域ROI與病例病變CL的類似度越高。
如圖17所示,個別類似度計算部65將1件檢查數(shù)據(jù)21中包含的多個關(guān)注區(qū)域ROI與1件病例數(shù)據(jù)24中包含的病例病變CL一一對應(yīng)來進(jìn)行各自的特征量RAC與特征量CAC的比較,由此計算個別類似度ISM。個別類似度ISM為每個關(guān)注區(qū)域ROI的類似度,因此是各關(guān)注區(qū)域的個別類似度,由于與病例病變CL一一對應(yīng)來計算,因此也是各病例病變CL的個別類似度。個別類似度計算部65針對1個關(guān)注區(qū)域ROI計算與病例病變CL的個數(shù)相應(yīng)的個別類似度ISM。個別類似度ISM針對所有關(guān)注區(qū)域ROI進(jìn)行計算,因此個別類似度計算部65計算與關(guān)注區(qū)域ROI的個數(shù)乘以病例病變CL的個數(shù)的數(shù)量相應(yīng)的個別類似度ISM。
檢查ID為“O901”的檢查數(shù)據(jù)21中,指定有No1~No3的3個關(guān)注區(qū)域ROI,病例ID為“C101”的病例數(shù)據(jù)24中,登記有No1~No3的3個病例病變CL?!癈101”的病例中,No1~No3的3個病例病變CL的種類分別為“B:空洞”、“F:點(diǎn)狀陰影”、“E:毛玻璃狀陰影”,所有病變的種類不同,因此登記有3種3個病例病變CL。
本例的個別類似度計算部65與后述的綜合類似度計算部66不同,不著眼于病例病變CL的種類而僅著眼于病例病變CL的個數(shù)來計算個別類似度ISM。因此,如圖18所示,在“O901”的檢查數(shù)據(jù)21與“C101”的病例數(shù)據(jù)24之間,可計算出3×3共計9個個別類似度ISM。
對各個個別類似度ISM附加的括弧內(nèi)的識別符號是對病例ID加上關(guān)注區(qū)域ROI與病例病變CL各自的序列號的識別符號。當(dāng)為“C101-11”時,表示是No1的關(guān)注區(qū)域ROI與登記在病例ID為“C101”的病例數(shù)據(jù)24中的No1的病例病變CL之間的個別類似度ISM。同樣地,當(dāng)為“C101-12”時,表示是No1的關(guān)注區(qū)域ROI與病例ID為“C101”的No2的病例病變CL之間的個別類似度ISM。
圖19所示的病例ID為“C102”的病例中登記有No1~No5的5個病例病變CL?!癈102”的病例中,No1~No5的5個病例病變CL的種類為“B:空洞”、“F:點(diǎn)狀陰影”、“E:毛玻璃狀陰影”這3種。針對“B:空洞”,登記有3個相同種類的病例病變CL(No1~No3),針對No4、No5的病例病變CL,分別登記有各1個“F:點(diǎn)狀陰影”與“E:毛玻璃狀陰影”,因此作為結(jié)果,“C102”的病例中登記有3種5個病例病變CL。
個別類似度計算部65中,與種類無關(guān)地使3個關(guān)注區(qū)域ROI的每一個與“C102”的5個病例病變CL對應(yīng),因此可計算出3×5共計15個個別類似度ISM。
圖20所示的病例ID為“C103”的病例中登記有2種4個病例病變CL的例子?!癈103”的No1~No4的4個病例病變CL的種類有“B:空洞”、“F:點(diǎn)狀陰影”這2種,針對“B:空洞”,相同種類的病例病變CL(No1~No3)為3個,針對“F:點(diǎn)狀陰影”,病例病變CL(No4)為1個。個別類似度計算部65中,與種類無關(guān)地使3個關(guān)注區(qū)域ROI的每一個與“C103”的4個病例病變CL對應(yīng),由此可計算出3×4共計12個個別類似度ISM。
圖21的病例ID為“C104”的病例為登記有1種4個病例病變CL的例子?!癈104”的No1~No4的4個病例病變CL的種類全部為“B:空洞”,是相同種類。個別類似度計算部65中,與種類無關(guān)地使3個關(guān)注區(qū)域ROI的每一個與“C103”的4個病例病變CL對應(yīng),由此可計算出3×4共計12個個別類似度ISM。
圖22所示的病例ID為“C106”的病例為登記有與圖19所示的“C101”相同的3種5個病例病變CL的例子,但明細(xì)不同。即,“C106”的No1~No5的5個病例病變CL的種類為“B:空洞”、“F:點(diǎn)狀陰影”、“E:毛玻璃狀陰影”這3種,關(guān)于這一點(diǎn),與“C101”相同。但是,“C106”中,針對“B:空洞”,登記有2個相同種類的病例病變CL(No1、No2),針對“F:點(diǎn)狀陰影”,也登記有2個相同種類的病例病變CL(No3、No4)。針對“E:毛玻璃狀陰影”,登記有1個(No5)。個別類似度計算部65中,與種類無關(guān)地使3個關(guān)注區(qū)域ROI的每一個與“C106”的5個病例病變CL對應(yīng),由此可計算出3×5共計15個個別類似度ISM。
如圖23所示,個別類似度計算部65例如在類似病例檢索服務(wù)器17的存儲器42B或存儲設(shè)備43B內(nèi)創(chuàng)建個別類似度表(以下,稱為ISM表)71,在ISM表71中記錄計算出的個別類似度ISM。ISM表71按每個關(guān)注區(qū)域ROI而創(chuàng)建。圖23的例子表示針對No1的關(guān)注區(qū)域ROI的ISM表71。ISM表71是按每個個別類似度ISM將病例ID、病變No、病變的種類、病變圖像建立關(guān)聯(lián)來存儲的表。病變圖像是病例病變CL的圖像數(shù)據(jù)。即,ISM表71中,1件檔案(record)由病例ID、病變No、病變的種類、病變圖像、個別類似度ISM的5個項目的數(shù)據(jù)構(gòu)成。
個別類似度計算部65首先對ISM表71按計算出各個別類似度ISM的順序記錄。各個別類似度ISM例如如“C101”、“C102”、“C103”,按病例ID的編號從小到大的順序記錄。個別類似度ISM的值由關(guān)注區(qū)域ROI的特征量RAC與病例病變CL的特征量CAC之間的相關(guān)性計算,因此數(shù)值越大表示類似度越高。
如圖24所示,個別類似度計算部65按每個關(guān)注區(qū)域ROI創(chuàng)建ISM表71。存在No1~No3的3個關(guān)注區(qū)域ROI時,創(chuàng)建3個ISM表71。該階段中,如圖23所示,ISM表71中以病例ID的順序排列有各檔案。個別類似度計算部65在ISM表71的創(chuàng)建結(jié)束時,將ISM表71交給綜合類似度計算部66。
如圖25所示,綜合類似度計算部66根據(jù)按每個關(guān)注區(qū)域ROI創(chuàng)建的多個ISM表71創(chuàng)建綜合類似度TSM表72(以下,稱為TSM表72)。具體而言,如圖26所示,從多個ISM表71逐一讀取根據(jù)與同一病例內(nèi)的病例病變CL的對應(yīng)關(guān)系計算出的個別類似度ISM,并根據(jù)從各ISM表71讀取的多個個別類似度ISM計算綜合類似度TSM。更具體而言,綜合類似度計算部66將從各ISM表71逐一讀取的個別類似度ISM作為綜合類似度TSM的要素,創(chuàng)建與關(guān)注區(qū)域ROI的數(shù)量及的病例病變CL的數(shù)量相應(yīng)的數(shù)量的個別類似度ISM的組合,按每個組合計算綜合類似度TSM。
個別類似度ISM是將多個關(guān)注區(qū)域ROI與多個病例病變CL一一對應(yīng)來計算的,根據(jù)將各關(guān)注區(qū)域ROI與各病例病變CL的哪一個與哪一個對應(yīng),個別類似度ISM的值發(fā)生變化,因此綜合類似度TSM根據(jù)個別類似度ISM的組合圖案發(fā)生變化。
關(guān)于個別類似度ISM的組合圖案的創(chuàng)建方法,將進(jìn)行后述,但使本例的No1~No3的3個關(guān)注區(qū)域ROI與病例ID為“C101”的3種3個病例病變CL對應(yīng)時,可計算出3×3=9個個別類似度ISM。9個個別類似度ISM在每個關(guān)注區(qū)域ROI的ISM表71中各記錄有3個。并且,綜合類似度計算部66關(guān)于“C101”的9個個別類似度ISM,由各ISM表71逐一讀取個別類似度ISM,創(chuàng)建如6個個別類似度ISM的組合圖案,計算與“C101-1”~“C101-6”的如6個組合對應(yīng)的6個綜合類似度TSM。各綜合類似度TSM的識別符號為對病例ID標(biāo)注綜合類似度TSM的1~6為止的序列號的符號。各綜合類似度TSM在本例中為加上3個個別類似度ISM的總和。
各個別類似度ISM為將關(guān)注區(qū)域ROI與病例病變CL一一對應(yīng)時的類似度,因此綜合類似度TSM越高,表示3個關(guān)注區(qū)域ROI與3個病例病變CL的各個個別類似度ISM的平均值越高。本例中,個別類似度ISM表示相關(guān)值,因此數(shù)值越大類似度越高。因此,綜合類似度TSM也表示數(shù)值越大類似度越高。
本例中,6個綜合類似度TSM中,“C101-2”的綜合類似度TSM為“2.04”,最高。另一方面,本例中,“C101-3”的綜合類似度TSM為“1.32”,最低。并且,“C101-5”的綜合類似度TSM中包含個別類似度ISM中顯示最高值“0.91”的個別類似度ISM(C101-13),但不包含最高值的“C101-2”的綜合類似度TSM的平均個別類似度ISM更高,因此數(shù)值較高。
6個綜合類似度TSM中類似度最高的綜合類似度TSM(C101-2)為No1的關(guān)注區(qū)域ROI與No1的病例病變CL之間的個別類似度ISM(C101-11)、No2的關(guān)注區(qū)域ROI與No3的病例病變CL之間的個別類似度ISM(C101-23)、及No3的關(guān)注區(qū)域ROI與No2的病例病變CL之間的個別類似度ISM(C101-32)的總和。因此,針對“C101”的病例,將No1~No3的病例病變CL分別與No1、No3、No2的關(guān)注區(qū)域ROI對應(yīng)時,能夠評價為對“O901”的檢查數(shù)據(jù)21的類似度最高。
并且,綜合類似度計算部66針對計算綜合類似度TSM的個別類似度ISM的組合,創(chuàng)建完全不同種類的組合。其中,完全不同種類的組合是指,使從同一病例內(nèi)的多個病例病變CL中按每一種逐個提取不同種類的病例病變CL并組合這些而構(gòu)成的組合,進(jìn)一步與關(guān)注區(qū)域ROI的每一個對應(yīng)時的所有組合。并且,綜合類似度計算部66將完全不同種類的組合判定為綜合類似度TSM的計算對象,針對完全不同種類的組合以外的組合,判定為計算對象之外。即,綜合類似度計算部66僅對完全不同種類的組合,利用個別類似度ISM計算綜合類似度TSM。
完全不同種類的組合以外的組合中包含與完全相同種類的組合和一部分相同種類的組合。完全相同種類的組合是指,從同一病例內(nèi)的多個病例病變CL中逐個提取相同種類的多個病例病變CL,使所提取的多個相同種類的病例病變CL的組合進(jìn)一步與關(guān)注區(qū)域ROI的每一個對應(yīng)時的所有組合。一部分相同種類的組合是指,從至少包含相同種類的2個以上的病例病變CL和不同種類的1個以上的病例病變CL的病例中逐個提取相同種類的多個病例病變CL和不同種類的1個以上的病例病變CL,并使所提取的混合有相同種類和不同種類的多個病例病變CL的組合進(jìn)一步與關(guān)注區(qū)域ROI的每一個對應(yīng)時的所有組合。綜合類似度計算部66根據(jù)從各ISM表71逐件讀取的個別類似度ISM,創(chuàng)建與關(guān)注區(qū)域ROI的個數(shù)、1件病例內(nèi)的病例病變CL的個數(shù)及種類數(shù)相應(yīng)的數(shù)量的完全不同種類的組合。
利用圖27~圖34,對個別類似度ISM的完全不同種類的組合進(jìn)行具體說明。圖27中,對各個別類似度ISM標(biāo)注的“B”、“E”、“F”等符號為表示與各個別類似度ISM對應(yīng)的病例病變CL的種類的符號,表示各個別類似度ISM是將哪一種類病例病變CL與關(guān)注區(qū)域ROI對應(yīng)來計算出的。
“C101”的病例中,No1~No3的3個病例病變CL的種類為“B(空洞)”、“F(點(diǎn)狀陰影)”、“E(毛玻璃陰影)”,均不同。因此,使“B、E、F”的3種3個病例病變CL相對于3個關(guān)注區(qū)域ROI,如“B、F、E”、“B、E、F”、“F、B、E”、“F、E、B”……這樣對應(yīng)來計算的個別類似度ISM的完全不同種類的組合的圖案數(shù)量與3個關(guān)注區(qū)域ROI與3個病例病變CL的排列的數(shù)量相同。即,成為如3P3=3×2×1=6。
如圖19所示的“C102”的病例,具有“B”為3個且“E”、“F”分別為1個的3種5個病例病變CL時,與No1~No3的關(guān)注區(qū)域ROI對應(yīng)的各ISM表71中,如圖28所示,記錄有各5個共計15個個別類似度ISM。如“C102”的病例,存在多個相同種類的病例病變CL時,綜合類似度計算部66區(qū)分B1~B3的相同種類的3個病例病變CL,并按所區(qū)分的相同種類的每個病例病變CL創(chuàng)建完全不同種類的組合。
如“C102”的病例,具有多個B1~B3的相同種類的病例病變CL時,“C102”的病例中的完全不同種類的組合的數(shù)量并不會如病例病變CL的種類不同的“C101”的病例那樣成為排列的數(shù)量,而是成為如圖29所示的如18個。綜合類似度TSM計算TSM(C102-1)~(C102-18)的18個。
“C102”中,若如“C101”那樣求出排列的數(shù)量,則成為從“C102”的5個病例病變CL取出關(guān)注區(qū)域ROI的數(shù)量即3個時的排列方法,因此成為如5P3=5×4×3=60。完全不同種類的組合的數(shù)量為從該排列的數(shù)量將圖30所示的“B1、B2、B3”、“B1、B3、B2”等完全相同種類的組合和“B1、B2、F”、“B1、B2、F”等一部分相同種類的組合除外的數(shù)量。綜合類似度計算部66對圖29所示的完全不同種類的組合,判定為綜合類似度TSM的計算對象之外,對于圖30所示的完全不同種類的組合以外的組合,判定為計算對象之外。
并且,如圖31所示的“C106”的病例,包含與“C102”相同的3種5個病例病變CL時,若3種5個病例病變CL的明細(xì)不同,則完全不同種類的組合的個數(shù)也發(fā)生變化。“C106”中,3種5個病例病變CL的明細(xì)中,“B”為2個(B1、B2)、“F”為2個(F1、F2)、“E”為1個。因此,“B1、F1、E”、“B1、F2、E”等完全不同種類的組合的個數(shù)成為如24個,綜合類似度計算部66針對圖31所示的完全不同種類的如24個組合判定為綜合類似度TSM的計算對象,計算C106-1~C106-24的24個綜合類似度TSM。另一方面,如圖32所示,如“B1、B2、F1”、“B1、F1、F2”等一部分相同種類的組合,對于完全不同種類的組合以外的組合,不作為計算對象。
如此,通過僅將完全不同種類的組合作為綜合類似度TSM的計算對象,限定成為綜合類似度TSM的計算對象的組合,因此可減輕綜合類似度計算部66的處理時間和處理負(fù)荷,能夠縮短類似病例的檢索時間。并且,如上所述,本發(fā)明中,必須著眼于多個關(guān)注區(qū)域ROI來檢索類似病例的主要理由是因為,利用于空洞、點(diǎn)狀陰影、毛玻璃狀陰影等3種對象病變的存在成為確定疾患的依據(jù)的結(jié)核等非癌疾患的診斷。因此,作為與包含不同種類的對象病變OL的多個關(guān)注區(qū)域ROI類似的病例,需將包含不同種類的病例病變CL的病例作為類似病例來檢索。
若從利用于非癌疾患的診斷的目的考慮,則多個關(guān)注區(qū)域ROI通常以分別包含不同種類的對象病變OL的方式指定,如此一來,從一開始就提取包含相同種類的病例病變CL的病例的必要性較低,因此即使將綜合類似度TSM的計算對象限定于完全不同種類的組合,在實際診斷中的影響也較小。
從這種理由考慮,綜合類似度計算部66進(jìn)一步針對圖33所示的包含2種4個病例病變CL的“C103”的病例和圖34所示的包含1種4個病例病變CL的“C104”的病例,由于病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量,因此不作為綜合類似度TSM的計算對象。如“C104”那樣病例病變CL為1種時,從檢索不同種類的病例病變CL的檢索目的考慮,作為檢索對象的必要性較低。
并且,將如“C103”那樣病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例作為對象之外的理由也是作為檢索對象的必要性較低。即,非癌疾患的診斷中,醫(yī)生指定3個關(guān)注區(qū)域ROI是因為希望檢索包含3種病例病變CL的病例,認(rèn)為即使提取到小于關(guān)注區(qū)域ROI的個數(shù)的種類數(shù)的病例病變CL,在與診斷的關(guān)系上,必要性也較低。另外,本例中,包含2種病例病變CL的“C103”的病例成為計算對象之外是因為本例中以3個關(guān)注區(qū)域ROI作為前提,關(guān)注區(qū)域ROI為2個時,理所當(dāng)然地“C103”也成為綜合類似度TSM的計算對象。
如圖35所示,若總結(jié)以上的內(nèi)容,則綜合類似度計算部66僅對如病例ID為“C101”、“C102”、“C105”、“C106”的病例那樣病例病變CL的種類數(shù)為關(guān)注區(qū)域ROI的數(shù)量以上的病例,計算綜合類似度TSM,并作為類似病例的檢索對象。綜合類似度TSM僅針對完全不同種類的組合計算出。相反地,對于如“C103”、“C104”那樣病例病變CL的登記數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例(本例中,病例病變CL小于3個),不計算綜合類似度TSM,并作為檢索的對象之外。
如圖36所示,綜合類似度計算部66將針對成為檢索對象的多個病例計算出的綜合類似度TSM記錄于TSM表72。TSM表72中,1件檔案由病例ID、綜合類似度TSM及個別類似度ISM的組合圖案這3個項目的數(shù)據(jù)構(gòu)成。組合圖案為成為各綜合類似度TSM的計算源的個別類似度ISM的組合。綜合類似度計算部66將所創(chuàng)建的TSM表72交給類似病例檢索部67。圖12中,類似病例檢索部67中設(shè)置有代表值判定部67B。
如圖37所示,代表值判定部67B在TSM表72中從多個綜合類似度TSM中按每個病例判定代表值。當(dāng)為“C101”的病例時,從6個綜合類似度TSM中,類似度最高(相關(guān)值最大)的綜合類似度TSM(C101-2)被判定為代表值。同樣地,當(dāng)為“C102”的病例時,從18個綜合類似度TSM中,類似度最高(相關(guān)值最大)的綜合類似度TSM(C102-3)被判定為代表值。
如圖38所示,代表值判定部67B對TSM表72內(nèi)的所有病例實施代表值判定。由此,TSM表72中僅提取按每個病例逐一判定的代表性綜合類似度TSM。
如圖39所示,類似病例檢索部67在已提取代表的TSM表72中,以綜合類似度TSM從高到低的方式對各記錄進(jìn)行排序。TSM表72中,綜合類似度TSM從1件病例僅提取1個,因此對各檔案進(jìn)行排序是指將病例以綜合類似度TSM從高到低的順序進(jìn)行排序。由此,對各病例附加位次,在TSM表72的上位提取類似度較高的類似病例。
類似病例檢索部67中設(shè)置有列表創(chuàng)建部67A(參考圖12)。列表創(chuàng)建部67A根據(jù)TSM表72創(chuàng)建圖40所示的類似病例列表74。類似病例列表74顯示在檢索結(jié)果顯示畫面76內(nèi)。類似病例列表74是將與多件類似病例相關(guān)的信息列表化的列表。檢索結(jié)果顯示畫面76為類似病例檢索服務(wù)器17向類似病例檢索請求的請求源即診療科終端11傳送檢索結(jié)果的畫面的例子。
列表創(chuàng)建部67A從TSM表72中提取綜合類似度TSM,并創(chuàng)建以綜合類似度TSM從高到低的順序排列類似病例的類似病例列表74。類似病例列表74的顯示項目中,與各綜合類似度TSM相關(guān)地包含綜合類似度TSM值、基于綜合類似度TSM的位次、病例ID及與綜合類似度TSM相關(guān)的明細(xì)信息。本例中,明細(xì)信息為用于計算成為綜合類似度TSM的計算要素的各個個別類似度ISM的關(guān)注區(qū)域ROI與病例病變CL之間的對應(yīng)關(guān)系。明細(xì)信息中還包含病例病變CL的種類(病變種類)。
類似病例列表74中,病例ID為“C106”的綜合類似度TSM與圖39所示的“C106-1”的綜合類似度TSM對應(yīng)。成為“C106-1”的綜合類似度TSM的計算要素的個別類似度ISM的組合圖案為個別類似度ISM(C106-11)、(C106-22)、(C106-33)。顯示在類似病例列表74的明細(xì)信息為用于計算這些各個個別類似度ISM的關(guān)注區(qū)域ROI與病例病變CL之間的對應(yīng)關(guān)系。個別類似度ISM(C106-11)為使No1的關(guān)注區(qū)域ROI與“C106”的No1的病例病變CL對應(yīng)來計算出的,個別類似度ISM(C106-22)為使No2的關(guān)注區(qū)域ROI與“C106”的No2的病例病變CL對應(yīng)來計算出的,個別類似度ISM(C106-33)為使No3的關(guān)注區(qū)域ROI與“C106”的No3的病例病變CL對應(yīng)來計算出的。對應(yīng)關(guān)系中還顯示種類,因此能夠確認(rèn)個別類似度ISM的組合圖案為哪種組合。
而且,類似病例列表74的顯示項目中包含No1、No2、No3的病例病變CL的病變圖像。病變圖像例如從ISM表71中讀取。而且,在類似病例列表74的上方顯示包含No1~No3的關(guān)注區(qū)域ROI的檢查圖像19。
類似病例列表74例如顯示至上位6位為止的病例。當(dāng)然也可通過畫面滾動等操作來顯示6位以下的位次。并且,也可設(shè)為可變更能夠同時顯示的顯示件數(shù),如顯示至上位10位為止。
輸出控制部69(參考圖12)進(jìn)行如下控制,即,關(guān)于如此創(chuàng)建的檢索結(jié)果顯示畫面76,例如通過XML(Extensible Markup Language)等標(biāo)記語言創(chuàng)建WEB傳送用的XML數(shù)據(jù),將此作為檢索結(jié)果傳送至請求源的診療科終端11。接收到XML數(shù)據(jù)的診療科終端11由WEB瀏覽器根據(jù)XML數(shù)據(jù)再現(xiàn)檢索結(jié)果顯示畫面76來顯示于顯示部48A。由此,供醫(yī)生閱覽包含類似病例列表74的檢索結(jié)果顯示畫面76。
以下,參考圖41及圖42對上述結(jié)構(gòu)的作用進(jìn)行說明。如圖41所示,診療科10的醫(yī)生通過診療科終端11訪問檢查圖像DB服務(wù)器15,獲取向檢查科12申請的檢查的檢查數(shù)據(jù)21(S1100)。診療科終端11將檢查數(shù)據(jù)21顯示于顯示部48A(S1200)。已獲取的檢查數(shù)據(jù)21中包含的檢查圖像19顯示于圖10所示的檢查圖像顯示畫面52。通過檢查圖像顯示畫面52,由醫(yī)生在檢查圖像19內(nèi)指定關(guān)注區(qū)域ROI。診療科終端11通過醫(yī)生的指定操作接收多個關(guān)注區(qū)域ROI的指定(S1300)。
關(guān)注區(qū)域ROI的指定中,診斷結(jié)核或彌漫型泛細(xì)支氣管炎等非癌疾患時,以分別包含不同病變種類的不同種類的對象病變OL的方式指定多個關(guān)注區(qū)域ROI。若結(jié)束關(guān)注區(qū)域ROI的指定,則類似病例檢索按鈕52E被操作。由此,診療科終端11接收檢索命令(S1400)。若接收檢索命令,則檢索請求發(fā)出部54發(fā)出添附有檢查圖像19及區(qū)域信息的類似病例檢索請求,該請求發(fā)送至類似病例檢索服務(wù)器17(S1500)。
若類似病例檢索服務(wù)器17接收到類似病例檢索請求,則請求接收部61接收該請求(S2100)。并且,特征量計算部62根據(jù)檢查圖像19和關(guān)注區(qū)域ROI的區(qū)域信息計算每個關(guān)注區(qū)域ROI的特征量(S2200)。之后,執(zhí)行類似病例檢索(S2300)。
如圖42所示,類似病例檢索中,首先由個別類似度計算部65從病例DB服務(wù)器16中讀取1件病例數(shù)據(jù)24(S2310)。并且,個別類似度計算部65將檢查數(shù)據(jù)21內(nèi)的多個關(guān)注區(qū)域ROI與1件病例數(shù)據(jù)24中包含的病例病變CL一一對應(yīng),由此計算個別類似度ISM(S2320)。存在多個病例病變CL時,按每個病例病變CL計算個別類似度ISM。個別類似度計算部65將計算出的個別類似度ISM記錄于ISM表71,按每個關(guān)注區(qū)域ROI創(chuàng)建ISM表71(S2330)。對1件病例數(shù)據(jù)24進(jìn)行這種處理之后,對下一病例數(shù)據(jù)24也同樣進(jìn)行這種處理。并且,反復(fù)進(jìn)行同樣的處理,直至對多件病例數(shù)據(jù)24、例如病例DB23內(nèi)的所有病例數(shù)據(jù)24結(jié)束個別類似度ISM的計算及ISM表71的創(chuàng)建(S2340中的否)。
綜合類似度計算部66根據(jù)按每個關(guān)注區(qū)域ROI創(chuàng)建的多個ISM表71創(chuàng)建TSM表72(S2350)。創(chuàng)建TSM表72時,綜合類似度計算部66首先根據(jù)每個病例的病例病變CL的種類數(shù)判定作為檢索對象的病例(S2350)。通過該判定,如圖34所示的病例ID“C104”那樣病例病變CL只有1種的病例和如圖33所示的“C105”那樣病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例判定為檢索對象之外。
接著,綜合類似度計算部66針對檢索對象的病例,按每個病例創(chuàng)建個別類似度ISM的完全不同種類的組合(S2352),僅對所創(chuàng)建的完全不同種類的組合計算綜合類似度TSM(S2353)。綜合類似度計算部66針對“C102”的病例,創(chuàng)建圖29所示的如18個完全不同種類的組合,將如18個組合判定為計算對象。并且,按所判定的計算對象的每個組合計算18個綜合類似度TSM(C102-1~C102-18)。另一方面,綜合類似度計算部66針對圖30所示的完全相同種類的組合和一部分相同種類的組合,判定為計算對象之外,不計算綜合類似度TSM。
同樣地,綜合類似度計算部66針對“C106”的病例,如圖31所示那樣創(chuàng)建如24個完全不同種類的組合,計算與如24個組合對應(yīng)的24個綜合類似度TSM(C106-1~C106-24)。另一方面,綜合類似度計算部66針對圖32所示的完全相同種類的組合和一部分相同種類的組合,判定為計算對象之外,不計算綜合類似度TSM。并且,綜合類似度計算部66按每個病例將計算出的綜合類似度TSM記錄于TSM表72(S2354)。
類似病例檢索部67根據(jù)所創(chuàng)建的TSM表72創(chuàng)建類似病例列表74(S2360)。創(chuàng)建列表時,如圖38所示,首先代表值判定部67B從TSM表72內(nèi)的每個病例的多個綜合類似度TSM中判定代表值(S2361),創(chuàng)建僅提取各病例的代表綜合類似度TSM的TSM表72。之后,類似病例檢索部67在TSM表72中以綜合類似度TSM從高到低的順序?qū)Σ±M(jìn)行排序(S2362)。由此,在TSM表72的上位提取類似度較高的類似病例。
列表創(chuàng)建部67A根據(jù)TSM表72,提取至規(guī)定位次為止的病例,創(chuàng)建以綜合類似度TSM從高到低的順序排列類似病例的類似病例列表74(S2363)。
圖41中,輸出控制部69將包含由列表創(chuàng)建部67A作為檢索結(jié)果而創(chuàng)建的類似病例列表74的檢索結(jié)果顯示畫面76轉(zhuǎn)換為傳送用XML數(shù)據(jù)并傳送至診療科終端11(S2400)。診療科終端11接收包含類似病例列表74的XML數(shù)據(jù)(S1600),根據(jù)XML數(shù)據(jù)再現(xiàn)檢索結(jié)果顯示畫面76(圖30)并顯示于顯示部48A(S1700)。
檢查數(shù)據(jù)21中包含多個對象病變OL的情況下,檢索與檢查數(shù)據(jù)21類似的類似病例時,優(yōu)選除了著眼于包含各對象病變OL的多個關(guān)注區(qū)域ROI與多個病例病變CL各自的特征量以外,還進(jìn)行綜合考慮各個特征量的檢索。例如,某一病例中,即使1個病例病變CL相對1個關(guān)注區(qū)域ROI顯示出較高類似度,但其他病例病變CL相對其他關(guān)注區(qū)域ROI的類似度非常低的情況下,應(yīng)至少著眼于多個關(guān)注區(qū)域ROI時,該病例作為類似病例并不適當(dāng)。
本發(fā)明按每個關(guān)注區(qū)域ROI計算與病例病變CL的個別類似度ISM,根據(jù)計算出的個別類似度ISM計算綜合類似度TSM,由此進(jìn)行類似病例檢索。綜合類似度TSM為將多個個別類似度ISM平均較高的病例評價為類似度較高的病例的指標(biāo)。通過根據(jù)綜合類似度TSM檢索類似病例,能夠針對包含多個對象病變OL的檢查數(shù)據(jù)21檢索類似度較高的適當(dāng)?shù)念愃撇±?/p>
現(xiàn)有技術(shù)中僅進(jìn)行只著眼于1個關(guān)注區(qū)域ROI的特征量的類似病例檢索,因此存在多個關(guān)注區(qū)域ROI時的類似病例檢索中,無法檢索適當(dāng)?shù)念愃撇±?。而本發(fā)明根據(jù)綜合類似度TSM檢索類似病例,因此在存在多個關(guān)注區(qū)域ROI時的類似病例檢索中,能夠提供與現(xiàn)有技術(shù)相比有用性高的技術(shù)。
需著眼于空洞陰影、點(diǎn)狀陰影、毛玻璃陰影這3種對象病變OL的結(jié)核或需著眼于支氣管異常陰影及點(diǎn)狀陰影這2種對象病變OL的彌漫型泛細(xì)支氣管炎等非癌癥疾患中,顯現(xiàn)多個對象病變OL的現(xiàn)象有時會成為確定疾患的依據(jù)。如此,在必須注意多個關(guān)注區(qū)域ROI的特征量的診斷中,本發(fā)明較有用。
并且,本發(fā)明針對綜合類似度TSM,僅將完全不同種類的組合作為綜合類似度TSM的計算對象,由此限定成為綜合類似度TSM的計算對象的組合。因此,減輕綜合類似度計算部66的處理時間和處理負(fù)荷,能夠縮短類似病例的檢索時間。若對將圖29及圖30所示的“C102”的3種5個病例病變CL與3個關(guān)注區(qū)域ROI對應(yīng)的例子進(jìn)行說明,則包含完全不同種類的組合以外的組合的排列的數(shù)量成為如5P3=5×4×3=60,而完全不同種類的組合為如18個。因此,若僅以與“C102”相關(guān)的組合的數(shù)量單純計算,則能夠?qū)⒕C合類似度TSM的計算處理時間設(shè)為約1/3。
并且,即使如此限定為綜合類似度TSM的完全不同種類的組合,經(jīng)類似病例檢索利用于非癌疾患的診斷時,實際診斷中的影響也較小。然而,將類似病例檢索利用于非癌疾患的診斷時,多個關(guān)注區(qū)域ROI以分別包含不同種類的對象病變OL的方式指定,因此提取包含相同種類的病例病變CL的病例的必要性較低。因此,即使將綜合類似度TSM的計算對象限定為完全不同種類的組合,也能夠提取必要的類似病例。
另外,本例中,針對綜合類似度計算部66判定為綜合類似度TSM的計算對象之外的病例,也作為個別類似度ISM的計算對象,但針對綜合類似度計算部66判定為計算對象之外的病例,也可作為個別類似度ISM的計算對象之外。例如,本例中,如圖31所示的具有2種4個病例病變CL的“C103”的病例和具有1種4個病例病變CL的“C104”的病例,針對病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例,如圖35所示,判定為檢索對象之外。針對這種病例,個別類似度計算部65在計算個別類似度ISM時判定為檢索對象之外,也不計算個別類似度ISM。個別類似度計算部65根據(jù)病例病變CL的種類數(shù)與關(guān)注區(qū)域ROI的數(shù)量判定是否作為檢索對象。如此一來,減少不必要的處理時間,因此能夠進(jìn)一步縮短檢索時間。
并且,本例中,將綜合類似度TSM設(shè)為多個個別類似度ISM相加的總和,但也可以是相乘的值。
另外,本例中,通過代表值判定部67B從按每個病例計算出的多個綜合類似度TSM中按每個病例判定代表值,并僅根據(jù)代表值進(jìn)行類似病例檢索。通過判定代表值,如記錄于TSM表72的綜合類似度TSM的件數(shù)減少等檢索處理中處理的數(shù)據(jù)減少,因此具有能夠縮短處理時間的效果。記載于影像解讀報告單的與病例病變CL相關(guān)的醫(yī)生的意見等診斷結(jié)果按每個病例而存在,因此通過代表值判定以病例單位提示檢索結(jié)果,還能夠適當(dāng)且有效地進(jìn)行基于類似病例的診斷。但是,也可不判定代表值而進(jìn)行類似病例檢索。不判定代表值時,類似病例列表74中有時會顯示相同病例的多個綜合類似度TSM。這些多個綜合類似度TSM中成為計算要素的個別類似度ISM的組合圖案不同,因此能夠針對1個病例改變視點(diǎn)來進(jìn)行參考。
而且,類似病例列表74的顯示項目中除了類似病例的病例ID及綜合類似度TSM以外,還顯示與綜合類似度TSM相關(guān)的明細(xì)信息。能夠根據(jù)明細(xì)信息確認(rèn)用于計算成為綜合類似度TSM的計算要素的各個個別類似度ISM的關(guān)注區(qū)域ROI與病例病變CL之間的對應(yīng)關(guān)系。通過顯示該對應(yīng)關(guān)系,能夠掌握成為綜合類似度TSM的計算要素的各個個別類似度ISM是將多個關(guān)注區(qū)域ROI與多個病例病變CL中的哪一個區(qū)域和哪一個病變對應(yīng)而計算出的。并且,類似病例列表74中還顯示檢查圖像19和病例病變CL的病變圖像,因此也比較容易參考圖像圖案,容易直觀地判斷圖像圖案彼此的類似度。
作為與綜合類似度TSM相關(guān)的明細(xì)信息,如圖43所示的類似病例列表75,可顯示成為綜合類似度TSM的計算要素的個別類似度ISM值。若除了綜合類似度TSM值以外,還顯示成為該明細(xì)的個別類似度ISM值,則能夠確認(rèn)各關(guān)注區(qū)域ROI與各病例病變CL的對應(yīng)中哪個是個別類似度ISM較高的值或較低的值,因此較便利。例如,醫(yī)生想要重視多個關(guān)注區(qū)域ROI中的1個時,能夠觀察所重視的關(guān)注區(qū)域ROI的個別類似度ISM值來找出適當(dāng)?shù)念愃撇±?/p>
并且,綜合類似度TSM是將多個個別類似度ISM平均較高的病例評價為類似度較高的病例的指標(biāo)。因此,類似病例列表中,多個個別類似度ISM的平均值較高的病例的位次較高,對于平均值較低的病例,即使假設(shè)1個個別類似度ISM特別高,其位次也較低。與此相比,與類似度相關(guān)的醫(yī)生的主觀評價中,醫(yī)生對特定的病例病變CL與特定的關(guān)注區(qū)域ROI所存有的印象比平均值的影響大,因此有時醫(yī)生的主觀評價背離基于綜合類似度TSM的客觀評價(附加位次)。
即使在產(chǎn)生這種背離的情況下,如類似病例列表75,若除了綜合類似度TSM以外還顯示個別類似度ISM值,則通過確認(rèn)個別類似度ISM,能夠由醫(yī)生自行驗證主觀評價。并且,若顯示個別類似度ISM值,則通過由醫(yī)生考慮個別類似度ISM值,針對基于類似病例列表75的根據(jù)綜合類似度TSM進(jìn)行的客觀評價,也能夠由醫(yī)生根據(jù)主觀評價加上修正的同時找出適于各個診斷的適當(dāng)?shù)念愃撇±?/p>
并且,本發(fā)明中,設(shè)想指定分別包含不同種類的對象病變OL的多個關(guān)注區(qū)域ROI,針對多個個別類似度ISM的組合,將綜合類似度TSM的計算對象限定為完全不同種類的組合。因此,假設(shè)指定分別包含相同種類的對象病變OL的多個關(guān)注區(qū)域ROI時(例如“B:空洞”為2個),將相同種類的病例病變CL與相同種類的多個關(guān)注區(qū)域ROI對應(yīng)來計算出的個別類似度ISM的組合也會成為綜合類似度TSM的計算對象之外,因此在類似病例列表中不會提取為類似病例。
有可能提取為類似病例的是,將至少1個為相同種類的病例病變CL(例如“B:空洞”與“F:點(diǎn)狀陰影”或“B:空洞”與“E:毛玻璃狀陰影”)與相同種類(例如“B:空洞”為2個)的多個關(guān)注區(qū)域ROI對應(yīng)來計算出的個別類似度ISM的組合。這種情況下,如“B”與“F”,認(rèn)為將不同種類的關(guān)注區(qū)域ROI與病例病變CL對應(yīng)時的個別類似度ISM的值低至可無視的程度,因此對綜合類似度TSM產(chǎn)生影響的最終是將相同種類的關(guān)注區(qū)域ROI與病例病變CL對應(yīng)時的個別類似度ISM的值。如類似病例列表75,若除了綜合類似度TSM值以外,還顯示個別類似度ISM值,則易尋找相對于特定關(guān)注區(qū)域ROI的個別類似度ISM較高的病例病變CL。
關(guān)于綜合類似度計算步驟,上述實施方式中,求出針對所有病例的病例病變CL的個別類似度ISM之后,按每個病例創(chuàng)建個別類似度ISM的完全不同種類的組合來計算綜合類似度TSM。作為綜合類似度計算步驟,此外還有以下方法。首先,不對所有病例而是對1件病例,計算針對該病例中包含的病例病變CL的個別類似度ISM。接著,關(guān)于計算出個別類似度ISM的1件病例,創(chuàng)建計算出的個別類似度ISM的完全不同種類的組合來計算綜合類似度TSM。并且,針對1件病例結(jié)束綜合類似度TSM的計算之后,針對下一個病例執(zhí)行個別類似度ISM的計算、完全不同種類的組合的創(chuàng)建、綜合類似度計算的各順序。對所有病例反復(fù)該步驟。
無論是哪一方法,若考慮與1件病例相關(guān)的綜合類似度計算步驟,則在計算出個別類似度ISM之后,創(chuàng)建針對個別類似度ISM的完全不同種類的組合,僅針對完全不同種類的組合計算綜合類似度TSM,這一步驟是共同的。本發(fā)明中,可以使用任意方法,本發(fā)明的類似病例檢索裝置、方法及程序中當(dāng)然包含這些方法。
[第2實施方式]
第1實施方式中,針對病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例,作為檢索對象之外,但如圖44~圖46所示的第2實施方式,即使病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量,針對種類數(shù)為多個的病例,也可包含于檢索對象中。例如,如圖44所示,第2實施方式中,指定有3個關(guān)注區(qū)域ROI時,如在第1實施方式(參考圖35)作為對象之外的病例ID為“C103”的病例,種類數(shù)為2個的病例包含于檢索對象。
另外,病例ID為“C104”的病例的種類為1個,因此在第2實施方式中也成為檢索對象之外。這是因為,綜合類似度TSM為與多個關(guān)注區(qū)域ROI對應(yīng)的多種個別類似度ISM之和,因此種類數(shù)為“1”時,無法計算綜合類似度TSM。
針對提取為類似病例的病例,優(yōu)選病例病變CL的種類數(shù)為關(guān)注區(qū)域ROI的數(shù)量以上。這是因為將類似病例檢索利用于非癌疾患的診斷時,關(guān)注區(qū)域ROI的數(shù)量與對象病變OL的種類數(shù)對應(yīng)。然而,病例DB23中,有時病例病變CL的種類數(shù)較多的病例的積蓄數(shù)較少。此時,若將小于關(guān)注區(qū)域ROI的數(shù)量的種類數(shù)的病例全部作為檢索對象之外,則檢索對象過少,有可能無法檢索適當(dāng)?shù)念愃撇±?。即使是病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量的病例,若針對各個病例病變CL來看,有時具有診斷時有用的價值。第2實施方式為如下方式,即,以病例病變CL的種類數(shù)有多個為前提,針對種類數(shù)少于關(guān)注區(qū)域ROI的數(shù)量的病例,包含于檢索對象中,并能夠提取為類似病例。另外,特征量的計算方法和個別類似度ISM的計算方法與上述實施方式相同,因此省略說明,以不同點(diǎn)為中心進(jìn)行說明。
如圖45所示,個別類似度計算部65將2種病例病變CL與No1~No3的關(guān)注區(qū)域ROI對應(yīng)來計算個別類似度ISM。關(guān)于圖35所示的陰影一欄表示由于沒有對應(yīng)的病例病變CL而不計算個別類似度ISM的部位。綜合類似度計算部66創(chuàng)建將2種4個病例病變CL與3個關(guān)注區(qū)域ROI對應(yīng)來計算的個別類似度ISM的完全不同種類的組合,將該組合判定為綜合類似度TSM的計算對象?!癈103”的病例中,完全不同種類的組合為“B1、F”、“B2、F”等。這些的種類數(shù)與關(guān)注區(qū)域ROI的數(shù)量不同,但是不包含通過與相同種類的病例病變CL的對應(yīng)來計算出的相同種類的個別類似度ISM,因此是完全不同種類的組合。另一方面,將“B1、B2”等完全相同種類的組合判定為對象之外。如圖45所示,“C103”中,完全不同種類的組合為如18個,綜合類似度TSM為“C103-1”~“C103-18”的18個。
類似病例檢索部67創(chuàng)建圖46所示的類似病例列表81。其中,類似病例列表81中,“C103”的病例的綜合類似度TSM(“1.67”)為2種個別類似度ISM的共計,無法與作為3種個別類似度ISM的共計的其他病例的綜合類似度TSM的值進(jìn)行同列比較。因此,類似病例檢索部67進(jìn)行標(biāo)準(zhǔn)化,以便能夠比較成為計算要素的個別類似度ISM的數(shù)量不同的綜合類似度TSM。根據(jù)被標(biāo)準(zhǔn)化的類似度即標(biāo)準(zhǔn)化值對各病例附加位次。標(biāo)準(zhǔn)化例如為綜合類似度TSM分別除以個別類似度ISM的個數(shù)的處理。
首先,針對病例ID“C103”,個別類似度ISM的個數(shù)為2個,因此綜合類似度TSM(“1.67”)除以2的值(“0.835”)成為標(biāo)準(zhǔn)化值。另一方面,個別類似度ISM為3個的另一病例中,綜合類似度TSM除以3的值成為標(biāo)準(zhǔn)化值。例如,病例ID為“C106”的情況下,綜合類似度TSM的值為“2.34”,因此它除以3的值“0.78”成為標(biāo)準(zhǔn)化值。
根據(jù)本例,在病例DB23內(nèi),即使病例病變CL的種類數(shù)小于關(guān)注區(qū)域ROI的數(shù)量,針對有多個病例病變CL的種類的病例,能夠包含于檢索對象中,因此即使病例向病例DB的登記件數(shù)較少時,也能夠有效利用這些來進(jìn)行類似病例檢索。
并且,作為第2實施方式的變形例,可根據(jù)關(guān)注區(qū)域ROI的指定數(shù)的變更,類似病例檢索服務(wù)器17進(jìn)行再檢索。例如,第1次的類似病例檢索請求以2發(fā)出關(guān)注區(qū)域ROI的指定數(shù)。類似病例檢索服務(wù)器17根據(jù)該指定進(jìn)行類似病例檢索,將類似病例列表74作為檢索結(jié)果進(jìn)行傳送。醫(yī)生觀察該檢索結(jié)果,新追加指定關(guān)注區(qū)域ROI來發(fā)出第2次的類似病例檢索請求。類似病例檢索服務(wù)器17根據(jù)包含所追加的指定的請求進(jìn)行類似病例檢索,將類似病例列表74作為檢索結(jié)果進(jìn)行傳送。如此一來,醫(yī)生能夠觀察檢索結(jié)果的同時根據(jù)需要變更檢索條件,因此容易尋找適當(dāng)?shù)念愃撇±?。關(guān)注區(qū)域ROI的指定個數(shù)不僅能夠增加,還能夠減少。
并且,類似病例檢索服務(wù)器17可為了應(yīng)對再檢索而預(yù)先保存ISM表71和TSM表72等類似病例檢索的中間處理或作為處理結(jié)果來創(chuàng)建的數(shù)據(jù)。再檢索時,若使用這種數(shù)據(jù),則能夠縮短檢索時間。
上述第1實施方式及第2實施方式中,以將綜合類似度TSM設(shè)為多個個別類似度ISM的簡單的共計值的例子進(jìn)行了說明,但是也可根據(jù)成為計算要素的個別類似度ISM的值進(jìn)行加權(quán)處理。作為加權(quán)處理的例子,例如可考慮如下例子,即,個別類似度ISM為閾值以上時,乘以正的加權(quán)系數(shù)來提高綜合類似度TSM,相反地,個別類似度ISM小于閾值時,乘以負(fù)的加權(quán)系數(shù)來降低綜合類似度TSM。即使包含1個酷似關(guān)注區(qū)域ROI的病例病變CL時,有時該病例在診斷中具有價值。通過進(jìn)行正的加權(quán),可簡單地尋找這種病例作為類似病例。
并且,上述各實施方式中,以針對病例病變CL的種類,預(yù)先進(jìn)行種類判定,并將所判定的種類信息存儲于病例DB23的例子進(jìn)行了說明,但也可與關(guān)注區(qū)域ROI相同地,在檢索的時點(diǎn)進(jìn)行基于特征量CAC的種類判定。當(dāng)然,如此一來檢索處理時花費(fèi)時間,因此優(yōu)選預(yù)先存儲種類信息。
[第3實施方式]
上述實施方式中,不判定關(guān)注區(qū)域ROI中包含的對象病變OL的種類而將其與病例病變CL對應(yīng)來計算個別類似度ISM,由此進(jìn)行類似病例檢索。但是,如圖47~圖51所示的第3實施方式,也可對關(guān)注區(qū)域ROI中包含的對象病變OL及病例病變CL進(jìn)行病變種類的判定,并僅將相同種類的病變彼此對應(yīng)來計算個別類似度ISM,由此進(jìn)行類似病例檢索。如圖6所示,病變圖案典型地根據(jù)病變種類區(qū)分。因此,能夠在計算出特征量的階段根據(jù)特征量來判定病變種類。第3實施方式是利用這種病變種類判定的方式。
如圖47所示,第3實施方式中,類似病例檢索服務(wù)器17中設(shè)置有病變種類判定部86。如圖48所示,病變種類判定部86根據(jù)由特征量計算部62計算出的關(guān)注區(qū)域ROI的特征量RAC,判定關(guān)注區(qū)域ROI中包含的對象病變OL的種類。病變種類判定部86例如將與在由各鑒別器62A~62H輸出的鑒別器輸出值中表示最大鑒別器輸出值的鑒別器對應(yīng)的病變種類判定為關(guān)注區(qū)域ROI中包含的對象病變OL的種類。本例的情況下,“B:空洞”的鑒別器62B的鑒別器輸出值最大,因此對象病變OL的種類被判定為“B:空洞”。
如圖49所示,個別類似度計算部65在計算關(guān)注區(qū)域ROI與各病例病變CL之間的個別類似度ISM時,僅對病變種類為相同種類的彼此計算個別類似度ISM,對病變種類不同的病例,不計算個別類似度ISM。本例中,No1的關(guān)注區(qū)域ROI的種類為“B:空洞”,因此從“C101”的病例中僅計算種類為“B:空洞”的與No3的病例病變CL之間的個別類似度ISM。1件病例中登記有多個與關(guān)注區(qū)域ROI相同種類的病例病變CL時,計算出多個個別類似度ISM。并且,與關(guān)注區(qū)域ROI相同種類的病例病變CL一個也沒有被登記時,針對該病例,不計算個別類似度ISM。
由此,能夠減少個別類似度計算部65的計算處理時間。并且,個別類似度ISM的數(shù)量減少,因此如圖50所示,成為綜合類似度TSM的計算對象的完全不同種類的組合的數(shù)量也減少。3種5個“C102”的病例的情況下,若如第1實施方式中說明那樣不判定種類,則完全不同種類的組合有如18個,而若如本例那樣進(jìn)行種類判定,則完全不同種類的組合為如3個。綜合類似度計算部66與該組合對應(yīng)地計算C102-1~C102-3的3個綜合類似度TSM。
如此,與不區(qū)分病變的種類而計算個別類似度ISM的第1實施方式相比,第3實施方式中,個別類似度ISM及綜合類似度TSM的計算時間變短。并且,ISM表71和TSM表72的尺寸也變小,因此存儲器的作業(yè)區(qū)域也可以較小。因此,施加于類似病例檢索服務(wù)器17的CPU41B的負(fù)荷減輕,因此能夠縮短檢索時間。
但是,預(yù)先判定病變種類而僅對相同種類的病例計算個別類似度ISM的方式中,病變種類的判定精度較低時,有可能遺漏應(yīng)作為類似病例來檢索的病例病變CL即所謂的檢索遺漏。尤其,如圖11所示,將多個對象病變OL指定為1個關(guān)注區(qū)域ROI時,根據(jù)種類判定,做出偏向多個對象病變OL中的任意一個的判定。因此,對于第5實施方式優(yōu)選在確認(rèn)了病變種類的判定精度的基礎(chǔ)上實施。
[第4實施方式]
圖51及圖52所示的第4實施方式為在診療科終端11中計算關(guān)注區(qū)域ROI的特征量而不是在類似病例檢索服務(wù)器17中計算的方式??扇绲?實施方式那樣在診療科終端11計算關(guān)注區(qū)域ROI的特征量,該情況下,類似病例檢索服務(wù)器17上不設(shè)置特征量計算部62,而設(shè)置圖12所示的個別類似度計算部65、綜合類似度計算部66及類似病例檢索部67等特征量計算部62以外的結(jié)構(gòu)。
如圖51所示,診療科終端11中設(shè)置有與特征量計算部62相同的特征量計算部88。特征量計算部88例如通過由CPU41A執(zhí)行安裝于診療科終端11的軟件來實現(xiàn)。特征量計算部88根據(jù)包含檢查圖像19的檢查數(shù)據(jù)21及通過GUI控制部53輸入的關(guān)注區(qū)域ROI的區(qū)域信息,計算特征量RAC。檢索請求發(fā)出部54中附加與關(guān)注區(qū)域ROI對應(yīng)的圖像及計算出的特征量RAC,并發(fā)出類似病例檢索請求。
如圖52所示,類似病例檢索請求從診療科終端11發(fā)送至類似病例檢索服務(wù)器17。類似病例檢索服務(wù)器17根據(jù)所接收的類似病例檢索請求進(jìn)行類似檢索,并將檢索結(jié)果傳送至診療科終端11。第7實施方式中,類似病例檢索服務(wù)器17的請求接收部61作為特征量獲取部發(fā)揮作用。
上述各實施方式中,以根據(jù)來自診療科終端11的請求進(jìn)行類似病例檢索的類似病例檢索服務(wù)器17的方式說明了本發(fā)明的類似病例檢索裝置,當(dāng)然也可以以不使用類似病例檢索服務(wù)器17而是由診療科終端11訪問病例DB服務(wù)器16來檢索類似病例的方式,在診療科終端11設(shè)置類似病例檢索功能。該情況下,診療科終端11成為類似病例檢索裝置。
并且,上述各實施方式中,以各自的服務(wù)器構(gòu)成了類似病例檢索服務(wù)器17和病例DB服務(wù)器16,但也可綜合這些來由1個服務(wù)器構(gòu)成。如此,也可在1個服務(wù)器綜合多個功能或按每個功能分離服務(wù)器。
另外,計算機(jī)系統(tǒng)的硬件結(jié)構(gòu)可進(jìn)行各種變形。例如,關(guān)于類似病例檢索服務(wù)器17,為了提高處理能力和可靠性,作為硬件也能夠由分離的多臺服務(wù)器計算機(jī)構(gòu)成。如此,計算機(jī)系統(tǒng)的硬件結(jié)構(gòu)可根據(jù)處理能力、安全性、可靠性等所需的性能而適當(dāng)變更。而且,不限于硬件,對于病例DB23和AP50等程序,為了確保安全性和可靠性,當(dāng)然也能夠進(jìn)行雙重化或者分散于多個存儲設(shè)備來存儲。
并且,上述各實施方式中,對于類似病例檢索服務(wù)器17,以在1個醫(yī)療設(shè)施內(nèi)利用的方式進(jìn)行了說明,但也可設(shè)為可供多個醫(yī)療設(shè)施利用的方式。
具體而言,上述各實施方式中,類似病例檢索服務(wù)器17為如下方式,即,診療科終端11等設(shè)置于1個醫(yī)療設(shè)施內(nèi)的客戶終端經(jīng)由LAN可通信地連接,并根據(jù)來自客戶終端的請求,提供與類似病例檢索相關(guān)的應(yīng)用服務(wù)。為了可供多個醫(yī)療設(shè)施利用,類似病例檢索服務(wù)器17例如經(jīng)由網(wǎng)絡(luò)或公用通信網(wǎng)等WAN(Wide Area Network),與設(shè)置于多個醫(yī)療設(shè)施的客戶終端可通信地連接。并且,類似病例檢索服務(wù)器17接收來自多個醫(yī)療設(shè)施的客戶終端的請求,并向各客戶終端提供與類似病例檢索相關(guān)的應(yīng)用服務(wù)。
該情況下的類似病例檢索服務(wù)器17的設(shè)置地點(diǎn)和管理主體例如可以是與醫(yī)療設(shè)施不同的數(shù)據(jù)中心,也可以是多個醫(yī)療設(shè)施中的1個。并且,利用WAN時,考慮到信息安全性,優(yōu)選構(gòu)建VPN(Virtual Private Network)或使用HTTPS(Hypertext Transfer Protocol Secure)等安全等級較高的通信協(xié)議。
本發(fā)明并不限于上述各實施方式,只要不脫離本發(fā)明宗旨,則當(dāng)然可以采用各種結(jié)構(gòu)。例如,本例中,作為檢查圖像的例子,以CT、MRI、簡單的X射線圖像為例,但也能夠適用于通過乳房攝影術(shù)(mammography)或內(nèi)窺鏡等其他方式拍攝的檢查圖像。并且,還能夠適當(dāng)組合上述各種實施方式或各種變形例。并且,本發(fā)明除了實現(xiàn)本發(fā)明的程序以外,還涉及存儲程序的存儲介質(zhì)。