專利名稱：高級多媒體結(jié)構(gòu)化報告的制作方法
技術(shù)領(lǐng)域：
本發(fā)明一般涉及放射領(lǐng)域。更具體地，其涉及用于結(jié)合放射圖像的高級多媒體結(jié)構(gòu)化報告的裝置、系統(tǒng)和方法。本發(fā)明實施例可用于需要圖像內(nèi)容與描述性信息相鏈接的其他基于圖像的領(lǐng)域中，例如，皮膚病學(xué)、病理學(xué)、攝影術(shù)、衛(wèi)星映像、軍事目標(biāo)等。 2.相關(guān)技術(shù)的描述放射報告通常由使放射科專家可視地檢查圖像或一系列圖像、并且隨后口述圖像發(fā)現(xiàn)的敘述性描述構(gòu)成。語言描述可由錄寫員或語音到文字的計算機系統(tǒng)轉(zhuǎn)錄，以生成在放射科醫(yī)生之間在內(nèi)容、清晰度和風(fēng)格方面變化的文字報告(Sobel等，1996)。雖然美國放射學(xué)會公布了用于傳送診斷成像發(fā)現(xiàn)的指南，但是該指南未規(guī)定通用報告格式(美國放射學(xué)會，2005)。結(jié)構(gòu)化報告(SR)由專業(yè)組織(諸如北美放射學(xué)會)倡導(dǎo)，以將圖像發(fā)現(xiàn)以及相關(guān)聯(lián)的信息內(nèi)容組織成可搜索數(shù)據(jù)庫(Kahn等，2009 ;Reiner等，2007)。SR的優(yōu)點在于，其可便于諸如數(shù)據(jù)挖掘、疾病跟蹤、以及用途管理之類的應(yīng)用。已提出了許多SR解決方案，但是兩個主要挑戰(zhàn)妨礙了對這些方案的通用采納。首先，大多數(shù)SR解決方案設(shè)法更改放射科醫(yī)生自然實踐的方式。例如，一些SR解決方案需要放射科醫(yī)生來完成預(yù)定義報告模板或用計算機鼠標(biāo)對圖像的點擊；然而，放射科醫(yī)生的自然工作流程是查看圖像，之后是有時可在初始觀察之后出現(xiàn)的圖像發(fā)現(xiàn)的語言描述的口述。其次，放射科醫(yī)生所使用的各種圖像顯示系統(tǒng)是由FDA監(jiān)管的專用商品，并且雖然提出了 SR標(biāo)準(zhǔn)，但是請求賣家采納和履行SR的這些標(biāo)準(zhǔn)是重大的綜合商業(yè)挑戰(zhàn)。先前的SR解決方案具有若干缺陷。一個這種缺陷是需要與專用商業(yè)圖像顯示系統(tǒng)(例如，圖片歸檔和傳送系統(tǒng)、或PACS)、以及其他信息系統(tǒng)(例如，放射信息系統(tǒng)(RIS)和/或電子醫(yī)療記錄(RMR))的軟件集成。當(dāng)前方法的另一缺陷是放射科醫(yī)生要重復(fù)鼠標(biāo)動作、以及點擊圖像發(fā)現(xiàn)，這可導(dǎo)致人疲勞和腕管綜合癥。又一缺陷是放射科醫(yī)生會分散注意力，因為他們需要從圖像顯示屏幕看向報告生成屏幕以用來自下拉菜單的級聯(lián)集合或來自具有受限語音模式的話音識別的項來標(biāo)記圖像發(fā)現(xiàn)。同樣，當(dāng)前方法通常包括跨一系列結(jié)構(gòu)化報告鏈接或連接圖像發(fā)現(xiàn)的過程(即，在基于文字的報告的情況下困難的過程)，并且即使在基于計算機的報告方案的情況下也需要大量的用戶交互。發(fā)明概述描述用于生成基于多媒體的結(jié)構(gòu)化報告的方法的各個實施例。在一個實施例中，一種方法包括捕捉被配置成在醫(yī)學(xué)圖像顯示設(shè)備上顯示的醫(yī)學(xué)圖像。該方法還可包括捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。另外，該方法可包括在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。同樣，該方法可包括將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。另外，方法可包括在數(shù)據(jù)存儲設(shè)備內(nèi)的醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)之間創(chuàng)建數(shù)據(jù)關(guān)聯(lián)。例如，一個實施例可包括將醫(yī)學(xué)圖像鏈接到患者標(biāo)識符。同樣，該方法的一個實施例可包括將醫(yī)學(xué)圖像鏈接到一個或多個可鏈接醫(yī)學(xué)圖像。在一個實施例中，醫(yī)學(xué)圖像和可鏈接醫(yī)學(xué)圖像可根據(jù)公共檢驗鏈接。在另一實施例中，來自不同檢驗的醫(yī)學(xué)圖像和可鏈接醫(yī)學(xué)圖像可根據(jù)鏈接準(zhǔn)則鏈接。另外，醫(yī)學(xué)圖像可鏈接到計費代碼。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，其他數(shù)據(jù)可根據(jù)本實施例有利地鏈接到醫(yī)學(xué)圖像。在一個實施例中，該方法還可包括生成包括醫(yī)學(xué)圖像的合成醫(yī)學(xué)報告。合成醫(yī)學(xué)報告還可包括可鏈接醫(yī)學(xué)圖像中的鏈接到醫(yī)學(xué)圖像的至少一個。在一個實施例中，醫(yī)學(xué)圖像、以及每一可鏈接醫(yī)學(xué)圖像包括患者的整個放射歷史。在其他實施例中，試驗結(jié)果、實驗室工作結(jié)果、病歷等也可在該報告上表不。在一個實施例中，合成醫(yī)學(xué)報告排列成表格。該表格可包括醫(yī)學(xué)圖像、以及描述數(shù)據(jù)的與醫(yī)學(xué)圖像相關(guān)的至少一部分。在另一實施例中，合成醫(yī)學(xué)報告可以是包括人體模型(homunculus)的圖形報告。在另一實施例中，合成醫(yī)學(xué)報 告可以是時間線。時間線可類似地包括醫(yī)學(xué)圖像、以及至少一個可鏈接醫(yī)學(xué)圖像。在一個實施例中，醫(yī)學(xué)圖像顯示設(shè)備包括圖片歸檔和傳送系統(tǒng)(PACS)。在一個實施例中，描述數(shù)據(jù)可包括話音數(shù)據(jù)、視頻數(shù)據(jù)、文字等。另外，描述數(shù)據(jù)可包括眼動跟蹤數(shù)據(jù)。眼動跟蹤數(shù)據(jù)可包括一個或多個眼睛凝視位置、以及一個或多個眼睛凝視停留時間。另外，描述數(shù)據(jù)可包括指針位置和指針點擊中的至少一個。處理醫(yī)學(xué)圖像可包括自動地剪輯捕捉到的醫(yī)學(xué)圖像以隔離診斷圖像組分。經(jīng)剪輯的圖像可被包括在合成醫(yī)學(xué)報告中。在又一實施例中，處理醫(yī)學(xué)圖像可包括通過光學(xué)字符識別(OCR)實用工具從醫(yī)學(xué)圖像中提取文字信息；以及將與醫(yī)學(xué)圖像相關(guān)聯(lián)的提取文字存儲在數(shù)據(jù)存儲設(shè)備中。另外，該處理可包括顯示具有圖像表示和描述數(shù)據(jù)表示的圖形用戶界面；以及接收用于將圖像與描述數(shù)據(jù)鏈接的用戶命令。另外，圖形用戶界面可包括時間線。同樣，在服務(wù)器上處理圖像和描述數(shù)據(jù)可包括響應(yīng)于眼睛凝視位置和眼睛凝視停留時間中的至少一個，自動地將圖像與描述數(shù)據(jù)鏈接。例如，一個實施例可包括響應(yīng)于在特定眼睛凝視位置的眼睛凝視停留時間達(dá)到閾值，自動地觸發(fā)圖像捕捉。在一個實施例中，該方法可包括顯示半透明彈出窗口，該半透明彈出窗口顯示與醫(yī)學(xué)圖像的特征相關(guān)聯(lián)的先前檢驗發(fā)現(xiàn)。在又一實施例中，處理醫(yī)學(xué)圖像可包括對醫(yī)學(xué)圖像運行圖像匹配算法以生成與醫(yī)學(xué)圖像相關(guān)聯(lián)的唯一數(shù)字簽名。處理醫(yī)學(xué)圖像還可包括用自動量化工具來量化醫(yī)學(xué)圖像的特征。處理醫(yī)學(xué)圖像還可包括響應(yīng)于鏈接到與一個或多個可鏈接圖像相關(guān)聯(lián)的醫(yī)學(xué)圖像描述數(shù)據(jù)的多個可鏈接醫(yī)學(xué)圖像，自動地跟蹤疾病進(jìn)展。在一個實施例中，該處理包括響應(yīng)于醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，自動地計算實體瘤療效評價標(biāo)準(zhǔn)(RECIST)值。該處理還可包括響應(yīng)于醫(yī)學(xué)圖像的特征、以及與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)，自動地確定疾病期。在一個實施例中，與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)包括與醫(yī)學(xué)圖像相關(guān)聯(lián)的標(biāo)簽。該標(biāo)簽可與醫(yī)學(xué)圖像的特征相關(guān)聯(lián)。在一個實施例中，該標(biāo)簽可根據(jù)自然語言處理算法從經(jīng)隔離的話音片斷確定。該標(biāo)簽還可根據(jù)出現(xiàn)在圖像上的文字的光學(xué)字符識別確定。在又一實施例中，該標(biāo)簽可根據(jù)用戶接收到的計算機輸入確定。在又一實施例中，該方法可包括確定數(shù)據(jù)存儲設(shè)備中是否存在重復(fù)醫(yī)學(xué)圖像；確定數(shù)據(jù)存儲設(shè)備中是否存在與醫(yī)學(xué)圖像相關(guān)聯(lián)的重復(fù)描述數(shù)據(jù)；以及合并重復(fù)醫(yī)學(xué)圖像和重復(fù)描述數(shù)據(jù)。一種包括具有指令的計算機可讀介質(zhì)的有形計算機程序產(chǎn)品的各個實施例，這些指令在執(zhí)行時使得計算機執(zhí)行與以上所述的方法步驟相關(guān)聯(lián)的操作。例如，這些操作可包括接收在醫(yī)學(xué)圖像顯示設(shè)備上捕捉的醫(yī)學(xué)圖像；接收與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。描述包括具有指令的計算機可讀介質(zhì)的有形計算機程序產(chǎn)品的另一實施例。在一個實施例中，由計算機執(zhí)行的這些操作可包括捕捉醫(yī)學(xué)圖像顯示設(shè)備上的醫(yī)學(xué)圖像；捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到 處理設(shè)備，該處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。同樣描述一種用于基于多媒體的結(jié)構(gòu)化報告的裝置的各個實施例。該裝置的一個實施例可包括被配置成接收醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)的接口。另外，這種裝置可包括耦合到接口的處理設(shè)備，該處理設(shè)備被配置成處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。該裝置還可包括耦合到處理設(shè)備的數(shù)據(jù)存儲接口，該數(shù)據(jù)存儲接口被配置成存儲醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。在各個實施例中，該裝置可包括被配置成響應(yīng)于被配置成使得該裝置如根據(jù)以上方法所述執(zhí)行操作的有形計算機程序產(chǎn)品所存儲的指令來執(zhí)行操作的一個或多個軟件定義模塊。另一裝置實施例可包括被配置成顯示醫(yī)學(xué)圖像的醫(yī)學(xué)圖像顯示設(shè)備。本實施例還可包括耦合到醫(yī)學(xué)圖像顯示設(shè)備的圖像捕捉實用工具，該圖像捕捉實用工具被配置成捕捉醫(yī)學(xué)圖像。另外，該裝置可包括被配置成收集來自用戶的描述數(shù)據(jù)的用戶界面設(shè)備。在一個實施例中，該裝置還可包括耦合到圖像捕捉設(shè)備和用戶界面設(shè)備的通信適配器，該通信適配器被配置成將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到處理設(shè)備，該處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。在一個實施例中，圖像捕捉設(shè)備可包括耦合到顯示設(shè)備的計算機，該計算機具有配備有屏幕捕捉功能的操作系統(tǒng)。在一個實施例中，醫(yī)學(xué)圖像顯示設(shè)備可以是圖片歸檔和傳送系統(tǒng)(PACS)。例如，PACS可以是專用系統(tǒng)。本發(fā)明實施例的一個優(yōu)點是，圖像捕捉設(shè)備可在不需要與專用醫(yī)學(xué)圖像顯示器的直接集成的情況下捕捉來自該專用醫(yī)學(xué)圖像顯示器的醫(yī)學(xué)圖像。在這點上，本發(fā)明實施例可以是普適的，因為它可在不與任何專用系統(tǒng)直接集成的情況下與該專用系統(tǒng)一起使用。該優(yōu)勢極大地降低了本發(fā)明實施例的成本和復(fù)雜性，并且提供更一致和標(biāo)準(zhǔn)化的報告平臺。在一個實施例中，用戶界面設(shè)備可包括眼動跟蹤設(shè)備。用戶界面設(shè)備可以是攝像機。在另一實施例中，用戶界面設(shè)備可以是話音記錄設(shè)備。例如，話音記錄設(shè)備可以是具有觸發(fā)組件的口述設(shè)備。在其他實施例中，該裝置可包括被配置成響應(yīng)于有形計算機程序產(chǎn)品所存儲的指令來執(zhí)行操作的一個或多個軟件定義模塊。在這種實施例中，操作可包括捕捉醫(yī)學(xué)圖像顯示設(shè)備上的醫(yī)學(xué)圖像；捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到處理設(shè)備，該處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。還呈現(xiàn)一種系統(tǒng)的各個實施例。一個實施例可包括服務(wù)器、數(shù)據(jù)存儲設(shè)備、以及醫(yī)學(xué)圖像觀察器。在一個實施例中，服務(wù)器可包括被配置成接收醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)的接口。服務(wù)器還可包括耦合到該接口的處理設(shè)備，該處理設(shè)備被配置成處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。另外，服務(wù)器可包括耦合到處理設(shè)備的數(shù)據(jù)存儲接口，該數(shù)據(jù)存儲接口被配置成存儲醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。數(shù)據(jù)存儲設(shè)備可耦合到數(shù)據(jù)存儲接口。在一個實施例中，數(shù)據(jù)存儲設(shè)備可被配置成接收和存儲醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。 在一個實施例中，醫(yī)學(xué)圖像觀察器可耦合到服務(wù)器和數(shù)據(jù)存儲設(shè)備中的至少一個。醫(yī)學(xué)圖像觀察器可包括被配置成顯示醫(yī)學(xué)圖像的醫(yī)學(xué)圖像顯示設(shè)備。醫(yī)學(xué)圖像觀察器還可包括耦合到醫(yī)學(xué)圖像顯示設(shè)備的圖像捕捉實用工具，該圖像捕捉實用工具被配置成捕捉醫(yī)學(xué)圖像。例如，圖像捕捉實用工具可包括微軟Windows 操作系統(tǒng)的屏幕捕捉功能。醫(yī)學(xué)圖像觀察器還可包括被配置成收集來自用戶的描述數(shù)據(jù)的用戶界面設(shè)備。另外，醫(yī)學(xué)圖像觀察器還可包括耦合到圖像捕捉設(shè)備和用戶界面設(shè)備的通信適配器，該通信適配器被配置成將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到服務(wù)器。在各個實施例中，該系統(tǒng)可包括被配置成根據(jù)以上所述的方法的各個實施例執(zhí)行操作的一個或多個軟件定義模塊。在一個實施例中，該系統(tǒng)可包括X射線機。該醫(yī)學(xué)成像設(shè)備可以是計算機斷層攝影(CT)掃描儀。該醫(yī)學(xué)成像設(shè)備可以是磁共振成像(MRI)機。替換地，該醫(yī)學(xué)成像設(shè)備可以是超聲成像設(shè)備。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，各種醫(yī)學(xué)成像設(shè)備可與裝置、系統(tǒng)、以及方法的本實施例結(jié)合使用。在一個實施例中，該系統(tǒng)可包括被配置成接收表示醫(yī)學(xué)圖像的DICOM數(shù)據(jù)的PACS服務(wù)器。該系統(tǒng)還可包括耦合到PACS服務(wù)器的PACS數(shù)據(jù)存儲設(shè)備，該PACS數(shù)據(jù)存儲設(shè)備被配置成存儲表示醫(yī)學(xué)圖像的圖像數(shù)據(jù)。該系統(tǒng)還可包括被配置成接收服務(wù)器響應(yīng)于醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)所生成的基于媒體的報告的報告觀察器，該基于媒體的報告包括單次圖形觀察中的患者的整個放射歷史。術(shù)語“耦合”被定義為不必直接且不必機械地“連接”。術(shù)語“鏈接”被定義為通過或經(jīng)由中間組件連接以形成關(guān)系。例如，鏈接表可具有將一組數(shù)據(jù)鏈接到另一組數(shù)據(jù)的元數(shù)據(jù)，其中該元數(shù)據(jù)創(chuàng)建邏輯關(guān)系。同樣，兩個計算機可通過電纜鏈接。術(shù)語“一”和“一個”被定義為一個或多個，除非本公開內(nèi)容另外明確指明。術(shù)語“基本上”及其變體被定義為如本領(lǐng)域普通技術(shù)人員理解而指定的主要地但不必是全部地，并且在一個非限制性實施例中，“基本上”是指指定的10%內(nèi)、優(yōu)選5%內(nèi)、更優(yōu)選1%內(nèi)、以及最優(yōu)選O. 5%內(nèi)的范圍。術(shù)語“包括”(以及包括的任何形式，諸如“包括”和“包括有”)、“具有”(以及具有的任何形式，諸如“具有”和“具備”)、以及“包含”(以及包含的任何形式，諸如“包含”和“含有”)是開放式鏈接動詞。由此，“包括”、“具有”、“包含”或“含有”一個或多個步驟或元件的方法或設(shè)備擁有該一個或多個步驟或元件，但是不限于只擁有該一個或多個元件。同樣，“包括”、“具有”、“包含”或“含有”一個或多個特征的方法或元件擁有該一個或多個特征，但是不限于只擁有該一個或多個特征。此外，以特 定方式配置的設(shè)備或結(jié)構(gòu)至少以該方式配置，但是也可以未列出的方式配置。參考結(jié)合附圖對具體實施例的以下詳細(xì)描述，其他特征以及相關(guān)聯(lián)的優(yōu)點將變得顯而易見。附圖簡述附圖構(gòu)成本說明書的一部分并被包括在內(nèi)，以進(jìn)一步闡明本實施例的特定方面。這些實施例可通過結(jié)合本文中所呈現(xiàn)的具體實施例的詳細(xì)描述參考一幅或多幅附圖來更好地理解。圖I是示出用于高級多媒體結(jié)構(gòu)化報告的系統(tǒng)的一個實施例的示意性框圖。圖2是示出醫(yī)學(xué)圖像觀察器系統(tǒng)的一個實施例的示意性框圖。圖3是示出計算機系統(tǒng)的一個實施例的示意性框圖。圖4是示出用于高級多媒體結(jié)構(gòu)化報告的客戶機的一個實施例的示意性框圖。圖5是示出高級多媒體報告服務(wù)器的一個實施例的示意性框圖。圖6是示出高級多媒體報告服務(wù)器的另一實施例的示意性框圖。圖7是示出用于高級多媒體結(jié)構(gòu)化報告的方法的一個實施例的示意性流程圖。圖8是示出用于高級多媒體結(jié)構(gòu)化報告的方法的另一實施例的示意性流程圖。圖9是話音捕捉設(shè)備的一個實施例的立體圖。

圖10是用于自動地剪輯醫(yī)學(xué)圖像以供在合成醫(yī)學(xué)報告中使用的方法的一個實施例的邏輯圖。圖11是用于生成合成醫(yī)學(xué)報告的方法的一個實施例的邏輯圖。圖12是捕捉醫(yī)學(xué)圖像和存儲醫(yī)學(xué)圖像以供在合成醫(yī)學(xué)報告中使用的方法的一個實施例的邏輯圖。圖13是鏈接醫(yī)學(xué)圖像和發(fā)現(xiàn)以形成合成醫(yī)學(xué)報告的方法的一個實施例的邏輯圖。圖14是列表圖合成醫(yī)學(xué)報告的一個實施例的屏幕截圖。圖15是合成醫(yī)學(xué)報告的人體模型圖的一個實施例的屏幕截圖。圖16是合成醫(yī)學(xué)報告的人體模型圖的另一實施例的屏幕截圖。圖17是示出包括時間線和圖像度量的合成報告的其他實施例的邏輯圖。圖18A是RECIST結(jié)果的一個實施例的曲線圖。圖18B是RECIST百分比變化結(jié)果的一個實施例的曲線圖。圖19是包括根據(jù)本實施例所捕捉的圖像的圖形RECIST結(jié)果的一個實施例的屏幕截圖。
圖20A是具有已標(biāo)記為緊急的發(fā)現(xiàn)的列表圖報告的一個實施例的屏幕截圖。圖20B是具有用于接收與圖20A所示的緊急發(fā)現(xiàn)相對應(yīng)的緊急通知的應(yīng)用的移動設(shè)備的前視圖。圖21A是適于與本實施例一起使用的眼動跟蹤系統(tǒng)的一個實施例的示意性框圖。圖21B是圖形以及相關(guān) 聯(lián)的眼動跟蹤數(shù)據(jù)的示圖。圖21C是用于將所捕捉醫(yī)學(xué)圖像與通過自然語言處理從經(jīng)隔離的話音片斷導(dǎo)出的標(biāo)簽相關(guān)聯(lián)的方法的一個實施例的邏輯表不。解說性實施例的描述參考在附圖中示出且在以下描述中詳述的非限制性實施例來更全面地解釋各個特征和有利細(xì)節(jié)。省略公知的原材料、處理技術(shù)、組件、以及裝備的描述，以免在細(xì)節(jié)方面不必要地混淆本發(fā)明。然而，應(yīng)當(dāng)理解，在指定本發(fā)明的各個實施例時的詳細(xì)描述和具體示例只是作為示例而非作為限制給出。根據(jù)本公開，以下發(fā)明概念的精神和/或范圍內(nèi)的各種替換、修改、添加、和/或重排將對本領(lǐng)域技術(shù)人員變得顯而易見。本說明書中所述的特定單元已被標(biāo)注為模塊，以更具體地強調(diào)其實現(xiàn)的獨立性。模塊是“與較大系統(tǒng)交互的獨立硬件或軟件組件”(Alan Freedman，“計算機術(shù)語表(TheComputer Glossary)"268 (第8版，1998))。模塊包括機器或機器可執(zhí)行指令。例如，模塊可被實現(xiàn)為包括自定義VLSI電路或門陣列、現(xiàn)成半導(dǎo)體(諸如邏輯芯片、晶體管、或其他分立組件)的硬件電路。模塊還可在諸如現(xiàn)場可編程門陣列、可編程陣列邏輯、可編程邏輯設(shè)備等可編程硬件設(shè)備中實現(xiàn)。模塊還可包括在由處理機器或設(shè)備執(zhí)行時將數(shù)據(jù)存儲設(shè)備上所存儲的數(shù)據(jù)從第一狀態(tài)轉(zhuǎn)換到第二狀態(tài)的軟件定義單元或指令。例如，可執(zhí)行代碼的標(biāo)識模塊可包括可被識別為對象、過程、或功能的計算機指令的一個或多個物理或邏輯塊。然而，標(biāo)識模塊的可執(zhí)行件不需要在物理上位于一起，而可包括存儲在不同位置中的不同指令，這些指令在邏輯上結(jié)合在一起時包括該模塊、并且在由處理器執(zhí)行時實現(xiàn)所聲明的數(shù)據(jù)變換。實際上，可執(zhí)行代碼的模塊可以是單個指令、或許多指令，并且甚至可在若干不同的代碼段上、在不同程序之間、以及跨若干存儲設(shè)備分布。類似地，操作數(shù)據(jù)可在本文中在模塊內(nèi)標(biāo)識或示出，并且可體現(xiàn)為任何合適的形式并在合適類型的數(shù)據(jù)結(jié)構(gòu)內(nèi)組織。操作數(shù)據(jù)可被收集為單個數(shù)據(jù)集，并且可在包括不同存儲設(shè)備的不同位置上分布。在以下描述中，提供大量具體細(xì)節(jié)(諸如編程、軟件模塊、用戶選擇、網(wǎng)絡(luò)交易、數(shù)據(jù)庫查詢、數(shù)據(jù)庫結(jié)構(gòu)、硬件模塊、硬件電路、硬件芯片等的示例)來提供對本實施例的透徹理解。然而，本領(lǐng)域技術(shù)人員將認(rèn)識到，本發(fā)明可在沒有一個或多個具體細(xì)節(jié)的情況下、或者通過其他方法、組件、材料等來實踐。在其他實例中，沒有詳細(xì)示出或描述公知的結(jié)構(gòu)、材料、或操作以免混淆本發(fā)明的諸方面。圖I示出用于高級多媒體結(jié)構(gòu)化報告的系統(tǒng)100的一個實施例。系統(tǒng)100可包括服務(wù)器114、數(shù)據(jù)存儲設(shè)備116、以及醫(yī)學(xué)圖像觀察器112。在附加實施例中，系統(tǒng)100可包括醫(yī)學(xué)成像設(shè)備102和醫(yī)學(xué)圖像處理設(shè)備104。醫(yī)學(xué)成像設(shè)備102可生成醫(yī)學(xué)圖像數(shù)據(jù)，并將該醫(yī)學(xué)圖像數(shù)據(jù)傳送到醫(yī)學(xué)圖像處理設(shè)備104以供進(jìn)一步處理。在特定實施例中，醫(yī)學(xué)圖像數(shù)據(jù)可根據(jù)專用格式化方案、或工業(yè)標(biāo)準(zhǔn)格式化方案(諸如，醫(yī)學(xué)數(shù)字成像和通信(DICOM))來格式化。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，各種格式化方案可結(jié)合本發(fā)明實施例使用。在系統(tǒng)100包括PACS 112的一個實施例中，系統(tǒng)100還可包括被配置成接收表示醫(yī)學(xué)圖像的圖像數(shù)據(jù)的PACS服務(wù)器108。系統(tǒng)100還可包括耦合到PACS服務(wù)器108的PACS數(shù)據(jù)存儲設(shè)備110，該PACS數(shù)據(jù)存儲設(shè)備110被配置成存儲表示醫(yī)學(xué)圖像的圖像數(shù)據(jù)。在一個實施例中，系統(tǒng)100的各個組件中的每一個可通過網(wǎng)絡(luò)106耦合在一起。例如，網(wǎng)絡(luò)106可單獨或以各種組合包括局域網(wǎng)(LAN)、廣域網(wǎng)(WAN)、存儲區(qū)域網(wǎng)(SAN)、個域網(wǎng)(PAN)、以及因特網(wǎng)。在一個實施例中，醫(yī)學(xué)圖像觀察器112可耦合到服務(wù)器114和數(shù)據(jù)存儲設(shè)備116中的至少一個。醫(yī)學(xué)圖像觀察器112可包括被配置成顯示醫(yī)學(xué)圖像的醫(yī)學(xué)圖像顯示設(shè)備112。例如，圖2示出醫(yī)學(xué)圖像觀察器112的一個實施例。在一個實施例中，醫(yī)學(xué)圖像觀察器112可包括第一 PACS觀察器204、第二 PACS觀察器206、RIS顯示器202、以及處理設(shè)備208。醫(yī)學(xué)圖像觀察器112還可包括一個或多個用戶界面設(shè)備，其包括鼠標(biāo)指針210、話音記錄設(shè)備212、諸如攝像機或web相機之類的視頻捕捉設(shè)備(未示出)、如圖21A所示的眼動跟蹤設(shè)備等。用戶界面設(shè)備可收集來自用戶的圖像描述數(shù)據(jù)。例如，放射科醫(yī)生可觀察第一 PACS觀察器204上的放射圖像，并且口述他在語音記錄設(shè)備212上的發(fā)現(xiàn)。圖9示出可根據(jù)本實施例使用的語音記錄設(shè)備212的一個實施例。具體而言，該語音記錄設(shè)備可包括用于記錄話音數(shù)據(jù)的話筒1202、用于回放話音片斷的揚聲器1204、用于通過接口連接PACS的觸發(fā)按鈕1206、客戶機400、和/或處理設(shè)備208。醫(yī)學(xué)圖像觀察器112還可包括諸如計算機之類的處理設(shè)備208。如圖4進(jìn)一步描述的，圖像捕捉實用工具406可耦合到醫(yī)學(xué)圖像顯示設(shè)備112。例如，圖像捕捉實用工具406可以是被配置成在處理設(shè)備208上運行且被配置成捕捉來自第一 PACS觀察器204和第二PACS觀察器06中的至少一個的醫(yī)學(xué)圖像的軟件客戶機400?？蛻魴C400的一個實施例在圖4中示出。替換地，圖像捕捉實用工具406可以是被配置成與醫(yī)學(xué)圖像觀察器112通過接口連接并捕捉醫(yī)學(xué)圖像或醫(yī)學(xué)圖像的副本的單獨的設(shè)備或計算機。在一個實施例中，圖像捕捉實用工具406可包括處理設(shè)備208的微軟Windows 操作系統(tǒng)的屏幕捕捉功能、或者耦合到醫(yī)學(xué)圖像觀察器112的另一計算機。這些實施例的一個優(yōu)點是，客戶機400不需要安裝或與PACS觀察器204、206直接集成。因此，本發(fā)明實施例可用于捕捉來自任何醫(yī)學(xué)圖像觀察器的圖像，不管制造商、模型、或?qū)Ｓ靡笕绾?。由此，本發(fā)明實施例可以是平臺無關(guān)的。另外，醫(yī)學(xué)圖像觀察器112還可包括耦合到圖像捕捉實用工具406和用戶界面設(shè)備212的通信適配器314，該通信適配器314可將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到服務(wù)器114。圖3示出根據(jù)各個服務(wù)器108、114、處理設(shè)備208的特定實施例、和/或根據(jù)本發(fā)明實施例的報告觀察器118而適配的計算機系統(tǒng)300。中央處理單元(CPU) 302耦合到系統(tǒng)總線304。CPU 302可以是通用CPU或微處理器。本發(fā)明實施例不受CPU 302的體系結(jié)構(gòu)的限制，只要CPU 302支持如本文中所述的模塊和操作即可。CPU 302可根據(jù)本發(fā)明實施例執(zhí)行各種邏輯指令。例如，CPU 302可根據(jù)以下參考圖7和8所述的示例性操作來執(zhí)行機器級指令。計算機系統(tǒng)300還可包括隨機存取存儲器(RAM) 308，該RAM 308可以是SRAM、DRAM、SDRAM等。計算機系統(tǒng)300可利用RAM 308來存儲配置成生成患者病歷的合成報告的軟件應(yīng)用所使用的各種數(shù)據(jù)結(jié)構(gòu)。計算機系統(tǒng)300還可包括只讀存儲器(ROM) 306，該ROM306可以是PR0M、EPR0M、EEPR0M、光學(xué)存儲等。該ROM可存儲用于引導(dǎo)計算機系統(tǒng)300的配置信息。RAM 308和ROM 306保存用戶和系統(tǒng)100的數(shù)據(jù)。計算機系統(tǒng)300還可包括輸入/輸出(I/O)適配器310、通信適配器314、用戶界面適配器316、以及顯示適配器322。在特定實施例中，I/O適配器310和/或用戶界面適配器316可使用戶能夠與計算機系統(tǒng)300交互，從而輸入信息以輸入與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)、以及與檢驗相關(guān)聯(lián)的其他發(fā)現(xiàn)。在又一實施例中，顯示適配器322可顯示與軟件或基于web的應(yīng)用相關(guān)聯(lián)的圖形用戶界面，以供傳輸度量、對圖像分類等。I/O適配器310可將一個或多個存儲設(shè)備312 (諸如硬盤驅(qū)動、壓縮盤(⑶)驅(qū)動、軟盤驅(qū)動、磁帶驅(qū)動中的一個或多個)連接到計算機系統(tǒng)300。通信適配器314可適于將計算機系統(tǒng)300耦合到網(wǎng)絡(luò)106，該網(wǎng)絡(luò)106可以是LAN和/或WAN、和/或因特網(wǎng)中的一個或多個。用戶界面適配器316將諸如鍵盤320和定點設(shè)備318中的用戶輸入設(shè)備耦合到計 算機系統(tǒng)300。顯示適配器322可由CPU 302驅(qū)動以控制在顯示設(shè)備324上的顯示。本發(fā)明實施例不限于系統(tǒng)300的體系結(jié)構(gòu)。相反，計算機系統(tǒng)300被設(shè)置為可適于執(zhí)行服務(wù)器102和/或用戶界面設(shè)備110的功能的一類計算設(shè)備的示例。例如，可使用包括但不限于個人數(shù)字助理(PDA)、平板計算機、游戲控制臺、以及多處理器的服務(wù)器的任何合適的基于處理器的設(shè)備。此外，本發(fā)明實施例可在專用集成電路(ASIC)或極大規(guī)模集成(VLSI)電路上實現(xiàn)。實際上，本領(lǐng)域普通技術(shù)人員可使用能夠根據(jù)所述實施例執(zhí)行邏輯操作的任意數(shù)量的合適結(jié)構(gòu)。在諸如圖5所示的各個實施例中，服務(wù)器114可包括諸如接收機502的被配置成接收醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)的接口。服務(wù)器114還可包括耦合到接收機502的數(shù)據(jù)處理器506，該數(shù)據(jù)處理器506可被配置成處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。另外，服務(wù)器114可包括耦合到數(shù)據(jù)處理器506的數(shù)據(jù)存儲接口 512。數(shù)據(jù)存儲接口 512可被配置成將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中。數(shù)據(jù)存儲設(shè)備116可耦合到數(shù)據(jù)存儲接口 512。在一個實施例中，數(shù)據(jù)存儲設(shè)備116可被配置成接收和存儲醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。例如，數(shù)據(jù)存儲設(shè)備116可包括根據(jù)數(shù)據(jù)庫方案配置的一個或多個數(shù)據(jù)存儲介質(zhì)。數(shù)據(jù)庫可被配置成根據(jù)邏輯數(shù)據(jù)關(guān)聯(lián)存儲醫(yī)學(xué)圖像和描述數(shù)據(jù)。例如，多個醫(yī)學(xué)圖像可根據(jù)公共檢驗、或者根據(jù)另一鏈接準(zhǔn)則鏈接。例如，如果從相同檢驗數(shù)據(jù)中取得多個圖像，則它們可鏈接。這些圖像可鏈接到諸如放射科醫(yī)生之類的醫(yī)療專家所記錄的圖像發(fā)現(xiàn)。在又一實施例中，來自第一檢驗的圖像和描述數(shù)據(jù)可鏈接到來自第二檢驗的圖像和描述數(shù)據(jù)。例如，這種類型的鏈接可用于疾病進(jìn)展分析、RECIST計算等。在一個實施例中，系統(tǒng)100可包括醫(yī)學(xué)成像設(shè)備102。例如，該醫(yī)學(xué)成像設(shè)備可以是X射線機。該醫(yī)學(xué)成像設(shè)備可以是計算機斷層攝影(CT)掃描儀。該醫(yī)學(xué)成像設(shè)備可以是射頻(RF)成像設(shè)備。該醫(yī)學(xué)成像設(shè)備可以是磁共振成像(MRI)機。替換地，該醫(yī)學(xué)成像設(shè)備可以是超聲成像設(shè)備。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，各種醫(yī)學(xué)成像設(shè)備可與裝置、系統(tǒng)、以及方法的本實施例結(jié)合使用。
系統(tǒng)100還可包括被配置成接收服務(wù)器114響應(yīng)于醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)所生成的基于媒體的報告的報告觀察器118，該基于媒體的報告包括單次圖形觀察中的患者的整個放射歷史。在特定實施例中，報告觀察器可以是例如平板計算機。平板計算機可被配置成運行報告應(yīng)用。例如，報告應(yīng)用可以是可由報告觀察器通過經(jīng)由因特網(wǎng)登錄到服務(wù)器114來訪問的基于web的應(yīng)用。替換地，報告應(yīng)用可安裝在報告觀察器118上作為本地應(yīng)用。在各個實施例中，報告觀察器可以是臺式計算機、膝上型計算機、平板計算機、或PDA。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，各種合適的硬件平臺可被配置為報告觀察器118。在一個實施例中，系統(tǒng)100可包括客戶機-服務(wù)器配置。例如，如圖4所述的客戶機400可安裝在處理設(shè)備208上。在這種實施例中，客戶機400可包括輸入接口 402、認(rèn)證模塊404、圖像捕捉實用工具406、以及發(fā)射機414。另外，客戶機400可包括話音捕捉實用工具408、視頻捕捉實用工具410、以及輸入捕捉實用工具412中的至少一個。服務(wù)器114可根據(jù)圖5所述的實施例來配置。例如，服務(wù)器114可包括接收機502、 認(rèn)證模塊504、數(shù)據(jù)處理器506、報告生成器508、發(fā)現(xiàn)鏈接器510、數(shù)據(jù)存儲接口 512、以及發(fā)射機514。在一個實施例中，患者可接收來自CT掃描儀102的檢驗，如圖I所示。來自CT掃描的圖像數(shù)據(jù)可被傳送到圖像處理設(shè)備104。然后，圖像處理設(shè)備104可將圖像數(shù)據(jù)通過網(wǎng)絡(luò)106傳送到PACS服務(wù)器108。然后，PACS服務(wù)器108可將圖像數(shù)據(jù)存儲在PACS數(shù)據(jù)存儲設(shè)備110中。然后，諸如放射科醫(yī)生之類的醫(yī)療專家可訪問PACS觀察器112。然后，放射科醫(yī)生可通過向客戶機400的認(rèn)證模塊404發(fā)送認(rèn)證憑證(諸如用戶名和密碼)來登錄到客戶機400。放射科醫(yī)生還可通過向服務(wù)器114的認(rèn)證模塊504發(fā)送認(rèn)證憑證來登錄到高級多媒體服務(wù)器114。放射科醫(yī)生可訪問RIS顯示器202上的患者記錄，并且向PACS服務(wù)器108請求圖像數(shù)據(jù)。然后，PACS服務(wù)器108可將圖像數(shù)據(jù)通過網(wǎng)絡(luò)106傳送到第一 PACS觀察器204。然后，放射科醫(yī)生可使用圖像捕捉實用工具406來捕捉在第一 PACS觀察器112上顯示的醫(yī)學(xué)圖像的副本。例如，放射科醫(yī)生可點擊集成在話音記錄設(shè)備212上的觸發(fā)器或功能按鈕。放射科醫(yī)生還可使用鼠標(biāo)指針210、話音記錄設(shè)備212、視頻捕捉設(shè)備(未示出)等來記錄可分別被輸入捕捉實用工具412、話音捕捉實用工具408、以及視頻捕捉實用工具410捕捉的話音信息、以及關(guān)于醫(yī)學(xué)圖像的其他描述數(shù)據(jù)。然后，客戶機400可通過發(fā)射機414將醫(yī)學(xué)圖像和描述數(shù)據(jù)傳送到服務(wù)器114。服務(wù)器114上的接收機502可接收醫(yī)學(xué)圖像和描述數(shù)據(jù)。如果需要進(jìn)一步的處理，則數(shù)據(jù)處理器506可自動地處理醫(yī)學(xué)圖像和描述數(shù)據(jù)。醫(yī)學(xué)圖像和描述數(shù)據(jù)還可通過發(fā)現(xiàn)鏈接器510鏈接到其他發(fā)現(xiàn)。數(shù)據(jù)存儲接口 512可將醫(yī)學(xué)圖像和描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中。醫(yī)學(xué)圖像和描述數(shù)據(jù)可通過患者標(biāo)識符、試驗號碼、記錄號碼等鏈接。然后，用戶可使用報告觀察器118向服務(wù)器114請求合成醫(yī)學(xué)報告。接收機502可接收報告請求。例如，在一個實施例中，接收機502可接收來自報告觀察器118的通過因特網(wǎng)106訪問服務(wù)器114的web請求。然后，報告生成器508可根據(jù)報告請求的參數(shù)生成數(shù)據(jù)庫請求或查詢。參數(shù)可包括患者標(biāo)識信息、鏈接參數(shù)等。然后，數(shù)據(jù)存儲接口 512可從數(shù)據(jù)存儲設(shè)備檢索所請求的信息。然后，報告生成器可生成合成醫(yī)學(xué)報告。該報告可以是如圖14所示的列表圖報告、或者如圖18-19所示的人體模型樣式報告。然后，發(fā)射機514可通過因特網(wǎng)10將該報告6傳送到報告觀察器118，以供呈現(xiàn)。圖6示出了服務(wù)器114的又一實施例。如以上參考圖5所述，服務(wù)器114可包括接收機502、認(rèn)證模塊504、數(shù)據(jù)處理器506、報告生成器508、發(fā)現(xiàn)鏈接器510、數(shù)據(jù)存儲接口512、以及發(fā)射機514。在一個實施例中，發(fā)現(xiàn)鏈接器510可在數(shù)據(jù)存儲設(shè)備116內(nèi)的醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)之間創(chuàng)建數(shù)據(jù)關(guān)聯(lián)。例如，發(fā)現(xiàn)鏈接器510可將醫(yī)學(xué)圖像鏈接到患者標(biāo)識符。同樣，發(fā)現(xiàn)鏈接器可將醫(yī)學(xué)圖像鏈接到一個或多個可鏈接醫(yī)學(xué)圖像。在一個實施例中，醫(yī)學(xué)圖像和可鏈接醫(yī)學(xué)圖像可根據(jù)公共檢驗鏈接。在另一實施例中，來自不同檢驗的醫(yī)學(xué)圖像和可鏈接醫(yī)學(xué)圖像可根據(jù)鏈接準(zhǔn)則鏈接。另外，醫(yī)學(xué)圖像可鏈接到計費代碼。本領(lǐng)域普通技術(shù)人員將認(rèn)識到，其他數(shù)據(jù)可根據(jù)本發(fā)明實施例有利地鏈接到醫(yī)學(xué)圖像。在又一實施例中，數(shù)據(jù)處理器506可包括圖像剪輯器602、圖像標(biāo)簽機604、RECIST計算器614、疾病跟蹤實用工具616、疾病分期實用工具618、以及重復(fù)合并實用工具620。在一個實施例中，數(shù)據(jù)處理器506可以是如圖3所述的CPU 302。數(shù)據(jù)處理器506可耦合到接收機502。數(shù)據(jù)處理器506 —般可處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。
例如，數(shù)據(jù)處理器506可包括圖像剪輯器602。圖像剪輯器602可自動地剪輯醫(yī)學(xué)圖像以隔離診斷圖像組分。在替換實施例中，圖像剪輯器602可與客戶機400集成。圖10示出圖像剪輯器602的功能的一個實施例。在一個實施例中，圖像剪輯器602可使用硬編碼的圖像坐標(biāo)來剪輯圖像捕捉實用工具406所捕捉的醫(yī)學(xué)圖像。例如，Philips PACS系統(tǒng)或BRIT PACS系統(tǒng)可包括已知像素坐標(biāo)系統(tǒng)。圖像剪輯器602可被硬編碼以將圖像裁短到PACS像素的子集內(nèi)。光學(xué)圖像坐標(biāo)可根據(jù)PACS或3D工作站的品牌、并且根據(jù)圖像布局而變化。在另一實施例中，圖形用戶界面(⑶I)工具可被設(shè)置成允許管理員通過繪制用于特定工作站配置的橡皮帶式框(rubber-band box)來設(shè)置剪輯(croppy)坐標(biāo)。如圖10所示，橡皮帶式框可由用戶調(diào)節(jié)。然后，經(jīng)剪輯的圖像可存儲在數(shù)據(jù)存儲設(shè)備中，以供在諸如合成報告之類的基于多媒體的報告中使用。在一個實施例中，圖像標(biāo)簽機604可包括自然語言處理器606、光學(xué)字符識別(OCR)實用工具608、用戶輸入處理器610、或數(shù)據(jù)庫鏈接實用工具612中的一個或多個。一般而言，圖像標(biāo)簽機604可包括用于將描述數(shù)據(jù)添加到圖像捕捉實用工具406所捕捉的圖像的實用工具。添加描述數(shù)據(jù)可包括收集來自醫(yī)學(xué)專家(諸如放射科醫(yī)生)的新描述數(shù)據(jù)。在另一實施例中，添加描述數(shù)據(jù)可包括捕捉、傳送、或以其他方式獲取現(xiàn)有描述數(shù)據(jù)，并且將該描述數(shù)據(jù)與所捕捉的醫(yī)學(xué)圖像相關(guān)聯(lián)。例如，圖像標(biāo)簽機604可包括自然語言處理器606。圖21C示出用于將在經(jīng)隔離的話音片斷中所捕捉的描述數(shù)據(jù)與醫(yī)學(xué)圖像鏈接的方法的一個實施例。自然語言處理模塊606解決醫(yī)學(xué)專家的公共工作流程問題。例如，放射科醫(yī)生可查看第一圖像，并標(biāo)識第一圖像內(nèi)的顯著特征。然后，在描述該顯著特征時，放射科醫(yī)生可同時掃描第二圖像以標(biāo)識第二顯著特征。在一個實施例中，放射科醫(yī)生可使用話音捕捉實用工具408來記錄話音片斷。然后，自然語言處理器606可使用公共話音識別程序?qū)⒃捯艮D(zhuǎn)錄成文字。然后，自然語言處理器606可掃描文字以標(biāo)識描述該特征的度量，或者可標(biāo)識關(guān)鍵字以及等效物。例如，一些關(guān)鍵字可包括“穩(wěn)定的”、“沒有改變”、“經(jīng)改善的”、“惡化的”等。例如，自然語言處理可用于標(biāo)識和分配解剖、病理、以及優(yōu)先級特征。例如，觀察肺的CT圖像的放射科醫(yī)生可聲明“該圖像包括左肺中需要緊急關(guān)注的贅生物”。自然語言處理器606可標(biāo)識關(guān)鍵字“肺”、“贅生物”、以及“緊急”，并且相應(yīng)地分配解剖、病理、以及優(yōu)先級字段。在一個實施例中，圖像標(biāo)簽機604可包括OCR實用工具608。OCR實用工具608可掃描圖像捕捉實用工具406所捕捉的醫(yī)學(xué)圖像以標(biāo)識出現(xiàn)在該圖像中的文字。在一個實施例中，可掃描整個醫(yī)學(xué)圖像。替換地，可掃描已知包含文字的感興趣的特定區(qū)域。在又一實施例中，針對使用圖像處理的0CR，可強化該文字。OCR實用工具608還可自動地確定向特定描述數(shù)據(jù)字段分配什么文字。例如，OCR實用工具608可自動地標(biāo)識患者的姓名、醫(yī)療記錄號碼、數(shù)據(jù)、時間、圖像位置等。OCR實用工具608所確定的文字可被存儲在數(shù)據(jù)存儲設(shè)備116 中。在一個實施例中，圖像標(biāo)簽機604可包括用戶輸入處理器610。用戶輸入處理器 610可生成允許用戶選擇向醫(yī)學(xué)圖像分配的標(biāo)簽的一個或多個菜單。例如，該菜單可以是級聯(lián)菜單、下拉框菜單、文本選擇框等。在另一實施例中，該菜單可包括一個或多個文本輸入字段。例如，可使用文本輸入字段來分配限定醫(yī)學(xué)圖像中的特征大小的一個或多個度量。在另一實施例中，可使用例如選擇的級聯(lián)菜單來分配解剖字段、病理字段、優(yōu)先級字段等。每一選擇可填充級聯(lián)菜單的下一級，從而向用戶提供相關(guān)選擇的附加集合。在一個實施例中，如圖21A-C所示，用戶輸入處理器610可接收和處理眼動跟蹤數(shù)據(jù)。在眼動跟蹤系統(tǒng)的一個實施例在圖21A中示出。用戶可將特定位置的其凝視保持特定時間量。眼動跟蹤相機可跟蹤眼睛凝視位置，并使那些位置與醫(yī)學(xué)圖像的部分相關(guān)。例如，圖21B示出圖21A的眼動跟蹤設(shè)備所確定的眼睛凝視位置的一個實施例。除了眼動跟蹤位置以外，用戶輸入處理器610可跟蹤如圖21C所示的眼睛凝視位置的改變時序。在特定實施例中，用戶輸入處理器610和自然語言處理器606可結(jié)合工作以向眼睛凝視位置所指示的醫(yī)學(xué)圖像的特征分配標(biāo)簽。其一個實施例在圖21C中示出。在一個實施例中，話音片斷可與眼動跟蹤設(shè)備所收集的眼睛凝視位置信息隔離。在這種實施例中，可按照時間分析話音片斷，并且可按照時間分析眼睛凝視位置信息。與普通眼動跟蹤技術(shù)不同，本發(fā)明實施例包括來自放射科醫(yī)生語言描述的信息內(nèi)容(以及該信息內(nèi)容的固有醫(yī)學(xué)重要性)與給予所捕捉的圖像一定重要程度的關(guān)鍵圖像的相關(guān)聯(lián)。在放射科醫(yī)生的典型工作流程中，長的停留時間可出現(xiàn)在放射科醫(yī)生查看錯綜復(fù)雜但最終不重要的圖像發(fā)現(xiàn)時，但是放射科醫(yī)生可花費較少的時間來查看更明顯的重要發(fā)現(xiàn)。與現(xiàn)有技術(shù)相比，信息內(nèi)容與關(guān)鍵圖像的鏈接提供向顯著圖像分配值的更準(zhǔn)確手段。在另一實施例中，單獨的眼動跟蹤I旲塊可包括有客戶機400。在另一實施例中，當(dāng)用戶將其眼睛凝視位置保持在特定位置長達(dá)達(dá)到預(yù)定閾值的持續(xù)時間時，該事件可自動地觸發(fā)圖像捕捉。在又一實施例中，圖像標(biāo)簽機604可包括數(shù)據(jù)庫鏈接實用工具612。例如，與在例如第一 PACS觀察器204上顯示的原始醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)可存儲在PACS數(shù)據(jù)存儲設(shè)備110。在一個實施例中，描述數(shù)據(jù)可通過數(shù)據(jù)庫鏈接實用工具601自動地從PACS數(shù)據(jù)存儲設(shè)備110檢索。在另一實施例中，存儲在數(shù)據(jù)存儲設(shè)備116內(nèi)的醫(yī)學(xué)圖像和描述數(shù)據(jù)可基于例如解剖、模態(tài)等存儲在單獨的數(shù)據(jù)庫中。在一個實施例中，數(shù)據(jù)庫鏈接實用工具612可使用索引或關(guān)鍵字段來鏈接或檢索來自多個數(shù)據(jù)庫的信息。例如，所有圖像、以及與患者姓名、患者ID等相關(guān)的描述數(shù)據(jù)可通過數(shù)據(jù)庫鏈接實用工具612來鏈接和檢索。在另一實施例中，RECIST計算器614可自動地執(zhí)行RECIST計算。例如，圖18A-21C示出RECIST計算器614的采樣結(jié)果。在一個實施例中，RECIST計算器614可根據(jù)定義何時癌癥患者在治療期間改善(“響應(yīng)”)、保持相同(“穩(wěn)定”)、或惡化(“進(jìn)展”)的公布規(guī)則來計算結(jié)果。RECIST計算器614可基于描述數(shù)據(jù)中所包含的腫瘤度量來計算數(shù)值。在另一實施例中，RECIST計算器628可基于RCIST計算器614所計算的結(jié)果來生成如圖18A-B所示的表示腫瘤響應(yīng)水平或百分比改變水平的曲線。在又一實施例中，RECIST計算器628可基于RECIST計算器614所執(zhí)行的RECIST計算來生成RECIST報告，該RECIST報告可包括如圖21C所示的圖像捕捉實用工具406所捕捉的鏈接醫(yī)學(xué)圖像。在各個實施例中，服務(wù)器114還可包括疾病跟蹤實用工具616和疾病分期實用工具618。RECIST計算器614所生成的RECIST值可用于疾病跟蹤和疾病分期。在特定實施例中，疾病分期報告可由疾病分期實用工具618生成。疾病期可包括病期O、病期I、病期2、病期3、病期4、以及復(fù)發(fā)。例如，如果患者診斷患有結(jié)腸癌，則癌癥的病期可由疾病分期實 用工具618響應(yīng)于描述數(shù)據(jù)自動地確定。在該示例中，病期O可指示癌癥只在結(jié)腸或直腸最里面的襯層中找到。病期I可指示腫瘤已長到結(jié)腸或直腸的內(nèi)壁中。腫瘤還未長成穿過該壁。病期2可指示腫瘤更深地擴展到結(jié)腸或直腸的壁中、或穿過該壁，或者指示其已侵襲附近的組織，但是癌癥細(xì)胞還未擴散到淋巴結(jié)。病期3可指示癌癥已擴散到附近的淋巴結(jié)，但還未擴散到身體的其他部分。病期4可指示癌癥已擴散到身體的其他部分，諸如肝或肺。復(fù)發(fā)可指示這是已治療且在可能未檢測到癌癥的一段時間之后重現(xiàn)的癌癥，并且指示疾病可在結(jié)腸或直腸中、或在身體的另一部分中重現(xiàn)。這些病期、以及其他類型的癌癥的相應(yīng)病期的準(zhǔn)則已由美國國家健康協(xié)會確定。疾病跟蹤模塊616可使用分期信息、RECIST信息、以及描述數(shù)據(jù)中所包含的其他度量來自動地跟蹤疾病的進(jìn)展。疾病跟蹤模塊616可以曲線、表格、時間線等形式跟蹤疾病。重復(fù)合并實用工具620可合并重復(fù)發(fā)現(xiàn)。當(dāng)在一個以上圖像系列(例如，動脈、靜脈的CT掃描、以及成像的延遲相)上標(biāo)識發(fā)現(xiàn)時，經(jīng)合并的發(fā)現(xiàn)是有用的。在一個實施例中，合并實用工具620可通過分析每一醫(yī)學(xué)圖像的一組特征來自動地檢測重復(fù)發(fā)現(xiàn)。替換地，重復(fù)合并實用工具620可提供用戶界面以允許用戶手動地選擇重復(fù)發(fā)現(xiàn)來進(jìn)行合并。在一個實施例中，報告生成器508可包括列表圖生成器622、人體模型圖生成器624、時間線生成器626、RECIST報告生成器628、以及緊急通知生成器630。一般而言，醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)可從數(shù)據(jù)存儲設(shè)備116中的數(shù)據(jù)庫檢索，以生成列表圖報告、人體模型圖報告、時間線報告、RECIST報告等中的一個或多個。在特定實施例中，列表圖報告和/或人體模型圖報告可以是合成報告。合成報告可以是所有圖像發(fā)現(xiàn)的集聚體，其中通過示出鏈接到現(xiàn)有發(fā)現(xiàn)的特定圖像發(fā)現(xiàn)(例如，堆疊的圖像外觀)的指示符，來自任何模態(tài)的最近圖像發(fā)現(xiàn)在具體解剖位置上(在人體模型報告中)、或者在解剖類別(在列表型報告中沖顯示。這與包括關(guān)于具體模態(tài)/日期/時間/成像解剖(例如，在特定日期和時間獲取的胸部X射線)的圖像發(fā)現(xiàn)列表的常規(guī)報告不同。然而，根據(jù)存儲在數(shù)據(jù)庫116上的圖像發(fā)現(xiàn)的數(shù)據(jù)庫，可過濾掉關(guān)于具體檢驗的發(fā)現(xiàn)以創(chuàng)建等效于常規(guī)放射報告的發(fā)現(xiàn)子集。
圖14不出合成列表圖報告的一個實施例。如圖14所不,列表圖報告可以表格形式呈現(xiàn)。列表圖報告可包括一個或多個醫(yī)學(xué)圖像縮略圖。該報告可根據(jù)用戶指定給列表圖報告生成器622的解剖、病理、時間、或任何其他準(zhǔn)則來組織。在圖14的實施例中，列表圖報告包括發(fā)現(xiàn)類別、醫(yī)學(xué)圖像的縮略像、方位的指示、解剖位置、病理指示符、優(yōu)先級指示符、特征度量、改變指示符(如疾病跟蹤實用工具616所生成的)、醫(yī)學(xué)專家描述發(fā)現(xiàn)的視頻或音頻、醫(yī)學(xué)專家發(fā)現(xiàn)的文字轉(zhuǎn)錄、以及附加支持圖像的指示符。當(dāng)然，本領(lǐng)域普通技術(shù)人員將認(rèn)識到，更多或更少的字段可被包括在列表圖報告中。圖15不出人體模型圖生成器624所生成的人體模型圖報告的一個實施例。圖16示出替換實施例。普通技術(shù)人員將認(rèn)識到人體模型和人體模型圖報告的許多不同的實施例。在圖18和19的人體模型圖報告的一個實施例中，最近發(fā)現(xiàn)可出現(xiàn)在人體模型上與患者的物理解剖相關(guān)的位置中。在一個實施例中，如果存在與最近發(fā)現(xiàn)的解剖相關(guān)的附加發(fā)現(xiàn)，則存在附加發(fā)現(xiàn)的指示符可出現(xiàn)在人體模型報告上。例如，如圖18和19所示，多個發(fā)現(xiàn)可表現(xiàn)為堆疊圖像。替換地，框、星星、或其他指示符可指示存在附加發(fā)現(xiàn)。然后，用戶可在發(fā)現(xiàn)的縮略圖上點擊，并且關(guān)于發(fā)現(xiàn)或附加發(fā)現(xiàn)的附加信息可出現(xiàn)在新的觀察面板中、 或在同一觀察面板中。如圖17所示，時間線生成器626可生成這些圖像的時間線。在一個實施例中，時間線生成器626可生成包括來自多個不同模態(tài)的圖像和發(fā)現(xiàn)的疾病時間線。例如，疾病時間線可包括到CT發(fā)現(xiàn)、超聲發(fā)現(xiàn)、實驗室發(fā)現(xiàn)等的鏈接。在一個實施例中，這些鏈接可包括與醫(yī)學(xué)圖像相對應(yīng)的縮略像。附加信息可被包括在圖17所示的詳細(xì)視圖中。例如，詳細(xì)視圖可包括特征度量、曲線、RECIST信息、疾病病期信息、疾病跟蹤信息、以及描述數(shù)據(jù)中所包括的其他信息。在一個實施例中，報告生成器508可包括緊急通知生成器630。響應(yīng)于發(fā)現(xiàn)具有緊急優(yōu)先級的確定，緊急通知生成器630可自動地生成給例如醫(yī)學(xué)專家的通知。例如，放射科醫(yī)生可查看腹部CT以確定患者是否有闌尾炎、以及患者的闌尾是否處于破裂的危險中。如果放射科醫(yī)生將優(yōu)先級字段設(shè)置為緊急，則緊急通知生成器630可通知顧問內(nèi)科醫(yī)生、夕卜科醫(yī)生、手術(shù)室工作人員等需要緊急關(guān)注。緊急通知生成器630可生成自動的電話呼叫、尋呼、電子郵件、文本消息等。在另一實施例中，緊急通知生成器630可與加載在移動設(shè)備上的移動應(yīng)用通過接口連接。例如，如圖20A和20B所示，當(dāng)優(yōu)先級字段被設(shè)為緊急時，遠(yuǎn)程移動設(shè)備上的移動應(yīng)用可觸發(fā)通知。在一個實施例中，該通知可包括醫(yī)學(xué)圖像的副本、優(yōu)先級的指示符、以及用以監(jiān)聽放射科醫(yī)生發(fā)現(xiàn)的音頻或視頻的鏈接。以下的示例性流程圖一般被闡述為邏輯流程圖。由此，所描繪的次序、以及所標(biāo)記的步驟指示所呈現(xiàn)方法的一個實施例。可構(gòu)想在功能、邏輯、或效果方面等效于所示方法的一個或多個步驟、或者其部分的其他步驟和方法。另外，所采用的格式和符號被設(shè)置成解釋該方法的邏輯步驟，并且被理解為不限制該方法的范圍。雖然在流程圖中可采用各種箭頭類型和線類型，但是其被理解為不限制相應(yīng)方法的范圍。實際上，一些箭頭或其他連接符可用于只指示該方法的邏輯流程。例如，箭頭可指示在所描繪方法的枚舉步驟之間的未指定持續(xù)時間的等待或監(jiān)視時間段。另外，特定方法出現(xiàn)的次序可能或可能不嚴(yán)格地遵循所示的相應(yīng)步驟的次序。圖7示出用于生成合成醫(yī)學(xué)報告的方法700的一個實施例。在一個實施例中，當(dāng)圖像捕捉實用工具406捕捉被配置成在醫(yī)學(xué)圖像顯示設(shè)備112上顯示的醫(yī)學(xué)圖像(702)時，方法700開始。在一個實施例中，圖像捕捉實用工具406可復(fù)制在可購得的PACS觀察器204上顯示的圖像。例如，圖像捕捉實用工具406可包括屏幕捕捉功能。然后，話音捕捉實用工具408、視頻捕捉實用工具410、以及輸入捕捉實用工具412可捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)(704)。例如，話音捕捉實用工具408可捕捉醫(yī)學(xué)專家口述發(fā)現(xiàn)的話音片斷。視頻捕捉實用工具410可包括被配置成捕捉醫(yī)學(xué)專家描述發(fā)現(xiàn)的視頻記錄的web-相機(未示出)。輸入捕捉實用工具可包括眼動跟蹤數(shù)據(jù)、菜單選擇、文本輸入等。另外，方法700可包括在數(shù)據(jù)處理設(shè)備(諸如服務(wù)器114)上處 理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。具體而言，服務(wù)器114上的數(shù)據(jù)處理器506可處理醫(yī)學(xué)圖像和描述數(shù)據(jù)。同樣，方法700可包括將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中(708)。例如，數(shù)據(jù)存儲接口 512可將醫(yī)學(xué)圖像和描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中。方法800的另一實施例在圖8中描述。方法800可在用戶訪問PACS觀察器(802)時開始。然后，用戶可訪問高級多媒體報告客戶機(804)。例如，用戶可通過將憑證發(fā)送到認(rèn)證模塊404來登錄到客戶機400。然后，用戶可選擇在PACS上觀察的患者(806)。例如，用戶可選擇RIS系統(tǒng)202中的患者。然后，用戶可訪問高級多媒體報告服務(wù)器114 (808)。然后，用戶可觸發(fā)客戶機上的圖像捕捉實用工具406以捕捉在PACS觀察器204上顯示的圖像的副本(702)。該屏幕捕捉702可與任何圖像觀察平臺合作，并且可能不需要與PACS觀察器的集成。例如，用戶可使用口述設(shè)備212的觸發(fā)器或功能,諸如Philips Speechmike。替換地，用戶可通過鼠標(biāo)210的點擊或鍵盤上的擊鍵來觸發(fā)捕捉。然后，話音捕捉實用工具408、視頻捕捉實用工具410、以及輸入捕捉實用工具412中的一個或多個可捕捉與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)。該過程一般在圖11中示出?？墒褂冒l(fā)射機414將醫(yī)學(xué)圖像以及相關(guān)聯(lián)的描述數(shù)據(jù)傳送到服務(wù)器114，如圖12所示。服務(wù)器114可處理醫(yī)學(xué)圖像和描述數(shù)據(jù)(706)，如在以上實施例中所描述的。例如，描述數(shù)據(jù)可由OCR實用工具608、自然語言處理器606、以及用戶輸入處理器610進(jìn)一步生成或細(xì)化。數(shù)據(jù)存儲接口 512然后可將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中(708 )。在又一實施例中，發(fā)現(xiàn)鏈接器510可基于數(shù)據(jù)庫中的鏈接字段等將醫(yī)學(xué)圖像和描述數(shù)據(jù)鏈接到其他醫(yī)學(xué)圖像和描述數(shù)據(jù)。該過程一般在圖13中示出。接著，第二用戶可向服務(wù)器114請求報告。例如，第二用戶可將對與所選患者相關(guān)聯(lián)的合成報告的請求經(jīng)由報告觀察器118發(fā)送到服務(wù)器114。服務(wù)器114可接收對合成報告的請求(810)，并且報告生成器508可通過存取來自存儲在數(shù)據(jù)存儲設(shè)備116上的醫(yī)學(xué)圖像和描述數(shù)據(jù)的數(shù)據(jù)庫的醫(yī)學(xué)圖像和描述數(shù)據(jù)來生成合成報告(812)。然后，發(fā)射機514可通過網(wǎng)絡(luò)106將合成報告發(fā)送到報告觀察器118(814)。該合成報告可以是如圖14所示的列表圖報告、或者如圖15-16所示的人體模型圖報告。響應(yīng)于點擊合成報告上的圖像縮略圖，報告觀察器可向服務(wù)器114請求關(guān)于所選發(fā)現(xiàn)的附加信息。服務(wù)器114可查詢存儲在數(shù)據(jù)存儲設(shè)備116上的數(shù)據(jù)庫，并且將附加報告信息返回報告觀察器118。在又一實施例中，方法800還可包括生成包括醫(yī)學(xué)圖像的合成醫(yī)學(xué)報告。合成醫(yī)學(xué)報告還可包括可鏈接醫(yī)學(xué)圖像中的鏈接到醫(yī)學(xué)圖像的至少一個。在一個實施例中，醫(yī)學(xué)圖像、以及每一可鏈接醫(yī)學(xué)圖像包括患者的整個放射歷史。在其他實施例中，試驗結(jié)果、實驗室工作結(jié)果、病歷等也可在該報告上表不。在一個實施例中，合成醫(yī)學(xué)報告排列成表格。該表格可包括醫(yī)學(xué)圖像、以及描述數(shù)據(jù)與醫(yī)學(xué)圖像相關(guān)的至少一部分。在另一實施例中，合成醫(yī)學(xué)報告可以是包括人體模型的圖形報告。在另一實施例中，合成醫(yī)學(xué)報告可以是時間線。時間線可類似地包括醫(yī)學(xué)圖像、以及至少一個可鏈接醫(yī)學(xué)圖像。處理醫(yī)學(xué)圖像(706)可包括自動地剪輯捕捉到的醫(yī)學(xué)圖像以隔離診斷圖像組分。經(jīng)剪輯的圖像可被包括在合成醫(yī)學(xué)報告中。在又一實施例中，處理醫(yī)學(xué)圖像(706)可包括通過光學(xué)字符識別(OCR)實用工具從醫(yī)學(xué)圖像中提取文字信息；以及將與醫(yī)學(xué)圖像相關(guān)聯(lián)的提取文字存儲在數(shù)據(jù)存儲設(shè)備116中。另外，該處理可包括顯示具有圖像表示和描述數(shù)據(jù)表示的圖形用戶界面；以及接收用于將圖像與描述數(shù)據(jù)鏈接的用戶命令。另外，圖形用戶界面可包括時間線。同樣，在服務(wù)器114上處理圖像和描述數(shù)據(jù)可包括響應(yīng)于眼睛凝視位置和眼睛凝視停留時間中的至少一個，自動地將圖像與描述數(shù)據(jù)鏈接。例如，一個實施例可包括響應(yīng)于在特定眼睛凝視位置的眼睛凝視停留時間達(dá)到閾值，自動地觸發(fā)圖像捕捉。在又一實施例中，處理醫(yī)學(xué)圖像(706)可包括對醫(yī)學(xué)圖像運行圖像匹配算法以生成與醫(yī)學(xué)圖像相關(guān)聯(lián)的唯一數(shù)字簽名。處理醫(yī)學(xué)圖像(706)還可包括用自動量化工具來量化醫(yī)學(xué)圖像的特征。 處理醫(yī)學(xué)圖像(706)還可包括響應(yīng)于鏈接到與一個或多個可鏈接圖像相關(guān)聯(lián)的醫(yī)學(xué)圖像描述數(shù)據(jù)的多個可鏈接醫(yī)學(xué)圖像，自動地跟蹤疾病進(jìn)展。在一個實施例中，該處理包括響應(yīng)于醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，自動地計算實體瘤療效評價標(biāo)準(zhǔn)(RECIST)值。該處理還可包括響應(yīng)于醫(yī)學(xué)圖像的特征、以及與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)，自動地確定疾病病期。在一個實施例中，與醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)包括與醫(yī)學(xué)圖像相關(guān)聯(lián)的標(biāo)簽。該標(biāo)簽可與醫(yī)學(xué)圖像的特征相關(guān)聯(lián)。在一個實施例中，該標(biāo)簽可根據(jù)自然語言處理算法從經(jīng)隔離的話音片斷確定。該標(biāo)簽還可根據(jù)出現(xiàn)在圖像上的文字的光學(xué)字符識別確定。在又一實施例中，該標(biāo)簽可根據(jù)用戶接收到的計算機輸入確定。在又一實施例中，方法700可包括確定數(shù)據(jù)存儲設(shè)備116中是否存在重復(fù)醫(yī)學(xué)圖像；確定數(shù)據(jù)存儲設(shè)備116中是否存在與醫(yī)學(xué)圖像相關(guān)聯(lián)的重復(fù)描述數(shù)據(jù)；以及合并重復(fù)醫(yī)學(xué)圖像和重復(fù)描述數(shù)據(jù)。在一個實施例中，一種包括計算機可讀介質(zhì)的有形計算機程序產(chǎn)品可包括指令，這些指令在執(zhí)行時使得計算機(諸如服務(wù)器114)執(zhí)行與以上所述的方法700的步驟相關(guān)聯(lián)的操作。例如，這些操作可包括接收在醫(yī)學(xué)圖像顯示設(shè)備112上捕捉的醫(yī)學(xué)圖像；接收與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)(706);以及將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中(708)。在一種包括具有指令的計算機可讀介質(zhì)的有形計算機程序產(chǎn)品的另一實施例中，由計算機(諸如處理設(shè)備208)執(zhí)行的操作可包括捕捉醫(yī)學(xué)圖像顯示設(shè)備112上的醫(yī)學(xué)圖像(702);捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)(704)；以及將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到處理設(shè)備；該處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備116中。根據(jù)本公開，本文中公開和要求保護(hù)的所有設(shè)備、系統(tǒng)和/或方法無需過多的實驗即可作出和執(zhí)行。盡管參考一些實施例已描述了本發(fā)明的組合和方法，但將對本領(lǐng)域技術(shù)人員顯而易見的是，可向本文中所述的組合和方法、以及本文中所述的方法的各個步驟或各步驟的順序施加變體，而不背離本發(fā)明的概念、精神和范圍。更具體地，顯而易見的是，在可實現(xiàn)相同或類似的結(jié)果時，化學(xué)和生理相關(guān)的特定試劑可替換本文中所述的試劑。對 本領(lǐng)域技術(shù)人員顯而易見的所有這些類似的替換和改變被認(rèn)為是在所附權(quán)利要求所限定的本發(fā)明的精神、范圍和概念內(nèi)。
權(quán)利要求
1.一種方法，包括 捕捉被配置成在醫(yī)學(xué)圖像顯示設(shè)備上顯示的醫(yī)學(xué)圖像； 捕捉與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)； 在數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及 將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。
2.如權(quán)利要求I所述的方法，其特征在于，還包括在所述數(shù)據(jù)存儲設(shè)備內(nèi)的所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)之間創(chuàng)建數(shù)據(jù)關(guān)聯(lián)。
3.如權(quán)利要求1-2中任一項所述的方法，其特征在于，還包括將所述醫(yī)學(xué)圖像鏈接到患者標(biāo)識符。
4.如權(quán)利要求1-3中任一項所述的方法，其特征在于，還包括將所述醫(yī)學(xué)圖像鏈接到一個或多個可鏈接醫(yī)學(xué)圖像。
5.如權(quán)利要求1-4中任一項所述的方法，其特征在于，所述醫(yī)學(xué)圖像和所述可鏈接醫(yī)學(xué)圖像根據(jù)公共檢驗鏈接。
6.如權(quán)利要求1-5中任一項所述的方法，其特征在于，來自不同檢驗的所述醫(yī)學(xué)圖像和所述可鏈接醫(yī)學(xué)圖像根據(jù)鏈接準(zhǔn)則鏈接。
7.如權(quán)利要求1-6中任一項所述的方法，其特征在于，還包括將所述醫(yī)學(xué)圖像鏈接到計費代碼。
8.如權(quán)利要求1-7中任一項所述的方法，其特征在于，還包括生成合成醫(yī)學(xué)報告，所述合成醫(yī)學(xué)報告包括所述醫(yī)學(xué)圖像。
9.如權(quán)利要求1-8中任一項所述的方法，其特征在于，還包括生成包括所述醫(yī)學(xué)圖像、以及所述可鏈接醫(yī)學(xué)圖像中的鏈接到所述醫(yī)學(xué)圖像的至少一個的合成醫(yī)學(xué)報告。
10.如權(quán)利要求1-9中任一項所述的方法，其特征在于，還包括生成包括所述醫(yī)學(xué)圖像、以及包含患者的整個放射歷史的每一可鏈接醫(yī)學(xué)圖像的合成醫(yī)學(xué)報告。
11.如權(quán)利要求1-10中任一項所述的方法,其特征在于,所述合成醫(yī)學(xué)報告包括表格，所述表格包括所述醫(yī)學(xué)圖像、以及所述描述數(shù)據(jù)的與所述醫(yī)學(xué)圖像相關(guān)的至少一部分。
12.如權(quán)利要求1-11中任一項所述的方法，其特征在于，所述合成醫(yī)學(xué)報告包括包含具有相關(guān)聯(lián)圖像發(fā)現(xiàn)的人體模型的圖形報告。
13.如權(quán)利要求1-12中任一項所述的方法，其特征在于，所述合成醫(yī)學(xué)報告包括包含時間線的圖形報告，所述時間線包括所述醫(yī)學(xué)圖像、以及至少一個所述可鏈接醫(yī)學(xué)圖像。
14.如權(quán)利要求1-13中任一項所述的方法，其特征在于，所述醫(yī)學(xué)圖像顯示設(shè)備包括圖片歸檔和傳送系統(tǒng)(PACS)。
15.如權(quán)利要求1-14中任一項所述的方法，其特征在于，所述醫(yī)學(xué)圖像顯示設(shè)備被配置成顯示根據(jù)專用醫(yī)學(xué)圖像數(shù)據(jù)格式配置的醫(yī)學(xué)圖像。
16.如權(quán)利要求1-15中任一項所述的方法，其特征在于，所述描述數(shù)據(jù)包括話音數(shù)據(jù)。
17.如權(quán)利要求1-16中任一項所述的方法，其特征在于，所述描述數(shù)據(jù)包括視頻數(shù)據(jù)。
18.如權(quán)利要求1-17中任一項所述的方法，其特征在于，所述描述數(shù)據(jù)包括文字。
19.如權(quán)利要求1-18中任一項所述的方法，其特征在于，所述描述數(shù)據(jù)包括眼動跟蹤數(shù)據(jù)，所述眼動跟蹤數(shù)據(jù)包括 一個或多個眼睛凝視位置；以及一個或多個眼睛凝視停留時間。
20.如權(quán)利要求1-19中任一項所述的方法，其特征在于，所述描述數(shù)據(jù)包括指針位置和指針點擊中的至少一個。
21.如權(quán)利要求1-20中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括自動地剪輯捕捉到的醫(yī)學(xué)圖像以隔離診斷圖像組分。
22.如權(quán)利要求1-21中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括通過光學(xué)字符識別(OCR)實用工具從所述醫(yī)學(xué)圖像中提取文字信息，以及將與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的提取文字存儲在所述數(shù)據(jù)存儲設(shè)備中。
23.如權(quán)利要求1-22中任一項所述的方法，其特征在于，在所述數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像和在所述數(shù)據(jù)處理設(shè)備上處理所述描述數(shù)據(jù)還包括顯示具有圖像表示和描述數(shù)據(jù)表示的圖形用戶界面，以及接收用于將所述圖像與所述描述數(shù)據(jù)鏈接的用戶命令。
24.如權(quán)利要求1-23中任一項所述的方法，其特征在于，所述圖形用戶界面包括時間線。
25.如權(quán)利要求1-24中任一項所述的方法，其特征在于，在所述服務(wù)器上處理所述圖像和在所述服務(wù)器上處理所述描述數(shù)據(jù)還包括響應(yīng)于眼睛凝視位置和眼睛凝視停留時間中的至少一個，自動地將所述圖像與所述描述數(shù)據(jù)鏈接。
26.如權(quán)利要求1-25中任一項所述的方法，其特征在于，包括響應(yīng)于在特定眼睛凝視位置眼睛凝視停留時間達(dá)到閾值，自動地觸發(fā)圖像捕捉。
27.如權(quán)利要求1-26中任一項所述的方法，其特征在于，包括顯示半透明彈出窗口，所述半透明彈出窗口顯示與所述醫(yī)學(xué)圖像的特征相關(guān)聯(lián)的先前檢驗發(fā)現(xiàn)。
28.如權(quán)利要求1-27中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括對所述醫(yī)學(xué)圖像運行圖像匹配算法以生成與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的唯一數(shù)字簽名。
29.如權(quán)利要求1-28中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括用自動量化工具來量化所述醫(yī)學(xué)圖像的特征。
30.如權(quán)利要求1-29中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于鏈接到與所述一個或多個可鏈接圖像相關(guān)聯(lián)的所述醫(yī)學(xué)圖像描述數(shù)據(jù)的多個可鏈接醫(yī)學(xué)圖像，自動地跟蹤疾病進(jìn)展。
31.如權(quán)利要求1-30中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，自動地計算實體瘤療效評價標(biāo)準(zhǔn)(RECIST)值。
32.如權(quán)利要求1-31中任一項所述的方法，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于所述醫(yī)學(xué)圖像的特征、以及與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)，自動地確定疾病期。
33.如權(quán)利要求1-32中任一項所述的方法，其特征在于，與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)包括與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的標(biāo)簽。
34.如權(quán)利要求1-33中任一項所述的方法，其特征在于，所述標(biāo)簽與所述醫(yī)學(xué)圖像的特征相關(guān)聯(lián)。
35.如權(quán)利要求1-34中任一項所述的方法，其特征在于，包括根據(jù)自然語言處理算法從經(jīng)隔離的話音片斷確定所述標(biāo)簽。
36.如權(quán)利要求1-35中任一項所述的方法，其特征在于，包括根據(jù)出現(xiàn)在所述圖像上的文字的光學(xué)字符識別確定所述標(biāo)簽。
37.如權(quán)利要求1-36中任一項所述的方法，其特征在于，包括根據(jù)用戶接收到的計算機輸入確定所述標(biāo)簽。
38.如權(quán)利要求1-37中任一項所述的方法，其特征在于，包括 確定所述數(shù)據(jù)存儲設(shè)備中是否存在重復(fù)醫(yī)學(xué)圖像； 確定所述數(shù)據(jù)存儲設(shè)備中是否存在與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的重復(fù)描述數(shù)據(jù)；以及 合并重復(fù)醫(yī)學(xué)圖像和重復(fù)描述數(shù)據(jù)。
39.一種包括具有指令的計算機可讀介質(zhì)的有形計算機程序產(chǎn)品，所述指令在執(zhí)行時使得所述計算機執(zhí)行以下操作，包括 接收在醫(yī)學(xué)圖像顯示設(shè)備上捕捉的醫(yī)學(xué)圖像； 接收與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)； 在數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及 將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。
40.如權(quán)利要求39所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括在所述數(shù)據(jù)存儲設(shè)備內(nèi)的所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)之間創(chuàng)建數(shù)據(jù)關(guān)聯(lián)。
41.如權(quán)利要求39-40中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括將所述醫(yī)學(xué)圖像鏈接到患者標(biāo)識符。
42.如權(quán)利要求39-41中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括將所述醫(yī)學(xué)圖像鏈接到一個或多個可鏈接醫(yī)學(xué)圖像。
43.如權(quán)利要求39-42中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述醫(yī)學(xué)圖像和所述可鏈接醫(yī)學(xué)圖像根據(jù)公共檢驗鏈接。
44.如權(quán)利要求39-43中任一項所述的有形計算機程序產(chǎn)品，其特征在于，來自不同檢驗的所述醫(yī)學(xué)圖像和所述可鏈接醫(yī)學(xué)圖像根據(jù)鏈接準(zhǔn)則鏈接。
45.如權(quán)利要求39-44中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括將所述醫(yī)學(xué)圖像鏈接到計費代碼。
46.如權(quán)利要求39-45中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括生成合成醫(yī)學(xué)報告，所述合成醫(yī)學(xué)報告包括所述醫(yī)學(xué)圖像。
47.如權(quán)利要求39-46中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括生成包括所述醫(yī)學(xué)圖像、以及所述可鏈接醫(yī)學(xué)圖像中的鏈接到所述醫(yī)學(xué)圖像的至少一個的合成醫(yī)學(xué)報告。
48.如權(quán)利要求39-47中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作還包括生成包括所述醫(yī)學(xué)圖像、以及包含患者的整個放射性歷史的每一可鏈接醫(yī)學(xué)圖像的合成醫(yī)學(xué)報告。
49.如權(quán)利要求39-48中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述合成醫(yī)學(xué)報告包括表格，所述表格包括所述醫(yī)學(xué)圖像、以及所述描述數(shù)據(jù)的與所述醫(yī)學(xué)圖像相關(guān)的至少一部分。
50.如權(quán)利要求39-49中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述合成醫(yī)學(xué)報告包括包含人體模型的圖形報告。
51.如權(quán)利要求39-50中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述合成醫(yī)學(xué)報告包括包含時間線的圖形報告，所述時間線包括所述醫(yī)學(xué)圖像、以及至少一個所述可鏈接醫(yī)學(xué)圖像。
52.如權(quán)利要求39-51中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述醫(yī)學(xué)圖像顯示設(shè)備包括圖片歸檔和傳送系統(tǒng)(PACS)。
53.如權(quán)利要求39-52中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述醫(yī)學(xué)圖像顯示設(shè)備被配置成顯示根據(jù)專用醫(yī)學(xué)圖像數(shù)據(jù)格式配置的醫(yī)學(xué)圖像。
54.如權(quán)利要求39-53中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述描述數(shù)據(jù)包括話音數(shù)據(jù)。
55.如權(quán)利要求39-54中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述描述數(shù)據(jù)包括視頻數(shù)據(jù)。
56.如權(quán)利要求39-55中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述描述數(shù)據(jù)包括文字。
57.如權(quán)利要求39-56中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述描述數(shù)據(jù)包括眼動跟蹤數(shù)據(jù)，所述眼動跟蹤數(shù)據(jù)包括 一個或多個眼睛凝視位置；以及 一個或多個眼睛凝視停留時間。
58.如權(quán)利要求39-57中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述描述數(shù)據(jù)包括指針位置和指針點擊中的至少一個。
59.如權(quán)利要求39-58中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括自動地剪輯所述醫(yī)學(xué)圖像以隔離診斷圖像組分。
60.如權(quán)利要求39-59中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括通過光學(xué)字符識別(OCR)實用工具從所述醫(yī)學(xué)圖像中提取文字信息，以及將與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的提取文字存儲在所述數(shù)據(jù)存儲設(shè)備中。
61.如權(quán)利要求39-60中任一項所述的有形計算機程序產(chǎn)品，其特征在于，在所述數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像和在所述數(shù)據(jù)處理設(shè)備上處理所述描述數(shù)據(jù)還包括顯示具有圖像表示和描述數(shù)據(jù)表示的圖形用戶界面，以及接收用于將所述圖像與所述描述數(shù)據(jù)鏈接的用戶命令。
62.如權(quán)利要求39-61中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述圖形用戶界面包括時間線。
63.如權(quán)利要求39-62中任一項所述的有形計算機程序產(chǎn)品，其特征在于，在所述服務(wù)器上處理所述圖像和在所述服務(wù)器上處理所述描述數(shù)據(jù)還包括響應(yīng)于眼睛凝視位置和眼睛凝視停留時間中的至少一個，自動地將所述圖像與所述描述數(shù)據(jù)鏈接。
64.如權(quán)利要求39-63中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括響應(yīng)于在特定眼睛凝視位置的眼睛凝視停留時間達(dá)到閾值，自動地觸發(fā)圖像捕捉。
65.如權(quán)利要求39-64中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括顯示半透明彈出窗口，所述半透明彈出窗口顯示與所述醫(yī)學(xué)圖像的特征相關(guān)聯(lián)的先前檢驗發(fā)現(xiàn)。
66.如權(quán)利要求39-65中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括對所述醫(yī)學(xué)圖像運行圖像匹配算法以生成與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的唯一數(shù)字簽名。
67.如權(quán)利要求39-66中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括用自動量化工具來量化所述醫(yī)學(xué)圖像的特征。
68.如權(quán)利要求39-67中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于鏈接到與所述一個或多個可鏈接圖像相關(guān)聯(lián)的所述醫(yī)學(xué)圖像描述數(shù)據(jù)的多個可鏈接醫(yī)學(xué)圖像，自動地跟蹤疾病進(jìn)展。
69.如權(quán)利要求39-68中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，自動地計算實體腫瘤療效評價準(zhǔn)則(RECIST)值。
70.如權(quán)利要求39-69中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述處理所述醫(yī)學(xué)圖像包括響應(yīng)于所述醫(yī)學(xué)圖像的特征、以及與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)，自動地確定疾病期。
71.如權(quán)利要求39-70中任一項所述的有形計算機程序產(chǎn)品，其特征在于，與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的描述數(shù)據(jù)包括與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的標(biāo)簽。
72.如權(quán)利要求39-71中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述標(biāo)簽與所述醫(yī)學(xué)圖像的特征相關(guān)聯(lián)。
73.如權(quán)利要求39-72中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括根據(jù)自然語言處理算法從經(jīng)隔離的話音片斷確定所述標(biāo)簽。
74.如權(quán)利要求39-73中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括根據(jù)出現(xiàn)在所述圖像上的文字的光學(xué)字符識別確定所述標(biāo)簽。
75.如權(quán)利要求39-74中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括根據(jù)用戶接收到的計算機輸入確定所述標(biāo)簽。
76.如權(quán)利要求39-75中任一項所述的有形計算機程序產(chǎn)品，其特征在于，所述操作包括 確定所述數(shù)據(jù)存儲設(shè)備中是否存在重復(fù)醫(yī)學(xué)圖像； 確定所述數(shù)據(jù)存儲設(shè)備中是否存在與所述醫(yī)學(xué)圖像相關(guān)聯(lián)的重復(fù)描述數(shù)據(jù)；以及 合并重復(fù)醫(yī)學(xué)圖像和重復(fù)描述數(shù)據(jù)。
77.—種包括具有指令的計算機可讀介質(zhì)的有形計算機程序產(chǎn)品，所述指令在執(zhí)行時使得所述計算機執(zhí)行以下操作，包括 捕捉醫(yī)學(xué)圖像顯示設(shè)備上的醫(yī)學(xué)圖像； 捕捉與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及 將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到處理設(shè)備，所述處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。
78.一種裝置，包括 被配置成接收醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)的接口 ； 耦合到所述接口的處理設(shè)備，所述處理設(shè)備被配置成處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及耦合到所述處理設(shè)備的數(shù)據(jù)存儲接口，所述數(shù)據(jù)存儲接口被配置成存儲所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。
79.如權(quán)利要求78所述的裝置，其特征在于，包括被配置成響應(yīng)于如權(quán)利要求39-76所述的有形計算機程序產(chǎn)品所存儲的指令來執(zhí)行操作的一個或多個軟件定義模塊。
80.一種裝置,包括 被配置成顯示醫(yī)學(xué)圖像的醫(yī)學(xué)圖像顯示設(shè)備； 耦合到所述醫(yī)學(xué)圖像顯示設(shè)備的圖像捕捉實用工具，所述圖像捕捉實用工具被配置成捕捉所述醫(yī)學(xué)圖像； 被配置成收集來自用戶的描述數(shù)據(jù)的用戶界面設(shè)備；以及 耦合到所述圖像捕捉設(shè)備和所述用戶界面設(shè)備的通信適配器，所述通信適配器被配置成將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到處理設(shè)備，所述處理設(shè)備被配置成在數(shù)據(jù)處理設(shè)備上處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)，并且將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。
81.如權(quán)利要求80所述的裝置，其特征在于，所述圖像捕捉設(shè)備包括耦合到所述顯示設(shè)備的計算機，所述計算機具有配備有屏幕捕捉功能的操作系統(tǒng)。
82.如權(quán)利要求80-81中任一項所述的裝置，其特征在于，所述醫(yī)學(xué)圖像顯示設(shè)備包括圖片歸檔和傳送系統(tǒng)(PACS)。
83.如權(quán)利要求80-82中任一項所述的裝置，其特征在于，所述用戶界面設(shè)備包括眼動跟蹤設(shè)備。
84.如權(quán)利要求80-83中任一項所述的裝置，其特征在于，所述用戶界面設(shè)備包括攝像機。
85.如權(quán)利要求80-84中任一項所述的裝置，其特征在于，所述用戶界面設(shè)備包括話音記錄設(shè)備。
86.如權(quán)利要求80-85中任一項所述的裝置，其特征在于，所述話音記錄設(shè)備包括具有觸發(fā)組件的口述設(shè)備。
87.如權(quán)利要求80-86中任一項所述的裝置，其特征在于，包括被配置成響應(yīng)于如權(quán)利要求77所述的有形計算機程序產(chǎn)品所存儲的指令來執(zhí)行操作的一個或多個軟件定義模塊。
88.—種系統(tǒng),包括 服務(wù)器，包括 被配置成接收醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)的接口 ； 耦合到所述接口的處理設(shè)備，所述處理設(shè)備被配置成處理所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及 耦合到所述處理設(shè)備的數(shù)據(jù)存儲接口，所述數(shù)據(jù)存儲接口被配置成存儲所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)； 耦合到所述數(shù)據(jù)存儲接口的數(shù)據(jù)存儲設(shè)備，所述數(shù)據(jù)存儲設(shè)備被配置成接收和存儲所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)；以及 耦合到所述服務(wù)器和所述數(shù)據(jù)存儲設(shè)備中的至少一個的醫(yī)學(xué)圖像觀察器，所述醫(yī)學(xué)圖像觀察器包括被配置成顯示醫(yī)學(xué)圖像的醫(yī)學(xué)圖像顯示設(shè)備； 耦合到所述醫(yī)學(xué)圖像顯示設(shè)備的圖像捕捉實用工具，所述圖像捕捉實用工具被配置成捕捉所述醫(yī)學(xué)圖像； 被配置成收集來自用戶的描述數(shù)據(jù)的用戶界面設(shè)備；以及 耦合到所述圖像捕捉設(shè)備和所述用戶界面設(shè)備的通信適配器，所述通信適配器被配置成將所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)傳送到所述服務(wù)器。
89.如權(quán)利要求86所述的系統(tǒng)，其特征在于，包括被配置成響應(yīng)于如權(quán)利要求39-77所述的有形計算機程序產(chǎn)品所存儲的指令來執(zhí)行操作的一個或多個軟件定義模塊。
90.如權(quán)利要求86-87中任一項所述的系統(tǒng)，包括耦合到所述醫(yī)學(xué)圖像觀察器的醫(yī)學(xué)成像設(shè)備。
91.如權(quán)利要求86-88中任一項所述的系統(tǒng)，其特征在于，所述醫(yī)學(xué)成像設(shè)備包括X射線機。
92.如權(quán)利要求86-89中任一項所述的系統(tǒng)，其特征在于，所述醫(yī)學(xué)成像設(shè)備包括計算機斷層攝影(CT)掃描儀。
93.如權(quán)利要求86-90中任一項所述的系統(tǒng)，其特征在于，所述醫(yī)學(xué)成像設(shè)備包括射頻(RF)成像設(shè)備。
94.如權(quán)利要求86-91中任一項所述的系統(tǒng)，其特征在于，所述醫(yī)學(xué)成像設(shè)備包括磁共振成像(MRI)機。
95.如權(quán)利要求86-92中任一項所述的系統(tǒng)，其特征在于，所述醫(yī)學(xué)成像設(shè)備包括超聲成像設(shè)備。
96.如權(quán)利要求86-93中任一項所述的系統(tǒng)，其特征在于，還包括被配置成接收表示所述醫(yī)學(xué)圖像的圖像數(shù)據(jù)的PACS服務(wù)器。
97.如權(quán)利要求86-94中任一項所述的系統(tǒng)，其特征在于，還包括耦合到所述PACS服務(wù)器的PACS數(shù)據(jù)存儲設(shè)備，所述PACS數(shù)據(jù)存儲設(shè)備被配置成存儲表示所述醫(yī)學(xué)圖像的圖像數(shù)據(jù)。
98.如權(quán)利要求86-95中任一項所述的系統(tǒng)，其特征在于，還包括被配置成響應(yīng)于所述醫(yī)學(xué)圖像、以及與所述醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)來接收所述服務(wù)器所生成的基于媒體的報告的報告觀察器，所述基于媒體的報告包括單次圖形觀察中的患者的整個放射性歷史。
全文摘要
描述用于生成基于多媒體的合成報告的方法、系統(tǒng)和裝置的各個實施例。在一個實施例中，一種方法包括捕捉被配置成在醫(yī)學(xué)圖像顯示設(shè)備上顯示的醫(yī)學(xué)圖像。本發(fā)明方法可獨立于醫(yī)學(xué)圖像顯示，并且能夠捕捉來自任何專用醫(yī)學(xué)圖像觀察器的圖像。該方法還可包括捕捉與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。另外，該方法可包括在數(shù)據(jù)處理設(shè)備上處理醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)。同樣，該方法可包括將醫(yī)學(xué)圖像、以及與醫(yī)學(xué)圖像相關(guān)的描述數(shù)據(jù)存儲在數(shù)據(jù)存儲設(shè)備中。
文檔編號G06F19/00GK102883660SQ201080059227
公開日2013年1月16日 申請日期2010年11月27日 優(yōu)先權(quán)日2010年9月20日
發(fā)明者D·J·維寧 申請人:德克薩斯州大學(xué)系統(tǒng)董事會