圖像處理裝置和圖像處理方法
圖像處理裝置和圖像處理方法
【專利摘要】本公開涉及圖像處理裝置和圖像處理方法。該圖像處理裝置包括：調(diào)整部，被配置為當在載物片中包括多個觀察對象時，從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及顯示控制部，被配置為在顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖像，并且改變顯示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖像上移動。
【專利說明】圖像處理裝置和圖像處理方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及用于支持對載物片（slide)上的標本（specimen)的一部分區(qū)域進行 放大顯示并移動顯示區(qū)域從而觀察整個標本的操作的技術(shù)。
【背景技術(shù)】
[0002] 虛擬載物片系統(tǒng)吸引了注意，通過該系統(tǒng)，可以利用數(shù)字顯微鏡拾取載物片（制 片）上的標本的圖像以獲取虛擬載物片圖像，并且觀察監(jiān)視器上顯示的虛擬載物片圖像（日 本專利申請?zhí)亻_No. 2011-118107)。
[0003] 已知一種圖像顯示技術(shù)，用于即使在圖像數(shù)據(jù)是大容量圖像數(shù)據(jù)的情況下也高效 地顯示縮小圖像和放大圖像（日本專利申請?zhí)亻_No. 2011-170480)。
[0004] 已知一種技術(shù)，用于當在終端裝置中顯示圖像服務(wù)器中的細胞圖像時，只從圖像 服務(wù)器下載顯示所必要的區(qū)域的分割圖像以減少到在終端裝置上顯示為止的時間（日本專 利申請?zhí)亻_ No. 2005-117640)。
[0005] 在病理診斷中，一般來說，首先，執(zhí)行在觀察載物片的低倍率圖像的同時標記關(guān)心 區(qū)域的被稱為標本觀察(篩查）的工作，然后利用高倍率圖像執(zhí)行關(guān)心區(qū)域的詳細觀察。在 標本觀察(篩查）中，為了避免對病變部等的忽視，要求觀察者全面地觀察載物片上的整個 標本區(qū)域的各處。
[0006] 在對胃、肝臟、前列腺、膽囊等等的活檢(生物組織觀察）中，如圖6所示，多個標本 有時被放置在一個載物片上（以下，單個標本被稱為"個體標本")。由于標本和載物片是由 手工工作制造的，所以各個個體標本的形狀和方向是不均一的，并且個體標本的布置是不 規(guī)則的。在這種載物片的情況下，有必要按順序無遺漏地篩查不規(guī)則布置的多個個體標本。 因此，觀察者的負擔重。
[0007] 利用日本專利申請?zhí)亻_No. 2011-170480中公開的顯示技術(shù)，可以降低忽視個體 標本的風險。然而，個體標本中的標本觀察(篩查）的負擔并沒有減輕。利用日本專利申請 特開No. 2005-117640中公開的分割圖像的生成方法和顯示方法，可以減少與通信有關(guān)的 數(shù)據(jù)量。然而，日本專利申請?zhí)亻_No. 2005-117640沒有提及用于減輕多個個體標本的標本 觀察(篩查）的負擔的分割圖像的生成方法和顯示方法。
【發(fā)明內(nèi)容】
[0008] 因此，本發(fā)明的一個目的是提供一種能夠當在載物片上有多個觀察對象(例如個 體標本）時減輕標本觀察(篩查）的負擔的技術(shù)。
[0009] 本發(fā)明在其第一方面中提供了一種圖像處理裝置，包括：調(diào)整部，被配置為當在載 物片中包括多個觀察對象時，從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布 置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及顯示控制 部，被配置為在顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖 像，并且改變顯示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖 像上移動。
[0010] 本發(fā)明在其第二方面中提供了一種圖像處理裝置，包括：獲取部，被配置為獲取顯 示區(qū)域的移動指令；以及顯示控制部，被配置為根據(jù)移動指令改變顯示區(qū)域的位置和顯示 裝置上顯示的放大圖像，其中當載物片中包括多個觀察對象時，顯示控制部移動顯示區(qū)域 以使得某個觀察對象的放大圖像被直接切換到另一觀察對象的放大圖像。
[0011] 本發(fā)明在其第三方面中提供了一種圖像處理裝置，用于支持將包括多個觀察對象 的載物片的區(qū)域的一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察多個觀 察對象的操作，該圖像處理裝置包括：獲取部，被配置為獲取顯示區(qū)域的移動指令；以及顯 示控制部，被配置為根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且當被命令選擇多個觀察對 象之中的一個觀察對象時，顯示控制部移動顯示區(qū)域以使得以所選擇的觀察對象的觀察開 始位置為中心的區(qū)域被放大顯示。
[0012] 本發(fā)明在其第四方面中提供了一種圖像處理方法，包括以下步驟：當在載物片中 包括多個觀察對象時，計算機從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布 置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及計算機在 顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖像，并且改變顯 示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖像上移動。
[0013] 本發(fā)明在其第五方面中提供了一種圖像處理方法，包括以下步驟：計算機獲取顯 示區(qū)域的移動指令；以及計算機根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中當載物片中包括多個觀察對象時，計算機移動顯示區(qū)域以使得某個觀察對象 的放大圖像被直接切換到另一觀察對象的放大圖像。
[0014] 本發(fā)明在其第六方面中提供了一種圖像處理方法，用于利用計算機支持將包括多 個觀察對象的載物片的區(qū)域的一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序 觀察多個觀察對象的操作，該圖像處理方法包括以下步驟：計算機獲取顯示區(qū)域的移動指 令；以及計算機根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其中對 于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且當被命令選擇多個觀察對象之 中的一個觀察對象時，計算機移動顯示區(qū)域以使得以所選擇的觀察對象的觀察開始位置為 中心的區(qū)域被放大顯示。
[0015] 本發(fā)明在其第七方面中提供了一種非暫態(tài)計算機可讀存儲介質(zhì)，存儲用于使得計 算機執(zhí)行根據(jù)本發(fā)明的圖像處理方法的步驟的程序。
[0016] 根據(jù)本發(fā)明，當在載物片上有多個觀察對象時，可以減輕標本觀察(篩查）的負擔。
[0017] 通過以下參考附圖對示范性實施例的描述，本發(fā)明的其他特征將變得清楚。
【專利附圖】
【附圖說明】
[0018] 圖1是圖像處理系統(tǒng)的裝置配置的整體圖；
[0019] 圖2是圖像處理系統(tǒng)中的成像裝置的功能框圖；
[0020] 圖3是圖像處理裝置的硬件配置圖；
[0021] 圖4是圖像處理裝置的圖像生成和控制部的功能框圖；
[0022] 圖5是示出層次（hierarchical)圖像數(shù)據(jù)的結(jié)構(gòu)的示意圖；
[0023] 圖6是示出其上放置有多個個體標本的載物片的示意圖；
[0024] 圖7A和7B是用于說明圖像呈現(xiàn)應(yīng)用的顯不不例的不意圖；
[0025] 圖8A至8D是用于說明對于個體標本的顯示區(qū)域框的設(shè)定的示意圖；
[0026] 圖9A至9E是用于說明標本觀察(篩查）序列的示意圖；
[0027] 圖10A至10C是用于說明通過平移進行的標本布置的再配置的示意圖；
[0028] 圖11A至11C是用于說明通過平移進行的標本布置的再配置的流程圖；
[0029] 圖12是用于說明通過平移進行的標本布置的再配置的另一示例的示意圖；
[0030] 圖13A至13F是用于說明通過旋轉(zhuǎn)和平移進行的標本布置的再配置的示意圖；
[0031] 圖14是用于說明通過旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定的流程圖；
[0032] 圖15A至1?是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的示意圖；
[0033] 圖16是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的流程圖；
[0034] 圖17A和17B是用于說明通過執(zhí)行顯示區(qū)域的調(diào)整(個體標本的拉近)所獲得的結(jié) 果的不意圖；
[0035] 圖18A和18B是用于說明個體標本的分離的示意圖；
[0036] 圖19A至19C是用于說明圖像文件格式的示意圖；
[0037] 圖20A和20B是用于說明標本布置的再配置的效果的示意圖；
[0038] 圖21A和21B是用于說明圖像呈現(xiàn)應(yīng)用的第二顯不不例的不意圖；
[0039] 圖22A和22B是用于說明圖像呈現(xiàn)應(yīng)用的第二顯不不例的不意圖；
[0040] 圖23是用于說明第二實施例中的顯示控制模式的設(shè)定的示意圖；
[0041] 圖24是第二實施例中的圖像處理裝置的圖像生成和控制部的功能框圖；
[0042] 圖25是用于說明第二實施例中的顯示控制模式的設(shè)定的流程圖；
[0043] 圖26A至26E是用于說明第二實施例中的顯示控制模式中的顯示處理的示意圖； 并且
[0044] 圖27A至27D是第二實施例中的顯示控制模式中的顯示處理的流程圖。
【具體實施方式】
[0045] 下面參考【專利附圖】
【附圖說明】本發(fā)明的實施例。
[0046] 〈第一實施例〉
[0047] (圖像處理系統(tǒng)的裝置配置）
[0048] 本發(fā)明的圖像處理裝置可用于包括成像裝置和顯示裝置的圖像處理系統(tǒng)中。參考 圖1來說明圖像處理系統(tǒng)的配置。
[0049] 圖像處理系統(tǒng)是包括成像裝置(數(shù)字顯微鏡裝置或虛擬載物片掃描儀）101、圖像 處理裝置102、顯示裝置103和數(shù)據(jù)服務(wù)器104并且具有獲取并顯示成像對象標本的二維圖 像的功能的系統(tǒng)。成像裝置101和圖像處理裝置102通過專用或通用I/F線纜105連接。 圖像處理裝置102和顯示裝置103通過通用I/F線纜106連接。數(shù)據(jù)服務(wù)器104和圖像處 理裝置102經(jīng)由網(wǎng)絡(luò)107通過通用I/F LAN線纜108連接。
[0050] 成像裝置101是具有在二維平面方向上的不同位置中拾取多個二維圖像并輸出 數(shù)字圖像的功能的虛擬載物片掃描儀。為了獲取二維圖像，使用諸如CCD (電荷耦合器件） 或CMOS (互補金屬氧化物半導(dǎo)體）之類的固態(tài)成像器件。取代于虛擬載物片掃描儀，成像 裝置101也可由通過將數(shù)字相機附連到普通光學顯微鏡的目鏡部配置的數(shù)字顯微鏡裝置 配置。
[0051] 圖像處理裝置102是具有例如根據(jù)來自用戶的請求從獲取自成像裝置101的多個 原始圖像數(shù)據(jù)生成要顯示在顯示裝置103上的數(shù)據(jù)的功能的裝置。圖像處理裝置102是由 包括諸如CPU (中央處理部)、RAM、存儲設(shè)備、操作部和各種I/F之類的硬件資源的通用計算 機或工作站配置的。存儲設(shè)備是大容量信息存儲設(shè)備，例如硬盤驅(qū)動器。用于實現(xiàn)下文說 明的各種處理的程序和數(shù)據(jù)、0S (操作系統(tǒng)）等等被存儲在存儲設(shè)備中。下文說明的功能 是通過CPU將必要的程序和數(shù)據(jù)從存儲設(shè)備加載到RAM并執(zhí)行程序來實現(xiàn)的。操作部由鍵 盤、鼠標等等配置并被用戶用來輸入各種指令。
[0052] 顯示裝置103是被配置為顯示作為由圖像處理裝置102進行的運算處理的結(jié)果獲 得的觀察用圖像的顯示器。顯示裝置103由液晶顯示器等等配置。
[0053] 數(shù)據(jù)服務(wù)器104是服務(wù)器，其中存儲了作為由圖像處理裝置102進行的運算處理 的結(jié)果獲得的觀察用圖像。
[0054] 在圖1所示的示例中，圖像處理系統(tǒng)由四個裝置配置，S卩，成像裝置101、圖像處理 裝置102、顯示裝置103和數(shù)據(jù)服務(wù)器104。然而，本發(fā)明的配置不限于此配置。例如，可使 用與顯示裝置集成的圖像處理裝置。圖像處理裝置的功能可被合并在成像裝置中。成像裝 置、圖像處理裝置、顯示裝置和數(shù)據(jù)服務(wù)器的功能可由一個裝置實現(xiàn)。相反，圖像處理裝置 等等的功能可被分割并由多個裝置實現(xiàn)。
[0055] (成像裝置的功能配置）
[0056] 圖2是示出成像裝置101的功能配置的框圖。
[0057] 成像裝置101示意性地包括照明單元201、載物臺202、載物臺控制單元205、成像 光學系統(tǒng)207、成像單元210、顯影處理單元219、預(yù)測量單元220、主控制系統(tǒng)221和外部裝 置 I/F222。
[0058] 照明單元201是用于在布置在載物臺202上的載物片206上均一地照射光的部 件，并且包括光源、照明光學系統(tǒng)和用于光源驅(qū)動的控制系統(tǒng)。載物臺202被載物臺控制單 元205進行驅(qū)動控制并且能夠在X、Y和Z三個軸的方向上移動。載物片206是通過將組織 切片粘貼在載玻片上并且將載玻片與封固劑（mounting agent) -起固定在蓋玻片下而獲 得的構(gòu)件。
[0059] 載物臺控制單元205包括驅(qū)動控制系統(tǒng)203和載物臺驅(qū)動機構(gòu)204。驅(qū)動控制系 統(tǒng)203接收主控制系統(tǒng)221的指令并且執(zhí)行載物臺202的驅(qū)動控制。載物臺202的移動方 向、移動距離等等是基于由預(yù)測量單元220測量到的標本的位置信息和厚度信息(距離信 息）并且在必要時基于來自用戶的指令而確定的。載物臺驅(qū)動機構(gòu)204根據(jù)驅(qū)動控制系統(tǒng) 203的指令來驅(qū)動載物臺202。
[0060] 成像光學系統(tǒng)207是用于將載物片206的標本的光學圖像成像在成像傳感器208 上的透鏡組。
[0061] 成像單元210包括成像傳感器208和模擬前端（AFE)209。成像傳感器208是被配 置為將二維光學圖像光電轉(zhuǎn)換成電氣物理量的一維或二維圖像傳感器。例如，CCD或CMOS 器件被用作成像傳感器208。在一維傳感器的情況下，在掃描方向上電氣地執(zhí)行掃描，并且 在副掃描方向上移動載物臺202以獲得二維圖像。具有與光的強度相對應(yīng)的電壓值的電信 號從成像傳感器208輸出。當希望以彩色圖像作為拾取的圖像時，例如，需要使用附有拜耳 (Bayer)陣列的濾色器的1C⑶圖像傳感器或者僅RGB的3CXD圖像傳感器。成像單元210 在XY軸方向上驅(qū)動載物臺202,從而拾取標本的分割圖像。
[0062] AFE209是被配置為控制成像傳感器208的操作的電路以及被配置為把從成像傳 感器208輸出的模擬信號轉(zhuǎn)換成數(shù)字信號的電路。AFE209包括H/V驅(qū)動器、CDS (相關(guān)雙 采樣)、放大器、AD轉(zhuǎn)換器和定時發(fā)生器。H/V驅(qū)動器把用于驅(qū)動成像傳感器208的垂直同 步信號和水平同步信號轉(zhuǎn)換成傳感器驅(qū)動所必要的電勢。CDS是被配置為去除固定圖案 (pattern)的噪聲的相關(guān)雙采樣電路。放大器是被配置為調(diào)整被⑶S去除了噪聲的模擬信 號的增益的模擬放大器。AD轉(zhuǎn)換器將模擬信號轉(zhuǎn)換成數(shù)字信號。當成像裝置最終階段中 的輸出是8比特時，考慮到以后階段中的處理，AD轉(zhuǎn)換器把模擬信號轉(zhuǎn)換成被量化為約10 比特至16比特的數(shù)字數(shù)據(jù)并輸出該數(shù)字數(shù)據(jù)。轉(zhuǎn)換后的傳感器輸出數(shù)據(jù)被稱為RAW數(shù)據(jù)。 RAW數(shù)據(jù)在后一階段中的顯影處理單元219中經(jīng)歷顯影處理。定時發(fā)生器生成用于調(diào)整成 像傳感器208的定時和后一階段中的顯影處理單元219的定時的信號。當C⑶被用作成像 傳感器208時，AFE209是必不可少的。然而，在能夠執(zhí)行數(shù)字輸出的CMOS圖像傳感器的情 況下，AFE209的功能被包括在傳感器中。
[0063] 顯影處理單元219包括黑校正部211、去馬賽克處理部212、白平衡調(diào)整部213、圖 像合并處理部214、濾波處理部216、伽馬校正部217和壓縮處理部218。
[0064] 黑校正部211執(zhí)行用于從RAW數(shù)據(jù)的像素值中減去背景(在遮光期間獲得的黑校 正數(shù)據(jù)）的處理。
[0065] 去馬賽克處理部212執(zhí)行用于從拜耳陣列的RAW數(shù)據(jù)生成RGB顏色的圖像數(shù)據(jù)的 處理。去馬賽克處理部212對RAW數(shù)據(jù)中的周邊像素(包括相同顏色的像素和其他顏色的 像素)的值進行插值，從而計算關(guān)注像素的RGB顏色的值。去馬賽克處理部212還執(zhí)行缺陷 像素的校正處理(插值處理)。當成像傳感器208不包括濾色器并且獲得單色圖像時，去馬 賽克處理是不必要的。去馬賽克處理部212執(zhí)行缺陷像素的校正處理。當使用3C⑶圖像 傳感器208時，去馬賽克處理也是不必要的。
[0066] 白平衡調(diào)整部213執(zhí)行用于根據(jù)照明單元201的光的色溫調(diào)整RGB顏色的增益從 而再現(xiàn)合乎需要的白色的處理。
[0067] 圖像合并處理部214執(zhí)行用于對由成像傳感器208分割并拾取的多個分割圖像數(shù) 據(jù)進行接合并生成期望成像范圍中的大尺寸圖像數(shù)據(jù)的處理。一般地，標本的存在范圍比 現(xiàn)有的圖像傳感器在一次成像中能夠獲取的成像范圍更寬。因此，通過接合分割圖像數(shù)據(jù) 來生成一個二維圖像數(shù)據(jù)。例如，當假定以0. 25 μ m的分辨率對載物片206上的10平方毫 米的范圍成像時，一邊的像素的數(shù)目是四萬個（1〇_/〇. 25 μ m)。像素的總數(shù)是四萬的平方， 即16億。為了利用包括一千萬像素的成像傳感器208獲取16億像素的圖像數(shù)據(jù)，有必要 將區(qū)域分割成一百六十個（16億/ 一千萬）區(qū)域并執(zhí)行成像。作為接合多個圖像數(shù)據(jù)的方 法，例如，存在基于載物臺202的位置信息來對齊并接合圖像數(shù)據(jù)的方法、以及在將多個分 割圖像的點和線彼此關(guān)聯(lián)的同時接合多個分割圖像的相應(yīng)點和線的方法。在接合中，通過 諸如零階插值、線性插值或高階插值之類的插值處理，可以更平滑地接合圖像數(shù)據(jù)。
[0068] 濾波處理部216是被配置為實現(xiàn)圖像中包括的高頻成分的抑制、噪聲去除和分辨 感強調(diào)的數(shù)字濾波器。
[0069] 伽馬校正部217執(zhí)行用于向圖像添加一般顯示設(shè)備的灰度表示特征的反特征的 處理，并且根據(jù)高亮度部的暗部處理和灰度壓縮來執(zhí)行適應(yīng)于人類的視覺特征的灰度轉(zhuǎn) 換。在此實施例中，對于以形態(tài)觀察為目的的圖像獲取，向圖像數(shù)據(jù)應(yīng)用適合于以后階段中 的合并處理和顯示處理的灰度轉(zhuǎn)換。
[0070] 壓縮處理部218執(zhí)行以大容量二維圖像數(shù)據(jù)的傳送效率和存儲中的容量減小為 目的而執(zhí)行的壓縮的編碼處理。作為用于靜止圖像的壓縮方法，諸如JPEG (聯(lián)合圖片專家 組）以及通過改進和發(fā)展JPEG而獲得的JPEG2000和JPEG XR之類的標準化編碼系統(tǒng)是公 知的。執(zhí)行對于二維圖像數(shù)據(jù)的縮小處理以生成層次圖像數(shù)據(jù)。參考圖5來說明層次圖像 數(shù)據(jù)。
[0071] 預(yù)測量單元220是被配置為執(zhí)行用于計算載物片206上的標本的位置信息、到期 望焦點位置的距離信息和由標本厚度引起的光量調(diào)整用參數(shù)的事前測量的單元。通過在主 測量(拾取圖像數(shù)據(jù)的獲取)之前利用預(yù)測量單元220獲取信息，可以沒有浪費地執(zhí)行成像。 對于二維平面上的位置信息的獲取，使用分辨率低于成像傳感器208的分辨率的二維成像 傳感器。預(yù)測量單元220從獲取的圖像掌握標本在XY平面上的位置。為了獲取距離信息 和厚度信息，使用諸如激光位移計之類的測量設(shè)備。
[0072] 主控制系統(tǒng)221具有執(zhí)行對以上說明的各種單元的控制的功能。主控制系統(tǒng)221 和顯影處理單元219的控制功能由包括CPU、ROM和RAM的控制電路實現(xiàn)。也就是說，程序 和數(shù)據(jù)被存儲在ROM中，并且CPU利用RAM作為工作存儲器來執(zhí)行程序，從而實現(xiàn)主控制系 統(tǒng)221和顯影處理單元219的功能。作為R0M，使用諸如EEPR0M或閃存存儲器之類的設(shè)備。 作為RAM，使用諸如DDR3之類的DRAM設(shè)備。可以用專用硬件設(shè)備的ASIC版本來替換顯影 處理單元219的功能。
[0073] 外部裝置I/F222是用于把由顯影處理單元219生成的層次圖像數(shù)據(jù)發(fā)送到圖像 處理裝置102的接口。成像裝置101和圖像處理裝置102通過用于光學通信的線纜連接。 或者，使用諸如USB或GigabitEthernet (注冊商標）之類的通用接口。
[0074] (圖像處理裝置的硬件配置）
[0075] 圖3是示出本發(fā)明的圖像處理裝置102的硬件配置的框圖。
[0076] 作為執(zhí)行圖像處理的裝置，例如，使用PC (個人計算機)。PC包括控制部301、主存 儲器302、副存儲器303、圖形板304、被配置為將前述組件相互連接的內(nèi)部總線305、LAN 1/ F306、存儲設(shè)備I/F307、外部裝置I/F309、操作I/F310和輸入輸出I/F313。
[0077] 控制部301根據(jù)需要適當?shù)卦L問主存儲器302、副存儲器303等等，并且在執(zhí)行各 種運算處理的同時集中地控制PC的全部塊。主存儲器302和副存儲器303由RAM (隨機 存取存儲器)配置。主存儲器302用作控制部301的工作區(qū)域等，并且臨時存儲0S、正執(zhí)行 的各種程序和經(jīng)歷諸如生成數(shù)據(jù)供顯示之類的處理的各種數(shù)據(jù)。主存儲器302和副存儲器 303也用作圖像數(shù)據(jù)的存儲區(qū)域。利用控制部301的DMA (直接存儲器訪問）功能，可實現(xiàn) 主存儲器302與副存儲器303之間以及副存儲器303與圖形板304之間的圖像數(shù)據(jù)的高速 傳送。圖形板304向顯示裝置103輸出圖像處理結(jié)果。顯示裝置103例如是包括液晶、EL (電致發(fā)光）等的顯示設(shè)備。假定將顯示裝置103作為外部裝置連接的形式。然而，可以假 定與顯示裝置集成的PC。例如，筆記本PC對應(yīng)于該PC。
[0078] 數(shù)據(jù)服務(wù)器104、存儲設(shè)備308、成像裝置101以及鍵盤311和鼠標312分別經(jīng)由 LAN I/F306、存儲設(shè)備I/F307、外部裝置I/F309和操作I/F310連接到輸入輸出I/F313。
[0079] 存儲設(shè)備308是輔助存儲設(shè)備，其中固定存儲有要由控制部301執(zhí)行的固件、程序 和0S以及諸如各種參數(shù)之類的信息。存儲設(shè)備308也用作從成像裝置101發(fā)送的層次圖像 數(shù)據(jù)的存儲區(qū)域。作為存儲設(shè)備308,使用諸如HDD (硬盤驅(qū)動器）之類的磁盤驅(qū)動器、SSD (固態(tài)驅(qū)動器）或者諸如閃存存儲器之類的半導(dǎo)體設(shè)備。
[0080] 作為到操作I/F310的連接設(shè)備，假定諸如鍵盤311或鼠標312之類的點擊設(shè)備。 然而，也可以采用諸如觸摸面板之類的顯示裝置103的屏幕直接充當輸入設(shè)備的配置。在 該情況下，觸摸面板可與顯示裝置103集成。
[0081] (控制部的功能塊配置）
[0082] 圖4是示出圖像處理裝置102的控制部301的功能配置的框圖。
[0083] 控制部301包括用戶輸入信息獲取部401、圖像數(shù)據(jù)獲取控制部402、層次圖像數(shù) 據(jù)獲取部403和顯示數(shù)據(jù)生成控制部404?？刂撇?01包括顯示候選圖像數(shù)據(jù)獲取部405、 顯示候選圖像數(shù)據(jù)生成部406、顯示圖像數(shù)據(jù)傳送部407、調(diào)整參數(shù)識別部408和標本布置 調(diào)整部409。
[0084] 用戶輸入信息獲取部401經(jīng)由操作I/F310獲取用戶利用鍵盤311和鼠標312輸 入的諸如圖像顯示的開始和結(jié)束以及顯示圖像的滾動操作、切換、放大、縮小等等之類的指 令內(nèi)容。例如，用戶對其執(zhí)行標本觀察(篩查）的放大圖像的倍率和標本觀察(篩查）序列經(jīng) 由操作I/F310被輸入到用戶輸入信息獲取部401。
[0085] 圖像數(shù)據(jù)獲取控制部402基于用戶輸入信息控制從存儲設(shè)備308讀取圖像數(shù)據(jù)和 在主存儲器302中展開圖像數(shù)據(jù)。圖像數(shù)據(jù)獲取控制部402針對諸如圖像顯示的開始和結(jié) 束以及顯示圖像的滾動操作、切換、放大和縮小之類的各種用戶輸入信息來確定被預(yù)測為 顯示圖像所必要的圖像區(qū)域。圖像數(shù)據(jù)獲取控制部402預(yù)測顯示區(qū)域(顯示裝置上實際顯 示的圖像區(qū)域)的變化并且指定其中應(yīng)當在存儲器302中讀取圖像數(shù)據(jù)的圖像區(qū)域(第一顯 示候選區(qū)域)。如果主存儲器302沒有保存第一顯示候選區(qū)域的圖像數(shù)據(jù)，則圖像數(shù)據(jù)獲取 控制部402命令層次圖像數(shù)據(jù)獲取部403從存儲設(shè)備308讀出第一顯示候選區(qū)域的圖像數(shù) 據(jù)并在主存儲器302中展開該圖像數(shù)據(jù)。從存儲設(shè)備308讀出圖像數(shù)據(jù)是耗時的處理。因 此，希望將第一顯示候選區(qū)域設(shè)定得盡可能地寬，抑制該處理所需的開銷。
[0086] 層次圖像數(shù)據(jù)獲取部403根據(jù)圖像數(shù)據(jù)獲取控制部402的控制指令來執(zhí)行從存儲 設(shè)備308讀出圖像區(qū)域的圖像數(shù)據(jù)和在主存儲器302中展開該圖像數(shù)據(jù)。
[0087] 顯示數(shù)據(jù)生成控制部404基于用戶輸入信息來控制圖像數(shù)據(jù)從主存儲器302的讀 出、圖像數(shù)據(jù)的處理方法以及圖像數(shù)據(jù)到圖形板304的傳送。顯示數(shù)據(jù)生成控制部404基 于諸如圖像顯示的開始和結(jié)束以及顯示圖像的滾動操作、切換、放大和縮小之類的各種用 戶輸入信息來預(yù)測顯示區(qū)域的變化。顯示數(shù)據(jù)生成控制部404指定顯示裝置103上實際顯 示的圖像區(qū)域(顯示區(qū)域）和其中應(yīng)當在副存儲器303中讀取圖像數(shù)據(jù)的圖像區(qū)域(第二顯 示候選區(qū)域)。如果副存儲器303沒有保存第二顯示候選區(qū)域的圖像數(shù)據(jù)，則顯示數(shù)據(jù)生成 控制部404命令顯示候選圖像數(shù)據(jù)獲取部405從主存儲器302讀出第二顯示候選區(qū)域的圖 像數(shù)據(jù)。另外，顯示數(shù)據(jù)生成控制部404關(guān)于與滾動請求相對應(yīng)的圖像數(shù)據(jù)的處理方法對 顯示候選圖像數(shù)據(jù)生成部406進行命令。
[0088] 顯示數(shù)據(jù)生成控制部404命令顯示圖像數(shù)據(jù)傳送部407從副存儲器303讀出顯示 圖像區(qū)域的圖像數(shù)據(jù)。與從存儲設(shè)備308讀出圖像數(shù)據(jù)相比，從主存儲器302的讀出可以 高速執(zhí)行。因此，與第一顯示候選區(qū)域相比，第二顯示候選區(qū)域可被設(shè)定為窄范圍。也就是 說，第一顯示候選區(qū)域、第二顯示候選區(qū)域和顯示區(qū)域的大小的關(guān)系是第一顯示候選區(qū)域 彡第二顯示候選區(qū)域>顯示區(qū)域。
[0089] 顯示候選圖像數(shù)據(jù)獲取部405根據(jù)顯示數(shù)據(jù)生成控制部404的控制指令執(zhí)行從主 存儲器302讀出顯示候選的圖像區(qū)域的圖像數(shù)據(jù)，并且將該圖像數(shù)據(jù)傳送到顯示候選圖像 數(shù)據(jù)生成部406。顯示候選圖像數(shù)據(jù)生成部406執(zhí)行作為壓縮圖像數(shù)據(jù)的顯示候選圖像數(shù) 據(jù)的展開處理，并在副存儲器303中展開該圖像數(shù)據(jù)。顯示圖像數(shù)據(jù)傳送部407根據(jù)顯示 數(shù)據(jù)生成控制部404的控制指令執(zhí)行從副存儲器303讀出顯示圖像區(qū)域的圖像數(shù)據(jù)，并將 該圖像數(shù)據(jù)傳送到圖形板304。副存儲器303與圖形板304之間的高速圖像數(shù)據(jù)傳送通過 DMA功能來執(zhí)行。
[0090] 調(diào)整參數(shù)識別部408獲取針對其執(zhí)行標本觀察(篩查)的放大圖像的倍率并識別放 大圖像的顯示區(qū)域的大小。參考圖7A和7B來說明放大圖像和顯示區(qū)域。調(diào)整參數(shù)識別部 408識別標本觀察(篩查）序列。如參考圖7A、7B、9A至9E和10A至10C所說明的，標本觀 察(篩查）序列是用于定義多個個體標本的觀察順序、個體標本的觀察開始位置和個體標本 的放大圖像的顯示順序的信息。
[0091] 標本布置調(diào)整部409基于作為調(diào)整參數(shù)識別部408中的識別結(jié)果的顯示區(qū)域和標 本觀察(篩查)序列，利用主存儲器302的載物片206的圖像數(shù)據(jù)來執(zhí)行標本布置的調(diào)整(再 配置)。標本布置的調(diào)整是用于當多個個體標本被包括在一個載物片中時調(diào)整個體標本的 布置以使得個體標本的圖像的區(qū)域被連續(xù)(依次)布置的處理。希望去除除了個體標本的圖 像以外的區(qū)域(背景部分)。在以下說明中，具有經(jīng)標本布置調(diào)整部409調(diào)整的標本布置的 虛擬載物片被稱為"再配置載物片（圖像)"。在標本觀察(篩查)中，如下所述，放大圖像被更 新為使得顯示區(qū)域看起來在再配置載物片上按順序移動。這使得容易觀察多個個體標本。
[0092] 在本實施例中，在一個載物片中包括多個個體標本。然而，本發(fā)明不限于此。如果 在一個載物片中包括彼此間隔開的多個觀察對象，則可以應(yīng)用本發(fā)明。例如，當組織切片作 為標本被布置在載物片上并且僅該組織中的多個特征部分(例如核）被設(shè)定為觀察對象時， 也可應(yīng)用本發(fā)明。
[0093] 標本布置調(diào)整部409可實際地再布置和組合個體標本的圖像數(shù)據(jù)以實際生成再 配置載物片的圖像數(shù)據(jù)。然而，圖像數(shù)據(jù)的處理需要固定處理時間，并且存儲容量對于存儲 經(jīng)處理的圖像數(shù)據(jù)也是有必要的。因此，在本實施例中，作為再配置載物片的數(shù)據(jù)，創(chuàng)建定 義再配置載物片中的個體標本的位置與實際載物片中的位置之間的對應(yīng)關(guān)系的數(shù)據(jù)(參見 圖19C)。在標本觀察(篩查）中的顯示控制中，顯示數(shù)據(jù)生成控制部404參考該對應(yīng)關(guān)系控 制應(yīng)當作為放大圖像顯示的圖像數(shù)據(jù)的讀取位置(指針)。利用此方法，可以對再配置載物 片虛擬地實現(xiàn)標本觀察(篩查)。
[0094] 調(diào)整參數(shù)識別部408和標本布置調(diào)整部409是被配置為執(zhí)行顯示區(qū)域和標本觀察 (篩查）序列的識別以及標本布置的調(diào)整的功能塊，其是本實施例的特征。顯示數(shù)據(jù)生成控 制部404、顯示候選圖像數(shù)據(jù)獲取部405、顯示候選圖像數(shù)據(jù)生成部406和顯示圖像數(shù)據(jù)傳 送部407是被配置為執(zhí)行用于根據(jù)顯示區(qū)域的移動指令來更新放大圖像的顯示的顯示控 制的功能塊。
[0095] (層次圖像數(shù)據(jù)的結(jié)構(gòu)）
[0096] 圖5是示出層次圖像數(shù)據(jù)的結(jié)構(gòu)的示意圖。根據(jù)分辨率(像素數(shù)目）的差別，層次 圖像數(shù)據(jù)由第一層圖像501、第二層圖像502、第三層圖像503和第四層圖像504這四層配 置。標本505是組織的切片。為了容易想象層次結(jié)構(gòu)，清楚示出了各層中的標本505的大 小。第一層圖像501是具有最低分辨率的圖像并且用于縮略圖像等。第二層圖像502和第 三層圖像503是具有中等分辨率的圖像并且用于虛擬載物片圖像等的寬區(qū)域觀察。第四層 圖像504是具有最高分辨率的圖像并且用于詳細觀察虛擬載物片圖像。
[0097] 各層的圖像是通過收集若干個壓縮圖像塊來配置的。例如，在JPEG壓縮格式的 情況下，壓縮圖像塊是一個JPEG圖像。第一層圖像501由一個壓縮圖像塊配置，第二層圖 像502由四個壓縮圖像塊配置，第三層圖像503由十六個壓縮圖像塊配置，并且第四層圖像 504由六十四個壓縮圖像塊配置。
[0098] 圖像的分辨率的差別對應(yīng)于顯微鏡檢查期間的光學倍率的差別。第一層圖像501 相當于低倍率的顯微鏡檢查，而第四層圖像504相當于高倍率的顯微鏡檢查。例如，當用戶 想要以高倍率執(zhí)行觀察時，用戶可通過顯示第四層圖像504來執(zhí)行與高倍率觀察相對應(yīng)的 詳細觀察。
[0099] (載物片）
[0100] 圖6是示出其上放置有多個個體標本的載物片的示意圖。載物片206是通過將多 個標本粘貼在載玻片上并且將載玻片與封固劑一起固定在蓋玻片下而獲得的構(gòu)件。指示標 本的屬性的標簽601存在于載物片206的一端。在標簽601上，描述用于患者標識的標識 號、諸如胃、肝臟、大腸或小腸之類的標本的部位、創(chuàng)建載物片的設(shè)施的名稱、用作意見參考 的評論等等。九個個體標本被粘貼到載物片206。個體標本602指示個體標本之一。例如， 在對胃或肝臟的活檢(生物組織觀察)中，如圖6所示，多個個體標本有時被放置在一個載物 片上。
[0101] (圖像呈現(xiàn)應(yīng)用的畫面示例）
[0102] 圖7A是示出用于呈現(xiàn)虛擬載物片圖像的應(yīng)用的畫面的示例的圖。圖像呈現(xiàn)應(yīng)用 (也稱為觀看者應(yīng)用）的程序被存儲在圖像處理裝置102的存儲設(shè)備308中?？刂撇?01從 存儲設(shè)備308讀取該程序，在存儲器中展開該程序，并且執(zhí)行該程序，從而實現(xiàn)圖像呈現(xiàn)應(yīng) 用的功能。用于圖像呈現(xiàn)的顯示數(shù)據(jù)由圖像呈現(xiàn)應(yīng)用利用從存儲設(shè)備308讀取的⑶I數(shù)據(jù) 和層次圖像數(shù)據(jù)來生成。顯示數(shù)據(jù)從圖形板304輸出到顯示裝置103。結(jié)果，用于圖像呈現(xiàn) 的應(yīng)用畫面被顯示在顯示裝置103上。
[0103] 圖像呈現(xiàn)應(yīng)用的執(zhí)行方法不限于以上說明的示例。例如，圖像處理裝置102可包 括用于執(zhí)行圖像呈現(xiàn)應(yīng)用的功能的專用硬件。通過把以硬件安裝的功能擴展板附連到圖像 處理裝置102,圖像處理裝置102可被配置為具有執(zhí)行圖像呈現(xiàn)應(yīng)用的功能。圖像呈現(xiàn)應(yīng)用 不限于從外部存儲設(shè)備提供，而可通過經(jīng)由網(wǎng)絡(luò)下載來提供。
[0104] 圖7A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。應(yīng)用畫面除了菜單窗口 以外還包括用于顯示放大圖像701和載物片圖像702的兩個窗口。利用此應(yīng)用，可以執(zhí)行 用于通過對載物片上的標本的一部分區(qū)域進行放大顯示并移動顯示區(qū)域來觀察整個標本 的操作。此實施例中的應(yīng)用提供了下文說明的各種功能以便支持包括多個個體標本的載物 片的標本觀察(篩查）中的操作。
[0105] 圖7B是詳細示出顯示載物片圖像702的窗口的圖。載物片圖像702是載物片206 的除標簽601以外的區(qū)域的圖像。在顯示載物片圖像702的窗口中，可以檢查粘貼到載物 片206的所有個體標本(多個標本)。在載物片圖像702中，對所有個體標本賦予了指示標 本觀察(篩查）的順序的編號。例如，作為個體標本的編號704,向在標本觀察(篩查）的順序 中處于第七個的個體標本703賦予了 " 7 "。由于有九個個體標本，所以向各個個體標本賦予 編號"1"至"9"。用戶可以任意設(shè)定向哪些個體標本賦予哪些編號?；蛘?，可以基于圖像 呈現(xiàn)應(yīng)用的預(yù)定規(guī)則來自動分配編號。在載物片圖像702中，示出了顯示區(qū)域框705,其是 指示放大圖像的顯示區(qū)域的大小的框。向每個個體標本設(shè)定一個或多個顯示區(qū)域框以包含 該個體標本。顯示區(qū)域框的設(shè)定方法在下文說明（參見圖8A至8D)。個體標本"1"的顯示 區(qū)域框之一由粗框706突出顯示。粗框706是指示當前作為放大圖像701顯示在顯示裝置 103上的顯示區(qū)域的框。放大圖像701是載物片圖像702中與粗框706的區(qū)域相對應(yīng)的高 清晰度(高分辨率）圖像并且用于標本的詳細觀察。
[0106] (顯示區(qū)域框的設(shè)定）
[0107] 圖8A至8D是用于說明由標本布置調(diào)整部409執(zhí)行的為個體標本設(shè)定顯示區(qū)域框 的示意圖。圖8A至8D以個體標本"2"作為示例示出了為個體標本設(shè)定顯示區(qū)域框的流程。
[0108] 如圖8A所示，首先，設(shè)定個體標本801 (個體標本"2"）的外接矩形區(qū)域802。外 接矩形區(qū)域802的X方向上的長度被表示為A，并且Y方向上的長度被表示為B。外接矩形 區(qū)域802的對角線的交點被設(shè)定為外接矩形中心803。
[0109] 然后，如圖8B所示，確定覆蓋外接矩形區(qū)域（AXB)的最小數(shù)目的矩形顯示區(qū)域 框。顯示區(qū)域框的X方向上的長度被表示為C，并且Y方向上的長度被表示為D。最小數(shù)目 的顯示區(qū)域框的確定相當于利用任意正數(shù)Μ和N計算滿足ASCXM和BSDXN的最小Μ 和Ν。顯示區(qū)域框的最小數(shù)目是ΜΧΝ。Μ=3并且Ν=3。顯示區(qū)域框的最小數(shù)目是九個。
[0110] 如圖8C所示，對顯示區(qū)域框和個體標本801進行相對平移以搜索使得顯示區(qū)域 框的數(shù)目最小化的布置。例如，在由顯示區(qū)域框配置的矩形區(qū)域（（CXM) X (DXN))的四角 (左上、右上、左下和右下）布置外接矩形區(qū)域（ΑΧΒ)以搜索使得顯示區(qū)域框減少得最多的 布置。個體標本801被布置在由顯示區(qū)域框配置的矩形區(qū)域（（CXM) X (DXN))的左上角， 并且顯示區(qū)域框的數(shù)目減少到七個。
[0111] 最后，如圖8D所示，根據(jù)使從由顯示區(qū)域框配置的區(qū)域的最外周到個體標本801 的最短距離最大化的優(yōu)化算法來調(diào)整顯示區(qū)域中的余白（margin)。這個處理是為了盡可能 地減小個體標本801對每個顯示區(qū)域框的填充狀態(tài)的偏差而執(zhí)行的處理。然而，可省略該 處理。通過上述處理設(shè)定的多個顯示區(qū)域框表示用于個體標本801的詳細觀察的多個放大 圖像的位置和大小。通過向從載物片圖像中檢測到的每個個體標本應(yīng)用圖8A至8D所示的 處理，可以將多個顯示區(qū)域框（即，放大圖像）與個體標本關(guān)聯(lián)起來。
[0112] 圖8A至8D示出了僅通過個體標本801的平移對于顯示區(qū)域框的設(shè)定方法。然而， 取決于個體標本801的形狀，并不總是獲得覆蓋個體標本的最小數(shù)目的顯示區(qū)域框。取代 上述簡單方法，希望采用一種考慮到計算資源、計算時間、個體標本的形狀的復(fù)雜度等等來 獲取覆蓋個體標本的最小數(shù)目的顯示區(qū)域框的優(yōu)化算法。
[0113] (個體標本中的標本觀察(篩查）序列）
[0114] 圖9A至9E是用于說明由標本布置調(diào)整部409執(zhí)行的個體標本中的標本觀察（篩 查）序列的示意圖。圖9A至9E利用個體標本"2"作為示例示出了標本觀察(篩查）序列的 設(shè)定流程。配置個體標本的多個放大圖像(顯示區(qū)域框）的顯示順序被設(shè)定。
[0115] 首先，設(shè)定觀察開始位置901 (圖9A)。觀察開始位置901是配置個體標本801的 多個放大圖像之中首先顯示的放大圖像的顯示區(qū)域框。在此實施例中，個體標本801的多 個顯示區(qū)域框之中存在于最上方左端的顯示區(qū)域框被選擇為觀察開始位置901。當然，這 只是示例，諸如最上方右端的顯示區(qū)域框之類的其他顯示區(qū)域框也可被選擇為觀察開始位 置。
[0116] 然后，標本布置調(diào)整部409對于與觀察開始位置901在同一行中的顯示區(qū)域框設(shè) 定從左到右的顯示順序（圖9B)。當顯示順序的設(shè)定到達右端的顯示區(qū)域框時，標本布置調(diào) 整部409移動到下一行的顯示區(qū)域框（圖9C)并設(shè)定從右到左的顯示順序（圖9D)。當顯 示順序的設(shè)定到達左端的顯示區(qū)域框時，標本布置調(diào)整部409移動到下一行的顯示區(qū)域框 (圖9E)。標本布置調(diào)整部409重復(fù)圖9B至9E所示的處理，直到對所有顯示區(qū)域框設(shè)定了 顯示順序為止。結(jié)果，可以為配置個體標本801的多個放大圖像設(shè)定顯示順序?？蔀槊總€ 個體標本獨立設(shè)定標本觀察(篩查）序列。
[0117] 在圖像呈現(xiàn)應(yīng)用中，根據(jù)所確定的標本觀察(篩查）序列來控制個體標本中的放大 圖像的顯示的切換。當切換放大圖像的顯示時，可以非連續(xù)地將圖像從某個顯示區(qū)域框切 換到下一顯示區(qū)域框，或者可以像滾動那樣連續(xù)地切換圖像。
[0118] (通過平移進行的標本布置的再配置）
[0119] 圖10A至10C是用于說明通過平移進行的標本布置的再配置的示意圖?；诙鄠€ 個體標本的觀察順序、個體標本的顯示區(qū)域框和標本觀察(篩查)序列，標本布置調(diào)整部409 通過標本圖像(放大圖像）中的個體標本的平移來執(zhí)行再配置。
[0120] 在通過標本圖像(放大圖像）中的個體標本的平移進行的再配置中，根據(jù)在觀察順 序上彼此相鄰的僅兩個個體標本的標本觀察(篩查）序列和顯示區(qū)域框來確定個體標本的 布置。在圖10A中，示出了個體標本"1"的標本觀察(篩查）序列和顯示區(qū)域框。在圖10B 中，示出了個體標本"2"的標本觀察(篩查）序列和顯示區(qū)域框。在個體標本" 1"和"2"中， 這兩個個體標本的布置被確定為使得個體標本"1"中最后顯示的顯示區(qū)域框1001和個體 標本"2"中首先顯示的顯示區(qū)域框1002被接合。個體標本"1"和個體標本"2"的連接被 唯一地設(shè)定。
[0121] 圖10C示出了通過按該順序?qū)€體標本"1"連接到個體標本"9"獲得的結(jié)果。示 意性示出了再配置載物片的標本布置。在再配置載物片中，除了個體標本的圖像以外的部 分(背景部分）被縮小。再配置載物片上彼此相鄰的兩個個體標本之間的距離與實際載物 片上其間的距離相比更短。因此，與實際載物片的觀察相比，顯示區(qū)域的移動距離和移動次 數(shù)減少，并且無用的顯示(背景部分的顯示）減少。因此，可以提高標本觀察的效率。另外， 在再配置載物片中，根據(jù)給定的順序按順序(依次）布置多個(九個）個體標本。關(guān)于在觀察 順序上彼此相鄰的兩個個體標本(被稱為第一個體標本和第二個體標本)，第一個體標本的 最末顯示區(qū)域框和第二個體標本的第一顯示區(qū)域框被連接。結(jié)果，當移動顯示區(qū)域時，按順 序直接將放大圖像的顯示從第一個體標本的放大圖像切換到第二個體標本的放大圖像。因 此，易于沒有遺漏地觀察所有個體標本。
[0122] 在實踐中，希望在觀察順序上彼此相鄰的顯示區(qū)域框中提供一定程度的交疊區(qū) 域。這是因為，當切換顯示區(qū)域框時，易于掌握切換前后的放大圖像之間的對應(yīng)關(guān)系。然而， 提供交疊區(qū)域并不是必不可少的。例如，當通過滾動逐漸切換而不是非連續(xù)切換放大圖像 時，則不必提供交疊區(qū)域。
[0123] (通過平移進行的標本布置的再配置的流程）
[0124] 圖11A是用于說明此實施例中的標本布置的再配置的流程的流程圖。
[0125] 在步驟S1101中，標本布置調(diào)整部409確定在載物片206上是否存在多個個體標 本。這個步驟在預(yù)測量中執(zhí)行。例如，關(guān)于個體標本的數(shù)目的信息在載物片206的創(chuàng)建期 間被清楚地寫在標簽601上或以電子方式寫在標簽601上。在預(yù)測量中，寫入標簽601的 信息并確定個體標本的數(shù)目。可利用在預(yù)測量中拾取的載物片206的圖像在圖像處理中確 定個體標本的數(shù)目。
[0126] 在步驟S1102中，標本布置調(diào)整部409識別放大圖像的顯示區(qū)域的大小。此處理 是用于計算作為圖7A所示的放大圖像701顯示的區(qū)域在載物片圖像702上的大小的處理。 可顯示為放大圖像701的區(qū)域的大小根據(jù)顯示裝置103的屏幕分辨率、圖像呈現(xiàn)應(yīng)用的窗 口大小、放大圖像701的顯示倍率等等而變化。因此，步驟S1102中的識別處理是必要的。 具體而言，用戶輸入信息獲取部401獲取用戶利用鍵盤311或鼠標312設(shè)定的放大圖像701 的倍率。調(diào)整參數(shù)識別部408根據(jù)放大圖像701的倍率和窗口大小計算顯示區(qū)域的大小。 識別出的顯示區(qū)域的大小在下一步驟S1103中被反映為顯示區(qū)域框的大小。
[0127] 在步驟S1103中，標本布置調(diào)整部409執(zhí)行個體標本的顯示區(qū)域框的設(shè)定。S1103 的細節(jié)在下文中參考圖11B來說明。
[0128] 在步驟S1104中，標本布置調(diào)整部409執(zhí)行標本觀察(篩查）序列的設(shè)定。標本觀 察(篩查）序列是根據(jù)多個個體標本的觀察順序、個體標本的圖像的觀察開始位置和個體標 本的圖像的顯示區(qū)域的觀察順序來設(shè)定的。S1104的細節(jié)在下文參考圖11C來說明。
[0129] 在步驟S1105中，標本布置調(diào)整部409自動執(zhí)行個體標本的布置的再配置(平移)。 標本布置調(diào)整部409選擇在觀察順序上彼此相鄰的兩個個體標本，并且基于僅這兩個個體 標本的標本觀察(篩查)序列和顯示區(qū)域框來確定這兩個個體標本的相對布置。標本布置調(diào) 整部409通過對在觀察順序上彼此相鄰的個體標本的所有組合重復(fù)相同的過程來執(zhí)行所 有個體標本的再配置(平移）（參見圖10C)。
[0130] 根據(jù)以上說明的處理步驟，可以執(zhí)行多個個體標本的再配置(布置的調(diào)整)。當用 戶改變放大圖像701的倍率或改變窗口大小時，在任何時間執(zhí)行從步驟S1102起的處理。
[0131] 圖11B是示出步驟S1103中的個體標本的顯示區(qū)域框的設(shè)定的細節(jié)的流程圖。在 步驟S1113中，標本布置調(diào)整部409從載物片的圖像中檢測個體標本的圖像的區(qū)域，并且選 擇該個體標本作為對其執(zhí)行以下處理的個體標本。在步驟S1114中，標本布置調(diào)整部409 為所選個體標本設(shè)定外接矩形區(qū)域(參見圖8A)。在步驟S1115中，標本布置調(diào)整部409把 最小數(shù)目的顯示區(qū)域框重疊在步驟S1114中設(shè)定的外接矩形區(qū)域上(參見圖8B)。在步驟 S1116中，標本布置調(diào)整部409在顯示區(qū)域框中平移個體標本(參見圖8C和8D)。結(jié)果，顯 示區(qū)域框的減少和顯示區(qū)域框中的個體標本的余白調(diào)整被執(zhí)行。在步驟S1117中，標本布 置調(diào)整部409確定是否對所有個體標本執(zhí)行了步驟S1113至S1116。如果對所有個體標本 執(zhí)行了步驟S1113至S1116,則標本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步 驟，可以為各個個體標本設(shè)定圖像區(qū)域框。
[0132] 圖11C是示出標本觀察(篩查）序列的設(shè)定的細節(jié)的流程圖。在步驟S1108中，標 本布置調(diào)整部409向所有個體標本賦予指示標本觀察(篩查)的順序的編號。用戶可任意設(shè) 定向哪些個體標本賦予哪些編號，或者可基于規(guī)則來自動分配編號。在步驟S1109中，標本 布置調(diào)整部409選擇對其執(zhí)行以下處理的一個個體標本。在步驟S1110中，標本布置調(diào)整 部409執(zhí)行所選個體標本的觀察開始位置的設(shè)定。例如，在圖9A中，在觀察開始位置901 中設(shè)定覆蓋個體標本的顯示區(qū)域框之中存在于最上方左端處的顯示區(qū)域框。在步驟S1111 中，標本布置調(diào)整部409執(zhí)行個體標本中的顯示區(qū)域框的顯示順序的設(shè)定。設(shè)定顯示順序 的方法如參考圖9B至9E所述。在步驟S1112中，標本布置調(diào)整部409確定是否對所有個 體標本執(zhí)行了步驟S1109至Sill 1。如果對所有個體標本執(zhí)行了步驟S1109至Sill 1，則標 本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步驟，可以為個體標本設(shè)定標本觀察 (篩查）序列。
[0133] (通過平移進行的標本布置的再配置的另一示例）
[0134] 圖12是用于說明通過平移進行的標本布置的再配置的另一示例的示意圖。
[0135] 與以上說明的示例(參見圖10C)相比，個體標本中的顯示區(qū)域框的設(shè)定是相同的， 但關(guān)于個體標本"1"、"2"、"3"、"7"、"8"和"9"的觀察開始位置的設(shè)定和顯示順序的設(shè)定 是不同的。關(guān)于個體標本"4"、"5"和"6"的觀察開始位置的設(shè)定和顯示順序的設(shè)定與該示 例中的設(shè)定是相同的。
[0136] 說明關(guān)于個體標本" 1"、" 2 "、" 3 "、" 7 "、"8 "和"9 "的觀察開始位置的設(shè)定和顯示 順序的設(shè)定。觀察開始位置被設(shè)定在覆蓋個體標本的顯示區(qū)域框之中存在于最下方右端處 的顯示區(qū)域框中。關(guān)于顯示順序，重復(fù)如下序列直到對所有顯示區(qū)域框設(shè)定了顯示順序為 止：從觀察開始位置中的顯示區(qū)域框向左移動，在到達左端的顯示區(qū)域框后移動到上一行， 從左向右移動，并在到達右端后移動到上一打。
[0137] 個體標本中的標本觀察(篩查)序列可在各個個體標本中獨立設(shè)定。對于個體標本 " 1"、" 2 "、" 3 "、" 7 "、"8 "和"9 "這一組和個體標本"4"、" 5 "和"6 "這一組應(yīng)用不同的標本 觀察(篩查）序列。
[0138] 在通過平移進行的標本布置的再配置中，按照在觀察順序上彼此相鄰的僅兩個個 體標本的標本觀察(篩查）序列和顯示區(qū)域框來調(diào)整個體標本的布置。因此，如圖12所示， 個體標本"3"中最后觀察的顯示區(qū)域框和個體標本"4"中首先觀察的顯示區(qū)域框被連接。 然而，連接后的個體標本"3"和個體標本"4"不能在同一平面上示出。這對于個體標本 "6"和個體標本"7"的連接也成立。這種連接關(guān)系不能由二維平面表示，但可由像莫比斯 (Moebius)帶那樣的相位空間來表示。在圖12中，不能由二維平面表示的連接由虛線箭頭 指示。
[0139] 在圖12所示的再配置的示例中，例如，個體標本"1"到個體標本"3"可局部地由 二維圖像表示。然而，為了連接例如個體標本" 3 "和個體標本"4"，多個個體標本的整體圖 像由相位空間（而不是二維平面）來表示。在此實施例中，圖像的再布置是由利用定義再配 置載物片中的位置與實際載物片中的位置之間的對應(yīng)關(guān)系的數(shù)據(jù)控制圖像數(shù)據(jù)的讀取位 置的方法、而不是實際生成再配置的圖像數(shù)據(jù)的方法來虛擬實現(xiàn)的。因此，可以沒有問題地 實現(xiàn)圖12所示的相位空間中的連接關(guān)系。執(zhí)行標本觀察(篩查）的觀察者只看顯示的放大 圖像，并且如果觀察者只能按順序無遺漏地觀察所有放大圖像則可達到目的。因此，即使再 配置的標本布置不能由二維平面表示，也沒有特別的問題。
[0140] (通過旋轉(zhuǎn)和平移進行的標本布置的再配置）
[0141] 圖13A至13F是用于說明通過旋轉(zhuǎn)和平移進行的標本布置的再配置的示意圖。
[0142] 圖13A至13D是用于說明在考慮個體標本的旋轉(zhuǎn)的情況下顯示區(qū)域框的設(shè)定的示 意圖。利用個體標本"7"作為示例示出了直到個體標本中的顯示區(qū)域框的設(shè)定為止的流程。
[0143] 在圖13A中，設(shè)定個體標本1301 (個體標本"7"）的最小外接矩形區(qū)域1302。
[0144] 在圖13B中，個體標本1301和最小外接矩形區(qū)域1302被虛擬地一體旋轉(zhuǎn)，使得最 小外接矩形區(qū)域1302的各邊與X軸和Y軸平行。除了圖13B所示的形狀以外，可以設(shè)想通 過將圖13B所示的圖進一步旋轉(zhuǎn)90度、180度和270度獲得的形狀。然而，可以選擇任意一 個旋轉(zhuǎn)角度。由于沒有選擇最終旋轉(zhuǎn)角度，所以不必生成通過實際旋轉(zhuǎn)個體標本而獲得的 圖像。個體標本只需要出于計算目的被虛擬旋轉(zhuǎn)。
[0145] 在圖13C中，利用最小數(shù)目的顯示區(qū)域框覆蓋最小外接矩形區(qū)域。
[0146] 在圖13D中，平移個體標本1301以減少顯示區(qū)域框。個體標本1301被布置在由 顯示區(qū)域框配置的矩形區(qū)域的右下角。顯示區(qū)域框的數(shù)目為五個。另外，通過使從由顯示 區(qū)域框配置的區(qū)域的最外周到個體標本1301的最短距離最大化的優(yōu)化算法來調(diào)整顯示區(qū) 域中的余白。
[0147] 圖13A至13D示出了通過個體標本1301的旋轉(zhuǎn)和平移對于顯示區(qū)域框的設(shè)定方 法。然而，取決于個體標本1301的形狀，并不總是獲得覆蓋個體標本的最小數(shù)目的顯示區(qū) 域框。取代上述簡單方法，可以選擇用于獲取覆蓋個體標本的最小數(shù)目的顯示區(qū)域框的優(yōu) 化算法。要采用的算法只需要考慮計算資源、計算時間、個體標本的形狀的復(fù)雜度等等來確 定。
[0148] 在圖13E中，說明在考慮標本觀察(篩查)序列的情況下個體標本1301的旋轉(zhuǎn)。如 參考圖13B所說明的，可設(shè)想四種旋轉(zhuǎn)作為個體標本1301的旋轉(zhuǎn)。通過這四種旋轉(zhuǎn)而旋轉(zhuǎn) 的個體標本1301分別被表示為個體標本"7-1"、"7-^"、"7-1^"和"7-^"。個體標本的 旋轉(zhuǎn)角度彼此相差90度。標本觀察（篩查）序列與參考圖9A至9E說明的序列相同。當關(guān) 注個體標本"7-iii"和"7-iv"時，在顯示區(qū)域框之間發(fā)生傾斜移動。為了盡可能地保持正 在觀察的個體標本中的連續(xù)性，也就是說，為了盡可能只通過左右移動和向下移動連續(xù)地 執(zhí)行標本觀察(篩查)，個體標本"7-iii"和"7-iv"的旋轉(zhuǎn)被從選擇候選中排除。對于個體 標本"7"的旋轉(zhuǎn)，選擇個體標本"7-i"或"7-ii"?？梢圆捎?7-i"和"7-ii"的旋轉(zhuǎn)中的任 何一個。例如，可以采用在移動方向上變化更小的旋轉(zhuǎn)，或者可以采用更接近標本的實際方 向的旋轉(zhuǎn)。
[0149] 圖13F示出了根據(jù)以上說明的過程連接并再配置個體標本"1"至個體標本"9"。 對于個體標本" 7 "，采用圖13E中" 7-i "指示的旋轉(zhuǎn)。圖7A所示的放大圖像701是通過放 大圖13F所示的顯示區(qū)域框中的任何一個而獲得的圖像。
[0150] (通過個體標本的旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定）
[0151] 圖14是用于說明通過個體標本的旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定的流程 圖。圖14示出了圖11A所示的流程中的步驟S1103的細節(jié)。圖14的流程圖替換圖11B的 流程圖。與個體標本的再配置有關(guān)的另一種處理與圖11A和11C所示的處理相同。
[0152] 在步驟S1401中，標本布置調(diào)整部409選擇要對其執(zhí)行以下處理的一個個體標本。 在步驟S1402中，標本布置調(diào)整部409為該個體標本設(shè)定最小外接矩形區(qū)域(參見圖13A)。 在步驟S1403中，標本布置調(diào)整部409將個體標本1301和最小外接矩形區(qū)域1302 -體地 虛擬旋轉(zhuǎn)(參見圖13B)。在步驟S1404中，標本布置調(diào)整部409將最小數(shù)目的顯示區(qū)域框重 疊在步驟S1402中設(shè)定的最小外接矩形區(qū)域上(參見圖13C)。在步驟S1405中，標本布置 調(diào)整部409在顯示區(qū)域框中平移個體標本(參見圖13D)。結(jié)果，顯示區(qū)域框的減少和顯示 區(qū)域框中的個體標本的余白調(diào)整被執(zhí)行。在步驟S1406中，標本布置調(diào)整部409在考慮標 本觀察(篩查）序列的情況下執(zhí)行個體標本的旋轉(zhuǎn)（圖13E)。在四種旋轉(zhuǎn)之中，選擇如下旋 轉(zhuǎn)角度：在該旋轉(zhuǎn)角度下，能夠盡可能只通過左右移動和向下移動來連續(xù)執(zhí)行標本觀察(篩 查)。當多個旋轉(zhuǎn)角度為候選時，根據(jù)預(yù)定的規(guī)則選擇諸如在移動方向上變化更小的旋轉(zhuǎn)角 度或者最接近原始方向的旋轉(zhuǎn)角度之類的一個旋轉(zhuǎn)角度。在步驟S1407中，標本布置調(diào)整 部409按在步驟S1406選擇的旋轉(zhuǎn)角度來旋轉(zhuǎn)個體標本。在步驟S1408中，標本布置調(diào)整 部409確定是否對所有個體標本執(zhí)行了步驟S1401至S1407。如果對所有個體標本執(zhí)行了 步驟S1401至S1407,則標本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步驟，可以 為個體標本設(shè)定顯示區(qū)域框。
[0153] (個體標本的拉近）
[0154] 圖15A至1?是用于說明顯示區(qū)域(放大圖像）的調(diào)整(個體標本的拉近）的示意 圖。說明對于通過圖10C所示的平移調(diào)整布置的再配置載物片進一步減少顯示區(qū)域框的方 法。
[0155] 圖15A是用于說明對個體標本"2"和個體標本"3"的交疊確定以及基于該確定對 顯示區(qū)域的調(diào)整(個體標本的拉近）的示意圖。注意在個體標本1501 (個體標本"2"）中最 后顯示的顯示區(qū)域框1502和在個體標本1503 (個體標本"3"）中首先顯示的顯示區(qū)域框 1504。在圖10C中，個體標本1501和個體標本1503被連接，以使得顯示區(qū)域框1502的圖 像和顯示區(qū)域框1504的圖像被接合。評估顯示區(qū)域框1502和1504是否可被重疊以連接 兩個個體標本1501和1503。使得能夠連接的條件是在個體標本1501和1503中不發(fā)生交 疊并且在個體標本1501和1503共同的放大圖像中個體標本1501的顯示順序和個體標本 1503的顯示順序中不發(fā)生不一致。當滿足該條件時，顯示區(qū)域框1502和1504被重疊以布 置兩個個體標本1501和1503 (圖15A的右圖）。顯示區(qū)域框1505的圖像是個體標本1501 中最后顯示的顯示區(qū)域框1502的圖像和個體標本1503中首先顯示的顯示區(qū)域框1504的 圖像的組合圖像。結(jié)果，個體標本1501的多個放大圖像之中最后顯示的圖像和個體標本 1503的多個放大圖像之中首先顯示的圖像是共同圖像。
[0156] 圖15B示出了不能應(yīng)用參考圖15A說明的方法的一個示例。注意個體標本1506 (個體標本"1"）中最后顯示的顯示區(qū)域框1507和個體標本1508 (個體標本"2"）中首先顯 示的顯示區(qū)域框1509。當用與圖15A所示的方法相同的方法生成通過將顯示區(qū)域框1507 和1509彼此重疊而獲得的顯示區(qū)域框1510、并且布置個體標本1506和1508時，如圖15B 的右圖中所示在這兩個個體標本中發(fā)生交疊。在此情況下，不能應(yīng)用此方法。
[0157] 圖15C示出了不能應(yīng)用參考圖15A說明的方法的另一示例。注意個體標本1511 (個體標本"I"）中最后顯示的顯示區(qū)域框1512和個體標本1513 (個體標本"II"）中首先 顯示的顯示區(qū)域框1514。當通過與圖15A所示的方法相同的方法重疊顯示區(qū)域框1512和 1514時，個體標本1511和1513的交疊不發(fā)生。然而，個體標本1511和1513兩者都被包括 在與顯示區(qū)域框1515、1516和1517相對應(yīng)的三個圖像中。對于這三個圖像，個體標本1511 中的顯示順序是左方向（1517 - 1516 - 1515)，而個體標本1513中的顯示順序是右方向 (1515 - 1516 - 1517)。這是在兩個個體標本共同的放大圖像中兩個個體標本的顯示順序 中發(fā)生不一致的示例。在此情況下，不能應(yīng)用此方法。
[0158] 圖1?示意性示出了在根據(jù)參考圖15A說明的過程執(zhí)行顯示區(qū)域框的減少之后的 再配置載物片上的標本布置。當將該再配置載物片與圖10C所示的再配置載物片相比較 時，在個體標本" 2 "和" 3 "的連接部分、個體標本" 3 "和" 4 "的連接部分以及個體標本" 8 " 和"9"的連接部分中減少了顯示區(qū)域框。以上說明的方法也可應(yīng)用到圖12和圖13F所示 的再配置載物片上的標本布置。
[0159] (用于個體標本的拉近的流程）
[0160] 圖16是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的流程圖。此處理是由標本 布置調(diào)整部409執(zhí)行的。
[0161] 在步驟S1601中，標本布置調(diào)整部409掌握作為個體標本之間的連接區(qū)域的兩個 顯示區(qū)域框。這個處理相當于掌握圖15A中的個體標本1501的最末顯示區(qū)域框1502和個 體標本1503的第一顯示區(qū)域框1504。
[0162] 在步驟S1602中，標本布置調(diào)整部409確定當重疊步驟S1601中掌握的兩個顯示 區(qū)域框時是否發(fā)生個體標本的交疊。這個處理相當于確定圖15A的右圖的狀態(tài)中的個體標 本1501和個體標本1503中是否發(fā)生交疊。如果不發(fā)生交疊，則處理前進到步驟S1603。如 果發(fā)生交疊，則不將個體標本彼此拉近。
[0163] 在步驟S1603中，標本布置調(diào)整部409確定當重疊在步驟S1601中掌握的兩個顯 示區(qū)域框時是否發(fā)生顯示順序的不一致。這個處理相當于確定圖15A的左圖中的顯示區(qū)域 框1502的顯示順序和顯示區(qū)域框1504的顯示順序是否彼此一致。如果不發(fā)生不一致，則 處理前進到步驟S1604。如果發(fā)生不一致，則不將個體標本彼此拉近。
[0164] 在步驟S1604中，標本布置調(diào)整部409將個體標本彼此拉近。這個處理相當于調(diào) 整圖15A中的個體標本1501和1503的相對位置(將兩個個體標本彼此拉近)以重疊個體標 本1501的顯示區(qū)域框1502和個體標本1503的顯示區(qū)域框1504。標本布置調(diào)整部409通 過組合這兩個個體標本的放大圖像來生成與這兩個個體標本共同的顯示區(qū)域框（圖15A的 右圖中的1505)相對應(yīng)的放大圖像。
[0165] 在步驟S1605中，標本布置調(diào)整部409確定是否對所有個體標本之間的連接區(qū)域 執(zhí)行了這些步驟。如果對所有個體標本執(zhí)行了這些步驟，則標本布置調(diào)整部409結(jié)束該處 理。
[0166] (應(yīng)用畫面(呈現(xiàn)圖像)）
[0167] 圖17A和17B是用于說明當執(zhí)行顯示區(qū)域的調(diào)整(個體標本的拉近)時獲得的呈現(xiàn) 圖像的示意圖。圖17A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了 菜單窗口以外還包括用于顯示放大圖像1701和載物片圖像1702的兩個窗口。圖17B是示 出顯示載物片圖像1702的窗口的圖。由于基本配置與參考圖7A和7B說明的基本配置相 同，因此，下面僅說明與參考圖7A和7B說明的呈現(xiàn)圖像的差別。
[0168] 如參考圖15A和1?所說明的，個體標本"2"的最末顯示區(qū)域框和個體標本"3"的 第一顯示區(qū)域框是共同的。因此，當顯示區(qū)域框被移動到個體標本"2"的末端時，如圖17B 所示，指示當前顯示區(qū)域的粗框1703被描繪在個體標本"2"的最末顯示區(qū)域框和個體標本 "3"的第一顯示區(qū)域框中。另一方面，通過組合個體標本"2"和個體標本"3"獲得的圖像被 顯示在放大圖像1701的窗口上。也就是說，在圖17A所示的放大圖像1701的上部看到個 體標本"2"的左下的部分。在放大圖像1701的下部看到個體標本"3"的左上的部分。通 過這種方法可以減少放大圖像1701的切換(移動)次數(shù)。因此，可以實現(xiàn)標本觀察(篩查)的 效率性。
[0169] 在圖17B中，與已經(jīng)經(jīng)歷了標本觀察(篩查）的區(qū)域1704相對應(yīng)的顯示區(qū)域框帶 有陰影。結(jié)果，用戶可以容易地檢查在整個載物片(九個個體標本）中標本觀察(篩查）的進 展。由于只需要區(qū)分已經(jīng)觀察的區(qū)域和尚未觀察的區(qū)域，所以可通過除了加陰影以外的方 法來區(qū)分這些區(qū)域。可以使用任何方法。例如，可以通過顏色來區(qū)分已經(jīng)觀察的區(qū)域和其 他區(qū)域，或者可以添加指示"已經(jīng)觀察"和"尚未觀察"的標記或圖標的圖像。
[0170] (個體標本的分離）
[0171] 圖18A和18B是用于說明再配置載物片中的個體標本的分離的示意圖。當實際載 物片206上的個體標本之間的間隔極窄時，在某個個體標本的顯示區(qū)域框中有時包括另一 個體標本的一部分。在圖18A所示的示例中，由于個體標本"iii"與個體標本"iv"之間的 間隔在載物片上窄，所以個體標本"iv"被包括在個體標本"iii"的顯示區(qū)域框1801中，并 且個體標本" iii"被包括在個體標本"iv"的顯示區(qū)域框1802中。
[0172] 可利用這種顯示區(qū)域框來執(zhí)行標本觀察(篩查)。然而，當除了正在觀察的個體標 本以外的個體標本被顯示時，有可能用戶會誤解個體標本的形狀等，用戶的注意力被轉(zhuǎn)移 到不需要觀察的部分，并且效率劣化。因此，可防止在與某個個體標本關(guān)聯(lián)設(shè)定的顯示區(qū)域 框中顯示另一個體標本，以便用戶可集中觀察一個個體標本。圖18B示出了個體標本"iii" 和為個體標本"iii"設(shè)定的顯示區(qū)域框以及個體標本"iv"和為個體標本"iv"設(shè)定的顯示 區(qū)域框被彼此獨立地提取以再配置標本圖像(放大圖像）的示例。在此情況下，執(zhí)行用于從 與顯示區(qū)域框1801相對應(yīng)的標本圖像(放大圖像）中擦除個體標本"iv"的圖像的處理。執(zhí) 行用于從與顯示區(qū)域框1802相對應(yīng)的標本圖像(放大圖像）中擦除個體標本"iii"的圖像 的處理。
[0173] (對圖像格式的說明）
[0174] 圖19A至19C是用于說明圖像文件格式的示意圖。
[0175] 圖19A示出了圖像數(shù)據(jù)的基本文件格式?；疚募袷桨^部、圖像數(shù)據(jù)和附 加數(shù)據(jù)。頭部包括文件頭部、預(yù)測量信息、成像信息和照明信息。在文件頭部中，存儲關(guān)于 整個文件結(jié)構(gòu)的信息，例如圖像數(shù)據(jù)的字節(jié)順序。在預(yù)測量信息中，存儲載物片206的標簽 信息和通過預(yù)測量獲取的信息，例如載物片大小。在成像信息中，存儲關(guān)于成像的信息，例 如透鏡倍率、成像時間以及成像元件的像素大小。在照明信息中，存儲關(guān)于照明的信息，例 如光源類型。圖像數(shù)據(jù)包括圖像數(shù)據(jù)頭部和層次圖像數(shù)據(jù)。在圖像數(shù)據(jù)頭部中，存儲關(guān)于 圖像數(shù)據(jù)的結(jié)構(gòu)的信息，例如層的數(shù)目。在層次圖像數(shù)據(jù)中，存儲高倍率圖像數(shù)據(jù)、中倍率 圖像數(shù)據(jù)、低倍率圖像數(shù)據(jù)和載物片圖像數(shù)據(jù)。作為層次圖像數(shù)據(jù)存儲的圖像數(shù)據(jù)相當于 圖5所示的層次圖像數(shù)據(jù)。高倍率圖像數(shù)據(jù)、中倍率圖像數(shù)據(jù)和低倍率圖像數(shù)據(jù)分別是第 四層圖像504、第三層圖像503和第二層圖像502。載物片圖像數(shù)據(jù)相當于第一層圖像501 的數(shù)據(jù)。附加數(shù)據(jù)包括附加數(shù)據(jù)頭部和注釋信息。在附加數(shù)據(jù)頭部中，存儲關(guān)于附加數(shù)據(jù) 的結(jié)構(gòu)的信息，例如附加數(shù)據(jù)的類型。在注釋信息中，存儲寫入位置、類型、到注釋的寫入內(nèi) 容的指針。對于所有成像的載物片生成圖19A所示的圖像數(shù)據(jù)的基本文件格式。
[0176] 圖19B示出了當在載物片206中包括多個個體標本時靜態(tài)生成的數(shù)據(jù)的文件格 式。該文件格式是作為載物片圖像數(shù)據(jù)的一部分生成的。對于每個個體標本存儲外接矩形 區(qū)域的數(shù)據(jù)大小、外接矩形區(qū)域的開始地址（X，Y)以及外接矩形區(qū)域的像素大?。╔，Y)。當 放大圖像的倍率(顯示區(qū)域框）或者標本觀察(篩查）序列被改變時，可利用圖19B所示的信 息生成放大圖像701的圖像數(shù)據(jù)。
[0177] 圖19C示出了當設(shè)定放大圖像的倍率和標本觀察(篩查）序列時動態(tài)生成的數(shù)據(jù) 的文件格式。在顯示區(qū)域大?。╔，Y)中，存儲基于放大圖像的倍率計算出的顯示區(qū)域在載 物片圖像上的大?。╔方向上的寬度和Υ方向上的高度)，也就是顯示區(qū)域框的寬度和高度。 對于各個個體標本，計算顯示區(qū)域的數(shù)目和各個顯示區(qū)域的開始地址（X，Υ)并將其存儲在 顯示區(qū)域大小（Χ，Υ)中。開始地址（Χ，Υ)是載物片圖像上的顯示區(qū)域框的左上的像素的坐 標。圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)相當于用于定義標本觀察(篩查）序列和再配置 的標本布置的數(shù)據(jù)，也就是再配置載物片的數(shù)據(jù)。基于顯示區(qū)域大?。╔，Υ)和顯示區(qū)域的 開始地址（X，Υ)來動態(tài)讀取并生成標本觀察(篩查）中顯示的放大圖像。
[0178] 當執(zhí)行參考圖15Α說明的個體標本的拉近、參考圖18Β說明的個體標本的分離等 等時，從層次圖像數(shù)據(jù)讀取的圖像數(shù)據(jù)不能被直接用作放大圖像，并且諸如圖像的組合或 圖像的一部分的擦除之類的圖像處理是必要的。因此，希望在圖19C所示的(動態(tài)）載物片 圖像數(shù)據(jù)中描述指示其中執(zhí)行個體標本的拉近或分離的顯示區(qū)域的信息。當顯示在標本觀 察(篩查）中執(zhí)行個體標本的拉近或分離的部分的放大圖像時，可執(zhí)行諸如圖像的組合或圖 像的一部分的擦除之類的圖像處理。然而，從顯示速度(響應(yīng)性)的改善的角度來看，希望預(yù) 先生成經(jīng)處理的放大圖像數(shù)據(jù)。例如，當生成(動態(tài))載物片圖像數(shù)據(jù)時，與執(zhí)行個體標本的 拉近或分離的顯示區(qū)域相對應(yīng)的放大圖像的數(shù)據(jù)被生成并存儲在存儲器或存儲設(shè)備中。在 (動態(tài)）載物片圖像數(shù)據(jù)的顯示區(qū)域的開始地址（Χ，γ)中，只需要描述用于指定所生成的放 大圖像的數(shù)據(jù)的信息(存儲目的地的地址、文件名等)，而不是載物片圖像上的坐標。
[0179] (標本觀察(篩查）中的應(yīng)用操作示例）
[0180] 參考圖7Α和7Β來說明標本觀察(篩查)中的用戶操作和圖像呈現(xiàn)應(yīng)用的操作。假 定圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)已經(jīng)由標本布置調(diào)整部409生成。
[0181] 當標本觀察(篩查）開始時，控制部301從圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)獲 取顯示區(qū)域大小（X，Υ)和個體標本"1"的第一顯示區(qū)域的開始地址（X，Υ)?？刂撇?01從 與顯示倍率相對應(yīng)的層次圖像數(shù)據(jù)中讀取與由顯示區(qū)域大小（X，Υ)和開始地址（X，Υ)確定 的區(qū)域相對應(yīng)的圖像數(shù)據(jù)，生成放大圖像701，并將放大圖像701顯示在顯示裝置103上。 控制部301把指示當前顯示區(qū)域的粗框706與從層次圖像數(shù)據(jù)讀取的載物片圖像數(shù)據(jù)相組 合，并顯示載物片圖像702。
[0182] 用戶觀察放大圖像701并且檢查是否發(fā)生異常等。當用戶發(fā)現(xiàn)有可能發(fā)生異常的 部分(關(guān)心區(qū)域）時，用戶利用鼠標312或鍵盤311記錄關(guān)心區(qū)域的位置并且根據(jù)需要輸入 注釋(評論)。當對正被顯示的放大圖像701的觀察完成時，用戶命令改變到下一顯示區(qū)域 (命令移動到下一顯示區(qū)域)。顯示區(qū)域的改變可通過按壓鍵盤311的鍵、按壓鼠標312的 按鈕或旋轉(zhuǎn)鼠標312的滾輪、操作屏幕上顯示的GUI等等來命令。作為一種簡單的方法，可 設(shè)想用于每次在同一鍵或按鈕(例如"下一個"按鈕或輸入鍵）被按壓時將顯示區(qū)域按順序 轉(zhuǎn)變到下一顯示區(qū)域的用戶界面。
[0183] 當命令顯示區(qū)域的改變時，控制部301從圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)中 獲取下一顯示區(qū)域的開始地址（X，Y)，并且將與該開始地址相對應(yīng)的放大圖像701顯示在 顯示裝置103上。控制部301更新載物片圖像702中的粗框706的顯示位置。當顯示區(qū)域 被改變時，前一放大圖像和下一放大圖像的顯示可被切換，或者前一放大圖像可被逐漸滾 動到下一放大圖像。
[0184] 圖7A和7B示出了重復(fù)放大圖像的觀察和顯示區(qū)域的改變并且到個體標本"1"的 最末顯示區(qū)域的觀察完成的狀態(tài)。當用戶在此狀態(tài)中命令顯示區(qū)域的改變時，控制部301 將顯示區(qū)域移動到下一個體標本"2"的第一顯示區(qū)域。也就是說，控制部301從圖19C所 示的(動態(tài)）載物片圖像數(shù)據(jù)中獲取個體標本"2"的第一顯示區(qū)域的開始地址（X，Y)，并將 與該開始地址相對應(yīng)的放大圖像701顯示在顯示裝置103上?？刂撇?01更新載物片圖像 702中的粗框706的顯示位置。
[0185] 根據(jù)以上說明的方法，執(zhí)行放大圖像的更新以使得顯示區(qū)域響應(yīng)于用戶的移動指 令根據(jù)再配置載物片上的預(yù)定序列移動。因此，用戶可以按順序觀察個體標本"1"至"9" 并且沒有遺漏地觀察個體標本的所有放大圖像。當用戶在觀察某個個體標本的最末放大 圖像的狀態(tài)中命令顯示區(qū)域的改變時，顯示區(qū)域自動地移動到下一個體標本的第一放大圖 像。因此，操作簡單，并且可以防止由于操作錯誤引起的忽視的發(fā)生。結(jié)果，可以大幅減輕 用戶的操作負擔。另外，切換顯示區(qū)域以使得可以在盡可能少的次數(shù)中觀察個體標本的僅 一部分。因此，可以執(zhí)行極高效的標本觀察(篩查)。
[0186] 圖20A和20B是用于說明由標本布置的再配置導(dǎo)致的效果的示意圖。圖20A所示 的箭頭指示傳統(tǒng)示例中的個體標本之間的移動2001。當根據(jù)參考圖9A至9E說明的標本觀 察(篩查）序列執(zhí)行標本觀察(篩查）時，有必要暫停標本觀察(篩查）序列并將顯示區(qū)域以大 的距離從個體標本"1"移動到個體標本"2"。當用戶需要執(zhí)行此移動時，移動的操作是麻煩 的并且有可能引起操作錯誤。另一方面，圖20B所示的箭頭指示此實施例中的個體標本之 間的移動2002?？梢陨踔猎诓环恋K標本觀察(篩查）序列的情況下在個體標本之間移動顯 示區(qū)域。也就是說，根據(jù)此實施例中的個體標本的再配置(布置的調(diào)整)，當在載物片上有多 個標本時，可以減輕標本觀察(篩查）的負擔。
[0187] 在此實施例中，使用圖19A至19C所示的圖像文件格式。因此，不必生成經(jīng)歷標本 布置的調(diào)整(再配置）的圖像數(shù)據(jù)。只需要控制放大圖像的數(shù)據(jù)的讀取位置。結(jié)果，可以實 現(xiàn)處理負擔的減輕和存儲容量的減小。
[0188] (呈現(xiàn)圖像的第二示例）
[0189] 圖21A和21B是用于說明呈現(xiàn)圖像的第二示例的示意圖。
[0190] 圖21A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了菜單窗 口以外還包括用于顯示放大圖像701、載物片圖像702和個體標本重布置圖像2101的三個 窗口。與圖7A相比，添加了用于個體標本重布置圖像2101的窗口。
[0191] 圖21B是示出顯示個體標本重布置圖像2101的窗口的圖。個體標本重布置圖像 2101是排列了多個個體標本的圖像。在圖21B所示的示例中，九個個體標本被排列成三行 三列(在行方向和列方向兩者上)。然而，可在行方向和列方向中的一者上排列個體標本。在 此情況下，希望根據(jù)個體標本的觀察順序來按順序布置多個個體標本。個體標本重布置圖 像2101由標本布置調(diào)整部409生成并存儲為圖19A所示的載物片圖像數(shù)據(jù)的一部分。由 于個體標本的未對齊和顯示區(qū)域框的交疊不發(fā)生，所以與圖7B相比，為用戶清楚顯示了個 體標本之間的位置關(guān)系。
[0192] 作為呈現(xiàn)形式，還可以不顯示用于載物片圖像702的窗口，并且除了菜單窗口以 夕卜，還有用于顯示放大圖像701和個體標本重布置圖像2101的兩個窗口。
[0193] (呈現(xiàn)圖像的第三示例）
[0194] 圖22A和22B是用于說明呈現(xiàn)圖像的第二不例的不意圖。
[0195] 圖22A示出了顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了菜單窗口 以外還包括用于顯示放大圖像701、載物片圖像702和再配置載物片的整體圖像2201的三 個窗口。與圖7A相比，添加了用于再配置載物片的整體圖像2201的窗口。
[0196] 圖22B是示出顯示再配置載物片的整體圖像2201的窗口的圖。再配置載物片的 整體圖像2201是示出以上說明的再配置載物片中的個體標本的整個布置(調(diào)整后的標本 布置）的圖像。再配置載物片的整體圖像2201由標本布置調(diào)整部409生成并存儲為圖19A 所示的載物片圖像數(shù)據(jù)的一部分。放大圖像701和再配置載物片的整體圖像2201處于放 大和縮小的簡單關(guān)系。因此，與圖7B相比，為用戶清楚顯示了放大圖像和整體圖像中的觀 察區(qū)域之間的對應(yīng)關(guān)系。
[0197] 作為呈現(xiàn)形式，也可以不顯示用于載物片圖像702的窗口，并且除了菜單窗口以 夕卜，還有用于顯示放大圖像701和再配置載物片的整體圖像2201的兩個窗口。在再配置載 物片的整體圖像2201中可以示出用于清楚指示觀察的順序(序列）的信息(例如指示順序 的編號或箭頭)。另外，可以提供使得用戶能夠手動改變觀察的順序(序列)、顯示區(qū)域框的 位置、大小和分割方法、個體標本之間的連接等等的功能。例如，希望用戶能夠用鼠標312 拖動并改變再配置載物片的整體圖像2201中顯示的顯示區(qū)域框、觀察的順序、個體標本等 等。
[0198] 〈第二實施例〉
[0199] (第二實施例的概要）
[0200] 在第一實施例中，說明了標本觀察(篩查)。另一方面，在第二實施例中，說明顯示 控制模式和顯示控制模式中的顯示處理。顯示控制模式包括多個模式，即"通常模式"、"觀 察模式"和"檢查模式"。第一實施例中說明的標本觀察(篩查）對應(yīng)于觀察模式。因此，第 一實施例中的內(nèi)容和內(nèi)容的效果也可應(yīng)用到第二實施例。此實施例包括第一實施例，并且 特征在于用于載物片上存在的多個標本的顯示控制模式中的顯示方法，特別是放大圖像的 呈現(xiàn)方法。
[0201] 本發(fā)明的圖像處理裝置可用在包括成像裝置和顯示裝置的圖像處理系統(tǒng)中。圖像 處理系統(tǒng)的配置、圖像處理系統(tǒng)中的成像裝置的功能塊、圖像處理裝置的硬件配置、層次圖 像數(shù)據(jù)的結(jié)構(gòu)、載物片的配置和關(guān)于標本觀察(篩查）的處理與第一實施例中說明的內(nèi)容相 同。因此，省略對它們的說明。
[0202] (顯示控制模式的設(shè)定）
[0203] 圖23是用于說明顯示控制模式(通常模式、觀察模式和檢查模式）的設(shè)定的示意 圖。圖23示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面包括菜單窗口 2301、用于顯示放大圖像701的窗口和用于顯示載物片圖像702的窗口?；九渲门c參考 圖7A和7B說明的基本配置相同。因此，只說明與參考圖7A和7B說明的呈現(xiàn)圖像的差別。 包括顯示控制模式菜單的各種菜單被顯示在菜單窗口 2301上。顯示控制模式包括三種控 制模式，即觀察模式、檢查模式和通常模式。在圖23所示的示例中，可通過單選按鈕來選擇 顯示控制模式。
[0204] 下面參考圖26A至26E和圖27A至27D來說明各個顯示控制模式中的顯示處理和 顯示處理流程。因此，首先，說明各個顯示控制模式的概要。
[0205] 觀察模式是適合于為了篩查載物片上的整個標本并發(fā)現(xiàn)病變的目的而執(zhí)行的標 本觀察(篩查）的模式。
[0206] 檢查模式是適合于對Ρ0Ι (關(guān)心點）信息和R0I (關(guān)心區(qū)域）信息進行雙重檢查的 模式。Ρ0Ι和R0I是獲得對于診斷有用的信息的點和區(qū)域以及希望再次詳細觀察的點和區(qū) 域。例如，Ρ0Ι和R0I是在觀察模式中由用戶在標本觀察(篩查）中設(shè)定的點和區(qū)域。這些 點和區(qū)域被唯一地定義為圖像數(shù)據(jù)的坐標。Ρ0Ι信息和R0I信息除了包括指示Ρ0Ι和R0I 的坐標以外，還包括例如用于把對Ρ0Ι和R0I中的診斷有用的信息記錄為文本的注釋。檢 查模式用在例如當在標本觀察(篩查)之后希望再次詳細觀察Ρ0Ι和R0I時和當出于教學目 的向?qū)W習者迅速指示標本中對于診斷有用的區(qū)域時。
[0207] 通常模式是執(zhí)行一般圖像顯示的模式。觀察模式和檢查模式是對于各個模式的目 的而言最優(yōu)的顯示方法。然而，觀察模式和檢查模式不直接將用戶的輸入操作反映在顯示 上。通常模式用于獨立于諸如標本觀察(篩查)和P0I/R0I信息的雙重檢查之類的有限目的 自由地執(zhí)行標本觀察。
[0208] 除了顯示控制菜單以外的菜單包括例如用于在標本觀察(篩查）期間設(shè)定放大圖 像701的倍率的菜單。圖23所示的顯示控制模式的設(shè)定方法是示例，可以使用任何方法。 例如，可利用快捷鍵來設(shè)定顯示控制模式。
[0209] (控制部的功能塊配置）
[0210] 圖24是圖像處理裝置的圖像生成和控制部的功能框圖?；九渲门c參考圖4說 明的基本配置相同。因此，只說明與圖4的功能框圖的差別。顯示控制模式處理部2401執(zhí) 行用于獲取顯示控制模式的更新信息和用戶的個體標本選擇操作并在設(shè)定的顯示控制模 式中生成放大圖像數(shù)據(jù)的控制處理。顯示控制模式處理部2401的操作對于每種顯示控制 模式是不同的。下面參考圖27A至27D來說明各個顯示控制模式中的顯示處理流程。
[0211] (顯示控制模式的設(shè)定流程）
[0212] 圖25是用于說明顯示控制模式的設(shè)定的流程圖。
[0213] 在步驟S2501中，顯示控制模式處理部2401確定是否執(zhí)行顯示控制模式的更新。 具體而言，顯示控制模式處理部2401監(jiān)視顯示控制模式菜單2302是否被改變。如果更新 顯示控制模式，則處理前進到步驟S2502。在步驟S2502中，顯示控制模式處理部2401執(zhí)行 顯示控制模式的設(shè)定(切換到用戶選擇的顯示控制模式)。顯示控制模式的設(shè)定被顯示控制 模式處理部2401保持。顯示數(shù)據(jù)生成控制部404控制與設(shè)定的顯示控制模式匹配的顯示 處理。
[0214] (顯示控制模式中的顯示處理）
[0215] 圖26A至26E是用于說明各顯示控制模式中的顯示處理的示意圖。
[0216] 圖26A是詳細示出顯示載物片圖像702的窗口的圖。基本配置與參考圖7B說明 的基本配置相同。因此，只說明與參考圖7B說明的呈現(xiàn)圖像的差別。用戶可利用指針2601 選擇載物片圖像702上的個體標本。圖26A示出了選擇個體標本"2"的示例。
[0217] 圖26B是圖26A所示的個體標本"2"的放大視圖?；九渲门c參考圖9A說明的基 本配置相同。因此，只說明與圖9A的示意圖的差別。指針2601指向用戶指定的個體標本 "2"上的任意一個點。關(guān)心區(qū)域2602是相當于Ρ0Ι的區(qū)域，并且例如是被設(shè)定為如下點的 點：在該點處用戶可在觀察模式中獲得對于診斷有用的信息。關(guān)心區(qū)域2602是Ρ0Ι (點）。 然而，當在一定范圍上定義關(guān)心區(qū)域時（關(guān)心區(qū)域具有面積而不是一點時)，關(guān)心區(qū)域2602 是R0I (區(qū)域)。在以下說明中，Ρ0Ι和R0I被統(tǒng)稱為關(guān)心區(qū)域(或關(guān)注區(qū)域)。
[0218] 圖26C至26E是用于說明在顯示控制模式中顯示的放大圖像的示意圖。在通過指 針2601選擇個體標本之后在顯示裝置103上顯示為放大圖像的圖像在各顯示控制模式中 是不同的。圖26C示出了觀察模式中的放大圖像2603。圖26D示出了檢查模式中的放大圖 像2604。圖26E示出了通常模式中的放大圖像2605。
[0219] 圖26C示出了觀察模式中的放大圖像2603。在觀察模式中，當用戶在圖26A所示 的載物片圖像702上選擇個體標本"2"時，在圖26C所示的放大圖像2603中顯示個體標本 801的觀察開始位置901。在第一實施例中的標本觀察(篩查）序列中，說明了從個體標本 " 1"起按順序觀察標本的序列。在第二實施例中，擴展了第一實施例中的標本觀察(篩查） 序列。也就是說，如果使用第二實施例中的此功能，則更靈活的標本觀察(篩查）是可能的。 例如，當在標本觀察（篩查）的途中通過指針2601選擇已經(jīng)完成觀察的個體標本時，可以再 次觀察該個體標本。在完成了載物片上的所有個體標本的標本觀察(篩查）之后，也可以再 次選擇關(guān)注的個體標本并且從該個體標本起再繼續(xù)標本觀察(篩查)。
[0220] 圖26D示出了檢查模式中的放大圖像2604。在檢查模式中，當用戶選擇圖26A所 示的載物片圖像702上的個體標本"2"時，在圖26D所示的放大圖像2604中顯示個體標本 801的以關(guān)心區(qū)域2602為中心的放大圖像。當有多個關(guān)心區(qū)域時，通過在設(shè)定關(guān)心區(qū)域時 同時設(shè)定優(yōu)先級，執(zhí)行從具有最高優(yōu)先級的關(guān)心區(qū)域起按順序顯示關(guān)心區(qū)域的控制。當在 一定范圍上定義關(guān)心區(qū)域時(關(guān)心區(qū)域具有面積而不是一點時)，執(zhí)行以使得能夠顯示整個 關(guān)心區(qū)域的倍率來顯示關(guān)心區(qū)域的控制。在該情況下，只需要將關(guān)心區(qū)域的最小外接矩形 的中心認為是關(guān)心區(qū)域的中心。
[0221] 圖26E示出了通常模式中的放大圖像2605。示出了以圖26B所示的指針2601指 向的點為中心的放大圖像。當希望在顯示上直接反映用戶的輸入操作時，通常模式中的顯 示處理是有用的。
[0222] (顯示控制模式中的顯示處理流程）
[0223] 圖27A是用于說明顯示控制模式的設(shè)定和顯示控制模式的顯示處理的流程圖。
[0224] 在步驟S2701中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定在觀察 模式中。如果顯示控制模式被設(shè)定在觀察模式中，則處理前進到步驟S2702。如果顯示控制 模式未被設(shè)定到觀察模式，則處理前進到步驟S2703。在步驟S2702中，顯示控制模式處理 部2401執(zhí)行觀察模式中的顯示處理。觀察模式中的顯示處理的細節(jié)在下文參考圖27B來 說明。
[0225] 在步驟S2703中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定到檢查 模式。如果顯示控制模式被設(shè)定在檢查模式中，則處理前進到步驟S2704。如果顯示控制模 式未被設(shè)定在檢查模式中，則處理前進到步驟S2705。在步驟S2704中，顯示控制模式處理 部2401執(zhí)行檢查模式中的顯示處理。檢查模式中的顯示處理的細節(jié)在下文參考圖27C來 說明。
[0226] 在步驟S2705中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定在通常 模式中。如果顯示控制模式被設(shè)定在通常模式中，則處理前進到步驟S2706中。如果顯示控 制模式未被設(shè)定在通常模式中，則顯示控制模式處理部2401結(jié)束處理。在步驟S2706中， 顯示控制模式處理部2401執(zhí)行通常模式中的顯示處理。通常模式中的顯示處理的細節(jié)在 下文參考圖27D來說明。
[0227] 圖27B是用于說明觀察模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2702。在步驟S2707中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的坐 標。在圖26B所示的示例中，用戶利用指針2601指向個體標本801 (個體標本"2"）中的 一點。然而，在步驟S2707中，獲取指向的點的坐標。在步驟S2708中，顯示控制模式處理 部2401識別指向的個體標本的編號。具體而言，顯示控制模式處理部2401參照參考圖19C 說明的圖像文件格式來識別具有在步驟S2707中獲取的點坐標的個體標本的編號。在步驟 S2709中，顯示數(shù)據(jù)生成控制部404執(zhí)行在步驟S2708中識別的個體標本中的觀察開始位置 中的圖像數(shù)據(jù)生成的控制。觀察開始位置中的圖像數(shù)據(jù)的坐標范圍可從參考圖19C說明的 圖像文件格式獲取。根據(jù)處理步驟S2707至S2709,可以執(zhí)行觀察模式中的顯示處理。
[0228] 圖27C是用于說明檢查模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2704。在步驟S2710中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的 坐標。這個步驟S2710是與步驟S2707相同的處理。在步驟S2711中，顯示控制模式處理 部2401識別指向的個體標本的編號。這個步驟S2711是與步驟S2708相同的處理。在步 驟S2712中，顯示控制模式處理部2401確定在指向的個體標本中是否存在關(guān)心區(qū)域。如果 存在關(guān)心區(qū)域，則處理前進到步驟S2713。如果不存在關(guān)心區(qū)域，則處理前進到步驟S2714。 在步驟S2713中，顯示控制模式處理部2401獲取關(guān)心區(qū)域的坐標。當有多個關(guān)心區(qū)域時， 顯示控制模式處理部2401獲取具有最高優(yōu)先級的關(guān)心區(qū)域的坐標。在步驟S2714中，顯示 控制模式處理部2401設(shè)定放大圖像的顯示區(qū)域。顯示控制模式處理部2401把放大圖像的 顯示區(qū)域的中心設(shè)定為關(guān)心區(qū)域的坐標，并且基于所設(shè)定的放大圖像的倍率來計算顯示區(qū) 域。當在一定范圍上定義關(guān)心區(qū)域時(關(guān)心區(qū)域具有面積而不是一點時)，顯示控制模式處 理部2401以使得能夠示出整個關(guān)心區(qū)域的倍率設(shè)定顯示區(qū)域。在該情況下，關(guān)心區(qū)域的最 小外接矩形的中心被認為是關(guān)心區(qū)域的中心。當在步驟S2712中確定不存在關(guān)心區(qū)域時， 顯示控制模式處理部2401將放大圖像的顯示區(qū)域的中心設(shè)定為點坐標，并且基于設(shè)定的 放大圖像的倍率來計算顯示區(qū)域。在步驟S2715中，顯示數(shù)據(jù)生成控制部404執(zhí)行對步驟 S2713中設(shè)定的顯示區(qū)域的圖像數(shù)據(jù)生成控制。根據(jù)步驟S2710至S2715的處理，可以執(zhí)行 檢查模式中的顯示處理。
[0229] 圖27D是用于說明通常模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2706。在步驟S2716中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的坐 標。這個步驟S2716是與步驟S2707相同的處理。在步驟S2717中，顯示控制模式處理部 2401設(shè)定放大圖像的顯示區(qū)域。顯示控制模式處理部2401將放大圖像的顯示區(qū)域的中心 設(shè)定為點坐標，并且基于設(shè)定的放大圖像的倍率來計算顯示區(qū)域。在步驟S2718中，顯示數(shù) 據(jù)生成控制部404執(zhí)行對步驟S2717中設(shè)定的顯示區(qū)域的圖像數(shù)據(jù)生成控制。根據(jù)步驟 S2716至S2718的處理，可以執(zhí)行通常模式中的顯示處理。
[0230] 在第二實施例中的說明中，假定用戶的個體標本選擇操作和用戶的放大指令操作 是同一操作。然而，個體標本選擇操作和放大指令操作不總是需要是同一操作。例如，在 通常模式中，當用戶執(zhí)行個體標本選擇操作時，可以顯示所選個體標本的整體圖像(縮小圖 像)?；蛘撸谕ǔＤＪ街?，即使執(zhí)行個體標本選擇操作也未更新放大圖像時，可以刪除圖 27A中的步驟S2705和S2706。
[0231] 在第二實施例中，說明了指向載物片圖像上的任意點(任何一個個體標本上的點） 以選擇要放大顯示的個體標本的方法。然而，也可以利用其他用戶界面來選擇個體標本。例 如，在圖22A和22B所示的再配置載物片的整體圖像上，也可以使用戶選擇要放大顯示的個 體標本?；蛘撸部梢允褂脩糁付?輸入）個體標本的編號，而不是在圖像上選擇個體標本。 在兩種用戶界面中，在觀察模式中，希望以與個體標本的觀察開始位置相對應(yīng)的部分為中 心來放大顯示所選個體標本。在檢查模式中，希望以個體標本的關(guān)心區(qū)域為中心來放大顯 示所選個體標本。在通常模式中，希望以用戶指向的坐標為中心來放大顯示所選個體標本。
[0232] (第二實施例的特征）
[0233] 說明此實施例的特征。此實施例具有根據(jù)顯示控制模式改變放大處理的中心位置 的特征。在觀察模式中，標本觀察(篩查）的觀察開始位置中的圖像的中心是放大處理的中 心位置。在檢查模式中，標本觀察(篩查）等中記錄的關(guān)心區(qū)域是放大處理的中心位置。當 關(guān)心區(qū)域是Ρ0Ι (點)時，Ρ0Ι的坐標是關(guān)心區(qū)域的中心位置。當關(guān)心區(qū)域是R0I (具有面積 的區(qū)域)時，R0I的最小外接矩形的中心坐標是關(guān)心區(qū)域的中心位置。第二實施例的特征在 于放大處理的中心位置是根據(jù)顯示控制模式來確定的，而不管用戶指定的位置（點坐標)。
[0234] (第二實施例的效果）
[0235] 根據(jù)第二實施例中的處理，可以根據(jù)諸如標本觀察(篩查）或標本觀察(篩查）的雙 重檢查之類的目的迅速地顯示用戶想要觀察的區(qū)域。結(jié)果，可以預(yù)期減輕標本觀察(篩查） 的負擔的效果，尤其是當載物片上有多個標本時。
[0236] 在第二實施例中，根據(jù)顯示控制模式來改變放大處理的中心位置。然而，可根據(jù)其 他方法來改變放大處理的中心位置。例如，當在所選的個體標本中沒有設(shè)定關(guān)心區(qū)域時，可 以以該個體標本的觀察開始位置或點坐標為中心來放大顯示該個體標本。當設(shè)定了關(guān)心區(qū) 域時，可以以關(guān)心區(qū)域為中心來放大顯示該個體標本?；蛘?，可根據(jù)選擇個體標本時的操作 來改變放大處理的中心位置。例如，可根據(jù)單點擊(單叩擊）和雙點擊(雙叩擊）來改變中心 位置，或者可根據(jù)右鍵點擊和左鍵點擊來改變中心位置。還優(yōu)選的是，在用戶在按壓諸如控 制鍵之類的預(yù)定鍵的同時指向一坐標時以及當用戶在不按壓預(yù)定鍵的情況下指向一坐標 時改變中心位置。
[0237] 本發(fā)明的實施例也可由讀出并執(zhí)行存儲介質(zhì)(例如非暫態(tài)計算機可讀存儲介質(zhì)） 上記錄的計算機可執(zhí)行指令以執(zhí)行本發(fā)明的上述(一個或多個）實施例中的一個或多個的 功能的系統(tǒng)或裝置的計算機實現(xiàn)，以及通過系統(tǒng)或裝置的計算機例如從存儲介質(zhì)讀出并執(zhí) 行計算機可執(zhí)行指令以執(zhí)行上述(一個或多個）實施例中的一個或多個的功能而執(zhí)行的方 法來實現(xiàn)。計算機可包括中央處理單元（CPU)、微處理單元（MPU)或其他電路系統(tǒng)中的一個 或多個，并且可包括分離的計算機或分離的計算機處理器的網(wǎng)絡(luò)。計算機可執(zhí)行指令可例 如從網(wǎng)絡(luò)或存儲介質(zhì)被提供給計算機。存儲介質(zhì)可包括例如硬盤、隨機訪問存儲器（RAM)、 只讀存儲器（ROM)、分布式計算系統(tǒng)的存儲裝置、光盤(例如致密盤（CD)、數(shù)字多功能盤 (DVD)或藍光盤（BD) TM)、閃存存儲器設(shè)備、存儲卡等等中的一個或多個。
[0238] 雖然已參考示范性實施例描述了本發(fā)明，但要理解本發(fā)明不限于所公開的示范性 實施例。所附權(quán)利要求的范圍應(yīng)遵循最寬泛的解釋以便包含所有這樣的修改以及等同結(jié)構(gòu) 和功能。
【權(quán)利要求】
1. 一種圖像處理裝置，包括： 調(diào)整部，被配置為當在載物片中包括多個觀察對象時，從所述載物片的圖像中檢測所 述觀察對象的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整 的再配置載物片圖像的數(shù)據(jù)；以及 顯示控制部，被配置為在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部 分相對應(yīng)的放大圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù) 移動指令在所述再配置載物片圖像上移動。
2. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的彼此相鄰的一對觀察對象在所述再配置載物片圖像上的布置，以使得所述再配置載 物片圖像上的這兩個觀察對象之間的距離與實際載物片上的這兩個觀察對象之間的距離 相比更短。
3. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述多個觀察對象的布置，以使得所述多個觀察對象根據(jù)給定的觀察順序按順序布 置。
4. 根據(jù)權(quán)利要求3所述的圖像處理裝置，其中，對于在觀察順序上彼此相鄰的第一觀 察對象和第二觀察對象，所述調(diào)整部確定所述再配置載物片圖像上的所述第一觀察對象和 所述第二觀察對象的布置，以使得根據(jù)顯示區(qū)域的移動，所述第一觀察對象的放大圖像被 直接切換到所述第二觀察對象的放大圖像。
5. 根據(jù)權(quán)利要求4所述的圖像處理裝置，其中 其顯示順序被設(shè)定的多個放大圖像與所述觀察對象中的每一個相關(guān)聯(lián)，并且 所述調(diào)整部確定所述再配置載物片圖像上的所述第一觀察對象和所述第二觀察對象 的布置，以使得所述第一觀察對象的多個放大圖像之中具有最末顯示順序的放大圖像和所 述第二觀察對象的多個放大圖像之中具有第一顯示順序的放大圖像被接合。
6. 根據(jù)權(quán)利要求5所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述第一觀察對象和所述第二觀察對象的布置，以使得所述第一觀察對象的多個放 大圖像之中具有最末顯示順序的放大圖像和所述第二觀察對象的多個放大圖像之中具有 第一顯示順序的放大圖像是共同圖像。
7. 根據(jù)權(quán)利要求5所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述第一觀察對象和其他觀察對象的布置，以使得所述其他觀察對象不被包括在所 述第一觀察對象的放大圖像中。
8. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部平移所述觀察對象的圖像 的區(qū)域或者平移并旋轉(zhuǎn)所述區(qū)域，從而調(diào)整所述再配置載物片圖像上的觀察對象的布置。
9. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述再配置載物片圖像的數(shù)據(jù)是定義 所述再配置載物片圖像中的觀察對象的圖像的位置與實際載物片中的觀察對象的圖像的 位置之間的對應(yīng)關(guān)系的數(shù)據(jù)。
10. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中 所述調(diào)整部生成所述多個觀察對象被排列在行方向、列方向或者這兩個方向上的觀察 對象再布置圖像，并且 所述顯示控制部將所述觀察對象再布置圖像與所述放大圖像一起顯示在所述顯示裝 置上。
11. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中 所述調(diào)整部生成表示整個再配置載物片圖像的圖像，并且 所述顯示控制部將表示整個再配置載物片圖像的圖像與所述放大圖像一起顯示在所 述顯示裝置上。
12. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，當被命令選擇所述多個觀察對象之中 的一個觀察對象時，所述顯示控制部移動顯示區(qū)域以使得所選擇的觀察對象被放大顯示。
13. 根據(jù)權(quán)利要求12所述的圖像處理裝置，其中，當對于所選擇的觀察對象設(shè)定了關(guān) 心區(qū)域時，所述顯示控制部移動顯示區(qū)域以使得以對于所選擇的觀察對象設(shè)定的關(guān)心區(qū)域 為中心的區(qū)域被放大顯示。
14. 一種圖像處理裝置，包括： 獲取部，被配置為獲取顯示區(qū)域的移動指令；以及 顯示控制部，被配置為根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中 當載物片中包括多個觀察對象時，所述顯示控制部移動顯示區(qū)域以使得某個觀察對象 的放大圖像被直接切換到另一觀察對象的放大圖像。
15. 根據(jù)權(quán)利要求14所述的圖像處理裝置，其中 向所述多個觀察對象賦予觀察順序，并且 所述顯示控制部移動顯示區(qū)域以使得所述觀察對象的放大圖像根據(jù)所述觀察順序按 順序被切換。
16. -種圖像處理裝置，用于支持將包括多個觀察對象的載物片的區(qū)域的一部分放大 顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察所述多個觀察對象的操作，所述圖像處 理裝置包括： 獲取部，被配置為獲取顯示區(qū)域的移動指令；以及 顯示控制部，被配置為根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中 對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且 當被命令選擇所述多個觀察對象之中的一個觀察對象時，所述顯示控制部移動顯示區(qū) 域以使得以所選擇的觀察對象的觀察開始位置為中心的區(qū)域被放大顯示。
17. -種圖像處理方法，包括以下步驟： 當在載物片中包括多個觀察對象時，計算機從所述載物片的圖像中檢測所述觀察對象 的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整的再配置載 物片圖像的數(shù)據(jù)；以及 所述計算機在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng) 的放大圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù)移動指令 在所述再配置載物片圖像上移動。
18. -種圖像處理方法，包括以下步驟： 計算機獲取顯示區(qū)域的移動指令；以及 所述計算機根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中 當載物片中包括多個觀察對象時，所述計算機移動顯示區(qū)域以使得某個觀察對象的放 大圖像被直接切換到另一觀察對象的放大圖像。
19. 一種圖像處理方法，用于利用計算機支持將包括多個觀察對象的載物片的區(qū)域的 一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察所述多個觀察對象的操作， 所述圖像處理方法包括以下步驟： 所述計算機獲取顯示區(qū)域的移動指令；以及 所述計算機根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中 對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且 當被命令選擇所述多個觀察對象之中的一個觀察對象時，所述計算機移動顯示區(qū)域以 使得以所選擇的觀察對象的觀察開始位置為中心的區(qū)域被放大顯示。
20. -種圖像處理裝置，包括： 用于當在載物片中包括多個觀察對象時，從所述載物片的圖像中檢測所述觀察對象的 圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整的再配置載物 片圖像的數(shù)據(jù)的部件；以及 用于在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大 圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù)移動指令在所述 再配置載物片圖像上移動的部件。
【文檔編號】G06T7/00GK104104861SQ201410117573
【公開日】2014年10月15日 申請日期:2014年3月27日 優(yōu)先權(quán)日:2013年4月1日
【發(fā)明者】高山知彥, 村上友近 申請人:佳能株式會社
【專利摘要】本公開涉及圖像處理裝置和圖像處理方法。該圖像處理裝置包括：調(diào)整部，被配置為當在載物片中包括多個觀察對象時，從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及顯示控制部，被配置為在顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖像，并且改變顯示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖像上移動。
【專利說明】圖像處理裝置和圖像處理方法
【技術(shù)領(lǐng)域】
[0001] 本發(fā)明涉及用于支持對載物片（slide)上的標本（specimen)的一部分區(qū)域進行 放大顯示并移動顯示區(qū)域從而觀察整個標本的操作的技術(shù)。
【背景技術(shù)】
[0002] 虛擬載物片系統(tǒng)吸引了注意，通過該系統(tǒng)，可以利用數(shù)字顯微鏡拾取載物片（制 片）上的標本的圖像以獲取虛擬載物片圖像，并且觀察監(jiān)視器上顯示的虛擬載物片圖像（日 本專利申請?zhí)亻_No. 2011-118107)。
[0003] 已知一種圖像顯示技術(shù)，用于即使在圖像數(shù)據(jù)是大容量圖像數(shù)據(jù)的情況下也高效 地顯示縮小圖像和放大圖像（日本專利申請?zhí)亻_No. 2011-170480)。
[0004] 已知一種技術(shù)，用于當在終端裝置中顯示圖像服務(wù)器中的細胞圖像時，只從圖像 服務(wù)器下載顯示所必要的區(qū)域的分割圖像以減少到在終端裝置上顯示為止的時間（日本專 利申請?zhí)亻_ No. 2005-117640)。
[0005] 在病理診斷中，一般來說，首先，執(zhí)行在觀察載物片的低倍率圖像的同時標記關(guān)心 區(qū)域的被稱為標本觀察(篩查）的工作，然后利用高倍率圖像執(zhí)行關(guān)心區(qū)域的詳細觀察。在 標本觀察(篩查）中，為了避免對病變部等的忽視，要求觀察者全面地觀察載物片上的整個 標本區(qū)域的各處。
[0006] 在對胃、肝臟、前列腺、膽囊等等的活檢(生物組織觀察）中，如圖6所示，多個標本 有時被放置在一個載物片上（以下，單個標本被稱為"個體標本")。由于標本和載物片是由 手工工作制造的，所以各個個體標本的形狀和方向是不均一的，并且個體標本的布置是不 規(guī)則的。在這種載物片的情況下，有必要按順序無遺漏地篩查不規(guī)則布置的多個個體標本。 因此，觀察者的負擔重。
[0007] 利用日本專利申請?zhí)亻_No. 2011-170480中公開的顯示技術(shù)，可以降低忽視個體 標本的風險。然而，個體標本中的標本觀察(篩查）的負擔并沒有減輕。利用日本專利申請 特開No. 2005-117640中公開的分割圖像的生成方法和顯示方法，可以減少與通信有關(guān)的 數(shù)據(jù)量。然而，日本專利申請?zhí)亻_No. 2005-117640沒有提及用于減輕多個個體標本的標本 觀察(篩查）的負擔的分割圖像的生成方法和顯示方法。
【發(fā)明內(nèi)容】
[0008] 因此，本發(fā)明的一個目的是提供一種能夠當在載物片上有多個觀察對象(例如個 體標本）時減輕標本觀察(篩查）的負擔的技術(shù)。
[0009] 本發(fā)明在其第一方面中提供了一種圖像處理裝置，包括：調(diào)整部，被配置為當在載 物片中包括多個觀察對象時，從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布 置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及顯示控制 部，被配置為在顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖 像，并且改變顯示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖 像上移動。
[0010] 本發(fā)明在其第二方面中提供了一種圖像處理裝置，包括：獲取部，被配置為獲取顯 示區(qū)域的移動指令；以及顯示控制部，被配置為根據(jù)移動指令改變顯示區(qū)域的位置和顯示 裝置上顯示的放大圖像，其中當載物片中包括多個觀察對象時，顯示控制部移動顯示區(qū)域 以使得某個觀察對象的放大圖像被直接切換到另一觀察對象的放大圖像。
[0011] 本發(fā)明在其第三方面中提供了一種圖像處理裝置，用于支持將包括多個觀察對象 的載物片的區(qū)域的一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察多個觀 察對象的操作，該圖像處理裝置包括：獲取部，被配置為獲取顯示區(qū)域的移動指令；以及顯 示控制部，被配置為根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且當被命令選擇多個觀察對 象之中的一個觀察對象時，顯示控制部移動顯示區(qū)域以使得以所選擇的觀察對象的觀察開 始位置為中心的區(qū)域被放大顯示。
[0012] 本發(fā)明在其第四方面中提供了一種圖像處理方法，包括以下步驟：當在載物片中 包括多個觀察對象時，計算機從載物片的圖像中檢測觀察對象的圖像的區(qū)域并且連續(xù)地布 置這些區(qū)域，從而生成觀察對象的布置被調(diào)整的再配置載物片圖像的數(shù)據(jù)；以及計算機在 顯示裝置上顯示與再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大圖像，并且改變顯 示裝置上顯示的放大圖像以使得顯示區(qū)域根據(jù)移動指令在再配置載物片圖像上移動。
[0013] 本發(fā)明在其第五方面中提供了一種圖像處理方法，包括以下步驟：計算機獲取顯 示區(qū)域的移動指令；以及計算機根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中當載物片中包括多個觀察對象時，計算機移動顯示區(qū)域以使得某個觀察對象 的放大圖像被直接切換到另一觀察對象的放大圖像。
[0014] 本發(fā)明在其第六方面中提供了一種圖像處理方法，用于利用計算機支持將包括多 個觀察對象的載物片的區(qū)域的一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序 觀察多個觀察對象的操作，該圖像處理方法包括以下步驟：計算機獲取顯示區(qū)域的移動指 令；以及計算機根據(jù)移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其中對 于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且當被命令選擇多個觀察對象之 中的一個觀察對象時，計算機移動顯示區(qū)域以使得以所選擇的觀察對象的觀察開始位置為 中心的區(qū)域被放大顯示。
[0015] 本發(fā)明在其第七方面中提供了一種非暫態(tài)計算機可讀存儲介質(zhì)，存儲用于使得計 算機執(zhí)行根據(jù)本發(fā)明的圖像處理方法的步驟的程序。
[0016] 根據(jù)本發(fā)明，當在載物片上有多個觀察對象時，可以減輕標本觀察(篩查）的負擔。
[0017] 通過以下參考附圖對示范性實施例的描述，本發(fā)明的其他特征將變得清楚。
【專利附圖】
【附圖說明】
[0018] 圖1是圖像處理系統(tǒng)的裝置配置的整體圖；
[0019] 圖2是圖像處理系統(tǒng)中的成像裝置的功能框圖；
[0020] 圖3是圖像處理裝置的硬件配置圖；
[0021] 圖4是圖像處理裝置的圖像生成和控制部的功能框圖；
[0022] 圖5是示出層次（hierarchical)圖像數(shù)據(jù)的結(jié)構(gòu)的示意圖；
[0023] 圖6是示出其上放置有多個個體標本的載物片的示意圖；
[0024] 圖7A和7B是用于說明圖像呈現(xiàn)應(yīng)用的顯不不例的不意圖；
[0025] 圖8A至8D是用于說明對于個體標本的顯示區(qū)域框的設(shè)定的示意圖；
[0026] 圖9A至9E是用于說明標本觀察(篩查）序列的示意圖；
[0027] 圖10A至10C是用于說明通過平移進行的標本布置的再配置的示意圖；
[0028] 圖11A至11C是用于說明通過平移進行的標本布置的再配置的流程圖；
[0029] 圖12是用于說明通過平移進行的標本布置的再配置的另一示例的示意圖；
[0030] 圖13A至13F是用于說明通過旋轉(zhuǎn)和平移進行的標本布置的再配置的示意圖；
[0031] 圖14是用于說明通過旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定的流程圖；
[0032] 圖15A至1?是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的示意圖；
[0033] 圖16是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的流程圖；
[0034] 圖17A和17B是用于說明通過執(zhí)行顯示區(qū)域的調(diào)整(個體標本的拉近)所獲得的結(jié) 果的不意圖；
[0035] 圖18A和18B是用于說明個體標本的分離的示意圖；
[0036] 圖19A至19C是用于說明圖像文件格式的示意圖；
[0037] 圖20A和20B是用于說明標本布置的再配置的效果的示意圖；
[0038] 圖21A和21B是用于說明圖像呈現(xiàn)應(yīng)用的第二顯不不例的不意圖；
[0039] 圖22A和22B是用于說明圖像呈現(xiàn)應(yīng)用的第二顯不不例的不意圖；
[0040] 圖23是用于說明第二實施例中的顯示控制模式的設(shè)定的示意圖；
[0041] 圖24是第二實施例中的圖像處理裝置的圖像生成和控制部的功能框圖；
[0042] 圖25是用于說明第二實施例中的顯示控制模式的設(shè)定的流程圖；
[0043] 圖26A至26E是用于說明第二實施例中的顯示控制模式中的顯示處理的示意圖； 并且
[0044] 圖27A至27D是第二實施例中的顯示控制模式中的顯示處理的流程圖。
【具體實施方式】
[0045] 下面參考【專利附圖】
【附圖說明】本發(fā)明的實施例。
[0046] 〈第一實施例〉
[0047] (圖像處理系統(tǒng)的裝置配置）
[0048] 本發(fā)明的圖像處理裝置可用于包括成像裝置和顯示裝置的圖像處理系統(tǒng)中。參考 圖1來說明圖像處理系統(tǒng)的配置。
[0049] 圖像處理系統(tǒng)是包括成像裝置(數(shù)字顯微鏡裝置或虛擬載物片掃描儀）101、圖像 處理裝置102、顯示裝置103和數(shù)據(jù)服務(wù)器104并且具有獲取并顯示成像對象標本的二維圖 像的功能的系統(tǒng)。成像裝置101和圖像處理裝置102通過專用或通用I/F線纜105連接。 圖像處理裝置102和顯示裝置103通過通用I/F線纜106連接。數(shù)據(jù)服務(wù)器104和圖像處 理裝置102經(jīng)由網(wǎng)絡(luò)107通過通用I/F LAN線纜108連接。
[0050] 成像裝置101是具有在二維平面方向上的不同位置中拾取多個二維圖像并輸出 數(shù)字圖像的功能的虛擬載物片掃描儀。為了獲取二維圖像，使用諸如CCD (電荷耦合器件） 或CMOS (互補金屬氧化物半導(dǎo)體）之類的固態(tài)成像器件。取代于虛擬載物片掃描儀，成像 裝置101也可由通過將數(shù)字相機附連到普通光學顯微鏡的目鏡部配置的數(shù)字顯微鏡裝置 配置。
[0051] 圖像處理裝置102是具有例如根據(jù)來自用戶的請求從獲取自成像裝置101的多個 原始圖像數(shù)據(jù)生成要顯示在顯示裝置103上的數(shù)據(jù)的功能的裝置。圖像處理裝置102是由 包括諸如CPU (中央處理部)、RAM、存儲設(shè)備、操作部和各種I/F之類的硬件資源的通用計算 機或工作站配置的。存儲設(shè)備是大容量信息存儲設(shè)備，例如硬盤驅(qū)動器。用于實現(xiàn)下文說 明的各種處理的程序和數(shù)據(jù)、0S (操作系統(tǒng)）等等被存儲在存儲設(shè)備中。下文說明的功能 是通過CPU將必要的程序和數(shù)據(jù)從存儲設(shè)備加載到RAM并執(zhí)行程序來實現(xiàn)的。操作部由鍵 盤、鼠標等等配置并被用戶用來輸入各種指令。
[0052] 顯示裝置103是被配置為顯示作為由圖像處理裝置102進行的運算處理的結(jié)果獲 得的觀察用圖像的顯示器。顯示裝置103由液晶顯示器等等配置。
[0053] 數(shù)據(jù)服務(wù)器104是服務(wù)器，其中存儲了作為由圖像處理裝置102進行的運算處理 的結(jié)果獲得的觀察用圖像。
[0054] 在圖1所示的示例中，圖像處理系統(tǒng)由四個裝置配置，S卩，成像裝置101、圖像處理 裝置102、顯示裝置103和數(shù)據(jù)服務(wù)器104。然而，本發(fā)明的配置不限于此配置。例如，可使 用與顯示裝置集成的圖像處理裝置。圖像處理裝置的功能可被合并在成像裝置中。成像裝 置、圖像處理裝置、顯示裝置和數(shù)據(jù)服務(wù)器的功能可由一個裝置實現(xiàn)。相反，圖像處理裝置 等等的功能可被分割并由多個裝置實現(xiàn)。
[0055] (成像裝置的功能配置）
[0056] 圖2是示出成像裝置101的功能配置的框圖。
[0057] 成像裝置101示意性地包括照明單元201、載物臺202、載物臺控制單元205、成像 光學系統(tǒng)207、成像單元210、顯影處理單元219、預(yù)測量單元220、主控制系統(tǒng)221和外部裝 置 I/F222。
[0058] 照明單元201是用于在布置在載物臺202上的載物片206上均一地照射光的部 件，并且包括光源、照明光學系統(tǒng)和用于光源驅(qū)動的控制系統(tǒng)。載物臺202被載物臺控制單 元205進行驅(qū)動控制并且能夠在X、Y和Z三個軸的方向上移動。載物片206是通過將組織 切片粘貼在載玻片上并且將載玻片與封固劑（mounting agent) -起固定在蓋玻片下而獲 得的構(gòu)件。
[0059] 載物臺控制單元205包括驅(qū)動控制系統(tǒng)203和載物臺驅(qū)動機構(gòu)204。驅(qū)動控制系 統(tǒng)203接收主控制系統(tǒng)221的指令并且執(zhí)行載物臺202的驅(qū)動控制。載物臺202的移動方 向、移動距離等等是基于由預(yù)測量單元220測量到的標本的位置信息和厚度信息(距離信 息）并且在必要時基于來自用戶的指令而確定的。載物臺驅(qū)動機構(gòu)204根據(jù)驅(qū)動控制系統(tǒng) 203的指令來驅(qū)動載物臺202。
[0060] 成像光學系統(tǒng)207是用于將載物片206的標本的光學圖像成像在成像傳感器208 上的透鏡組。
[0061] 成像單元210包括成像傳感器208和模擬前端（AFE)209。成像傳感器208是被配 置為將二維光學圖像光電轉(zhuǎn)換成電氣物理量的一維或二維圖像傳感器。例如，CCD或CMOS 器件被用作成像傳感器208。在一維傳感器的情況下，在掃描方向上電氣地執(zhí)行掃描，并且 在副掃描方向上移動載物臺202以獲得二維圖像。具有與光的強度相對應(yīng)的電壓值的電信 號從成像傳感器208輸出。當希望以彩色圖像作為拾取的圖像時，例如，需要使用附有拜耳 (Bayer)陣列的濾色器的1C⑶圖像傳感器或者僅RGB的3CXD圖像傳感器。成像單元210 在XY軸方向上驅(qū)動載物臺202,從而拾取標本的分割圖像。
[0062] AFE209是被配置為控制成像傳感器208的操作的電路以及被配置為把從成像傳 感器208輸出的模擬信號轉(zhuǎn)換成數(shù)字信號的電路。AFE209包括H/V驅(qū)動器、CDS (相關(guān)雙 采樣)、放大器、AD轉(zhuǎn)換器和定時發(fā)生器。H/V驅(qū)動器把用于驅(qū)動成像傳感器208的垂直同 步信號和水平同步信號轉(zhuǎn)換成傳感器驅(qū)動所必要的電勢。CDS是被配置為去除固定圖案 (pattern)的噪聲的相關(guān)雙采樣電路。放大器是被配置為調(diào)整被⑶S去除了噪聲的模擬信 號的增益的模擬放大器。AD轉(zhuǎn)換器將模擬信號轉(zhuǎn)換成數(shù)字信號。當成像裝置最終階段中 的輸出是8比特時，考慮到以后階段中的處理，AD轉(zhuǎn)換器把模擬信號轉(zhuǎn)換成被量化為約10 比特至16比特的數(shù)字數(shù)據(jù)并輸出該數(shù)字數(shù)據(jù)。轉(zhuǎn)換后的傳感器輸出數(shù)據(jù)被稱為RAW數(shù)據(jù)。 RAW數(shù)據(jù)在后一階段中的顯影處理單元219中經(jīng)歷顯影處理。定時發(fā)生器生成用于調(diào)整成 像傳感器208的定時和后一階段中的顯影處理單元219的定時的信號。當C⑶被用作成像 傳感器208時，AFE209是必不可少的。然而，在能夠執(zhí)行數(shù)字輸出的CMOS圖像傳感器的情 況下，AFE209的功能被包括在傳感器中。
[0063] 顯影處理單元219包括黑校正部211、去馬賽克處理部212、白平衡調(diào)整部213、圖 像合并處理部214、濾波處理部216、伽馬校正部217和壓縮處理部218。
[0064] 黑校正部211執(zhí)行用于從RAW數(shù)據(jù)的像素值中減去背景(在遮光期間獲得的黑校 正數(shù)據(jù)）的處理。
[0065] 去馬賽克處理部212執(zhí)行用于從拜耳陣列的RAW數(shù)據(jù)生成RGB顏色的圖像數(shù)據(jù)的 處理。去馬賽克處理部212對RAW數(shù)據(jù)中的周邊像素(包括相同顏色的像素和其他顏色的 像素)的值進行插值，從而計算關(guān)注像素的RGB顏色的值。去馬賽克處理部212還執(zhí)行缺陷 像素的校正處理(插值處理)。當成像傳感器208不包括濾色器并且獲得單色圖像時，去馬 賽克處理是不必要的。去馬賽克處理部212執(zhí)行缺陷像素的校正處理。當使用3C⑶圖像 傳感器208時，去馬賽克處理也是不必要的。
[0066] 白平衡調(diào)整部213執(zhí)行用于根據(jù)照明單元201的光的色溫調(diào)整RGB顏色的增益從 而再現(xiàn)合乎需要的白色的處理。
[0067] 圖像合并處理部214執(zhí)行用于對由成像傳感器208分割并拾取的多個分割圖像數(shù) 據(jù)進行接合并生成期望成像范圍中的大尺寸圖像數(shù)據(jù)的處理。一般地，標本的存在范圍比 現(xiàn)有的圖像傳感器在一次成像中能夠獲取的成像范圍更寬。因此，通過接合分割圖像數(shù)據(jù) 來生成一個二維圖像數(shù)據(jù)。例如，當假定以0. 25 μ m的分辨率對載物片206上的10平方毫 米的范圍成像時，一邊的像素的數(shù)目是四萬個（1〇_/〇. 25 μ m)。像素的總數(shù)是四萬的平方， 即16億。為了利用包括一千萬像素的成像傳感器208獲取16億像素的圖像數(shù)據(jù)，有必要 將區(qū)域分割成一百六十個（16億/ 一千萬）區(qū)域并執(zhí)行成像。作為接合多個圖像數(shù)據(jù)的方 法，例如，存在基于載物臺202的位置信息來對齊并接合圖像數(shù)據(jù)的方法、以及在將多個分 割圖像的點和線彼此關(guān)聯(lián)的同時接合多個分割圖像的相應(yīng)點和線的方法。在接合中，通過 諸如零階插值、線性插值或高階插值之類的插值處理，可以更平滑地接合圖像數(shù)據(jù)。
[0068] 濾波處理部216是被配置為實現(xiàn)圖像中包括的高頻成分的抑制、噪聲去除和分辨 感強調(diào)的數(shù)字濾波器。
[0069] 伽馬校正部217執(zhí)行用于向圖像添加一般顯示設(shè)備的灰度表示特征的反特征的 處理，并且根據(jù)高亮度部的暗部處理和灰度壓縮來執(zhí)行適應(yīng)于人類的視覺特征的灰度轉(zhuǎn) 換。在此實施例中，對于以形態(tài)觀察為目的的圖像獲取，向圖像數(shù)據(jù)應(yīng)用適合于以后階段中 的合并處理和顯示處理的灰度轉(zhuǎn)換。
[0070] 壓縮處理部218執(zhí)行以大容量二維圖像數(shù)據(jù)的傳送效率和存儲中的容量減小為 目的而執(zhí)行的壓縮的編碼處理。作為用于靜止圖像的壓縮方法，諸如JPEG (聯(lián)合圖片專家 組）以及通過改進和發(fā)展JPEG而獲得的JPEG2000和JPEG XR之類的標準化編碼系統(tǒng)是公 知的。執(zhí)行對于二維圖像數(shù)據(jù)的縮小處理以生成層次圖像數(shù)據(jù)。參考圖5來說明層次圖像 數(shù)據(jù)。
[0071] 預(yù)測量單元220是被配置為執(zhí)行用于計算載物片206上的標本的位置信息、到期 望焦點位置的距離信息和由標本厚度引起的光量調(diào)整用參數(shù)的事前測量的單元。通過在主 測量(拾取圖像數(shù)據(jù)的獲取)之前利用預(yù)測量單元220獲取信息，可以沒有浪費地執(zhí)行成像。 對于二維平面上的位置信息的獲取，使用分辨率低于成像傳感器208的分辨率的二維成像 傳感器。預(yù)測量單元220從獲取的圖像掌握標本在XY平面上的位置。為了獲取距離信息 和厚度信息，使用諸如激光位移計之類的測量設(shè)備。
[0072] 主控制系統(tǒng)221具有執(zhí)行對以上說明的各種單元的控制的功能。主控制系統(tǒng)221 和顯影處理單元219的控制功能由包括CPU、ROM和RAM的控制電路實現(xiàn)。也就是說，程序 和數(shù)據(jù)被存儲在ROM中，并且CPU利用RAM作為工作存儲器來執(zhí)行程序，從而實現(xiàn)主控制系 統(tǒng)221和顯影處理單元219的功能。作為R0M，使用諸如EEPR0M或閃存存儲器之類的設(shè)備。 作為RAM，使用諸如DDR3之類的DRAM設(shè)備。可以用專用硬件設(shè)備的ASIC版本來替換顯影 處理單元219的功能。
[0073] 外部裝置I/F222是用于把由顯影處理單元219生成的層次圖像數(shù)據(jù)發(fā)送到圖像 處理裝置102的接口。成像裝置101和圖像處理裝置102通過用于光學通信的線纜連接。 或者，使用諸如USB或GigabitEthernet (注冊商標）之類的通用接口。
[0074] (圖像處理裝置的硬件配置）
[0075] 圖3是示出本發(fā)明的圖像處理裝置102的硬件配置的框圖。
[0076] 作為執(zhí)行圖像處理的裝置，例如，使用PC (個人計算機)。PC包括控制部301、主存 儲器302、副存儲器303、圖形板304、被配置為將前述組件相互連接的內(nèi)部總線305、LAN 1/ F306、存儲設(shè)備I/F307、外部裝置I/F309、操作I/F310和輸入輸出I/F313。
[0077] 控制部301根據(jù)需要適當?shù)卦L問主存儲器302、副存儲器303等等，并且在執(zhí)行各 種運算處理的同時集中地控制PC的全部塊。主存儲器302和副存儲器303由RAM (隨機 存取存儲器)配置。主存儲器302用作控制部301的工作區(qū)域等，并且臨時存儲0S、正執(zhí)行 的各種程序和經(jīng)歷諸如生成數(shù)據(jù)供顯示之類的處理的各種數(shù)據(jù)。主存儲器302和副存儲器 303也用作圖像數(shù)據(jù)的存儲區(qū)域。利用控制部301的DMA (直接存儲器訪問）功能，可實現(xiàn) 主存儲器302與副存儲器303之間以及副存儲器303與圖形板304之間的圖像數(shù)據(jù)的高速 傳送。圖形板304向顯示裝置103輸出圖像處理結(jié)果。顯示裝置103例如是包括液晶、EL (電致發(fā)光）等的顯示設(shè)備。假定將顯示裝置103作為外部裝置連接的形式。然而，可以假 定與顯示裝置集成的PC。例如，筆記本PC對應(yīng)于該PC。
[0078] 數(shù)據(jù)服務(wù)器104、存儲設(shè)備308、成像裝置101以及鍵盤311和鼠標312分別經(jīng)由 LAN I/F306、存儲設(shè)備I/F307、外部裝置I/F309和操作I/F310連接到輸入輸出I/F313。
[0079] 存儲設(shè)備308是輔助存儲設(shè)備，其中固定存儲有要由控制部301執(zhí)行的固件、程序 和0S以及諸如各種參數(shù)之類的信息。存儲設(shè)備308也用作從成像裝置101發(fā)送的層次圖像 數(shù)據(jù)的存儲區(qū)域。作為存儲設(shè)備308,使用諸如HDD (硬盤驅(qū)動器）之類的磁盤驅(qū)動器、SSD (固態(tài)驅(qū)動器）或者諸如閃存存儲器之類的半導(dǎo)體設(shè)備。
[0080] 作為到操作I/F310的連接設(shè)備，假定諸如鍵盤311或鼠標312之類的點擊設(shè)備。 然而，也可以采用諸如觸摸面板之類的顯示裝置103的屏幕直接充當輸入設(shè)備的配置。在 該情況下，觸摸面板可與顯示裝置103集成。
[0081] (控制部的功能塊配置）
[0082] 圖4是示出圖像處理裝置102的控制部301的功能配置的框圖。
[0083] 控制部301包括用戶輸入信息獲取部401、圖像數(shù)據(jù)獲取控制部402、層次圖像數(shù) 據(jù)獲取部403和顯示數(shù)據(jù)生成控制部404?？刂撇?01包括顯示候選圖像數(shù)據(jù)獲取部405、 顯示候選圖像數(shù)據(jù)生成部406、顯示圖像數(shù)據(jù)傳送部407、調(diào)整參數(shù)識別部408和標本布置 調(diào)整部409。
[0084] 用戶輸入信息獲取部401經(jīng)由操作I/F310獲取用戶利用鍵盤311和鼠標312輸 入的諸如圖像顯示的開始和結(jié)束以及顯示圖像的滾動操作、切換、放大、縮小等等之類的指 令內(nèi)容。例如，用戶對其執(zhí)行標本觀察(篩查）的放大圖像的倍率和標本觀察(篩查）序列經(jīng) 由操作I/F310被輸入到用戶輸入信息獲取部401。
[0085] 圖像數(shù)據(jù)獲取控制部402基于用戶輸入信息控制從存儲設(shè)備308讀取圖像數(shù)據(jù)和 在主存儲器302中展開圖像數(shù)據(jù)。圖像數(shù)據(jù)獲取控制部402針對諸如圖像顯示的開始和結(jié) 束以及顯示圖像的滾動操作、切換、放大和縮小之類的各種用戶輸入信息來確定被預(yù)測為 顯示圖像所必要的圖像區(qū)域。圖像數(shù)據(jù)獲取控制部402預(yù)測顯示區(qū)域(顯示裝置上實際顯 示的圖像區(qū)域)的變化并且指定其中應(yīng)當在存儲器302中讀取圖像數(shù)據(jù)的圖像區(qū)域(第一顯 示候選區(qū)域)。如果主存儲器302沒有保存第一顯示候選區(qū)域的圖像數(shù)據(jù)，則圖像數(shù)據(jù)獲取 控制部402命令層次圖像數(shù)據(jù)獲取部403從存儲設(shè)備308讀出第一顯示候選區(qū)域的圖像數(shù) 據(jù)并在主存儲器302中展開該圖像數(shù)據(jù)。從存儲設(shè)備308讀出圖像數(shù)據(jù)是耗時的處理。因 此，希望將第一顯示候選區(qū)域設(shè)定得盡可能地寬，抑制該處理所需的開銷。
[0086] 層次圖像數(shù)據(jù)獲取部403根據(jù)圖像數(shù)據(jù)獲取控制部402的控制指令來執(zhí)行從存儲 設(shè)備308讀出圖像區(qū)域的圖像數(shù)據(jù)和在主存儲器302中展開該圖像數(shù)據(jù)。
[0087] 顯示數(shù)據(jù)生成控制部404基于用戶輸入信息來控制圖像數(shù)據(jù)從主存儲器302的讀 出、圖像數(shù)據(jù)的處理方法以及圖像數(shù)據(jù)到圖形板304的傳送。顯示數(shù)據(jù)生成控制部404基 于諸如圖像顯示的開始和結(jié)束以及顯示圖像的滾動操作、切換、放大和縮小之類的各種用 戶輸入信息來預(yù)測顯示區(qū)域的變化。顯示數(shù)據(jù)生成控制部404指定顯示裝置103上實際顯 示的圖像區(qū)域(顯示區(qū)域）和其中應(yīng)當在副存儲器303中讀取圖像數(shù)據(jù)的圖像區(qū)域(第二顯 示候選區(qū)域)。如果副存儲器303沒有保存第二顯示候選區(qū)域的圖像數(shù)據(jù)，則顯示數(shù)據(jù)生成 控制部404命令顯示候選圖像數(shù)據(jù)獲取部405從主存儲器302讀出第二顯示候選區(qū)域的圖 像數(shù)據(jù)。另外，顯示數(shù)據(jù)生成控制部404關(guān)于與滾動請求相對應(yīng)的圖像數(shù)據(jù)的處理方法對 顯示候選圖像數(shù)據(jù)生成部406進行命令。
[0088] 顯示數(shù)據(jù)生成控制部404命令顯示圖像數(shù)據(jù)傳送部407從副存儲器303讀出顯示 圖像區(qū)域的圖像數(shù)據(jù)。與從存儲設(shè)備308讀出圖像數(shù)據(jù)相比，從主存儲器302的讀出可以 高速執(zhí)行。因此，與第一顯示候選區(qū)域相比，第二顯示候選區(qū)域可被設(shè)定為窄范圍。也就是 說，第一顯示候選區(qū)域、第二顯示候選區(qū)域和顯示區(qū)域的大小的關(guān)系是第一顯示候選區(qū)域 彡第二顯示候選區(qū)域>顯示區(qū)域。
[0089] 顯示候選圖像數(shù)據(jù)獲取部405根據(jù)顯示數(shù)據(jù)生成控制部404的控制指令執(zhí)行從主 存儲器302讀出顯示候選的圖像區(qū)域的圖像數(shù)據(jù)，并且將該圖像數(shù)據(jù)傳送到顯示候選圖像 數(shù)據(jù)生成部406。顯示候選圖像數(shù)據(jù)生成部406執(zhí)行作為壓縮圖像數(shù)據(jù)的顯示候選圖像數(shù) 據(jù)的展開處理，并在副存儲器303中展開該圖像數(shù)據(jù)。顯示圖像數(shù)據(jù)傳送部407根據(jù)顯示 數(shù)據(jù)生成控制部404的控制指令執(zhí)行從副存儲器303讀出顯示圖像區(qū)域的圖像數(shù)據(jù)，并將 該圖像數(shù)據(jù)傳送到圖形板304。副存儲器303與圖形板304之間的高速圖像數(shù)據(jù)傳送通過 DMA功能來執(zhí)行。
[0090] 調(diào)整參數(shù)識別部408獲取針對其執(zhí)行標本觀察(篩查)的放大圖像的倍率并識別放 大圖像的顯示區(qū)域的大小。參考圖7A和7B來說明放大圖像和顯示區(qū)域。調(diào)整參數(shù)識別部 408識別標本觀察(篩查）序列。如參考圖7A、7B、9A至9E和10A至10C所說明的，標本觀 察(篩查）序列是用于定義多個個體標本的觀察順序、個體標本的觀察開始位置和個體標本 的放大圖像的顯示順序的信息。
[0091] 標本布置調(diào)整部409基于作為調(diào)整參數(shù)識別部408中的識別結(jié)果的顯示區(qū)域和標 本觀察(篩查)序列，利用主存儲器302的載物片206的圖像數(shù)據(jù)來執(zhí)行標本布置的調(diào)整(再 配置)。標本布置的調(diào)整是用于當多個個體標本被包括在一個載物片中時調(diào)整個體標本的 布置以使得個體標本的圖像的區(qū)域被連續(xù)(依次)布置的處理。希望去除除了個體標本的圖 像以外的區(qū)域(背景部分)。在以下說明中，具有經(jīng)標本布置調(diào)整部409調(diào)整的標本布置的 虛擬載物片被稱為"再配置載物片（圖像)"。在標本觀察(篩查)中，如下所述，放大圖像被更 新為使得顯示區(qū)域看起來在再配置載物片上按順序移動。這使得容易觀察多個個體標本。
[0092] 在本實施例中，在一個載物片中包括多個個體標本。然而，本發(fā)明不限于此。如果 在一個載物片中包括彼此間隔開的多個觀察對象，則可以應(yīng)用本發(fā)明。例如，當組織切片作 為標本被布置在載物片上并且僅該組織中的多個特征部分(例如核）被設(shè)定為觀察對象時， 也可應(yīng)用本發(fā)明。
[0093] 標本布置調(diào)整部409可實際地再布置和組合個體標本的圖像數(shù)據(jù)以實際生成再 配置載物片的圖像數(shù)據(jù)。然而，圖像數(shù)據(jù)的處理需要固定處理時間，并且存儲容量對于存儲 經(jīng)處理的圖像數(shù)據(jù)也是有必要的。因此，在本實施例中，作為再配置載物片的數(shù)據(jù)，創(chuàng)建定 義再配置載物片中的個體標本的位置與實際載物片中的位置之間的對應(yīng)關(guān)系的數(shù)據(jù)(參見 圖19C)。在標本觀察(篩查）中的顯示控制中，顯示數(shù)據(jù)生成控制部404參考該對應(yīng)關(guān)系控 制應(yīng)當作為放大圖像顯示的圖像數(shù)據(jù)的讀取位置(指針)。利用此方法，可以對再配置載物 片虛擬地實現(xiàn)標本觀察(篩查)。
[0094] 調(diào)整參數(shù)識別部408和標本布置調(diào)整部409是被配置為執(zhí)行顯示區(qū)域和標本觀察 (篩查）序列的識別以及標本布置的調(diào)整的功能塊，其是本實施例的特征。顯示數(shù)據(jù)生成控 制部404、顯示候選圖像數(shù)據(jù)獲取部405、顯示候選圖像數(shù)據(jù)生成部406和顯示圖像數(shù)據(jù)傳 送部407是被配置為執(zhí)行用于根據(jù)顯示區(qū)域的移動指令來更新放大圖像的顯示的顯示控 制的功能塊。
[0095] (層次圖像數(shù)據(jù)的結(jié)構(gòu)）
[0096] 圖5是示出層次圖像數(shù)據(jù)的結(jié)構(gòu)的示意圖。根據(jù)分辨率(像素數(shù)目）的差別，層次 圖像數(shù)據(jù)由第一層圖像501、第二層圖像502、第三層圖像503和第四層圖像504這四層配 置。標本505是組織的切片。為了容易想象層次結(jié)構(gòu)，清楚示出了各層中的標本505的大 小。第一層圖像501是具有最低分辨率的圖像并且用于縮略圖像等。第二層圖像502和第 三層圖像503是具有中等分辨率的圖像并且用于虛擬載物片圖像等的寬區(qū)域觀察。第四層 圖像504是具有最高分辨率的圖像并且用于詳細觀察虛擬載物片圖像。
[0097] 各層的圖像是通過收集若干個壓縮圖像塊來配置的。例如，在JPEG壓縮格式的 情況下，壓縮圖像塊是一個JPEG圖像。第一層圖像501由一個壓縮圖像塊配置，第二層圖 像502由四個壓縮圖像塊配置，第三層圖像503由十六個壓縮圖像塊配置，并且第四層圖像 504由六十四個壓縮圖像塊配置。
[0098] 圖像的分辨率的差別對應(yīng)于顯微鏡檢查期間的光學倍率的差別。第一層圖像501 相當于低倍率的顯微鏡檢查，而第四層圖像504相當于高倍率的顯微鏡檢查。例如，當用戶 想要以高倍率執(zhí)行觀察時，用戶可通過顯示第四層圖像504來執(zhí)行與高倍率觀察相對應(yīng)的 詳細觀察。
[0099] (載物片）
[0100] 圖6是示出其上放置有多個個體標本的載物片的示意圖。載物片206是通過將多 個標本粘貼在載玻片上并且將載玻片與封固劑一起固定在蓋玻片下而獲得的構(gòu)件。指示標 本的屬性的標簽601存在于載物片206的一端。在標簽601上，描述用于患者標識的標識 號、諸如胃、肝臟、大腸或小腸之類的標本的部位、創(chuàng)建載物片的設(shè)施的名稱、用作意見參考 的評論等等。九個個體標本被粘貼到載物片206。個體標本602指示個體標本之一。例如， 在對胃或肝臟的活檢(生物組織觀察)中，如圖6所示，多個個體標本有時被放置在一個載物 片上。
[0101] (圖像呈現(xiàn)應(yīng)用的畫面示例）
[0102] 圖7A是示出用于呈現(xiàn)虛擬載物片圖像的應(yīng)用的畫面的示例的圖。圖像呈現(xiàn)應(yīng)用 (也稱為觀看者應(yīng)用）的程序被存儲在圖像處理裝置102的存儲設(shè)備308中?？刂撇?01從 存儲設(shè)備308讀取該程序，在存儲器中展開該程序，并且執(zhí)行該程序，從而實現(xiàn)圖像呈現(xiàn)應(yīng) 用的功能。用于圖像呈現(xiàn)的顯示數(shù)據(jù)由圖像呈現(xiàn)應(yīng)用利用從存儲設(shè)備308讀取的⑶I數(shù)據(jù) 和層次圖像數(shù)據(jù)來生成。顯示數(shù)據(jù)從圖形板304輸出到顯示裝置103。結(jié)果，用于圖像呈現(xiàn) 的應(yīng)用畫面被顯示在顯示裝置103上。
[0103] 圖像呈現(xiàn)應(yīng)用的執(zhí)行方法不限于以上說明的示例。例如，圖像處理裝置102可包 括用于執(zhí)行圖像呈現(xiàn)應(yīng)用的功能的專用硬件。通過把以硬件安裝的功能擴展板附連到圖像 處理裝置102,圖像處理裝置102可被配置為具有執(zhí)行圖像呈現(xiàn)應(yīng)用的功能。圖像呈現(xiàn)應(yīng)用 不限于從外部存儲設(shè)備提供，而可通過經(jīng)由網(wǎng)絡(luò)下載來提供。
[0104] 圖7A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。應(yīng)用畫面除了菜單窗口 以外還包括用于顯示放大圖像701和載物片圖像702的兩個窗口。利用此應(yīng)用，可以執(zhí)行 用于通過對載物片上的標本的一部分區(qū)域進行放大顯示并移動顯示區(qū)域來觀察整個標本 的操作。此實施例中的應(yīng)用提供了下文說明的各種功能以便支持包括多個個體標本的載物 片的標本觀察(篩查）中的操作。
[0105] 圖7B是詳細示出顯示載物片圖像702的窗口的圖。載物片圖像702是載物片206 的除標簽601以外的區(qū)域的圖像。在顯示載物片圖像702的窗口中，可以檢查粘貼到載物 片206的所有個體標本(多個標本)。在載物片圖像702中，對所有個體標本賦予了指示標 本觀察(篩查）的順序的編號。例如，作為個體標本的編號704,向在標本觀察(篩查）的順序 中處于第七個的個體標本703賦予了 " 7 "。由于有九個個體標本，所以向各個個體標本賦予 編號"1"至"9"。用戶可以任意設(shè)定向哪些個體標本賦予哪些編號?；蛘?，可以基于圖像 呈現(xiàn)應(yīng)用的預(yù)定規(guī)則來自動分配編號。在載物片圖像702中，示出了顯示區(qū)域框705,其是 指示放大圖像的顯示區(qū)域的大小的框。向每個個體標本設(shè)定一個或多個顯示區(qū)域框以包含 該個體標本。顯示區(qū)域框的設(shè)定方法在下文說明（參見圖8A至8D)。個體標本"1"的顯示 區(qū)域框之一由粗框706突出顯示。粗框706是指示當前作為放大圖像701顯示在顯示裝置 103上的顯示區(qū)域的框。放大圖像701是載物片圖像702中與粗框706的區(qū)域相對應(yīng)的高 清晰度(高分辨率）圖像并且用于標本的詳細觀察。
[0106] (顯示區(qū)域框的設(shè)定）
[0107] 圖8A至8D是用于說明由標本布置調(diào)整部409執(zhí)行的為個體標本設(shè)定顯示區(qū)域框 的示意圖。圖8A至8D以個體標本"2"作為示例示出了為個體標本設(shè)定顯示區(qū)域框的流程。
[0108] 如圖8A所示，首先，設(shè)定個體標本801 (個體標本"2"）的外接矩形區(qū)域802。外 接矩形區(qū)域802的X方向上的長度被表示為A，并且Y方向上的長度被表示為B。外接矩形 區(qū)域802的對角線的交點被設(shè)定為外接矩形中心803。
[0109] 然后，如圖8B所示，確定覆蓋外接矩形區(qū)域（AXB)的最小數(shù)目的矩形顯示區(qū)域 框。顯示區(qū)域框的X方向上的長度被表示為C，并且Y方向上的長度被表示為D。最小數(shù)目 的顯示區(qū)域框的確定相當于利用任意正數(shù)Μ和N計算滿足ASCXM和BSDXN的最小Μ 和Ν。顯示區(qū)域框的最小數(shù)目是ΜΧΝ。Μ=3并且Ν=3。顯示區(qū)域框的最小數(shù)目是九個。
[0110] 如圖8C所示，對顯示區(qū)域框和個體標本801進行相對平移以搜索使得顯示區(qū)域 框的數(shù)目最小化的布置。例如，在由顯示區(qū)域框配置的矩形區(qū)域（（CXM) X (DXN))的四角 (左上、右上、左下和右下）布置外接矩形區(qū)域（ΑΧΒ)以搜索使得顯示區(qū)域框減少得最多的 布置。個體標本801被布置在由顯示區(qū)域框配置的矩形區(qū)域（（CXM) X (DXN))的左上角， 并且顯示區(qū)域框的數(shù)目減少到七個。
[0111] 最后，如圖8D所示，根據(jù)使從由顯示區(qū)域框配置的區(qū)域的最外周到個體標本801 的最短距離最大化的優(yōu)化算法來調(diào)整顯示區(qū)域中的余白（margin)。這個處理是為了盡可能 地減小個體標本801對每個顯示區(qū)域框的填充狀態(tài)的偏差而執(zhí)行的處理。然而，可省略該 處理。通過上述處理設(shè)定的多個顯示區(qū)域框表示用于個體標本801的詳細觀察的多個放大 圖像的位置和大小。通過向從載物片圖像中檢測到的每個個體標本應(yīng)用圖8A至8D所示的 處理，可以將多個顯示區(qū)域框（即，放大圖像）與個體標本關(guān)聯(lián)起來。
[0112] 圖8A至8D示出了僅通過個體標本801的平移對于顯示區(qū)域框的設(shè)定方法。然而， 取決于個體標本801的形狀，并不總是獲得覆蓋個體標本的最小數(shù)目的顯示區(qū)域框。取代 上述簡單方法，希望采用一種考慮到計算資源、計算時間、個體標本的形狀的復(fù)雜度等等來 獲取覆蓋個體標本的最小數(shù)目的顯示區(qū)域框的優(yōu)化算法。
[0113] (個體標本中的標本觀察(篩查）序列）
[0114] 圖9A至9E是用于說明由標本布置調(diào)整部409執(zhí)行的個體標本中的標本觀察（篩 查）序列的示意圖。圖9A至9E利用個體標本"2"作為示例示出了標本觀察(篩查）序列的 設(shè)定流程。配置個體標本的多個放大圖像(顯示區(qū)域框）的顯示順序被設(shè)定。
[0115] 首先，設(shè)定觀察開始位置901 (圖9A)。觀察開始位置901是配置個體標本801的 多個放大圖像之中首先顯示的放大圖像的顯示區(qū)域框。在此實施例中，個體標本801的多 個顯示區(qū)域框之中存在于最上方左端的顯示區(qū)域框被選擇為觀察開始位置901。當然，這 只是示例，諸如最上方右端的顯示區(qū)域框之類的其他顯示區(qū)域框也可被選擇為觀察開始位 置。
[0116] 然后，標本布置調(diào)整部409對于與觀察開始位置901在同一行中的顯示區(qū)域框設(shè) 定從左到右的顯示順序（圖9B)。當顯示順序的設(shè)定到達右端的顯示區(qū)域框時，標本布置調(diào) 整部409移動到下一行的顯示區(qū)域框（圖9C)并設(shè)定從右到左的顯示順序（圖9D)。當顯 示順序的設(shè)定到達左端的顯示區(qū)域框時，標本布置調(diào)整部409移動到下一行的顯示區(qū)域框 (圖9E)。標本布置調(diào)整部409重復(fù)圖9B至9E所示的處理，直到對所有顯示區(qū)域框設(shè)定了 顯示順序為止。結(jié)果，可以為配置個體標本801的多個放大圖像設(shè)定顯示順序?？蔀槊總€ 個體標本獨立設(shè)定標本觀察(篩查）序列。
[0117] 在圖像呈現(xiàn)應(yīng)用中，根據(jù)所確定的標本觀察(篩查）序列來控制個體標本中的放大 圖像的顯示的切換。當切換放大圖像的顯示時，可以非連續(xù)地將圖像從某個顯示區(qū)域框切 換到下一顯示區(qū)域框，或者可以像滾動那樣連續(xù)地切換圖像。
[0118] (通過平移進行的標本布置的再配置）
[0119] 圖10A至10C是用于說明通過平移進行的標本布置的再配置的示意圖?；诙鄠€ 個體標本的觀察順序、個體標本的顯示區(qū)域框和標本觀察(篩查)序列，標本布置調(diào)整部409 通過標本圖像(放大圖像）中的個體標本的平移來執(zhí)行再配置。
[0120] 在通過標本圖像(放大圖像）中的個體標本的平移進行的再配置中，根據(jù)在觀察順 序上彼此相鄰的僅兩個個體標本的標本觀察(篩查）序列和顯示區(qū)域框來確定個體標本的 布置。在圖10A中，示出了個體標本"1"的標本觀察(篩查）序列和顯示區(qū)域框。在圖10B 中，示出了個體標本"2"的標本觀察(篩查）序列和顯示區(qū)域框。在個體標本" 1"和"2"中， 這兩個個體標本的布置被確定為使得個體標本"1"中最后顯示的顯示區(qū)域框1001和個體 標本"2"中首先顯示的顯示區(qū)域框1002被接合。個體標本"1"和個體標本"2"的連接被 唯一地設(shè)定。
[0121] 圖10C示出了通過按該順序?qū)€體標本"1"連接到個體標本"9"獲得的結(jié)果。示 意性示出了再配置載物片的標本布置。在再配置載物片中，除了個體標本的圖像以外的部 分(背景部分）被縮小。再配置載物片上彼此相鄰的兩個個體標本之間的距離與實際載物 片上其間的距離相比更短。因此，與實際載物片的觀察相比，顯示區(qū)域的移動距離和移動次 數(shù)減少，并且無用的顯示(背景部分的顯示）減少。因此，可以提高標本觀察的效率。另外， 在再配置載物片中，根據(jù)給定的順序按順序(依次）布置多個(九個）個體標本。關(guān)于在觀察 順序上彼此相鄰的兩個個體標本(被稱為第一個體標本和第二個體標本)，第一個體標本的 最末顯示區(qū)域框和第二個體標本的第一顯示區(qū)域框被連接。結(jié)果，當移動顯示區(qū)域時，按順 序直接將放大圖像的顯示從第一個體標本的放大圖像切換到第二個體標本的放大圖像。因 此，易于沒有遺漏地觀察所有個體標本。
[0122] 在實踐中，希望在觀察順序上彼此相鄰的顯示區(qū)域框中提供一定程度的交疊區(qū) 域。這是因為，當切換顯示區(qū)域框時，易于掌握切換前后的放大圖像之間的對應(yīng)關(guān)系。然而， 提供交疊區(qū)域并不是必不可少的。例如，當通過滾動逐漸切換而不是非連續(xù)切換放大圖像 時，則不必提供交疊區(qū)域。
[0123] (通過平移進行的標本布置的再配置的流程）
[0124] 圖11A是用于說明此實施例中的標本布置的再配置的流程的流程圖。
[0125] 在步驟S1101中，標本布置調(diào)整部409確定在載物片206上是否存在多個個體標 本。這個步驟在預(yù)測量中執(zhí)行。例如，關(guān)于個體標本的數(shù)目的信息在載物片206的創(chuàng)建期 間被清楚地寫在標簽601上或以電子方式寫在標簽601上。在預(yù)測量中，寫入標簽601的 信息并確定個體標本的數(shù)目。可利用在預(yù)測量中拾取的載物片206的圖像在圖像處理中確 定個體標本的數(shù)目。
[0126] 在步驟S1102中，標本布置調(diào)整部409識別放大圖像的顯示區(qū)域的大小。此處理 是用于計算作為圖7A所示的放大圖像701顯示的區(qū)域在載物片圖像702上的大小的處理。 可顯示為放大圖像701的區(qū)域的大小根據(jù)顯示裝置103的屏幕分辨率、圖像呈現(xiàn)應(yīng)用的窗 口大小、放大圖像701的顯示倍率等等而變化。因此，步驟S1102中的識別處理是必要的。 具體而言，用戶輸入信息獲取部401獲取用戶利用鍵盤311或鼠標312設(shè)定的放大圖像701 的倍率。調(diào)整參數(shù)識別部408根據(jù)放大圖像701的倍率和窗口大小計算顯示區(qū)域的大小。 識別出的顯示區(qū)域的大小在下一步驟S1103中被反映為顯示區(qū)域框的大小。
[0127] 在步驟S1103中，標本布置調(diào)整部409執(zhí)行個體標本的顯示區(qū)域框的設(shè)定。S1103 的細節(jié)在下文中參考圖11B來說明。
[0128] 在步驟S1104中，標本布置調(diào)整部409執(zhí)行標本觀察(篩查）序列的設(shè)定。標本觀 察(篩查）序列是根據(jù)多個個體標本的觀察順序、個體標本的圖像的觀察開始位置和個體標 本的圖像的顯示區(qū)域的觀察順序來設(shè)定的。S1104的細節(jié)在下文參考圖11C來說明。
[0129] 在步驟S1105中，標本布置調(diào)整部409自動執(zhí)行個體標本的布置的再配置(平移)。 標本布置調(diào)整部409選擇在觀察順序上彼此相鄰的兩個個體標本，并且基于僅這兩個個體 標本的標本觀察(篩查)序列和顯示區(qū)域框來確定這兩個個體標本的相對布置。標本布置調(diào) 整部409通過對在觀察順序上彼此相鄰的個體標本的所有組合重復(fù)相同的過程來執(zhí)行所 有個體標本的再配置(平移）（參見圖10C)。
[0130] 根據(jù)以上說明的處理步驟，可以執(zhí)行多個個體標本的再配置(布置的調(diào)整)。當用 戶改變放大圖像701的倍率或改變窗口大小時，在任何時間執(zhí)行從步驟S1102起的處理。
[0131] 圖11B是示出步驟S1103中的個體標本的顯示區(qū)域框的設(shè)定的細節(jié)的流程圖。在 步驟S1113中，標本布置調(diào)整部409從載物片的圖像中檢測個體標本的圖像的區(qū)域，并且選 擇該個體標本作為對其執(zhí)行以下處理的個體標本。在步驟S1114中，標本布置調(diào)整部409 為所選個體標本設(shè)定外接矩形區(qū)域(參見圖8A)。在步驟S1115中，標本布置調(diào)整部409把 最小數(shù)目的顯示區(qū)域框重疊在步驟S1114中設(shè)定的外接矩形區(qū)域上(參見圖8B)。在步驟 S1116中，標本布置調(diào)整部409在顯示區(qū)域框中平移個體標本(參見圖8C和8D)。結(jié)果，顯 示區(qū)域框的減少和顯示區(qū)域框中的個體標本的余白調(diào)整被執(zhí)行。在步驟S1117中，標本布 置調(diào)整部409確定是否對所有個體標本執(zhí)行了步驟S1113至S1116。如果對所有個體標本 執(zhí)行了步驟S1113至S1116,則標本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步 驟，可以為各個個體標本設(shè)定圖像區(qū)域框。
[0132] 圖11C是示出標本觀察(篩查）序列的設(shè)定的細節(jié)的流程圖。在步驟S1108中，標 本布置調(diào)整部409向所有個體標本賦予指示標本觀察(篩查)的順序的編號。用戶可任意設(shè) 定向哪些個體標本賦予哪些編號，或者可基于規(guī)則來自動分配編號。在步驟S1109中，標本 布置調(diào)整部409選擇對其執(zhí)行以下處理的一個個體標本。在步驟S1110中，標本布置調(diào)整 部409執(zhí)行所選個體標本的觀察開始位置的設(shè)定。例如，在圖9A中，在觀察開始位置901 中設(shè)定覆蓋個體標本的顯示區(qū)域框之中存在于最上方左端處的顯示區(qū)域框。在步驟S1111 中，標本布置調(diào)整部409執(zhí)行個體標本中的顯示區(qū)域框的顯示順序的設(shè)定。設(shè)定顯示順序 的方法如參考圖9B至9E所述。在步驟S1112中，標本布置調(diào)整部409確定是否對所有個 體標本執(zhí)行了步驟S1109至Sill 1。如果對所有個體標本執(zhí)行了步驟S1109至Sill 1，則標 本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步驟，可以為個體標本設(shè)定標本觀察 (篩查）序列。
[0133] (通過平移進行的標本布置的再配置的另一示例）
[0134] 圖12是用于說明通過平移進行的標本布置的再配置的另一示例的示意圖。
[0135] 與以上說明的示例(參見圖10C)相比，個體標本中的顯示區(qū)域框的設(shè)定是相同的， 但關(guān)于個體標本"1"、"2"、"3"、"7"、"8"和"9"的觀察開始位置的設(shè)定和顯示順序的設(shè)定 是不同的。關(guān)于個體標本"4"、"5"和"6"的觀察開始位置的設(shè)定和顯示順序的設(shè)定與該示 例中的設(shè)定是相同的。
[0136] 說明關(guān)于個體標本" 1"、" 2 "、" 3 "、" 7 "、"8 "和"9 "的觀察開始位置的設(shè)定和顯示 順序的設(shè)定。觀察開始位置被設(shè)定在覆蓋個體標本的顯示區(qū)域框之中存在于最下方右端處 的顯示區(qū)域框中。關(guān)于顯示順序，重復(fù)如下序列直到對所有顯示區(qū)域框設(shè)定了顯示順序為 止：從觀察開始位置中的顯示區(qū)域框向左移動，在到達左端的顯示區(qū)域框后移動到上一行， 從左向右移動，并在到達右端后移動到上一打。
[0137] 個體標本中的標本觀察(篩查)序列可在各個個體標本中獨立設(shè)定。對于個體標本 " 1"、" 2 "、" 3 "、" 7 "、"8 "和"9 "這一組和個體標本"4"、" 5 "和"6 "這一組應(yīng)用不同的標本 觀察(篩查）序列。
[0138] 在通過平移進行的標本布置的再配置中，按照在觀察順序上彼此相鄰的僅兩個個 體標本的標本觀察(篩查）序列和顯示區(qū)域框來調(diào)整個體標本的布置。因此，如圖12所示， 個體標本"3"中最后觀察的顯示區(qū)域框和個體標本"4"中首先觀察的顯示區(qū)域框被連接。 然而，連接后的個體標本"3"和個體標本"4"不能在同一平面上示出。這對于個體標本 "6"和個體標本"7"的連接也成立。這種連接關(guān)系不能由二維平面表示，但可由像莫比斯 (Moebius)帶那樣的相位空間來表示。在圖12中，不能由二維平面表示的連接由虛線箭頭 指示。
[0139] 在圖12所示的再配置的示例中，例如，個體標本"1"到個體標本"3"可局部地由 二維圖像表示。然而，為了連接例如個體標本" 3 "和個體標本"4"，多個個體標本的整體圖 像由相位空間（而不是二維平面）來表示。在此實施例中，圖像的再布置是由利用定義再配 置載物片中的位置與實際載物片中的位置之間的對應(yīng)關(guān)系的數(shù)據(jù)控制圖像數(shù)據(jù)的讀取位 置的方法、而不是實際生成再配置的圖像數(shù)據(jù)的方法來虛擬實現(xiàn)的。因此，可以沒有問題地 實現(xiàn)圖12所示的相位空間中的連接關(guān)系。執(zhí)行標本觀察(篩查）的觀察者只看顯示的放大 圖像，并且如果觀察者只能按順序無遺漏地觀察所有放大圖像則可達到目的。因此，即使再 配置的標本布置不能由二維平面表示，也沒有特別的問題。
[0140] (通過旋轉(zhuǎn)和平移進行的標本布置的再配置）
[0141] 圖13A至13F是用于說明通過旋轉(zhuǎn)和平移進行的標本布置的再配置的示意圖。
[0142] 圖13A至13D是用于說明在考慮個體標本的旋轉(zhuǎn)的情況下顯示區(qū)域框的設(shè)定的示 意圖。利用個體標本"7"作為示例示出了直到個體標本中的顯示區(qū)域框的設(shè)定為止的流程。
[0143] 在圖13A中，設(shè)定個體標本1301 (個體標本"7"）的最小外接矩形區(qū)域1302。
[0144] 在圖13B中，個體標本1301和最小外接矩形區(qū)域1302被虛擬地一體旋轉(zhuǎn)，使得最 小外接矩形區(qū)域1302的各邊與X軸和Y軸平行。除了圖13B所示的形狀以外，可以設(shè)想通 過將圖13B所示的圖進一步旋轉(zhuǎn)90度、180度和270度獲得的形狀。然而，可以選擇任意一 個旋轉(zhuǎn)角度。由于沒有選擇最終旋轉(zhuǎn)角度，所以不必生成通過實際旋轉(zhuǎn)個體標本而獲得的 圖像。個體標本只需要出于計算目的被虛擬旋轉(zhuǎn)。
[0145] 在圖13C中，利用最小數(shù)目的顯示區(qū)域框覆蓋最小外接矩形區(qū)域。
[0146] 在圖13D中，平移個體標本1301以減少顯示區(qū)域框。個體標本1301被布置在由 顯示區(qū)域框配置的矩形區(qū)域的右下角。顯示區(qū)域框的數(shù)目為五個。另外，通過使從由顯示 區(qū)域框配置的區(qū)域的最外周到個體標本1301的最短距離最大化的優(yōu)化算法來調(diào)整顯示區(qū) 域中的余白。
[0147] 圖13A至13D示出了通過個體標本1301的旋轉(zhuǎn)和平移對于顯示區(qū)域框的設(shè)定方 法。然而，取決于個體標本1301的形狀，并不總是獲得覆蓋個體標本的最小數(shù)目的顯示區(qū) 域框。取代上述簡單方法，可以選擇用于獲取覆蓋個體標本的最小數(shù)目的顯示區(qū)域框的優(yōu) 化算法。要采用的算法只需要考慮計算資源、計算時間、個體標本的形狀的復(fù)雜度等等來確 定。
[0148] 在圖13E中，說明在考慮標本觀察(篩查)序列的情況下個體標本1301的旋轉(zhuǎn)。如 參考圖13B所說明的，可設(shè)想四種旋轉(zhuǎn)作為個體標本1301的旋轉(zhuǎn)。通過這四種旋轉(zhuǎn)而旋轉(zhuǎn) 的個體標本1301分別被表示為個體標本"7-1"、"7-^"、"7-1^"和"7-^"。個體標本的 旋轉(zhuǎn)角度彼此相差90度。標本觀察（篩查）序列與參考圖9A至9E說明的序列相同。當關(guān) 注個體標本"7-iii"和"7-iv"時，在顯示區(qū)域框之間發(fā)生傾斜移動。為了盡可能地保持正 在觀察的個體標本中的連續(xù)性，也就是說，為了盡可能只通過左右移動和向下移動連續(xù)地 執(zhí)行標本觀察(篩查)，個體標本"7-iii"和"7-iv"的旋轉(zhuǎn)被從選擇候選中排除。對于個體 標本"7"的旋轉(zhuǎn)，選擇個體標本"7-i"或"7-ii"?？梢圆捎?7-i"和"7-ii"的旋轉(zhuǎn)中的任 何一個。例如，可以采用在移動方向上變化更小的旋轉(zhuǎn)，或者可以采用更接近標本的實際方 向的旋轉(zhuǎn)。
[0149] 圖13F示出了根據(jù)以上說明的過程連接并再配置個體標本"1"至個體標本"9"。 對于個體標本" 7 "，采用圖13E中" 7-i "指示的旋轉(zhuǎn)。圖7A所示的放大圖像701是通過放 大圖13F所示的顯示區(qū)域框中的任何一個而獲得的圖像。
[0150] (通過個體標本的旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定）
[0151] 圖14是用于說明通過個體標本的旋轉(zhuǎn)和平移進行的顯示區(qū)域框的設(shè)定的流程 圖。圖14示出了圖11A所示的流程中的步驟S1103的細節(jié)。圖14的流程圖替換圖11B的 流程圖。與個體標本的再配置有關(guān)的另一種處理與圖11A和11C所示的處理相同。
[0152] 在步驟S1401中，標本布置調(diào)整部409選擇要對其執(zhí)行以下處理的一個個體標本。 在步驟S1402中，標本布置調(diào)整部409為該個體標本設(shè)定最小外接矩形區(qū)域(參見圖13A)。 在步驟S1403中，標本布置調(diào)整部409將個體標本1301和最小外接矩形區(qū)域1302 -體地 虛擬旋轉(zhuǎn)(參見圖13B)。在步驟S1404中，標本布置調(diào)整部409將最小數(shù)目的顯示區(qū)域框重 疊在步驟S1402中設(shè)定的最小外接矩形區(qū)域上(參見圖13C)。在步驟S1405中，標本布置 調(diào)整部409在顯示區(qū)域框中平移個體標本(參見圖13D)。結(jié)果，顯示區(qū)域框的減少和顯示 區(qū)域框中的個體標本的余白調(diào)整被執(zhí)行。在步驟S1406中，標本布置調(diào)整部409在考慮標 本觀察(篩查）序列的情況下執(zhí)行個體標本的旋轉(zhuǎn)（圖13E)。在四種旋轉(zhuǎn)之中，選擇如下旋 轉(zhuǎn)角度：在該旋轉(zhuǎn)角度下，能夠盡可能只通過左右移動和向下移動來連續(xù)執(zhí)行標本觀察(篩 查)。當多個旋轉(zhuǎn)角度為候選時，根據(jù)預(yù)定的規(guī)則選擇諸如在移動方向上變化更小的旋轉(zhuǎn)角 度或者最接近原始方向的旋轉(zhuǎn)角度之類的一個旋轉(zhuǎn)角度。在步驟S1407中，標本布置調(diào)整 部409按在步驟S1406選擇的旋轉(zhuǎn)角度來旋轉(zhuǎn)個體標本。在步驟S1408中，標本布置調(diào)整 部409確定是否對所有個體標本執(zhí)行了步驟S1401至S1407。如果對所有個體標本執(zhí)行了 步驟S1401至S1407,則標本布置調(diào)整部409結(jié)束該處理。根據(jù)以上說明的處理步驟，可以 為個體標本設(shè)定顯示區(qū)域框。
[0153] (個體標本的拉近）
[0154] 圖15A至1?是用于說明顯示區(qū)域(放大圖像）的調(diào)整(個體標本的拉近）的示意 圖。說明對于通過圖10C所示的平移調(diào)整布置的再配置載物片進一步減少顯示區(qū)域框的方 法。
[0155] 圖15A是用于說明對個體標本"2"和個體標本"3"的交疊確定以及基于該確定對 顯示區(qū)域的調(diào)整(個體標本的拉近）的示意圖。注意在個體標本1501 (個體標本"2"）中最 后顯示的顯示區(qū)域框1502和在個體標本1503 (個體標本"3"）中首先顯示的顯示區(qū)域框 1504。在圖10C中，個體標本1501和個體標本1503被連接，以使得顯示區(qū)域框1502的圖 像和顯示區(qū)域框1504的圖像被接合。評估顯示區(qū)域框1502和1504是否可被重疊以連接 兩個個體標本1501和1503。使得能夠連接的條件是在個體標本1501和1503中不發(fā)生交 疊并且在個體標本1501和1503共同的放大圖像中個體標本1501的顯示順序和個體標本 1503的顯示順序中不發(fā)生不一致。當滿足該條件時，顯示區(qū)域框1502和1504被重疊以布 置兩個個體標本1501和1503 (圖15A的右圖）。顯示區(qū)域框1505的圖像是個體標本1501 中最后顯示的顯示區(qū)域框1502的圖像和個體標本1503中首先顯示的顯示區(qū)域框1504的 圖像的組合圖像。結(jié)果，個體標本1501的多個放大圖像之中最后顯示的圖像和個體標本 1503的多個放大圖像之中首先顯示的圖像是共同圖像。
[0156] 圖15B示出了不能應(yīng)用參考圖15A說明的方法的一個示例。注意個體標本1506 (個體標本"1"）中最后顯示的顯示區(qū)域框1507和個體標本1508 (個體標本"2"）中首先顯 示的顯示區(qū)域框1509。當用與圖15A所示的方法相同的方法生成通過將顯示區(qū)域框1507 和1509彼此重疊而獲得的顯示區(qū)域框1510、并且布置個體標本1506和1508時，如圖15B 的右圖中所示在這兩個個體標本中發(fā)生交疊。在此情況下，不能應(yīng)用此方法。
[0157] 圖15C示出了不能應(yīng)用參考圖15A說明的方法的另一示例。注意個體標本1511 (個體標本"I"）中最后顯示的顯示區(qū)域框1512和個體標本1513 (個體標本"II"）中首先 顯示的顯示區(qū)域框1514。當通過與圖15A所示的方法相同的方法重疊顯示區(qū)域框1512和 1514時，個體標本1511和1513的交疊不發(fā)生。然而，個體標本1511和1513兩者都被包括 在與顯示區(qū)域框1515、1516和1517相對應(yīng)的三個圖像中。對于這三個圖像，個體標本1511 中的顯示順序是左方向（1517 - 1516 - 1515)，而個體標本1513中的顯示順序是右方向 (1515 - 1516 - 1517)。這是在兩個個體標本共同的放大圖像中兩個個體標本的顯示順序 中發(fā)生不一致的示例。在此情況下，不能應(yīng)用此方法。
[0158] 圖1?示意性示出了在根據(jù)參考圖15A說明的過程執(zhí)行顯示區(qū)域框的減少之后的 再配置載物片上的標本布置。當將該再配置載物片與圖10C所示的再配置載物片相比較 時，在個體標本" 2 "和" 3 "的連接部分、個體標本" 3 "和" 4 "的連接部分以及個體標本" 8 " 和"9"的連接部分中減少了顯示區(qū)域框。以上說明的方法也可應(yīng)用到圖12和圖13F所示 的再配置載物片上的標本布置。
[0159] (用于個體標本的拉近的流程）
[0160] 圖16是用于說明顯示區(qū)域的調(diào)整(個體標本的拉近）的流程圖。此處理是由標本 布置調(diào)整部409執(zhí)行的。
[0161] 在步驟S1601中，標本布置調(diào)整部409掌握作為個體標本之間的連接區(qū)域的兩個 顯示區(qū)域框。這個處理相當于掌握圖15A中的個體標本1501的最末顯示區(qū)域框1502和個 體標本1503的第一顯示區(qū)域框1504。
[0162] 在步驟S1602中，標本布置調(diào)整部409確定當重疊步驟S1601中掌握的兩個顯示 區(qū)域框時是否發(fā)生個體標本的交疊。這個處理相當于確定圖15A的右圖的狀態(tài)中的個體標 本1501和個體標本1503中是否發(fā)生交疊。如果不發(fā)生交疊，則處理前進到步驟S1603。如 果發(fā)生交疊，則不將個體標本彼此拉近。
[0163] 在步驟S1603中，標本布置調(diào)整部409確定當重疊在步驟S1601中掌握的兩個顯 示區(qū)域框時是否發(fā)生顯示順序的不一致。這個處理相當于確定圖15A的左圖中的顯示區(qū)域 框1502的顯示順序和顯示區(qū)域框1504的顯示順序是否彼此一致。如果不發(fā)生不一致，則 處理前進到步驟S1604。如果發(fā)生不一致，則不將個體標本彼此拉近。
[0164] 在步驟S1604中，標本布置調(diào)整部409將個體標本彼此拉近。這個處理相當于調(diào) 整圖15A中的個體標本1501和1503的相對位置(將兩個個體標本彼此拉近)以重疊個體標 本1501的顯示區(qū)域框1502和個體標本1503的顯示區(qū)域框1504。標本布置調(diào)整部409通 過組合這兩個個體標本的放大圖像來生成與這兩個個體標本共同的顯示區(qū)域框（圖15A的 右圖中的1505)相對應(yīng)的放大圖像。
[0165] 在步驟S1605中，標本布置調(diào)整部409確定是否對所有個體標本之間的連接區(qū)域 執(zhí)行了這些步驟。如果對所有個體標本執(zhí)行了這些步驟，則標本布置調(diào)整部409結(jié)束該處 理。
[0166] (應(yīng)用畫面(呈現(xiàn)圖像)）
[0167] 圖17A和17B是用于說明當執(zhí)行顯示區(qū)域的調(diào)整(個體標本的拉近)時獲得的呈現(xiàn) 圖像的示意圖。圖17A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了 菜單窗口以外還包括用于顯示放大圖像1701和載物片圖像1702的兩個窗口。圖17B是示 出顯示載物片圖像1702的窗口的圖。由于基本配置與參考圖7A和7B說明的基本配置相 同，因此，下面僅說明與參考圖7A和7B說明的呈現(xiàn)圖像的差別。
[0168] 如參考圖15A和1?所說明的，個體標本"2"的最末顯示區(qū)域框和個體標本"3"的 第一顯示區(qū)域框是共同的。因此，當顯示區(qū)域框被移動到個體標本"2"的末端時，如圖17B 所示，指示當前顯示區(qū)域的粗框1703被描繪在個體標本"2"的最末顯示區(qū)域框和個體標本 "3"的第一顯示區(qū)域框中。另一方面，通過組合個體標本"2"和個體標本"3"獲得的圖像被 顯示在放大圖像1701的窗口上。也就是說，在圖17A所示的放大圖像1701的上部看到個 體標本"2"的左下的部分。在放大圖像1701的下部看到個體標本"3"的左上的部分。通 過這種方法可以減少放大圖像1701的切換(移動)次數(shù)。因此，可以實現(xiàn)標本觀察(篩查)的 效率性。
[0169] 在圖17B中，與已經(jīng)經(jīng)歷了標本觀察(篩查）的區(qū)域1704相對應(yīng)的顯示區(qū)域框帶 有陰影。結(jié)果，用戶可以容易地檢查在整個載物片(九個個體標本）中標本觀察(篩查）的進 展。由于只需要區(qū)分已經(jīng)觀察的區(qū)域和尚未觀察的區(qū)域，所以可通過除了加陰影以外的方 法來區(qū)分這些區(qū)域。可以使用任何方法。例如，可以通過顏色來區(qū)分已經(jīng)觀察的區(qū)域和其 他區(qū)域，或者可以添加指示"已經(jīng)觀察"和"尚未觀察"的標記或圖標的圖像。
[0170] (個體標本的分離）
[0171] 圖18A和18B是用于說明再配置載物片中的個體標本的分離的示意圖。當實際載 物片206上的個體標本之間的間隔極窄時，在某個個體標本的顯示區(qū)域框中有時包括另一 個體標本的一部分。在圖18A所示的示例中，由于個體標本"iii"與個體標本"iv"之間的 間隔在載物片上窄，所以個體標本"iv"被包括在個體標本"iii"的顯示區(qū)域框1801中，并 且個體標本" iii"被包括在個體標本"iv"的顯示區(qū)域框1802中。
[0172] 可利用這種顯示區(qū)域框來執(zhí)行標本觀察(篩查)。然而，當除了正在觀察的個體標 本以外的個體標本被顯示時，有可能用戶會誤解個體標本的形狀等，用戶的注意力被轉(zhuǎn)移 到不需要觀察的部分，并且效率劣化。因此，可防止在與某個個體標本關(guān)聯(lián)設(shè)定的顯示區(qū)域 框中顯示另一個體標本，以便用戶可集中觀察一個個體標本。圖18B示出了個體標本"iii" 和為個體標本"iii"設(shè)定的顯示區(qū)域框以及個體標本"iv"和為個體標本"iv"設(shè)定的顯示 區(qū)域框被彼此獨立地提取以再配置標本圖像(放大圖像）的示例。在此情況下，執(zhí)行用于從 與顯示區(qū)域框1801相對應(yīng)的標本圖像(放大圖像）中擦除個體標本"iv"的圖像的處理。執(zhí) 行用于從與顯示區(qū)域框1802相對應(yīng)的標本圖像(放大圖像）中擦除個體標本"iii"的圖像 的處理。
[0173] (對圖像格式的說明）
[0174] 圖19A至19C是用于說明圖像文件格式的示意圖。
[0175] 圖19A示出了圖像數(shù)據(jù)的基本文件格式?；疚募袷桨^部、圖像數(shù)據(jù)和附 加數(shù)據(jù)。頭部包括文件頭部、預(yù)測量信息、成像信息和照明信息。在文件頭部中，存儲關(guān)于 整個文件結(jié)構(gòu)的信息，例如圖像數(shù)據(jù)的字節(jié)順序。在預(yù)測量信息中，存儲載物片206的標簽 信息和通過預(yù)測量獲取的信息，例如載物片大小。在成像信息中，存儲關(guān)于成像的信息，例 如透鏡倍率、成像時間以及成像元件的像素大小。在照明信息中，存儲關(guān)于照明的信息，例 如光源類型。圖像數(shù)據(jù)包括圖像數(shù)據(jù)頭部和層次圖像數(shù)據(jù)。在圖像數(shù)據(jù)頭部中，存儲關(guān)于 圖像數(shù)據(jù)的結(jié)構(gòu)的信息，例如層的數(shù)目。在層次圖像數(shù)據(jù)中，存儲高倍率圖像數(shù)據(jù)、中倍率 圖像數(shù)據(jù)、低倍率圖像數(shù)據(jù)和載物片圖像數(shù)據(jù)。作為層次圖像數(shù)據(jù)存儲的圖像數(shù)據(jù)相當于 圖5所示的層次圖像數(shù)據(jù)。高倍率圖像數(shù)據(jù)、中倍率圖像數(shù)據(jù)和低倍率圖像數(shù)據(jù)分別是第 四層圖像504、第三層圖像503和第二層圖像502。載物片圖像數(shù)據(jù)相當于第一層圖像501 的數(shù)據(jù)。附加數(shù)據(jù)包括附加數(shù)據(jù)頭部和注釋信息。在附加數(shù)據(jù)頭部中，存儲關(guān)于附加數(shù)據(jù) 的結(jié)構(gòu)的信息，例如附加數(shù)據(jù)的類型。在注釋信息中，存儲寫入位置、類型、到注釋的寫入內(nèi) 容的指針。對于所有成像的載物片生成圖19A所示的圖像數(shù)據(jù)的基本文件格式。
[0176] 圖19B示出了當在載物片206中包括多個個體標本時靜態(tài)生成的數(shù)據(jù)的文件格 式。該文件格式是作為載物片圖像數(shù)據(jù)的一部分生成的。對于每個個體標本存儲外接矩形 區(qū)域的數(shù)據(jù)大小、外接矩形區(qū)域的開始地址（X，Y)以及外接矩形區(qū)域的像素大?。╔，Y)。當 放大圖像的倍率(顯示區(qū)域框）或者標本觀察(篩查）序列被改變時，可利用圖19B所示的信 息生成放大圖像701的圖像數(shù)據(jù)。
[0177] 圖19C示出了當設(shè)定放大圖像的倍率和標本觀察(篩查）序列時動態(tài)生成的數(shù)據(jù) 的文件格式。在顯示區(qū)域大?。╔，Y)中，存儲基于放大圖像的倍率計算出的顯示區(qū)域在載 物片圖像上的大?。╔方向上的寬度和Υ方向上的高度)，也就是顯示區(qū)域框的寬度和高度。 對于各個個體標本，計算顯示區(qū)域的數(shù)目和各個顯示區(qū)域的開始地址（X，Υ)并將其存儲在 顯示區(qū)域大小（Χ，Υ)中。開始地址（Χ，Υ)是載物片圖像上的顯示區(qū)域框的左上的像素的坐 標。圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)相當于用于定義標本觀察(篩查）序列和再配置 的標本布置的數(shù)據(jù)，也就是再配置載物片的數(shù)據(jù)。基于顯示區(qū)域大?。╔，Υ)和顯示區(qū)域的 開始地址（X，Υ)來動態(tài)讀取并生成標本觀察(篩查）中顯示的放大圖像。
[0178] 當執(zhí)行參考圖15Α說明的個體標本的拉近、參考圖18Β說明的個體標本的分離等 等時，從層次圖像數(shù)據(jù)讀取的圖像數(shù)據(jù)不能被直接用作放大圖像，并且諸如圖像的組合或 圖像的一部分的擦除之類的圖像處理是必要的。因此，希望在圖19C所示的(動態(tài)）載物片 圖像數(shù)據(jù)中描述指示其中執(zhí)行個體標本的拉近或分離的顯示區(qū)域的信息。當顯示在標本觀 察(篩查）中執(zhí)行個體標本的拉近或分離的部分的放大圖像時，可執(zhí)行諸如圖像的組合或圖 像的一部分的擦除之類的圖像處理。然而，從顯示速度(響應(yīng)性)的改善的角度來看，希望預(yù) 先生成經(jīng)處理的放大圖像數(shù)據(jù)。例如，當生成(動態(tài))載物片圖像數(shù)據(jù)時，與執(zhí)行個體標本的 拉近或分離的顯示區(qū)域相對應(yīng)的放大圖像的數(shù)據(jù)被生成并存儲在存儲器或存儲設(shè)備中。在 (動態(tài)）載物片圖像數(shù)據(jù)的顯示區(qū)域的開始地址（Χ，γ)中，只需要描述用于指定所生成的放 大圖像的數(shù)據(jù)的信息(存儲目的地的地址、文件名等)，而不是載物片圖像上的坐標。
[0179] (標本觀察(篩查）中的應(yīng)用操作示例）
[0180] 參考圖7Α和7Β來說明標本觀察(篩查)中的用戶操作和圖像呈現(xiàn)應(yīng)用的操作。假 定圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)已經(jīng)由標本布置調(diào)整部409生成。
[0181] 當標本觀察(篩查）開始時，控制部301從圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)獲 取顯示區(qū)域大小（X，Υ)和個體標本"1"的第一顯示區(qū)域的開始地址（X，Υ)?？刂撇?01從 與顯示倍率相對應(yīng)的層次圖像數(shù)據(jù)中讀取與由顯示區(qū)域大小（X，Υ)和開始地址（X，Υ)確定 的區(qū)域相對應(yīng)的圖像數(shù)據(jù)，生成放大圖像701，并將放大圖像701顯示在顯示裝置103上。 控制部301把指示當前顯示區(qū)域的粗框706與從層次圖像數(shù)據(jù)讀取的載物片圖像數(shù)據(jù)相組 合，并顯示載物片圖像702。
[0182] 用戶觀察放大圖像701并且檢查是否發(fā)生異常等。當用戶發(fā)現(xiàn)有可能發(fā)生異常的 部分(關(guān)心區(qū)域）時，用戶利用鼠標312或鍵盤311記錄關(guān)心區(qū)域的位置并且根據(jù)需要輸入 注釋(評論)。當對正被顯示的放大圖像701的觀察完成時，用戶命令改變到下一顯示區(qū)域 (命令移動到下一顯示區(qū)域)。顯示區(qū)域的改變可通過按壓鍵盤311的鍵、按壓鼠標312的 按鈕或旋轉(zhuǎn)鼠標312的滾輪、操作屏幕上顯示的GUI等等來命令。作為一種簡單的方法，可 設(shè)想用于每次在同一鍵或按鈕(例如"下一個"按鈕或輸入鍵）被按壓時將顯示區(qū)域按順序 轉(zhuǎn)變到下一顯示區(qū)域的用戶界面。
[0183] 當命令顯示區(qū)域的改變時，控制部301從圖19C所示的(動態(tài)）載物片圖像數(shù)據(jù)中 獲取下一顯示區(qū)域的開始地址（X，Y)，并且將與該開始地址相對應(yīng)的放大圖像701顯示在 顯示裝置103上。控制部301更新載物片圖像702中的粗框706的顯示位置。當顯示區(qū)域 被改變時，前一放大圖像和下一放大圖像的顯示可被切換，或者前一放大圖像可被逐漸滾 動到下一放大圖像。
[0184] 圖7A和7B示出了重復(fù)放大圖像的觀察和顯示區(qū)域的改變并且到個體標本"1"的 最末顯示區(qū)域的觀察完成的狀態(tài)。當用戶在此狀態(tài)中命令顯示區(qū)域的改變時，控制部301 將顯示區(qū)域移動到下一個體標本"2"的第一顯示區(qū)域。也就是說，控制部301從圖19C所 示的(動態(tài)）載物片圖像數(shù)據(jù)中獲取個體標本"2"的第一顯示區(qū)域的開始地址（X，Y)，并將 與該開始地址相對應(yīng)的放大圖像701顯示在顯示裝置103上?？刂撇?01更新載物片圖像 702中的粗框706的顯示位置。
[0185] 根據(jù)以上說明的方法，執(zhí)行放大圖像的更新以使得顯示區(qū)域響應(yīng)于用戶的移動指 令根據(jù)再配置載物片上的預(yù)定序列移動。因此，用戶可以按順序觀察個體標本"1"至"9" 并且沒有遺漏地觀察個體標本的所有放大圖像。當用戶在觀察某個個體標本的最末放大 圖像的狀態(tài)中命令顯示區(qū)域的改變時，顯示區(qū)域自動地移動到下一個體標本的第一放大圖 像。因此，操作簡單，并且可以防止由于操作錯誤引起的忽視的發(fā)生。結(jié)果，可以大幅減輕 用戶的操作負擔。另外，切換顯示區(qū)域以使得可以在盡可能少的次數(shù)中觀察個體標本的僅 一部分。因此，可以執(zhí)行極高效的標本觀察(篩查)。
[0186] 圖20A和20B是用于說明由標本布置的再配置導(dǎo)致的效果的示意圖。圖20A所示 的箭頭指示傳統(tǒng)示例中的個體標本之間的移動2001。當根據(jù)參考圖9A至9E說明的標本觀 察(篩查）序列執(zhí)行標本觀察(篩查）時，有必要暫停標本觀察(篩查）序列并將顯示區(qū)域以大 的距離從個體標本"1"移動到個體標本"2"。當用戶需要執(zhí)行此移動時，移動的操作是麻煩 的并且有可能引起操作錯誤。另一方面，圖20B所示的箭頭指示此實施例中的個體標本之 間的移動2002?？梢陨踔猎诓环恋K標本觀察(篩查）序列的情況下在個體標本之間移動顯 示區(qū)域。也就是說，根據(jù)此實施例中的個體標本的再配置(布置的調(diào)整)，當在載物片上有多 個標本時，可以減輕標本觀察(篩查）的負擔。
[0187] 在此實施例中，使用圖19A至19C所示的圖像文件格式。因此，不必生成經(jīng)歷標本 布置的調(diào)整(再配置）的圖像數(shù)據(jù)。只需要控制放大圖像的數(shù)據(jù)的讀取位置。結(jié)果，可以實 現(xiàn)處理負擔的減輕和存儲容量的減小。
[0188] (呈現(xiàn)圖像的第二示例）
[0189] 圖21A和21B是用于說明呈現(xiàn)圖像的第二示例的示意圖。
[0190] 圖21A示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了菜單窗 口以外還包括用于顯示放大圖像701、載物片圖像702和個體標本重布置圖像2101的三個 窗口。與圖7A相比，添加了用于個體標本重布置圖像2101的窗口。
[0191] 圖21B是示出顯示個體標本重布置圖像2101的窗口的圖。個體標本重布置圖像 2101是排列了多個個體標本的圖像。在圖21B所示的示例中，九個個體標本被排列成三行 三列(在行方向和列方向兩者上)。然而，可在行方向和列方向中的一者上排列個體標本。在 此情況下，希望根據(jù)個體標本的觀察順序來按順序布置多個個體標本。個體標本重布置圖 像2101由標本布置調(diào)整部409生成并存儲為圖19A所示的載物片圖像數(shù)據(jù)的一部分。由 于個體標本的未對齊和顯示區(qū)域框的交疊不發(fā)生，所以與圖7B相比，為用戶清楚顯示了個 體標本之間的位置關(guān)系。
[0192] 作為呈現(xiàn)形式，還可以不顯示用于載物片圖像702的窗口，并且除了菜單窗口以 夕卜，還有用于顯示放大圖像701和個體標本重布置圖像2101的兩個窗口。
[0193] (呈現(xiàn)圖像的第三示例）
[0194] 圖22A和22B是用于說明呈現(xiàn)圖像的第二不例的不意圖。
[0195] 圖22A示出了顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面除了菜單窗口 以外還包括用于顯示放大圖像701、載物片圖像702和再配置載物片的整體圖像2201的三 個窗口。與圖7A相比，添加了用于再配置載物片的整體圖像2201的窗口。
[0196] 圖22B是示出顯示再配置載物片的整體圖像2201的窗口的圖。再配置載物片的 整體圖像2201是示出以上說明的再配置載物片中的個體標本的整個布置(調(diào)整后的標本 布置）的圖像。再配置載物片的整體圖像2201由標本布置調(diào)整部409生成并存儲為圖19A 所示的載物片圖像數(shù)據(jù)的一部分。放大圖像701和再配置載物片的整體圖像2201處于放 大和縮小的簡單關(guān)系。因此，與圖7B相比，為用戶清楚顯示了放大圖像和整體圖像中的觀 察區(qū)域之間的對應(yīng)關(guān)系。
[0197] 作為呈現(xiàn)形式，也可以不顯示用于載物片圖像702的窗口，并且除了菜單窗口以 夕卜，還有用于顯示放大圖像701和再配置載物片的整體圖像2201的兩個窗口。在再配置載 物片的整體圖像2201中可以示出用于清楚指示觀察的順序(序列）的信息(例如指示順序 的編號或箭頭)。另外，可以提供使得用戶能夠手動改變觀察的順序(序列)、顯示區(qū)域框的 位置、大小和分割方法、個體標本之間的連接等等的功能。例如，希望用戶能夠用鼠標312 拖動并改變再配置載物片的整體圖像2201中顯示的顯示區(qū)域框、觀察的順序、個體標本等 等。
[0198] 〈第二實施例〉
[0199] (第二實施例的概要）
[0200] 在第一實施例中，說明了標本觀察(篩查)。另一方面，在第二實施例中，說明顯示 控制模式和顯示控制模式中的顯示處理。顯示控制模式包括多個模式，即"通常模式"、"觀 察模式"和"檢查模式"。第一實施例中說明的標本觀察(篩查）對應(yīng)于觀察模式。因此，第 一實施例中的內(nèi)容和內(nèi)容的效果也可應(yīng)用到第二實施例。此實施例包括第一實施例，并且 特征在于用于載物片上存在的多個標本的顯示控制模式中的顯示方法，特別是放大圖像的 呈現(xiàn)方法。
[0201] 本發(fā)明的圖像處理裝置可用在包括成像裝置和顯示裝置的圖像處理系統(tǒng)中。圖像 處理系統(tǒng)的配置、圖像處理系統(tǒng)中的成像裝置的功能塊、圖像處理裝置的硬件配置、層次圖 像數(shù)據(jù)的結(jié)構(gòu)、載物片的配置和關(guān)于標本觀察(篩查）的處理與第一實施例中說明的內(nèi)容相 同。因此，省略對它們的說明。
[0202] (顯示控制模式的設(shè)定）
[0203] 圖23是用于說明顯示控制模式(通常模式、觀察模式和檢查模式）的設(shè)定的示意 圖。圖23示出了在顯示裝置103的屏幕上顯示的應(yīng)用畫面。該應(yīng)用畫面包括菜單窗口 2301、用于顯示放大圖像701的窗口和用于顯示載物片圖像702的窗口?；九渲门c參考 圖7A和7B說明的基本配置相同。因此，只說明與參考圖7A和7B說明的呈現(xiàn)圖像的差別。 包括顯示控制模式菜單的各種菜單被顯示在菜單窗口 2301上。顯示控制模式包括三種控 制模式，即觀察模式、檢查模式和通常模式。在圖23所示的示例中，可通過單選按鈕來選擇 顯示控制模式。
[0204] 下面參考圖26A至26E和圖27A至27D來說明各個顯示控制模式中的顯示處理和 顯示處理流程。因此，首先，說明各個顯示控制模式的概要。
[0205] 觀察模式是適合于為了篩查載物片上的整個標本并發(fā)現(xiàn)病變的目的而執(zhí)行的標 本觀察(篩查）的模式。
[0206] 檢查模式是適合于對Ρ0Ι (關(guān)心點）信息和R0I (關(guān)心區(qū)域）信息進行雙重檢查的 模式。Ρ0Ι和R0I是獲得對于診斷有用的信息的點和區(qū)域以及希望再次詳細觀察的點和區(qū) 域。例如，Ρ0Ι和R0I是在觀察模式中由用戶在標本觀察(篩查）中設(shè)定的點和區(qū)域。這些 點和區(qū)域被唯一地定義為圖像數(shù)據(jù)的坐標。Ρ0Ι信息和R0I信息除了包括指示Ρ0Ι和R0I 的坐標以外，還包括例如用于把對Ρ0Ι和R0I中的診斷有用的信息記錄為文本的注釋。檢 查模式用在例如當在標本觀察(篩查)之后希望再次詳細觀察Ρ0Ι和R0I時和當出于教學目 的向?qū)W習者迅速指示標本中對于診斷有用的區(qū)域時。
[0207] 通常模式是執(zhí)行一般圖像顯示的模式。觀察模式和檢查模式是對于各個模式的目 的而言最優(yōu)的顯示方法。然而，觀察模式和檢查模式不直接將用戶的輸入操作反映在顯示 上。通常模式用于獨立于諸如標本觀察(篩查)和P0I/R0I信息的雙重檢查之類的有限目的 自由地執(zhí)行標本觀察。
[0208] 除了顯示控制菜單以外的菜單包括例如用于在標本觀察(篩查）期間設(shè)定放大圖 像701的倍率的菜單。圖23所示的顯示控制模式的設(shè)定方法是示例，可以使用任何方法。 例如，可利用快捷鍵來設(shè)定顯示控制模式。
[0209] (控制部的功能塊配置）
[0210] 圖24是圖像處理裝置的圖像生成和控制部的功能框圖?；九渲门c參考圖4說 明的基本配置相同。因此，只說明與圖4的功能框圖的差別。顯示控制模式處理部2401執(zhí) 行用于獲取顯示控制模式的更新信息和用戶的個體標本選擇操作并在設(shè)定的顯示控制模 式中生成放大圖像數(shù)據(jù)的控制處理。顯示控制模式處理部2401的操作對于每種顯示控制 模式是不同的。下面參考圖27A至27D來說明各個顯示控制模式中的顯示處理流程。
[0211] (顯示控制模式的設(shè)定流程）
[0212] 圖25是用于說明顯示控制模式的設(shè)定的流程圖。
[0213] 在步驟S2501中，顯示控制模式處理部2401確定是否執(zhí)行顯示控制模式的更新。 具體而言，顯示控制模式處理部2401監(jiān)視顯示控制模式菜單2302是否被改變。如果更新 顯示控制模式，則處理前進到步驟S2502。在步驟S2502中，顯示控制模式處理部2401執(zhí)行 顯示控制模式的設(shè)定(切換到用戶選擇的顯示控制模式)。顯示控制模式的設(shè)定被顯示控制 模式處理部2401保持。顯示數(shù)據(jù)生成控制部404控制與設(shè)定的顯示控制模式匹配的顯示 處理。
[0214] (顯示控制模式中的顯示處理）
[0215] 圖26A至26E是用于說明各顯示控制模式中的顯示處理的示意圖。
[0216] 圖26A是詳細示出顯示載物片圖像702的窗口的圖。基本配置與參考圖7B說明 的基本配置相同。因此，只說明與參考圖7B說明的呈現(xiàn)圖像的差別。用戶可利用指針2601 選擇載物片圖像702上的個體標本。圖26A示出了選擇個體標本"2"的示例。
[0217] 圖26B是圖26A所示的個體標本"2"的放大視圖?；九渲门c參考圖9A說明的基 本配置相同。因此，只說明與圖9A的示意圖的差別。指針2601指向用戶指定的個體標本 "2"上的任意一個點。關(guān)心區(qū)域2602是相當于Ρ0Ι的區(qū)域，并且例如是被設(shè)定為如下點的 點：在該點處用戶可在觀察模式中獲得對于診斷有用的信息。關(guān)心區(qū)域2602是Ρ0Ι (點）。 然而，當在一定范圍上定義關(guān)心區(qū)域時（關(guān)心區(qū)域具有面積而不是一點時)，關(guān)心區(qū)域2602 是R0I (區(qū)域)。在以下說明中，Ρ0Ι和R0I被統(tǒng)稱為關(guān)心區(qū)域(或關(guān)注區(qū)域)。
[0218] 圖26C至26E是用于說明在顯示控制模式中顯示的放大圖像的示意圖。在通過指 針2601選擇個體標本之后在顯示裝置103上顯示為放大圖像的圖像在各顯示控制模式中 是不同的。圖26C示出了觀察模式中的放大圖像2603。圖26D示出了檢查模式中的放大圖 像2604。圖26E示出了通常模式中的放大圖像2605。
[0219] 圖26C示出了觀察模式中的放大圖像2603。在觀察模式中，當用戶在圖26A所示 的載物片圖像702上選擇個體標本"2"時，在圖26C所示的放大圖像2603中顯示個體標本 801的觀察開始位置901。在第一實施例中的標本觀察(篩查）序列中，說明了從個體標本 " 1"起按順序觀察標本的序列。在第二實施例中，擴展了第一實施例中的標本觀察(篩查） 序列。也就是說，如果使用第二實施例中的此功能，則更靈活的標本觀察(篩查）是可能的。 例如，當在標本觀察（篩查）的途中通過指針2601選擇已經(jīng)完成觀察的個體標本時，可以再 次觀察該個體標本。在完成了載物片上的所有個體標本的標本觀察(篩查）之后，也可以再 次選擇關(guān)注的個體標本并且從該個體標本起再繼續(xù)標本觀察(篩查)。
[0220] 圖26D示出了檢查模式中的放大圖像2604。在檢查模式中，當用戶選擇圖26A所 示的載物片圖像702上的個體標本"2"時，在圖26D所示的放大圖像2604中顯示個體標本 801的以關(guān)心區(qū)域2602為中心的放大圖像。當有多個關(guān)心區(qū)域時，通過在設(shè)定關(guān)心區(qū)域時 同時設(shè)定優(yōu)先級，執(zhí)行從具有最高優(yōu)先級的關(guān)心區(qū)域起按順序顯示關(guān)心區(qū)域的控制。當在 一定范圍上定義關(guān)心區(qū)域時(關(guān)心區(qū)域具有面積而不是一點時)，執(zhí)行以使得能夠顯示整個 關(guān)心區(qū)域的倍率來顯示關(guān)心區(qū)域的控制。在該情況下，只需要將關(guān)心區(qū)域的最小外接矩形 的中心認為是關(guān)心區(qū)域的中心。
[0221] 圖26E示出了通常模式中的放大圖像2605。示出了以圖26B所示的指針2601指 向的點為中心的放大圖像。當希望在顯示上直接反映用戶的輸入操作時，通常模式中的顯 示處理是有用的。
[0222] (顯示控制模式中的顯示處理流程）
[0223] 圖27A是用于說明顯示控制模式的設(shè)定和顯示控制模式的顯示處理的流程圖。
[0224] 在步驟S2701中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定在觀察 模式中。如果顯示控制模式被設(shè)定在觀察模式中，則處理前進到步驟S2702。如果顯示控制 模式未被設(shè)定到觀察模式，則處理前進到步驟S2703。在步驟S2702中，顯示控制模式處理 部2401執(zhí)行觀察模式中的顯示處理。觀察模式中的顯示處理的細節(jié)在下文參考圖27B來 說明。
[0225] 在步驟S2703中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定到檢查 模式。如果顯示控制模式被設(shè)定在檢查模式中，則處理前進到步驟S2704。如果顯示控制模 式未被設(shè)定在檢查模式中，則處理前進到步驟S2705。在步驟S2704中，顯示控制模式處理 部2401執(zhí)行檢查模式中的顯示處理。檢查模式中的顯示處理的細節(jié)在下文參考圖27C來 說明。
[0226] 在步驟S2705中，顯示控制模式處理部2401確定顯示控制模式是否被設(shè)定在通常 模式中。如果顯示控制模式被設(shè)定在通常模式中，則處理前進到步驟S2706中。如果顯示控 制模式未被設(shè)定在通常模式中，則顯示控制模式處理部2401結(jié)束處理。在步驟S2706中， 顯示控制模式處理部2401執(zhí)行通常模式中的顯示處理。通常模式中的顯示處理的細節(jié)在 下文參考圖27D來說明。
[0227] 圖27B是用于說明觀察模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2702。在步驟S2707中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的坐 標。在圖26B所示的示例中，用戶利用指針2601指向個體標本801 (個體標本"2"）中的 一點。然而，在步驟S2707中，獲取指向的點的坐標。在步驟S2708中，顯示控制模式處理 部2401識別指向的個體標本的編號。具體而言，顯示控制模式處理部2401參照參考圖19C 說明的圖像文件格式來識別具有在步驟S2707中獲取的點坐標的個體標本的編號。在步驟 S2709中，顯示數(shù)據(jù)生成控制部404執(zhí)行在步驟S2708中識別的個體標本中的觀察開始位置 中的圖像數(shù)據(jù)生成的控制。觀察開始位置中的圖像數(shù)據(jù)的坐標范圍可從參考圖19C說明的 圖像文件格式獲取。根據(jù)處理步驟S2707至S2709,可以執(zhí)行觀察模式中的顯示處理。
[0228] 圖27C是用于說明檢查模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2704。在步驟S2710中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的 坐標。這個步驟S2710是與步驟S2707相同的處理。在步驟S2711中，顯示控制模式處理 部2401識別指向的個體標本的編號。這個步驟S2711是與步驟S2708相同的處理。在步 驟S2712中，顯示控制模式處理部2401確定在指向的個體標本中是否存在關(guān)心區(qū)域。如果 存在關(guān)心區(qū)域，則處理前進到步驟S2713。如果不存在關(guān)心區(qū)域，則處理前進到步驟S2714。 在步驟S2713中，顯示控制模式處理部2401獲取關(guān)心區(qū)域的坐標。當有多個關(guān)心區(qū)域時， 顯示控制模式處理部2401獲取具有最高優(yōu)先級的關(guān)心區(qū)域的坐標。在步驟S2714中，顯示 控制模式處理部2401設(shè)定放大圖像的顯示區(qū)域。顯示控制模式處理部2401把放大圖像的 顯示區(qū)域的中心設(shè)定為關(guān)心區(qū)域的坐標，并且基于所設(shè)定的放大圖像的倍率來計算顯示區(qū) 域。當在一定范圍上定義關(guān)心區(qū)域時(關(guān)心區(qū)域具有面積而不是一點時)，顯示控制模式處 理部2401以使得能夠示出整個關(guān)心區(qū)域的倍率設(shè)定顯示區(qū)域。在該情況下，關(guān)心區(qū)域的最 小外接矩形的中心被認為是關(guān)心區(qū)域的中心。當在步驟S2712中確定不存在關(guān)心區(qū)域時， 顯示控制模式處理部2401將放大圖像的顯示區(qū)域的中心設(shè)定為點坐標，并且基于設(shè)定的 放大圖像的倍率來計算顯示區(qū)域。在步驟S2715中，顯示數(shù)據(jù)生成控制部404執(zhí)行對步驟 S2713中設(shè)定的顯示區(qū)域的圖像數(shù)據(jù)生成控制。根據(jù)步驟S2710至S2715的處理，可以執(zhí)行 檢查模式中的顯示處理。
[0229] 圖27D是用于說明通常模式中的顯示處理的流程圖并且對應(yīng)于圖27A中的步驟 S2706。在步驟S2716中，顯示控制模式處理部2401獲取用戶利用指針2601選擇的點的坐 標。這個步驟S2716是與步驟S2707相同的處理。在步驟S2717中，顯示控制模式處理部 2401設(shè)定放大圖像的顯示區(qū)域。顯示控制模式處理部2401將放大圖像的顯示區(qū)域的中心 設(shè)定為點坐標，并且基于設(shè)定的放大圖像的倍率來計算顯示區(qū)域。在步驟S2718中，顯示數(shù) 據(jù)生成控制部404執(zhí)行對步驟S2717中設(shè)定的顯示區(qū)域的圖像數(shù)據(jù)生成控制。根據(jù)步驟 S2716至S2718的處理，可以執(zhí)行通常模式中的顯示處理。
[0230] 在第二實施例中的說明中，假定用戶的個體標本選擇操作和用戶的放大指令操作 是同一操作。然而，個體標本選擇操作和放大指令操作不總是需要是同一操作。例如，在 通常模式中，當用戶執(zhí)行個體標本選擇操作時，可以顯示所選個體標本的整體圖像(縮小圖 像)?；蛘撸谕ǔＤＪ街?，即使執(zhí)行個體標本選擇操作也未更新放大圖像時，可以刪除圖 27A中的步驟S2705和S2706。
[0231] 在第二實施例中，說明了指向載物片圖像上的任意點(任何一個個體標本上的點） 以選擇要放大顯示的個體標本的方法。然而，也可以利用其他用戶界面來選擇個體標本。例 如，在圖22A和22B所示的再配置載物片的整體圖像上，也可以使用戶選擇要放大顯示的個 體標本?；蛘撸部梢允褂脩糁付?輸入）個體標本的編號，而不是在圖像上選擇個體標本。 在兩種用戶界面中，在觀察模式中，希望以與個體標本的觀察開始位置相對應(yīng)的部分為中 心來放大顯示所選個體標本。在檢查模式中，希望以個體標本的關(guān)心區(qū)域為中心來放大顯 示所選個體標本。在通常模式中，希望以用戶指向的坐標為中心來放大顯示所選個體標本。
[0232] (第二實施例的特征）
[0233] 說明此實施例的特征。此實施例具有根據(jù)顯示控制模式改變放大處理的中心位置 的特征。在觀察模式中，標本觀察(篩查）的觀察開始位置中的圖像的中心是放大處理的中 心位置。在檢查模式中，標本觀察(篩查）等中記錄的關(guān)心區(qū)域是放大處理的中心位置。當 關(guān)心區(qū)域是Ρ0Ι (點)時，Ρ0Ι的坐標是關(guān)心區(qū)域的中心位置。當關(guān)心區(qū)域是R0I (具有面積 的區(qū)域)時，R0I的最小外接矩形的中心坐標是關(guān)心區(qū)域的中心位置。第二實施例的特征在 于放大處理的中心位置是根據(jù)顯示控制模式來確定的，而不管用戶指定的位置（點坐標)。
[0234] (第二實施例的效果）
[0235] 根據(jù)第二實施例中的處理，可以根據(jù)諸如標本觀察(篩查）或標本觀察(篩查）的雙 重檢查之類的目的迅速地顯示用戶想要觀察的區(qū)域。結(jié)果，可以預(yù)期減輕標本觀察(篩查） 的負擔的效果，尤其是當載物片上有多個標本時。
[0236] 在第二實施例中，根據(jù)顯示控制模式來改變放大處理的中心位置。然而，可根據(jù)其 他方法來改變放大處理的中心位置。例如，當在所選的個體標本中沒有設(shè)定關(guān)心區(qū)域時，可 以以該個體標本的觀察開始位置或點坐標為中心來放大顯示該個體標本。當設(shè)定了關(guān)心區(qū) 域時，可以以關(guān)心區(qū)域為中心來放大顯示該個體標本?；蛘?，可根據(jù)選擇個體標本時的操作 來改變放大處理的中心位置。例如，可根據(jù)單點擊(單叩擊）和雙點擊(雙叩擊）來改變中心 位置，或者可根據(jù)右鍵點擊和左鍵點擊來改變中心位置。還優(yōu)選的是，在用戶在按壓諸如控 制鍵之類的預(yù)定鍵的同時指向一坐標時以及當用戶在不按壓預(yù)定鍵的情況下指向一坐標 時改變中心位置。
[0237] 本發(fā)明的實施例也可由讀出并執(zhí)行存儲介質(zhì)(例如非暫態(tài)計算機可讀存儲介質(zhì)） 上記錄的計算機可執(zhí)行指令以執(zhí)行本發(fā)明的上述(一個或多個）實施例中的一個或多個的 功能的系統(tǒng)或裝置的計算機實現(xiàn)，以及通過系統(tǒng)或裝置的計算機例如從存儲介質(zhì)讀出并執(zhí) 行計算機可執(zhí)行指令以執(zhí)行上述(一個或多個）實施例中的一個或多個的功能而執(zhí)行的方 法來實現(xiàn)。計算機可包括中央處理單元（CPU)、微處理單元（MPU)或其他電路系統(tǒng)中的一個 或多個，并且可包括分離的計算機或分離的計算機處理器的網(wǎng)絡(luò)。計算機可執(zhí)行指令可例 如從網(wǎng)絡(luò)或存儲介質(zhì)被提供給計算機。存儲介質(zhì)可包括例如硬盤、隨機訪問存儲器（RAM)、 只讀存儲器（ROM)、分布式計算系統(tǒng)的存儲裝置、光盤(例如致密盤（CD)、數(shù)字多功能盤 (DVD)或藍光盤（BD) TM)、閃存存儲器設(shè)備、存儲卡等等中的一個或多個。
[0238] 雖然已參考示范性實施例描述了本發(fā)明，但要理解本發(fā)明不限于所公開的示范性 實施例。所附權(quán)利要求的范圍應(yīng)遵循最寬泛的解釋以便包含所有這樣的修改以及等同結(jié)構(gòu) 和功能。
【權(quán)利要求】
1. 一種圖像處理裝置，包括： 調(diào)整部，被配置為當在載物片中包括多個觀察對象時，從所述載物片的圖像中檢測所 述觀察對象的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整 的再配置載物片圖像的數(shù)據(jù)；以及 顯示控制部，被配置為在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部 分相對應(yīng)的放大圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù) 移動指令在所述再配置載物片圖像上移動。
2. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的彼此相鄰的一對觀察對象在所述再配置載物片圖像上的布置，以使得所述再配置載 物片圖像上的這兩個觀察對象之間的距離與實際載物片上的這兩個觀察對象之間的距離 相比更短。
3. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述多個觀察對象的布置，以使得所述多個觀察對象根據(jù)給定的觀察順序按順序布 置。
4. 根據(jù)權(quán)利要求3所述的圖像處理裝置，其中，對于在觀察順序上彼此相鄰的第一觀 察對象和第二觀察對象，所述調(diào)整部確定所述再配置載物片圖像上的所述第一觀察對象和 所述第二觀察對象的布置，以使得根據(jù)顯示區(qū)域的移動，所述第一觀察對象的放大圖像被 直接切換到所述第二觀察對象的放大圖像。
5. 根據(jù)權(quán)利要求4所述的圖像處理裝置，其中 其顯示順序被設(shè)定的多個放大圖像與所述觀察對象中的每一個相關(guān)聯(lián)，并且 所述調(diào)整部確定所述再配置載物片圖像上的所述第一觀察對象和所述第二觀察對象 的布置，以使得所述第一觀察對象的多個放大圖像之中具有最末顯示順序的放大圖像和所 述第二觀察對象的多個放大圖像之中具有第一顯示順序的放大圖像被接合。
6. 根據(jù)權(quán)利要求5所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述第一觀察對象和所述第二觀察對象的布置，以使得所述第一觀察對象的多個放 大圖像之中具有最末顯示順序的放大圖像和所述第二觀察對象的多個放大圖像之中具有 第一顯示順序的放大圖像是共同圖像。
7. 根據(jù)權(quán)利要求5所述的圖像處理裝置，其中，所述調(diào)整部確定所述再配置載物片圖 像上的所述第一觀察對象和其他觀察對象的布置，以使得所述其他觀察對象不被包括在所 述第一觀察對象的放大圖像中。
8. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述調(diào)整部平移所述觀察對象的圖像 的區(qū)域或者平移并旋轉(zhuǎn)所述區(qū)域，從而調(diào)整所述再配置載物片圖像上的觀察對象的布置。
9. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，所述再配置載物片圖像的數(shù)據(jù)是定義 所述再配置載物片圖像中的觀察對象的圖像的位置與實際載物片中的觀察對象的圖像的 位置之間的對應(yīng)關(guān)系的數(shù)據(jù)。
10. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中 所述調(diào)整部生成所述多個觀察對象被排列在行方向、列方向或者這兩個方向上的觀察 對象再布置圖像，并且 所述顯示控制部將所述觀察對象再布置圖像與所述放大圖像一起顯示在所述顯示裝 置上。
11. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中 所述調(diào)整部生成表示整個再配置載物片圖像的圖像，并且 所述顯示控制部將表示整個再配置載物片圖像的圖像與所述放大圖像一起顯示在所 述顯示裝置上。
12. 根據(jù)權(quán)利要求1所述的圖像處理裝置，其中，當被命令選擇所述多個觀察對象之中 的一個觀察對象時，所述顯示控制部移動顯示區(qū)域以使得所選擇的觀察對象被放大顯示。
13. 根據(jù)權(quán)利要求12所述的圖像處理裝置，其中，當對于所選擇的觀察對象設(shè)定了關(guān) 心區(qū)域時，所述顯示控制部移動顯示區(qū)域以使得以對于所選擇的觀察對象設(shè)定的關(guān)心區(qū)域 為中心的區(qū)域被放大顯示。
14. 一種圖像處理裝置，包括： 獲取部，被配置為獲取顯示區(qū)域的移動指令；以及 顯示控制部，被配置為根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中 當載物片中包括多個觀察對象時，所述顯示控制部移動顯示區(qū)域以使得某個觀察對象 的放大圖像被直接切換到另一觀察對象的放大圖像。
15. 根據(jù)權(quán)利要求14所述的圖像處理裝置，其中 向所述多個觀察對象賦予觀察順序，并且 所述顯示控制部移動顯示區(qū)域以使得所述觀察對象的放大圖像根據(jù)所述觀察順序按 順序被切換。
16. -種圖像處理裝置，用于支持將包括多個觀察對象的載物片的區(qū)域的一部分放大 顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察所述多個觀察對象的操作，所述圖像處 理裝置包括： 獲取部，被配置為獲取顯示區(qū)域的移動指令；以及 顯示控制部，被配置為根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放 大圖像，其中 對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且 當被命令選擇所述多個觀察對象之中的一個觀察對象時，所述顯示控制部移動顯示區(qū) 域以使得以所選擇的觀察對象的觀察開始位置為中心的區(qū)域被放大顯示。
17. -種圖像處理方法，包括以下步驟： 當在載物片中包括多個觀察對象時，計算機從所述載物片的圖像中檢測所述觀察對象 的圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整的再配置載 物片圖像的數(shù)據(jù)；以及 所述計算機在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng) 的放大圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù)移動指令 在所述再配置載物片圖像上移動。
18. -種圖像處理方法，包括以下步驟： 計算機獲取顯示區(qū)域的移動指令；以及 所述計算機根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中 當載物片中包括多個觀察對象時，所述計算機移動顯示區(qū)域以使得某個觀察對象的放 大圖像被直接切換到另一觀察對象的放大圖像。
19. 一種圖像處理方法，用于利用計算機支持將包括多個觀察對象的載物片的區(qū)域的 一部分放大顯示并且移動放大顯示的顯示區(qū)域從而按順序觀察所述多個觀察對象的操作， 所述圖像處理方法包括以下步驟： 所述計算機獲取顯示區(qū)域的移動指令；以及 所述計算機根據(jù)所述移動指令改變顯示區(qū)域的位置和顯示裝置上顯示的放大圖像，其 中 對于每個觀察對象設(shè)定要首先開始觀察的觀察開始位置，并且 當被命令選擇所述多個觀察對象之中的一個觀察對象時，所述計算機移動顯示區(qū)域以 使得以所選擇的觀察對象的觀察開始位置為中心的區(qū)域被放大顯示。
20. -種圖像處理裝置，包括： 用于當在載物片中包括多個觀察對象時，從所述載物片的圖像中檢測所述觀察對象的 圖像的區(qū)域并且連續(xù)地布置這些區(qū)域，從而生成所述觀察對象的布置被調(diào)整的再配置載物 片圖像的數(shù)據(jù)的部件；以及 用于在顯示裝置上顯示與所述再配置載物片圖像的顯示區(qū)域的一部分相對應(yīng)的放大 圖像，并且改變所述顯示裝置上顯示的放大圖像以使得所述顯示區(qū)域根據(jù)移動指令在所述 再配置載物片圖像上移動的部件。
【文檔編號】G06T7/00GK104104861SQ201410117573
【公開日】2014年10月15日 申請日期:2014年3月27日 優(yōu)先權(quán)日:2013年4月1日
【發(fā)明者】高山知彥, 村上友近 申請人:佳能株式會社
相關(guān)技術(shù)
網(wǎng)友詢問留言
已有0條留言
- 還沒有人留言評論。精彩留言會獲得點贊！
1