WO2014045759A1 - Image display device, method, program, and microscope system - Google Patents
Image display device, method, program, and microscope system Download PDFInfo
- Publication number
- WO2014045759A1 WO2014045759A1 PCT/JP2013/071784 JP2013071784W WO2014045759A1 WO 2014045759 A1 WO2014045759 A1 WO 2014045759A1 JP 2013071784 W JP2013071784 W JP 2013071784W WO 2014045759 A1 WO2014045759 A1 WO 2014045759A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- image display
- unit
- display device
- pathological specimen
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/34—Microscope slides, e.g. mounting specimens on microscope slides
Definitions
- the present technology relates to an image display device, an image display method, a program, and a microscope system that display an image captured by a microscope. More specifically, the present invention relates to a technique for selecting and displaying specific image data from a plurality of microscope observation image data.
- a virtual microscope system using this technology is particularly attracting attention for tissue / cell examination applications in pathological diagnosis because the user can display an arbitrary position at an arbitrary magnification for the obtained microscope observation image. ing.
- specimen information provided to a user such as a pathologist
- a microscopic observation image examples include the name of the person who collected it, the date and time of collection, the type of staining, and the number of the specimen.
- a bright-field image and a dark-field image are captured for one specimen, a sample is detected from the bright-field image, and a label in which the specimen information is described is detected from the dark-field image, and these are associated and output.
- a microscope has been proposed (see Patent Document 2).
- sample information may be recorded on a barcode or RFID (radio frequency identification) in addition to being described on the label (see, for example, Patent Document 3).
- a barcode or RFID radio frequency identification
- the information stored in a barcode or RFID is read by a reader, and the information is associated with the captured microscope observation image.
- a search is performed by specifying a case, a specimen number, patient information, or the like, and a plurality of images obtained.
- the target image must be further selected from among them.
- the operation for selecting and displaying a specific microscope observation image from the image data stored in the server is complicated.
- tissue and cell examinations when a plurality of pathological specimens are prepared and observed for a single patient, or because a plurality of images may be acquired by changing conditions for one pathological specimen, It takes time to identify.
- the main object of the present disclosure is to provide an image display device, an image display method, a program, and a microscope system that can easily and reliably select and display a specific microscope observation image.
- An image display device includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, and sample information that transmits the identification information to an information processing apparatus and acquires information on the pathological specimen from the information processing apparatus And an acquisition unit.
- the information on the pathological specimen may be microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
- an access information storage unit that stores the access information may be provided, and an image data acquisition unit that accesses the information processing apparatus based on the access information and acquires the microscope observation image data is provided. It may be.
- an information input unit for a user to input information related to the microscope observation image data can be provided.
- the sample recognition unit is, for example, a barcode or RF tag reader.
- the identification information may be attached to a slide glass in which the pathological specimen is enclosed. Furthermore, you may provide the display part which can browse the microscope observation image which imaged the said pathological specimen.
- An image display method includes a sample recognition step of reading identification information of a pathological specimen to be browsed by a sample recognition unit, and transmitting the identification information to an information processing device by a sample information acquisition unit. And a sample information acquisition step of acquiring information on the pathological specimen.
- a program transmits a sample recognition function for reading identification information of a pathological specimen to be browsed to an image display device including at least a sample recognition unit and a sample information acquisition unit, and the identification information to an information processing device. And a sample information acquisition function for acquiring information on the pathological specimen from the information processing apparatus.
- a microscope system includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, a sample information acquisition unit that transmits the identification information to an information processing apparatus, and acquires information on the pathological specimen from the information processing apparatus And an information storage unit that stores information on the pathological specimen, and an information extraction unit that extracts information to be provided to the image display unit from the information storage unit in response to a request from the image display unit
- An information processing apparatus including at least a unit.
- the information storage unit of the information processing apparatus stores a microscope observation image of the pathological specimen imaged by the microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image
- the information extraction unit may extract microscope observation image data associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device.
- the identification information of the pathological specimen is transmitted to the information processing apparatus, and the information regarding the pathological specimen is acquired, so that a specific microscope observation image can be easily and reliably selected and displayed. it can.
- FIG. 1 It is a figure showing an outline of a microscope system of a 1st embodiment of this indication.
- A is a figure which shows an example of a pathological sample
- FIG. 6 is a flowchart showing the operation of the image display device 4 when requesting access information from the server 3. It is a flowchart figure which shows operation
- FIG. It is a flowchart figure which shows the operation
- FIG. 6 is a flowchart showing the operation of the image display device 4 when requesting access information from the server 3. It is a flowchart figure which shows operation
- FIG. It is a flowchart figure which shows the operation
- First embodiment an example in which a viewer acquires access information from a server based on identification information
- Second embodiment an example in which a viewer acquires microscope observation image data from a server based on identification information
- FIG. 1 is a diagram showing an outline of the microscope system of the present embodiment.
- the microscope system of the present embodiment is for observing images of various prepared specimens taken at a high magnification.
- the microscope system includes a digital microscope 1, an information processing device 2, an image display device 4, and the like.
- the information processing device 2 and the image display device 4 may be directly connected or may be connected via the network 5. Further, the information processing apparatus 2 and the image display apparatus 4 may be connected to the server 3 via the network 5 so as to be able to communicate with each other. Further, in the configuration shown in FIG. 1, only one image display device 4 is shown, but two or more image display devices 4 may be connected, or the information processing device 2 may connect the image display device 4. You may also serve.
- the microscope system of the present embodiment can be applied to various fields such as medical treatment, pathology, living organisms, and materials.
- the observation target is a living organ, tissue, cell, etc.
- These sections are enclosed in the preparation specimens.
- the prepared specimen is a pathological specimen
- the user (image viewer) of the image display device 4 is a doctor or the like, and performs a pathological diagnosis based on the displayed image.
- a case where the preparation specimen is a pathological specimen will be described as an example.
- the digital microscope 1 includes a light source, an objective lens, an image sensor, a stage, and the like.
- the pathological specimen placed on the stage is irradiated with a predetermined illumination light, and the light transmitted through the observation object or the observation object Imaging light emitted from an object.
- FIG. 2 is a block diagram illustrating a configuration example of the digital microscope 1. As shown in FIG. 2, the digital microscope 1 provided in the microscope system of the present embodiment is provided with an entire image capturing unit 11 and a partial image capturing unit 12.
- the whole image capturing unit 11 includes a light source, a low-magnification objective lens, a low-resolution image sensor, and the like, and images the entire observation target region of the pathological specimen placed on the stage at a low magnification and a low resolution.
- the partial image capturing unit 12 includes a light source, a high-magnification objective lens, a high-resolution image sensor, and the like, and a part of the observation target region of the pathological specimen placed on the stage is Shoot at high resolution. That is, the digital microscope 1 captures a low-resolution whole image (thumbnail image) and a partial image (slide image) having a higher resolution than the whole image.
- the digital microscope 1 is provided with an imaging device controller 13 that controls imaging processing by the whole image imaging unit 11 and the partial image imaging unit 12, an input / output interface unit 14 that is connected to the information processing device 2, and the like. May be.
- an imaging device controller 13 that controls imaging processing by the whole image imaging unit 11 and the partial image imaging unit 12
- an input / output interface unit 14 that is connected to the information processing device 2, and the like. May be.
- the input / output interface unit 14 it is possible to input a control command from the information processing device 2 and output each image data captured by the entire image capturing unit 11 and the partial image capturing unit 12 to the information processing device 2. Become.
- FIG. 3 is a block diagram illustrating a configuration example of the information processing apparatus 2.
- the information processing apparatus 2 includes an imaging control unit 21, an identification information recognition unit 22, an image processing unit 23, a CPU (Central Processing Unit) 24, a memory 25, a hard disk 26, and input / output interface units 27 and 28. Etc.
- Imaging control unit 21 controls driving of the digital microscope 1 when capturing a partial image (slide image), an entire image (thumbnail image), or the like. For example, the imaging control unit 21 analyzes an entire image (thumbnail image) obtained by imaging the entire observation target region, and creates an order (imaging sequence) in which the digital microscope 1 captures partial images.
- the identification information recognition unit 22 acquires the identification information from the pathological specimen to be imaged.
- the identification information acquired in the identification information recognition unit 22 may be any information as long as the captured microscope observation image can be identified, and examples include a case number, a slide name, a patient name, a staining name, and a slide number. 1 type (s) or 2 or more types can be acquired.
- the acquisition method is not particularly limited.
- the identification information when the identification information is described on a label attached to a slide glass in which a pathological specimen is enclosed, the information can be read by image recognition. .
- the identification information When the identification information is recorded on a barcode or RFID (radio frequency identification), the information can be read and acquired by a device that can read the identification information.
- the identification information acquired by the identification information recognition unit 22 is stored in the hard disk 26 and / or the sample information storage unit 313 of the server 3.
- the image processing unit 23 combines a plurality of partial images (slide images) captured by the digital microscope 1 to synthesize a wide-field microscope observation image with high magnification and high resolution. Specifically, matching processing is performed on partial images (slide images) to be connected, and partial images (slide images) are connected (stitched) based on the result.
- the synthesized image (wide-field microscope observation image) synthesized by the image processing unit 23 is stored in the hard disk 26 and / or the image data storage unit 312 of the server 3.
- the CPU 24 comprehensively controls each unit provided in the information processing apparatus 2, and executes a program that comprehensively controls the above-described imaging control unit 21, identification information recognition unit 22, image processing unit 23, and the like, for example. To do.
- the CPU 24 can also perform arithmetic processing executed by each unit of the information processing apparatus 2, perform image encoding, pattern matching processing of partial images executed by the image processing unit 23, and the like.
- the memory 25 is used as a work area of the CPU 24, and temporarily stores a partial image (slide image), an entire image (thumbnail image), etc. that are photographed by the digital microscope 1 and input from the input / output interface unit 27.
- Hard disk 26 In the hard disk 26, for example, a composite image (microscopic observation image) synthesized by the image processing unit 23, pathological specimen identification information acquired by the identification information recognition unit 22, and the like are stored. Some or all of these data can also be stored in the server 3 on the network 5.
- the information processing apparatus 2 may be provided with a connection interface 28 with the server 3 so that they can communicate with each other via the network 5.
- Such a computer program may be stored in a recording medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a flash memory, and can be distributed via a network.
- FIG. 4 is a block diagram illustrating a configuration example of the server 3. As shown in FIG. 4, the server 3 is connected to the information processing device 2 and the image display device 4 via the network 5. For example, the information storage unit 31, the information extraction unit 32, the CPU 33, the input / output interface unit 34, 35 or the like.
- the information storage unit 31 includes a reception unit 311, an image data storage unit 312, and a specimen information storage unit 313, and receives image data of a composite image (microscopic observation image) uploaded from the information processing apparatus 2 and identification information thereof.
- the accepting unit 311 associates the uploaded image data with the identification information, and generates information (access information) for accessing the image data.
- this access information for example, the URL of the access destination can be cited.
- the image data storage unit 312 stores image data of a composite image (microscope observation image).
- the specimen information storage unit 313 stores the access information generated by the reception unit 311 together with the identification information of the image data stored in the image data storage unit 312.
- Information extraction unit 32 In response to a request from the image display device 4, the information extraction unit 32 extracts access information to the image data of the microscopic observation image to be browsed from the information storage unit 31 and transmits the information to the image display device 4.
- the CPU 33 controls each unit provided in the server 3 in an integrated manner, and executes, for example, a program that comprehensively controls the information storage unit 31 and the information extraction unit 32 described above.
- FIG. 5 is a block diagram illustrating a configuration example of the image display device 4.
- the image display device (viewer) 4 includes a display unit 41, a sample recognition unit 42, a sample information acquisition unit 43, an access information storage unit 44, a CPU 45, an image data acquisition unit 46, an information input unit 47, and The input / output interface unit 48 is configured.
- the image display device (viewer) 4 may be any device that can be connected to the information processing device 2 and the server 3 via the network 5, and may be a portable terminal such as a tablet terminal.
- sample recognition unit 42 reads identification information of a pathological specimen to be browsed. For example, when the identification information is recorded in a barcode or an RF tag, the sample recognition unit 42 is a reader.
- the identification information of the reading target may be described or attached to a pathological specimen (slide glass) actually observed with a microscope, as well as a pathological specimen such as an examination table or medical chart. is there.
- sample information acquisition unit 43 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and information (access information) for accessing data of a microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3. To get.
- the access information storage unit 44 is provided as necessary, and stores the access information transmitted from the server 3. If the access information to the image data to be browsed is stored in this way, for example, when the viewer transmits an image data acquisition request to the server, position information and enlargement / reduction information are added to the access information. It becomes possible to generate request information easily. Thereby, the freedom degree of operation at the time of browsing a microscope observation image, such as expansion / contraction, increases.
- the image data acquisition unit 46 accesses the server 3 based on the access information acquired by the sample information acquisition unit 43 or stored in the access information storage unit 44, and acquires image data of the microscopic observation image to be browsed.
- the image data acquisition unit 46 may acquire the corresponding image data by designating an area, a magnification, and the like based on information about the display image input to the information input unit 47.
- the image display device (viewer) 4 may be provided with a display information input unit 47 into which information related to a microscope observation image displayed by the user is input.
- the information input to the information input unit 47 includes, for example, a display area and display magnification of a microscope observation image, or selection information when a plurality of access information exists in a pathological specimen to be browsed.
- Information input by the user is transmitted to the server 3 via the image data acquisition unit 46 or the network 5.
- Display unit 41 The display unit 41 displays the related information in the microscope observation image, and any display unit 41 may be used.
- the CPU 45 comprehensively controls each unit provided in the image display device 4 and controls, for example, the sample recognition unit 42, the sample information acquisition unit 43, the access information storage unit 44, the image data acquisition unit 46, and the like described above. Program to control automatically.
- the network 5 is a communication line network that connects the information processing device 2, the server 3, and the image display device 4 to each other so that bidirectional communication is possible.
- the network 5 includes, for example, the public network such as the Internet, a telephone line network, a satellite communication network, a broadcast communication path, a WAN (Wide Area Network), a LAN (Local Area Network), an IP-VPN (Internet Protocol-Virtual).
- a private network such as Private Network, Ethernet (registered trademark), or a wireless LAN is used, regardless of whether it is wired or wireless.
- the network 5 may be a communication line network provided exclusively for the microscope system of the present embodiment.
- FIG. 6 is a flowchart showing the overall operation of the microscope system of the present embodiment
- FIGS. 7, 10, and 12 to 14 are flowcharts showing the respective steps.
- FIG. 8A is a figure which shows an example of a pathological sample
- FIG. 8B is a figure which shows the label.
- FIG. 9 is a diagram showing the relationship between the sample number and the slide
- FIG. 11 is a diagram showing an example of access information.
- a microscope observation image of a pathological specimen is captured by the digital microscope 1.
- the identification information recognition unit 22 of the information processing apparatus 2 acquires the identification information from the pathological specimen to be imaged.
- the barcode 103 attached to the label 102 of the slide 100 the barcode connected to the imaging function of the digital microscope 1 or the information processing device 2. It can be read by a reader or the like.
- the identification information read here is the number assigned to each slide, for example, in the case where a plurality of slides having different slice positions for the same specimen are prepared in addition to the sample number. In some cases.
- the specimen 101 of the pathological specimen is imaged, and the obtained image is processed by the image processing unit 23 of the information processing apparatus 2 to obtain a microscope observation image.
- the identification information acquired by the identification information recognition unit 22 and the microscope observation image synthesized by the image processing unit 23 are updated to the information storage unit 31 of the server 3.
- the uploaded image data and the identification information are associated with each other, and information (access information) for accessing the image data is generated.
- the format of this access information is not particularly limited, and there is, for example, an access destination URL as shown in FIG.
- the image data of the microscope observation image is stored in the image data storage unit 312 and access information to the image data is stored in the specimen information storage unit 313 together with the identification information.
- the sample recognition unit 42 of the image display device 4 attaches to a slide glass, an inspection table, or a medical chart.
- the identification information of the pathological specimen to be viewed is read.
- the sample information acquisition unit 43 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and information for accessing the data of the microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3 ( Access information).
- the server 3 that has received the request for the identification information extracts the access information of the requested microscope observation image from the image display device 4 in the information extraction unit 32 and transmits the access information to the image display device 4. .
- the access information provided from the server 3 is stored in the access information storage unit 44 as necessary.
- FIG. Check when displaying a microscope observation image on the display unit 41 of the image display device (viewer) 4 based on the access information, first, as shown in FIG. Check.
- information is input (Y)
- the input content is a change in the viewpoint or magnification of the image displayed on the display unit 41 of the image display device (viewer) 4
- the determination is made based on whether or not the data (tile image etc.) necessary for display is available. Is done.
- the image data acquisition unit 46 accesses the server 3 based on the access information acquired by the sample information acquisition unit 43 or the access information stored in the access information storage unit 44, and the image data of the microscopic observation image to be browsed To get. Then, the image data provided from the server 3 is displayed on the display unit 41 of the image display device (viewer) 4.
- identification information read from a slide, an examination table, or a medical chart is transmitted to a server, and access information of image data associated with the identification information is acquired. Images can be easily and reliably selected and displayed. Further, since it is not necessary for the user to directly input identification information to search or to select a plurality of images while browsing, the image to be selected is not mistaken.
- the type of identification information displayed (disclosed) can be changed or restricted for each user.
- the server 3 associates image data with its identification information and generates access information, but the present disclosure is not limited to this.
- the information processing apparatus 2 may have these functions without providing the server 3.
- an information storage unit and an information extraction unit may be provided in the information processing device 2, and the image display device 4 requests access information from the information processing device 2.
- FIG. 15 is a block diagram illustrating a configuration example of the image display apparatus of the microscope system according to the present embodiment
- FIG. 16 is a flowchart illustrating the operation of the server 3 when providing image data to the image display apparatus 6.
- the image display device acquires access information to the microscope observation image data.
- the present disclosure is not limited to this, and the access information is not acquired.
- Microscopic observation image data can also be acquired.
- the image display device 6 may be provided with a sample recognition unit 42 and an image data acquisition unit 46.
- the sample recognition unit 42 of the image display device 6 identifies the pathological specimen to be browsed attached to the slide glass, examination table, medical chart, or the like. Read information.
- the image data acquisition unit 46 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and acquires data of a microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3.
- the pathological specimen identification information is transmitted to the server and the image data of the pathological specimen is acquired, so that the target microscope observation image can be easily and reliably selected and displayed. be able to.
- the configuration and effects other than those described above in the microscope system of the present embodiment are the same as those in the first embodiment described above.
- the present disclosure can take the following configurations.
- a sample recognition unit for reading identification information of a pathological specimen to be browsed;
- a sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
- An image display apparatus (2) The image display apparatus according to (1), wherein the information related to the pathological specimen is microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
- the image display device according to (2) further including an access information storage unit that stores the access information.
- the image display device further including an information input unit through which a user inputs information related to the microscope observation image data.
- the sample recognition unit is a barcode or RF tag reader.
- the identification information is attached to a slide glass in which the pathological specimen is enclosed.
- the image display device further including a display unit capable of browsing a microscope observation image obtained by imaging the pathological specimen.
- An image display method comprising: (10) In an image display device comprising at least a sample recognition unit and a sample information acquisition unit, A sample recognition function that reads the identification information of the pathological specimen to be browsed; A sample information acquisition function for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
- a program that executes (11) A sample recognition unit that reads identification information of a pathological specimen to be browsed;
- An image display device comprising at least An information storage unit storing information on the pathological specimen;
- An information extraction unit that extracts information to be provided to the image display device from the information storage unit
- the information storage unit of the information processing apparatus stores a microscope observation image of a pathological specimen imaged by a microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image,
- the information extracting unit extracts data of a microscope observation image associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device (11).
- Microscope system
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Microscoopes, Condenser (AREA)
Abstract
This invention provides an image display device, an image display method, a program, and a microscope system that make it possible to easily and reliably select and display a specific microscope observation image. The image display device, which displays images captured by a microscope, is provided with: a sample recognition unit for reading identification information of a pathology specimen to be observed; and a sample information acquisition unit for sending the identification information read by the sample recognition unit to an information processing device, and acquiring information pertaining to the pathology specimen to be observed from the information processing device.
Description
本技術は、顕微鏡により撮像された画像などを表示する画像表示装置、画像表示方法、プログラム及び顕微鏡システムに関する。より詳しくは、複数の顕微鏡観察画像データから、特定の画像データを選択して表示する技術に関する。
The present technology relates to an image display device, an image display method, a program, and a microscope system that display an image captured by a microscope. More specifically, the present invention relates to a technique for selecting and displaying specific image data from a plurality of microscope observation image data.
医療、病理、生物及び材料などの分野においては、デジタル顕微鏡により観察対象領域を分割撮像し、得られた複数の部分画像を繋ぎ合わせて、広視野でかつ高倍率の顕微鏡観察画像を得る技術が用いられている。この技術を用いたバーチャル顕微鏡システムは、得られた顕微鏡観察画像について、ユーザが任意の位置を任意の倍率で表示させることが可能であることから、病理診断における組織・細胞検査用途で特に注目されている。
In the fields of medicine, pathology, living organisms, materials, etc., there is a technology that obtains a microscope observation image with a wide field of view and a high magnification by dividing and imaging an observation target region with a digital microscope and joining the obtained partial images. It is used. A virtual microscope system using this technology is particularly attracting attention for tissue / cell examination applications in pathological diagnosis because the user can display an arbitrary position at an arbitrary magnification for the obtained microscope observation image. ing.
また、バーチャル顕微鏡システムでは、デジタル顕微鏡による撮像された画像のデータをサーバに格納しておくことにより、離れた場所にいても、ネットワークを介して顕微鏡観察画像を閲覧し、診断することが可能となる(特許文献1参照)。例えば、特許文献1に記載の病理診断システムでは、複数の病理医の中から診断を依頼する病理医を選択し、依頼先の病理医の病理診断装置に、標本画像(顕微鏡観察画像)や標本の情報などを配信している。
In addition, in the virtual microscope system, it is possible to browse and diagnose a microscope observation image via a network even if it is in a remote place by storing data of an image captured by a digital microscope in a server. (See Patent Document 1). For example, in the pathological diagnosis system described in Patent Document 1, a pathologist who requests diagnosis from a plurality of pathologists is selected, and a specimen image (microscopic observation image) or specimen is sent to the pathological diagnosis apparatus of the pathologist requested to request. Information such as is distributed.
ユーザ(病理医など)に顕微鏡観察画像と共に提供される標本の情報としては、例えば採取した人の氏名、採取日時、染色の種類及び標本の番号などが挙げられるが、これらは病理標本が封入されたスライドガラスに付されていることが多い。そこで、従来、1つの標本について明視野画像と暗視野画像を撮像し、明視野画像からサンプルを検出すると共に、暗視野画像から標本の情報が記載されたラベルを検出し、これらを関連付けて出力する顕微鏡が提案されている(特許文献2参照)。
Examples of specimen information provided to a user (such as a pathologist) together with a microscopic observation image include the name of the person who collected it, the date and time of collection, the type of staining, and the number of the specimen. Often attached to a slide glass. Therefore, conventionally, a bright-field image and a dark-field image are captured for one specimen, a sample is detected from the bright-field image, and a label in which the specimen information is described is detected from the dark-field image, and these are associated and output. A microscope has been proposed (see Patent Document 2).
なお、標本の情報は、ラベルに記載する以外に、バーコードやRFID(無線周波数識別)に記録される場合もある(例えば特許文献3参照)。この場合は、撮像時に、読み取り機によりバーコードやRFIDに記憶された情報を読み取り、その情報を撮像された顕微鏡観察画像と関連付ける。
Note that the sample information may be recorded on a barcode or RFID (radio frequency identification) in addition to being described on the label (see, for example, Patent Document 3). In this case, at the time of imaging, information stored in a barcode or RFID is read by a reader, and the information is associated with the captured microscope observation image.
一方、バーチャル顕微鏡を用いた従来の病理診断システムでは、特定の顕微鏡観察画像を閲覧するためには、症例、標本の番号又は患者情報などを指定して検索を行い、得られた複数の画像の中から、更に目的とする画像を選択しなければならない。このように、従来のバーチャル顕微鏡システムでは、サーバに記憶された画像データから特定の顕微鏡観察画像を選択し、表示させるための作業が煩雑である。特に、組織・細胞検査などでは、一人の患者について複数の病理標本を作製し観察している場合や、1つの病理標本について条件を変えて複数の画像を取得していることもあるため、画像の特定に時間がかかる。
On the other hand, in a conventional pathological diagnosis system using a virtual microscope, in order to view a specific microscope observation image, a search is performed by specifying a case, a specimen number, patient information, or the like, and a plurality of images obtained. The target image must be further selected from among them. Thus, in the conventional virtual microscope system, the operation for selecting and displaying a specific microscope observation image from the image data stored in the server is complicated. In particular, in tissue and cell examinations, when a plurality of pathological specimens are prepared and observed for a single patient, or because a plurality of images may be acquired by changing conditions for one pathological specimen, It takes time to identify.
そこで、本開示は、特定の顕微鏡観察画像を、容易にかつ確実に選択し、表示することが可能な画像表示装置、画像表示方法、プログラム及び顕微鏡システムを提供することを主目的とする。
Therefore, the main object of the present disclosure is to provide an image display device, an image display method, a program, and a microscope system that can easily and reliably select and display a specific microscope observation image.
本開示に係る画像表示装置は、閲覧対象の病理標本の識別情報を読み取るサンプル認識部と、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部とを有する。
この画像表示装置では、前記病理標本に関する情報は、前記病理標本を撮像した顕微鏡観察画像データ又は前記顕微鏡観察画像データへのアクセス情報であってもよい。
その場合、前記アクセス情報を記憶するアクセス情報記憶部を備えていてもよく、また、前記アクセス情報に基づいて前記情報処理装置にアクセスし、前記顕微鏡観察画像データを取得する画像データ取得部を備えていてもよい。
更に、ユーザが前記顕微鏡観察画像データに関する情報を入力する情報入力部を設けることもできる。
一方、前記サンプル認識部は、例えばバーコード又はRFタグの読み取り機である。
また、前記識別情報は、前記病理標本が封入されたスライドガラスに付されていてもよい。
更に、前記病理標本を撮像した顕微鏡観察画像を閲覧可能な表示部を備えていてもよい。 An image display device according to the present disclosure includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, and sample information that transmits the identification information to an information processing apparatus and acquires information on the pathological specimen from the information processing apparatus And an acquisition unit.
In this image display device, the information on the pathological specimen may be microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
In this case, an access information storage unit that stores the access information may be provided, and an image data acquisition unit that accesses the information processing apparatus based on the access information and acquires the microscope observation image data is provided. It may be.
Furthermore, an information input unit for a user to input information related to the microscope observation image data can be provided.
On the other hand, the sample recognition unit is, for example, a barcode or RF tag reader.
The identification information may be attached to a slide glass in which the pathological specimen is enclosed.
Furthermore, you may provide the display part which can browse the microscope observation image which imaged the said pathological specimen.
この画像表示装置では、前記病理標本に関する情報は、前記病理標本を撮像した顕微鏡観察画像データ又は前記顕微鏡観察画像データへのアクセス情報であってもよい。
その場合、前記アクセス情報を記憶するアクセス情報記憶部を備えていてもよく、また、前記アクセス情報に基づいて前記情報処理装置にアクセスし、前記顕微鏡観察画像データを取得する画像データ取得部を備えていてもよい。
更に、ユーザが前記顕微鏡観察画像データに関する情報を入力する情報入力部を設けることもできる。
一方、前記サンプル認識部は、例えばバーコード又はRFタグの読み取り機である。
また、前記識別情報は、前記病理標本が封入されたスライドガラスに付されていてもよい。
更に、前記病理標本を撮像した顕微鏡観察画像を閲覧可能な表示部を備えていてもよい。 An image display device according to the present disclosure includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, and sample information that transmits the identification information to an information processing apparatus and acquires information on the pathological specimen from the information processing apparatus And an acquisition unit.
In this image display device, the information on the pathological specimen may be microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
In this case, an access information storage unit that stores the access information may be provided, and an image data acquisition unit that accesses the information processing apparatus based on the access information and acquires the microscope observation image data is provided. It may be.
Furthermore, an information input unit for a user to input information related to the microscope observation image data can be provided.
On the other hand, the sample recognition unit is, for example, a barcode or RF tag reader.
The identification information may be attached to a slide glass in which the pathological specimen is enclosed.
Furthermore, you may provide the display part which can browse the microscope observation image which imaged the said pathological specimen.
本開示に係る画像表示方法は、サンプル認識部により、閲覧対象の病理標本の識別情報を読み取るサンプル認識工程と、サンプル情報取得部により、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得工程とを行う。
An image display method according to the present disclosure includes a sample recognition step of reading identification information of a pathological specimen to be browsed by a sample recognition unit, and transmitting the identification information to an information processing device by a sample information acquisition unit. And a sample information acquisition step of acquiring information on the pathological specimen.
本開示に係るプログラムは、サンプル認識部と、サンプル情報取得部とを少なくとも備える画像表示装置に、閲覧対象の病理標本の識別情報を読み取るサンプル認識機能と、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得機能とを実行させる。
A program according to the present disclosure transmits a sample recognition function for reading identification information of a pathological specimen to be browsed to an image display device including at least a sample recognition unit and a sample information acquisition unit, and the identification information to an information processing device. And a sample information acquisition function for acquiring information on the pathological specimen from the information processing apparatus.
本開示に係る顕微鏡システムは、閲覧対象の病理標本の識別情報を読み取るサンプル認識部、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部を少なくとも備える画像表示装置と、前記病理標本に関する情報が記憶された情報記憶部、前記画像表示装置からの要求に応じて、前記情報記憶部から前記画像表示装置に提供する情報を抽出する情報抽出部、を少なくとも備える情報処理装置とを有する。
この顕微鏡システムでは、前記情報処理装置の情報記憶部には、顕微鏡装置で撮像された病理標本の顕微鏡観察画像と、前記顕微鏡観察画像に関連付けられた前記病理標本の識別情報が記憶されており、前記情報抽出部は、前記画像表示装置から送信された識別情報に基づいて前記識別情報と関連付けられた顕微鏡観察画像のデータ又は前記顕微鏡観察画像データへのアクセス情報を抽出してもよい。 A microscope system according to the present disclosure includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, a sample information acquisition unit that transmits the identification information to an information processing apparatus, and acquires information on the pathological specimen from the information processing apparatus And an information storage unit that stores information on the pathological specimen, and an information extraction unit that extracts information to be provided to the image display unit from the information storage unit in response to a request from the image display unit An information processing apparatus including at least a unit.
In this microscope system, the information storage unit of the information processing apparatus stores a microscope observation image of the pathological specimen imaged by the microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image, The information extraction unit may extract microscope observation image data associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device.
この顕微鏡システムでは、前記情報処理装置の情報記憶部には、顕微鏡装置で撮像された病理標本の顕微鏡観察画像と、前記顕微鏡観察画像に関連付けられた前記病理標本の識別情報が記憶されており、前記情報抽出部は、前記画像表示装置から送信された識別情報に基づいて前記識別情報と関連付けられた顕微鏡観察画像のデータ又は前記顕微鏡観察画像データへのアクセス情報を抽出してもよい。 A microscope system according to the present disclosure includes a sample recognition unit that reads identification information of a pathological specimen to be browsed, a sample information acquisition unit that transmits the identification information to an information processing apparatus, and acquires information on the pathological specimen from the information processing apparatus And an information storage unit that stores information on the pathological specimen, and an information extraction unit that extracts information to be provided to the image display unit from the information storage unit in response to a request from the image display unit An information processing apparatus including at least a unit.
In this microscope system, the information storage unit of the information processing apparatus stores a microscope observation image of the pathological specimen imaged by the microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image, The information extraction unit may extract microscope observation image data associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device.
本開示によれば、病理標本の識別情報を情報処理装置に送信し、その病理標本に関する情報を取得しているため、特定の顕微鏡観察画像を、容易にかつ確実に選択し、表示することができる。
According to the present disclosure, the identification information of the pathological specimen is transmitted to the information processing apparatus, and the information regarding the pathological specimen is acquired, so that a specific microscope observation image can be easily and reliably selected and displayed. it can.
以下、本開示を実施するための形態について、添付の図面を参照して詳細に説明する。なお、本開示は、以下に示す各実施形態に限定されるものではない。また、説明は、以下の順序で行う。
1.第1の実施の形態
(識別情報に基づきビューワがサーバからアクセス情報を取得する例)
2.第2の実施の形態
(識別情報に基づきビューワがサーバから顕微鏡観察画像データを取得する例)
Hereinafter, modes for carrying out the present disclosure will be described in detail with reference to the accompanying drawings. In addition, this indication is not limited to each embodiment shown below. The description will be given in the following order.
1. First embodiment (an example in which a viewer acquires access information from a server based on identification information)
2. Second embodiment (an example in which a viewer acquires microscope observation image data from a server based on identification information)
1.第1の実施の形態
(識別情報に基づきビューワがサーバからアクセス情報を取得する例)
2.第2の実施の形態
(識別情報に基づきビューワがサーバから顕微鏡観察画像データを取得する例)
Hereinafter, modes for carrying out the present disclosure will be described in detail with reference to the accompanying drawings. In addition, this indication is not limited to each embodiment shown below. The description will be given in the following order.
1. First embodiment (an example in which a viewer acquires access information from a server based on identification information)
2. Second embodiment (an example in which a viewer acquires microscope observation image data from a server based on identification information)
<1.第1の実施の形態>
[顕微鏡システムの構成]
先ず、本開示の第1の実施形態に係るバーチャル顕微鏡システム(以下、単に顕微鏡システムと称す。)について説明する。図1は本実施形態の顕微鏡システムの概要を示す図である。本実施形態の顕微鏡システムは、各種プレパラート標本を高倍率で撮像して観察するものであり、例えば、図1に示すように、デジタル顕微鏡1、情報処理装置2及び画像表示装置4などで構成される。 <1. First Embodiment>
[Configuration of microscope system]
First, a virtual microscope system (hereinafter simply referred to as a microscope system) according to the first embodiment of the present disclosure will be described. FIG. 1 is a diagram showing an outline of the microscope system of the present embodiment. The microscope system of the present embodiment is for observing images of various prepared specimens taken at a high magnification. For example, as shown in FIG. 1, the microscope system includes adigital microscope 1, an information processing device 2, an image display device 4, and the like. The
[顕微鏡システムの構成]
先ず、本開示の第1の実施形態に係るバーチャル顕微鏡システム(以下、単に顕微鏡システムと称す。)について説明する。図1は本実施形態の顕微鏡システムの概要を示す図である。本実施形態の顕微鏡システムは、各種プレパラート標本を高倍率で撮像して観察するものであり、例えば、図1に示すように、デジタル顕微鏡1、情報処理装置2及び画像表示装置4などで構成される。 <1. First Embodiment>
[Configuration of microscope system]
First, a virtual microscope system (hereinafter simply referred to as a microscope system) according to the first embodiment of the present disclosure will be described. FIG. 1 is a diagram showing an outline of the microscope system of the present embodiment. The microscope system of the present embodiment is for observing images of various prepared specimens taken at a high magnification. For example, as shown in FIG. 1, the microscope system includes a
本実施形態の顕微鏡システムでは、情報処理装置2及び画像表示装置4は、直接接続されていてもよいが、ネットワーク5を介して接続されていてもよい。また、情報処理装置2及び画像表示装置4は、ネットワーク5を介してサーバ3と相互に通信可能に接続されていてもよい。更に、図1に示す構成では、画像表示装置4が1台しか示されていないが、画像表示装置4は2台以上接続されていてもよく、又は、情報処理装置2が画像表示装置4を兼ねていてもよい。
In the microscope system of this embodiment, the information processing device 2 and the image display device 4 may be directly connected or may be connected via the network 5. Further, the information processing apparatus 2 and the image display apparatus 4 may be connected to the server 3 via the network 5 so as to be able to communicate with each other. Further, in the configuration shown in FIG. 1, only one image display device 4 is shown, but two or more image display devices 4 may be connected, or the information processing device 2 may connect the image display device 4. You may also serve.
本実施形態の顕微鏡システムは、医療、病理、生物及び材料などの各種分野に適用可能であるが、例えば病理診断に用いる場合には、観察対象物は生体の臓器、組織及び細胞などであり、プレパラート標本にはそれらの切片が封入されている。そして、例えば、プレパラート標本が病理標本である場合は、画像表示装置4のユーザ(画像の閲覧者)は医師などであり、表示された画像に基づいて病理診断を行う。以下、プレパラート標本が病理標本である場合を例に説明する。
The microscope system of the present embodiment can be applied to various fields such as medical treatment, pathology, living organisms, and materials.For example, when used for pathological diagnosis, the observation target is a living organ, tissue, cell, etc. These sections are enclosed in the preparation specimens. For example, when the prepared specimen is a pathological specimen, the user (image viewer) of the image display device 4 is a doctor or the like, and performs a pathological diagnosis based on the displayed image. Hereinafter, a case where the preparation specimen is a pathological specimen will be described as an example.
[デジタル顕微鏡1]
デジタル顕微鏡1は、光源、対物レンズ、撮像素子及びステージなどを備えており、ステージ上に載置された病理標本に対して所定の照明光を照射し、観察対象物を透過した光や観察対象物から発せられた光などを撮像する。図2はデジタル顕微鏡1の構成例を示すブロック図である。図2に示すように、本実施形態の顕微鏡システムが備えるデジタル顕微鏡1には、全体画像撮像部11と部分画像撮像部12とが設けられている。 [Digital microscope 1]
Thedigital microscope 1 includes a light source, an objective lens, an image sensor, a stage, and the like. The pathological specimen placed on the stage is irradiated with a predetermined illumination light, and the light transmitted through the observation object or the observation object Imaging light emitted from an object. FIG. 2 is a block diagram illustrating a configuration example of the digital microscope 1. As shown in FIG. 2, the digital microscope 1 provided in the microscope system of the present embodiment is provided with an entire image capturing unit 11 and a partial image capturing unit 12.
デジタル顕微鏡1は、光源、対物レンズ、撮像素子及びステージなどを備えており、ステージ上に載置された病理標本に対して所定の照明光を照射し、観察対象物を透過した光や観察対象物から発せられた光などを撮像する。図2はデジタル顕微鏡1の構成例を示すブロック図である。図2に示すように、本実施形態の顕微鏡システムが備えるデジタル顕微鏡1には、全体画像撮像部11と部分画像撮像部12とが設けられている。 [Digital microscope 1]
The
全体画像撮像部11は、光源、低倍率の対物レンズ及び低解像度の撮像素子などで構成されており、ステージ上に載置された病理標本の観察対象領域全体を、低倍率かつ低解像度で撮影する。一方、部分画像撮像部12は、光源、高倍率の対物レンズ及び高解像度の撮像素子などで構成されており、ステージ上に載置された病理標本の観察対象領域の一部を、高倍率かつ高解像度で撮影する。即ち、デジタル顕微鏡1では、低解像度の全体画像(サムネイル画像)と、全体画像よりも高解像度の部分画像(スライド画像)が撮像される。
The whole image capturing unit 11 includes a light source, a low-magnification objective lens, a low-resolution image sensor, and the like, and images the entire observation target region of the pathological specimen placed on the stage at a low magnification and a low resolution. To do. On the other hand, the partial image capturing unit 12 includes a light source, a high-magnification objective lens, a high-resolution image sensor, and the like, and a part of the observation target region of the pathological specimen placed on the stage is Shoot at high resolution. That is, the digital microscope 1 captures a low-resolution whole image (thumbnail image) and a partial image (slide image) having a higher resolution than the whole image.
また、デジタル顕微鏡1には、全体画像撮像部11及び部分画像撮像部12による撮像処理を制御する撮像装置コントローラ13や、情報処理装置2と接続するための入出力インターフェイス部14などが設けられていてもよい。入出力インターフェイス部14を設けることで、情報処理装置2からの制御コマンドの入力や、情報処理装置2に対する全体画像撮像部11及び部分画像撮像部12で撮像された各画像データの出力が可能となる。
In addition, the digital microscope 1 is provided with an imaging device controller 13 that controls imaging processing by the whole image imaging unit 11 and the partial image imaging unit 12, an input / output interface unit 14 that is connected to the information processing device 2, and the like. May be. By providing the input / output interface unit 14, it is possible to input a control command from the information processing device 2 and output each image data captured by the entire image capturing unit 11 and the partial image capturing unit 12 to the information processing device 2. Become.
[情報処理装置2]
図3は情報処理装置2の構成例を示すブロック図である。図3に示すように、情報処理装置2は、撮像制御部21、識別情報認識部22、画像処理部23、CPU(Central Processing Unit)24、メモリ25、ハードディスク26及び入出力インターフェイス部27,28などで構成されている。 [Information processing apparatus 2]
FIG. 3 is a block diagram illustrating a configuration example of theinformation processing apparatus 2. As shown in FIG. 3, the information processing apparatus 2 includes an imaging control unit 21, an identification information recognition unit 22, an image processing unit 23, a CPU (Central Processing Unit) 24, a memory 25, a hard disk 26, and input / output interface units 27 and 28. Etc.
図3は情報処理装置2の構成例を示すブロック図である。図3に示すように、情報処理装置2は、撮像制御部21、識別情報認識部22、画像処理部23、CPU(Central Processing Unit)24、メモリ25、ハードディスク26及び入出力インターフェイス部27,28などで構成されている。 [Information processing apparatus 2]
FIG. 3 is a block diagram illustrating a configuration example of the
(撮像制御部21)
撮像制御部21は、部分画像(スライド画像)や全体画像(サムネイル画像)などを撮像する際のデジタル顕微鏡1の駆動を制御する。この撮像制御部21は、例えば、観察対象領域全体を撮像した全体画像(サムネイル画像)を解析し、デジタル顕微鏡1で部分画像を撮像する順序(撮像シーケンス)の作成などを行う。 (Imaging control unit 21)
Theimaging control unit 21 controls driving of the digital microscope 1 when capturing a partial image (slide image), an entire image (thumbnail image), or the like. For example, the imaging control unit 21 analyzes an entire image (thumbnail image) obtained by imaging the entire observation target region, and creates an order (imaging sequence) in which the digital microscope 1 captures partial images.
撮像制御部21は、部分画像(スライド画像)や全体画像(サムネイル画像)などを撮像する際のデジタル顕微鏡1の駆動を制御する。この撮像制御部21は、例えば、観察対象領域全体を撮像した全体画像(サムネイル画像)を解析し、デジタル顕微鏡1で部分画像を撮像する順序(撮像シーケンス)の作成などを行う。 (Imaging control unit 21)
The
(識別情報認識部22)
識別情報認識部22は、撮像対象の病理標本から、その識別情報を取得する。識別情報認識部22において取得する識別情報は、撮像された顕微鏡観察画像が識別できるものであればよく、例えば症例番号、スライド名、患者名、染色名及びスライド番号などが挙げられ、これらのうち1種又は2種以上を取得することができる。 (Identification information recognition unit 22)
The identificationinformation recognition unit 22 acquires the identification information from the pathological specimen to be imaged. The identification information acquired in the identification information recognition unit 22 may be any information as long as the captured microscope observation image can be identified, and examples include a case number, a slide name, a patient name, a staining name, and a slide number. 1 type (s) or 2 or more types can be acquired.
識別情報認識部22は、撮像対象の病理標本から、その識別情報を取得する。識別情報認識部22において取得する識別情報は、撮像された顕微鏡観察画像が識別できるものであればよく、例えば症例番号、スライド名、患者名、染色名及びスライド番号などが挙げられ、これらのうち1種又は2種以上を取得することができる。 (Identification information recognition unit 22)
The identification
また、その取得方法も特に限定されるものではないが、例えば、識別情報が病理標本が封入されたスライドガラスに付されたラベルに記載されている場合は、画像認識により情報を読み取ることができる。また、識別情報が、バーコードやRFID(無線周波数識別)に記録される場合は、これらを読み取り可能な装置により情報を読み取り、取得することができる。識別情報認識部22で取得された識別情報は、ハードディスク26及び/又はサーバ3の標本情報記憶部313に記憶される。
Also, the acquisition method is not particularly limited. For example, when the identification information is described on a label attached to a slide glass in which a pathological specimen is enclosed, the information can be read by image recognition. . When the identification information is recorded on a barcode or RFID (radio frequency identification), the information can be read and acquired by a device that can read the identification information. The identification information acquired by the identification information recognition unit 22 is stored in the hard disk 26 and / or the sample information storage unit 313 of the server 3.
(画像処理部23)
画像処理部23は、デジタル顕微鏡1で撮像された複数の部分画像(スライド画像)を繋ぎ合わせて、高倍率かつ高解像度の広視野顕微鏡観察画像を合成する。具体的には、繋合対象の部分画像(スライド画像)についてマッチング処理を行い、その結果に基づいて部分画像(スライド画像)同士の繋ぎ合わせ(スティッチング)処理を行う。画像処理部23で合成された合成画像(広視野顕微鏡観察画像)は、ハードディスク26及び/又はサーバ3の画像データ記憶部312に記憶される。 (Image processing unit 23)
Theimage processing unit 23 combines a plurality of partial images (slide images) captured by the digital microscope 1 to synthesize a wide-field microscope observation image with high magnification and high resolution. Specifically, matching processing is performed on partial images (slide images) to be connected, and partial images (slide images) are connected (stitched) based on the result. The synthesized image (wide-field microscope observation image) synthesized by the image processing unit 23 is stored in the hard disk 26 and / or the image data storage unit 312 of the server 3.
画像処理部23は、デジタル顕微鏡1で撮像された複数の部分画像(スライド画像)を繋ぎ合わせて、高倍率かつ高解像度の広視野顕微鏡観察画像を合成する。具体的には、繋合対象の部分画像(スライド画像)についてマッチング処理を行い、その結果に基づいて部分画像(スライド画像)同士の繋ぎ合わせ(スティッチング)処理を行う。画像処理部23で合成された合成画像(広視野顕微鏡観察画像)は、ハードディスク26及び/又はサーバ3の画像データ記憶部312に記憶される。 (Image processing unit 23)
The
(CPU24)
CPU24は、情報処理装置2に設けられた各部を統括的に制御するものであり、例えば前述した撮像制御部21、識別情報認識部22及び画像処理部23などを統括的に制御するプログラムを実行する。また、CPU24は、情報処理装置2の各部で実行される演算処理を行ったり、画像のエンコードや画像処理部23で実行される部分画像のパターンマッチング処理などを行うこともできる。 (CPU 24)
TheCPU 24 comprehensively controls each unit provided in the information processing apparatus 2, and executes a program that comprehensively controls the above-described imaging control unit 21, identification information recognition unit 22, image processing unit 23, and the like, for example. To do. The CPU 24 can also perform arithmetic processing executed by each unit of the information processing apparatus 2, perform image encoding, pattern matching processing of partial images executed by the image processing unit 23, and the like.
CPU24は、情報処理装置2に設けられた各部を統括的に制御するものであり、例えば前述した撮像制御部21、識別情報認識部22及び画像処理部23などを統括的に制御するプログラムを実行する。また、CPU24は、情報処理装置2の各部で実行される演算処理を行ったり、画像のエンコードや画像処理部23で実行される部分画像のパターンマッチング処理などを行うこともできる。 (CPU 24)
The
(メモリ25)
メモリ25は、CPU24の作業領域として用いられ、デジタル顕微鏡1で撮影され入出力インターフェイス部27から入力された部分画像(スライド画像)や全体画像(サムネイル画像)などを一時的に記憶する。 (Memory 25)
Thememory 25 is used as a work area of the CPU 24, and temporarily stores a partial image (slide image), an entire image (thumbnail image), etc. that are photographed by the digital microscope 1 and input from the input / output interface unit 27.
メモリ25は、CPU24の作業領域として用いられ、デジタル顕微鏡1で撮影され入出力インターフェイス部27から入力された部分画像(スライド画像)や全体画像(サムネイル画像)などを一時的に記憶する。 (Memory 25)
The
(ハードディスク26)
ハードディスク26には、例えば画像処理部23で合成された合成画像(顕微鏡観察画像)及び識別情報認識部22で取得された病理標本の識別情報などが記憶される。なお、これらのデータの一部又は全部は、ネットワーク5上のサーバ3に記憶することもできる。その場合、情報処理装置2に、サーバ3との接続用インターフェイス28を設け、ネットワーク5を介して相互に通信可能とすればよい。 (Hard disk 26)
In thehard disk 26, for example, a composite image (microscopic observation image) synthesized by the image processing unit 23, pathological specimen identification information acquired by the identification information recognition unit 22, and the like are stored. Some or all of these data can also be stored in the server 3 on the network 5. In this case, the information processing apparatus 2 may be provided with a connection interface 28 with the server 3 so that they can communicate with each other via the network 5.
ハードディスク26には、例えば画像処理部23で合成された合成画像(顕微鏡観察画像)及び識別情報認識部22で取得された病理標本の識別情報などが記憶される。なお、これらのデータの一部又は全部は、ネットワーク5上のサーバ3に記憶することもできる。その場合、情報処理装置2に、サーバ3との接続用インターフェイス28を設け、ネットワーク5を介して相互に通信可能とすればよい。 (Hard disk 26)
In the
また、前述した情報処理装置2の各機能を実現するためのコンピュータプログラムを作成し、パーソナルコンピュータなどに実装することが可能である。このようなコンピュータプログラムは、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどの記録媒体に格納されていてもよく、また、ネットワークを介して配信することもできる。
Further, it is possible to create a computer program for realizing each function of the information processing apparatus 2 described above and mount it on a personal computer or the like. Such a computer program may be stored in a recording medium such as a magnetic disk, an optical disk, a magneto-optical disk, or a flash memory, and can be distributed via a network.
[サーバ3]
サーバ3は、情報処理装置2からアップロードされた各種データを管理し、要求に応じて画像表示装置4や情報処理装置2に出力する。図4はサーバ3の構成例を示すブロック図である。図4に示すように、サーバ3は、ネットワーク5を介して情報処理装置2や画像表示装置4と接続されており、例えば情報記憶部31、情報抽出部32、CPU33、入出力インターフェイス部34,35などで構成されている。 [Server 3]
Theserver 3 manages various data uploaded from the information processing apparatus 2 and outputs it to the image display apparatus 4 and the information processing apparatus 2 in response to a request. FIG. 4 is a block diagram illustrating a configuration example of the server 3. As shown in FIG. 4, the server 3 is connected to the information processing device 2 and the image display device 4 via the network 5. For example, the information storage unit 31, the information extraction unit 32, the CPU 33, the input / output interface unit 34, 35 or the like.
サーバ3は、情報処理装置2からアップロードされた各種データを管理し、要求に応じて画像表示装置4や情報処理装置2に出力する。図4はサーバ3の構成例を示すブロック図である。図4に示すように、サーバ3は、ネットワーク5を介して情報処理装置2や画像表示装置4と接続されており、例えば情報記憶部31、情報抽出部32、CPU33、入出力インターフェイス部34,35などで構成されている。 [Server 3]
The
(情報記憶部31)
情報記憶部31は、受付部311、画像データ記憶部312及び標本情報記憶部313を備えており、情報処理装置2からアップロードされた合成画像(顕微鏡観察画像)の画像データ及びその識別情報を受付けて記憶する。受付部311は、アップロードされた画像データと識別情報とを関連付けし、画像データにアクセスするための情報(アクセス情報)を生成する。このアクセス情報としては、例えばアクセス先のURLなどが挙げられる。 (Information storage unit 31)
Theinformation storage unit 31 includes a reception unit 311, an image data storage unit 312, and a specimen information storage unit 313, and receives image data of a composite image (microscopic observation image) uploaded from the information processing apparatus 2 and identification information thereof. Remember. The accepting unit 311 associates the uploaded image data with the identification information, and generates information (access information) for accessing the image data. As this access information, for example, the URL of the access destination can be cited.
情報記憶部31は、受付部311、画像データ記憶部312及び標本情報記憶部313を備えており、情報処理装置2からアップロードされた合成画像(顕微鏡観察画像)の画像データ及びその識別情報を受付けて記憶する。受付部311は、アップロードされた画像データと識別情報とを関連付けし、画像データにアクセスするための情報(アクセス情報)を生成する。このアクセス情報としては、例えばアクセス先のURLなどが挙げられる。 (Information storage unit 31)
The
また、画像データ記憶部312には、合成画像(顕微鏡観察画像)の画像データが記憶される。また、標本情報記憶部313には、画像データ記憶部312に記憶された画像データの識別情報と共に、受付部311で生成したアクセス情報が記憶される。
The image data storage unit 312 stores image data of a composite image (microscope observation image). The specimen information storage unit 313 stores the access information generated by the reception unit 311 together with the identification information of the image data stored in the image data storage unit 312.
(情報抽出部32)
情報抽出部32は、画像表示装置4からの要求に応じて、情報記憶部31から閲覧対象の顕微鏡観察画像の画像データへのアクセス情報を抽出し、画像表示装置4に送信する。 (Information extraction unit 32)
In response to a request from theimage display device 4, the information extraction unit 32 extracts access information to the image data of the microscopic observation image to be browsed from the information storage unit 31 and transmits the information to the image display device 4.
情報抽出部32は、画像表示装置4からの要求に応じて、情報記憶部31から閲覧対象の顕微鏡観察画像の画像データへのアクセス情報を抽出し、画像表示装置4に送信する。 (Information extraction unit 32)
In response to a request from the
(CPU33)
CPU33は、サーバ3に設けられた各部を統括的に制御するものであり、例えば前述した情報記憶部31及び情報抽出部32などを統括的に制御するプログラムを実行する。 (CPU 33)
TheCPU 33 controls each unit provided in the server 3 in an integrated manner, and executes, for example, a program that comprehensively controls the information storage unit 31 and the information extraction unit 32 described above.
CPU33は、サーバ3に設けられた各部を統括的に制御するものであり、例えば前述した情報記憶部31及び情報抽出部32などを統括的に制御するプログラムを実行する。 (CPU 33)
The
[画像表示装置(ビューワ)4]
図5は画像表示装置4の構成例を示すブロック図である。図5に示すように、画像表示装置(ビューワ)4は、表示部41、サンプル認識部42、サンプル情報取得部43、アクセス情報記憶部44、CPU45、画像データ取得部46、情報入力部47及び入出力インターフェイス部48などで構成されている。画像表示装置(ビューワ)4は、ネットワーク5を介して情報処理装置2やサーバ3と接続可能なものであればよく、タブレット端末などの携帯型端末でもよい。 [Image display device (viewer) 4]
FIG. 5 is a block diagram illustrating a configuration example of theimage display device 4. As shown in FIG. 5, the image display device (viewer) 4 includes a display unit 41, a sample recognition unit 42, a sample information acquisition unit 43, an access information storage unit 44, a CPU 45, an image data acquisition unit 46, an information input unit 47, and The input / output interface unit 48 is configured. The image display device (viewer) 4 may be any device that can be connected to the information processing device 2 and the server 3 via the network 5, and may be a portable terminal such as a tablet terminal.
図5は画像表示装置4の構成例を示すブロック図である。図5に示すように、画像表示装置(ビューワ)4は、表示部41、サンプル認識部42、サンプル情報取得部43、アクセス情報記憶部44、CPU45、画像データ取得部46、情報入力部47及び入出力インターフェイス部48などで構成されている。画像表示装置(ビューワ)4は、ネットワーク5を介して情報処理装置2やサーバ3と接続可能なものであればよく、タブレット端末などの携帯型端末でもよい。 [Image display device (viewer) 4]
FIG. 5 is a block diagram illustrating a configuration example of the
(サンプル認識部42)
サンプル認識部42は、閲覧対象の病理標本の識別情報を読み取るものであり、例えば、識別情報がバーコードやRFタグに記録されている場合は、その読み取り機である。読み取り対象の識別情報は、実際に顕微鏡観察を行った病理標本(スライドガラス)に付されているものの他、検査表やカルテなどの病理標本とは別のものに記載又は付されていることもある。 (Sample recognition unit 42)
Thesample recognition unit 42 reads identification information of a pathological specimen to be browsed. For example, when the identification information is recorded in a barcode or an RF tag, the sample recognition unit 42 is a reader. The identification information of the reading target may be described or attached to a pathological specimen (slide glass) actually observed with a microscope, as well as a pathological specimen such as an examination table or medical chart. is there.
サンプル認識部42は、閲覧対象の病理標本の識別情報を読み取るものであり、例えば、識別情報がバーコードやRFタグに記録されている場合は、その読み取り機である。読み取り対象の識別情報は、実際に顕微鏡観察を行った病理標本(スライドガラス)に付されているものの他、検査表やカルテなどの病理標本とは別のものに記載又は付されていることもある。 (Sample recognition unit 42)
The
(サンプル情報取得部43)
サンプル情報取得部43は、サンプル認識部42が取得した識別情報を、サーバ3に送信し、サーバ3から閲覧対象の病理標本を撮像した顕微鏡観察画像のデータにアクセスするための情報(アクセス情報)を取得する。 (Sample information acquisition unit 43)
The sampleinformation acquisition unit 43 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and information (access information) for accessing data of a microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3. To get.
サンプル情報取得部43は、サンプル認識部42が取得した識別情報を、サーバ3に送信し、サーバ3から閲覧対象の病理標本を撮像した顕微鏡観察画像のデータにアクセスするための情報(アクセス情報)を取得する。 (Sample information acquisition unit 43)
The sample
(アクセス情報記憶部44)
アクセス情報記憶部44は、必要に応じて設けられ、サーバ3から送信されたアクセス情報を記憶する。このように閲覧対象の画像データへのアクセス情報を記憶しておくと、例えばビューワがサーバに対して画像データの取得リクエストを送信する際に、アクセス情報に位置情報や拡大縮小の情報を追加するだけで、容易にリクエスト情報を生成することが可能となる。これにより、拡大・縮小など、顕微鏡観察画像を閲覧する際の操作の自由度が増す。 (Access information storage unit 44)
The accessinformation storage unit 44 is provided as necessary, and stores the access information transmitted from the server 3. If the access information to the image data to be browsed is stored in this way, for example, when the viewer transmits an image data acquisition request to the server, position information and enlargement / reduction information are added to the access information. It becomes possible to generate request information easily. Thereby, the freedom degree of operation at the time of browsing a microscope observation image, such as expansion / contraction, increases.
アクセス情報記憶部44は、必要に応じて設けられ、サーバ3から送信されたアクセス情報を記憶する。このように閲覧対象の画像データへのアクセス情報を記憶しておくと、例えばビューワがサーバに対して画像データの取得リクエストを送信する際に、アクセス情報に位置情報や拡大縮小の情報を追加するだけで、容易にリクエスト情報を生成することが可能となる。これにより、拡大・縮小など、顕微鏡観察画像を閲覧する際の操作の自由度が増す。 (Access information storage unit 44)
The access
(画像データ取得部46)
画像データ取得部46は、サンプル情報取得部43で取得した又はアクセス情報記憶部44に記憶されたアクセス情報に基づいて、サーバ3にアクセスし、閲覧対象の顕微鏡観察画像の画像データを取得する。また、画像データ取得部46は、情報入力部47に入力された表示画像についての情報に基づいて、領域や倍率など指定し、対応する画像データを取得してもよい。 (Image data acquisition unit 46)
The imagedata acquisition unit 46 accesses the server 3 based on the access information acquired by the sample information acquisition unit 43 or stored in the access information storage unit 44, and acquires image data of the microscopic observation image to be browsed. In addition, the image data acquisition unit 46 may acquire the corresponding image data by designating an area, a magnification, and the like based on information about the display image input to the information input unit 47.
画像データ取得部46は、サンプル情報取得部43で取得した又はアクセス情報記憶部44に記憶されたアクセス情報に基づいて、サーバ3にアクセスし、閲覧対象の顕微鏡観察画像の画像データを取得する。また、画像データ取得部46は、情報入力部47に入力された表示画像についての情報に基づいて、領域や倍率など指定し、対応する画像データを取得してもよい。 (Image data acquisition unit 46)
The image
(情報入力部47)
画像表示装置(ビューワ)4には、ユーザによって表示する顕微鏡観察画像に関する情報が入力される表示情報入力部47が設けられていてもよい。ここで、情報入力部47に入力される情報としては、例えば顕微鏡観察画像の表示領域や表示倍率、又は、閲覧対象の病理標本に複数のアクセス情報が存在する場合はその選択情報などが挙げられる。そして、ユーザにより入力された情報は、画像データ取得部46又はネットワーク5を介してサーバ3に送信される。 (Information input unit 47)
The image display device (viewer) 4 may be provided with a displayinformation input unit 47 into which information related to a microscope observation image displayed by the user is input. Here, the information input to the information input unit 47 includes, for example, a display area and display magnification of a microscope observation image, or selection information when a plurality of access information exists in a pathological specimen to be browsed. . Information input by the user is transmitted to the server 3 via the image data acquisition unit 46 or the network 5.
画像表示装置(ビューワ)4には、ユーザによって表示する顕微鏡観察画像に関する情報が入力される表示情報入力部47が設けられていてもよい。ここで、情報入力部47に入力される情報としては、例えば顕微鏡観察画像の表示領域や表示倍率、又は、閲覧対象の病理標本に複数のアクセス情報が存在する場合はその選択情報などが挙げられる。そして、ユーザにより入力された情報は、画像データ取得部46又はネットワーク5を介してサーバ3に送信される。 (Information input unit 47)
The image display device (viewer) 4 may be provided with a display
(表示部41)
表示部41は、顕微鏡観察画像がその関連情報を表示するものであり、これらが閲覧可能なものであればよい。 (Display unit 41)
Thedisplay unit 41 displays the related information in the microscope observation image, and any display unit 41 may be used.
表示部41は、顕微鏡観察画像がその関連情報を表示するものであり、これらが閲覧可能なものであればよい。 (Display unit 41)
The
(CPU45)
CPU45は、画像表示装置4に設けられた各部を統括的に制御するものであり、例えば前述したサンプル認識部42、サンプル情報取得部43、アクセス情報記憶部44及び画像データ取得部46などを統括的に制御するプログラムを実行する。 (CPU 45)
TheCPU 45 comprehensively controls each unit provided in the image display device 4 and controls, for example, the sample recognition unit 42, the sample information acquisition unit 43, the access information storage unit 44, the image data acquisition unit 46, and the like described above. Program to control automatically.
CPU45は、画像表示装置4に設けられた各部を統括的に制御するものであり、例えば前述したサンプル認識部42、サンプル情報取得部43、アクセス情報記憶部44及び画像データ取得部46などを統括的に制御するプログラムを実行する。 (CPU 45)
The
[ネットワーク5]
ネットワーク5は、情報処理装置2、サーバ3及び画像表示装置4を、互いに双方向通信可能に接続する通信回線網である。このネットワーク5は、例えば、インターネット、電話回線網、衛星通信網、同報通信路などの公衆回線網や、WAN(Wide Area Network)、LAN(Local Area Network)、IP-VPN(Internet Protocol-Virtual Private Network)、Ethernet(登録商標)、ワイヤレスLANなどの専用回線網などで構成されており、有線か無線かは問わない。また、このネットワーク5は、本実施形態の顕微鏡システムに専用に設けられた通信回線網であってもよい。 [Network 5]
Thenetwork 5 is a communication line network that connects the information processing device 2, the server 3, and the image display device 4 to each other so that bidirectional communication is possible. The network 5 includes, for example, the public network such as the Internet, a telephone line network, a satellite communication network, a broadcast communication path, a WAN (Wide Area Network), a LAN (Local Area Network), an IP-VPN (Internet Protocol-Virtual). A private network such as Private Network, Ethernet (registered trademark), or a wireless LAN is used, regardless of whether it is wired or wireless. The network 5 may be a communication line network provided exclusively for the microscope system of the present embodiment.
ネットワーク5は、情報処理装置2、サーバ3及び画像表示装置4を、互いに双方向通信可能に接続する通信回線網である。このネットワーク5は、例えば、インターネット、電話回線網、衛星通信網、同報通信路などの公衆回線網や、WAN(Wide Area Network)、LAN(Local Area Network)、IP-VPN(Internet Protocol-Virtual Private Network)、Ethernet(登録商標)、ワイヤレスLANなどの専用回線網などで構成されており、有線か無線かは問わない。また、このネットワーク5は、本実施形態の顕微鏡システムに専用に設けられた通信回線網であってもよい。 [Network 5]
The
[動作]
次に、本実施形態の顕微鏡システムを用いて、病理標本の顕微鏡観察画像を表示する方法について説明する。図6は本実施形態の顕微鏡システムの全体の動作を示すフローチャート図であり、図7、図10、図12~図14はその各工程を示すフローチャート図である。また、図8Aは病理標本の一例を示す図であり、図8Bはそのラベルを示す図である。更に、図9は標本番号とスライドとの関係を示す図であり、図11はアクセス情報の一例を示す図である。 [Operation]
Next, a method for displaying a microscopic observation image of a pathological specimen using the microscope system of the present embodiment will be described. FIG. 6 is a flowchart showing the overall operation of the microscope system of the present embodiment, and FIGS. 7, 10, and 12 to 14 are flowcharts showing the respective steps. Moreover, FIG. 8A is a figure which shows an example of a pathological sample, FIG. 8B is a figure which shows the label. Further, FIG. 9 is a diagram showing the relationship between the sample number and the slide, and FIG. 11 is a diagram showing an example of access information.
次に、本実施形態の顕微鏡システムを用いて、病理標本の顕微鏡観察画像を表示する方法について説明する。図6は本実施形態の顕微鏡システムの全体の動作を示すフローチャート図であり、図7、図10、図12~図14はその各工程を示すフローチャート図である。また、図8Aは病理標本の一例を示す図であり、図8Bはそのラベルを示す図である。更に、図9は標本番号とスライドとの関係を示す図であり、図11はアクセス情報の一例を示す図である。 [Operation]
Next, a method for displaying a microscopic observation image of a pathological specimen using the microscope system of the present embodiment will be described. FIG. 6 is a flowchart showing the overall operation of the microscope system of the present embodiment, and FIGS. 7, 10, and 12 to 14 are flowcharts showing the respective steps. Moreover, FIG. 8A is a figure which shows an example of a pathological sample, FIG. 8B is a figure which shows the label. Further, FIG. 9 is a diagram showing the relationship between the sample number and the slide, and FIG. 11 is a diagram showing an example of access information.
図6に示すように、本実施形態の顕微鏡システムでは、デジタル顕微鏡1により病理標本の顕微鏡観察画像を撮像する。その際、図7に示すように、先ず、情報処理装置2の識別情報認識部22により、撮像対象の病理標本から、その識別情報を取得する。例えば、図8に示すように、識別情報がスライド100のラベル102に付されているバーコード103に記録されている場合は、デジタル顕微鏡1の撮像機能又は情報処理装置2に接続されたバーコードリーダなどにより読み取ることが可能である。
As shown in FIG. 6, in the microscope system of the present embodiment, a microscope observation image of a pathological specimen is captured by the digital microscope 1. At that time, as shown in FIG. 7, first, the identification information recognition unit 22 of the information processing apparatus 2 acquires the identification information from the pathological specimen to be imaged. For example, as shown in FIG. 8, when the identification information is recorded on the barcode 103 attached to the label 102 of the slide 100, the barcode connected to the imaging function of the digital microscope 1 or the information processing device 2. It can be read by a reader or the like.
なお、図9に示すように、ここで読み取る識別情報は、標本番号の他、例えば同じ検体についてスライス位置が異なる複数のスライドが作製されているような場合は、各スライドに付された番号の場合もある。
As shown in FIG. 9, the identification information read here is the number assigned to each slide, for example, in the case where a plurality of slides having different slice positions for the same specimen are prepared in addition to the sample number. In some cases.
次に、病理標本の検体101の撮像を行い、得られた画像を情報処理装置2の画像処理部23で処理して、顕微鏡観察画像を得る。そして、識別情報認識部22で取得された識別情報及び画像処理部23で合成した顕微鏡観察画像は、サーバ3の情報記憶部31にアップデートされる。
Next, the specimen 101 of the pathological specimen is imaged, and the obtained image is processed by the image processing unit 23 of the information processing apparatus 2 to obtain a microscope observation image. The identification information acquired by the identification information recognition unit 22 and the microscope observation image synthesized by the image processing unit 23 are updated to the information storage unit 31 of the server 3.
その後、図10に示すように、情報記憶部31の受付部311において、アップロードされた画像データと識別情報とが関連付けされ、画像データにアクセスするための情報(アクセス情報)が生成される。このアクセス情報の形式は、特に限定されるものではないが、例えば図11に示すようなアクセス先のURLなどがある。
Thereafter, as shown in FIG. 10, in the reception unit 311 of the information storage unit 31, the uploaded image data and the identification information are associated with each other, and information (access information) for accessing the image data is generated. The format of this access information is not particularly limited, and there is, for example, an access destination URL as shown in FIG.
そして、顕微鏡観察画像の画像データは画像データ記憶部312に記憶され、その画像データへのアクセス情報は、識別情報と共に標本情報記憶部313に記憶される。
The image data of the microscope observation image is stored in the image data storage unit 312 and access information to the image data is stored in the specimen information storage unit 313 together with the identification information.
一方、画像表示装置(ビューワ)4で顕微鏡観察画像を閲覧する場合は、図12に示すように、先ず、画像表示装置4のサンプル認識部42により、スライドガラス、検査表又はカルテなどに付されている閲覧対象の病理標本の識別情報を読み取る。次に、サンプル情報取得部43により、サンプル認識部42が取得した識別情報を、サーバ3に送信し、サーバ3から閲覧対象の病理標本を撮像した顕微鏡観察画像のデータにアクセスするための情報(アクセス情報)を取得する。
On the other hand, when a microscope observation image is browsed by the image display device (viewer) 4, first, as shown in FIG. 12, the sample recognition unit 42 of the image display device 4 attaches to a slide glass, an inspection table, or a medical chart. The identification information of the pathological specimen to be viewed is read. Next, the sample information acquisition unit 43 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and information for accessing the data of the microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3 ( Access information).
図13に示すように、識別情報を要求を受けたサーバ3は、情報抽出部32において、画像表示装置4からの要求された顕微鏡観察画像のアクセス情報を抽出し、画像表示装置4に送信する。なお、サーバ3から提供されたアクセス情報は、必要に応じて、アクセス情報記憶部44に記憶される。
As illustrated in FIG. 13, the server 3 that has received the request for the identification information extracts the access information of the requested microscope observation image from the image display device 4 in the information extraction unit 32 and transmits the access information to the image display device 4. . The access information provided from the server 3 is stored in the access information storage unit 44 as necessary.
また、アクセス情報に基づいて、画像表示装置(ビューワ)4の表示部41に、顕微鏡観察画像を表示する場合は、図14に示すように、先ず、情報入力部47への情報入力の有無を確認する。そして、情報入力があったとき(Y)は、その内容に応じて、画像データの取得が必要である(Y)か否(N)かを判断する。例えば、入力内容が画像表示装置(ビューワ)4の表示部41に表示される画像の視点や倍率の変更であった場合は、表示に必要なデータ(タイル画像など)が揃っているかどうかで判断される。
Further, when displaying a microscope observation image on the display unit 41 of the image display device (viewer) 4 based on the access information, first, as shown in FIG. Check. When information is input (Y), it is determined whether image data needs to be acquired (Y) or not (N) according to the content. For example, when the input content is a change in the viewpoint or magnification of the image displayed on the display unit 41 of the image display device (viewer) 4, the determination is made based on whether or not the data (tile image etc.) necessary for display is available. Is done.
ここで、画像データの取得が必要(Y)と判断された場合は、入力された表示領域(画角)や倍率などから、リクエストパラメータを算出する。その後、画像データ取得部46により、サンプル情報取得部43で取得したアクセス情報又はアクセス情報記憶部44に記憶されたアクセス情報に基づいて、サーバ3にアクセスし、閲覧対象の顕微鏡観察画像の画像データを取得する。そして、画像表示装置(ビューワ)4の表示部41において、サーバ3から提供された画像データを表示する。
Here, when it is determined that image data needs to be acquired (Y), request parameters are calculated from the input display area (view angle), magnification, and the like. Thereafter, the image data acquisition unit 46 accesses the server 3 based on the access information acquired by the sample information acquisition unit 43 or the access information stored in the access information storage unit 44, and the image data of the microscopic observation image to be browsed To get. Then, the image data provided from the server 3 is displayed on the display unit 41 of the image display device (viewer) 4.
一方、情報入力部47への情報入力がなかった(N)場合、及び画像データの取得が不要(N)と判断された場合は、初期状態に戻り、情報入力部47への情報入力を待つ。
On the other hand, when there is no information input to the information input unit 47 (N) and when it is determined that image data acquisition is unnecessary (N), the process returns to the initial state and waits for information input to the information input unit 47. .
本実施形態の顕微鏡システムでは、スライド、検査表又はカルテなどから読み取った識別情報をサーバに送信し、その識別情報と関連付けられた画像データのアクセス情報を取得しているため、目的とする顕微鏡観察画像を、容易にかつ確実に選択し、表示することができる。また、ユーザが識別情報を直接入力して検索したり、複数の画像を閲覧しながら選択したりする必要がないため、選択すべき画像を間違えることもない。ユーザ毎に、表示(開示)される識別情報の種類を変更や制限することもできる。
In the microscope system according to the present embodiment, identification information read from a slide, an examination table, or a medical chart is transmitted to a server, and access information of image data associated with the identification information is acquired. Images can be easily and reliably selected and displayed. Further, since it is not necessary for the user to directly input identification information to search or to select a plurality of images while browsing, the image to be selected is not mistaken. The type of identification information displayed (disclosed) can be changed or restricted for each user.
なお、本実施形態の顕微鏡システムでは、サーバ3において、画像データとその識別情報とを関連付けし、アクセス情報を生成しているが、本開示はこれに限定されるものではない。例えば、サーバ3を設けずに、情報処理装置2にこれらの機能を持たせてもよい。その場合、情報処理装置2に情報記憶部や情報抽出部を設ければよく、画像表示装置4は情報処理装置2にアクセス情報を要求することとなる。
In the microscope system of the present embodiment, the server 3 associates image data with its identification information and generates access information, but the present disclosure is not limited to this. For example, the information processing apparatus 2 may have these functions without providing the server 3. In that case, an information storage unit and an information extraction unit may be provided in the information processing device 2, and the image display device 4 requests access information from the information processing device 2.
<2.第2の実施の形態>
次に、本開示の第2の実施形態に係る顕微鏡システムについて説明する。図15は本実施形態の顕微鏡システムの画像表示装置の構成例を示すブロック図であり、図16は画像表示装置6に画像データを提供する際のサーバ3の動作を示すフローチャート図である。 <2. Second Embodiment>
Next, a microscope system according to the second embodiment of the present disclosure will be described. FIG. 15 is a block diagram illustrating a configuration example of the image display apparatus of the microscope system according to the present embodiment, and FIG. 16 is a flowchart illustrating the operation of theserver 3 when providing image data to the image display apparatus 6.
次に、本開示の第2の実施形態に係る顕微鏡システムについて説明する。図15は本実施形態の顕微鏡システムの画像表示装置の構成例を示すブロック図であり、図16は画像表示装置6に画像データを提供する際のサーバ3の動作を示すフローチャート図である。 <2. Second Embodiment>
Next, a microscope system according to the second embodiment of the present disclosure will be described. FIG. 15 is a block diagram illustrating a configuration example of the image display apparatus of the microscope system according to the present embodiment, and FIG. 16 is a flowchart illustrating the operation of the
前述した第1の実施形態の顕微鏡システムでは、画像表示装置が顕微鏡観察画像データへのアクセス情報を取得しているが、本開示はこれに限定されるものではなく、アクセス情報を取得せずに顕微鏡観察画像データを取得することもできる。その場合、図15に示すように、画像表示装置6には、サンプル認識部42と画像データ取得部46が設けられていればよい。
In the microscope system of the first embodiment described above, the image display device acquires access information to the microscope observation image data. However, the present disclosure is not limited to this, and the access information is not acquired. Microscopic observation image data can also be acquired. In that case, as shown in FIG. 15, the image display device 6 may be provided with a sample recognition unit 42 and an image data acquisition unit 46.
本実施形態の顕微鏡システムにより、顕微鏡観察画像を表示する場合は、先ず、画像表示装置6のサンプル認識部42により、スライドガラス、検査表又はカルテなどに付されている閲覧対象の病理標本の識別情報を読み取る。次に、画像データ取得部46により、サンプル認識部42が取得した識別情報を、サーバ3に送信し、サーバ3から閲覧対象の病理標本を撮像した顕微鏡観察画像のデータを取得する。
When displaying a microscope observation image with the microscope system of the present embodiment, first, the sample recognition unit 42 of the image display device 6 identifies the pathological specimen to be browsed attached to the slide glass, examination table, medical chart, or the like. Read information. Next, the image data acquisition unit 46 transmits the identification information acquired by the sample recognition unit 42 to the server 3, and acquires data of a microscope observation image obtained by imaging the pathological specimen to be browsed from the server 3.
本実施形態の顕微鏡システムでも、病理標本の識別情報をサーバに送信し、その病理標本の画像データを取得しているため、目的とする顕微鏡観察画像を、容易にかつ確実に選択し、表示することができる。なお、本実施形態の顕微鏡システムにおける上記以外の構成及び効果は、前述した第1の実施形態と同様である。
Even in the microscope system of the present embodiment, the pathological specimen identification information is transmitted to the server and the image data of the pathological specimen is acquired, so that the target microscope observation image can be easily and reliably selected and displayed. be able to. The configuration and effects other than those described above in the microscope system of the present embodiment are the same as those in the first embodiment described above.
また、本開示は、以下のような構成をとることもできる。
(1)
閲覧対象の病理標本の識別情報を読み取るサンプル認識部と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部と、
を有する画像表示装置。
(2)
前記病理標本に関する情報は、前記病理標本を撮像した顕微鏡観察画像データ又は前記顕微鏡観察画像データへのアクセス情報である(1)に記載の画像表示装置。
(3)
前記アクセス情報を記憶するアクセス情報記憶部を有する(2)に記載の画像表示装置。
(4)
前記アクセス情報に基づいて前記情報処理装置にアクセスし、前記顕微鏡観察画像データを取得する画像データ取得部を有する(2)又は(3)に記載の画像表示装置。
(5)
更に、ユーザが前記顕微鏡観察画像データに関する情報を入力する情報入力部を有する(2)に記載の画像表示装置。
(6)
前記サンプル認識部はバーコード又はRFタグの読み取り機である(1)~(5)のいずれかに記載の画像表示装置。
(7)
前記識別情報は、前記病理標本が封入されたスライドガラスに付されている(1)~(6)のいずれかに記載の画像表示装置。
(8)
前記病理標本を撮像した顕微鏡観察画像を閲覧可能な表示部を備える(1)~(7)のいずれかに記載の画像表示装置。
(9)
サンプル認識部により、閲覧対象の病理標本の識別情報を読み取るサンプル認識工程と、
サンプル情報取得部により、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得工程と、
を有する画像表示方法。
(10)
サンプル認識部と、サンプル情報取得部とを少なくとも備える画像表示装置に、
閲覧対象の病理標本の識別情報を読み取るサンプル認識機能と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得機能と、
を実行させるプログラム。
(11)
閲覧対象の病理標本の識別情報を読み取るサンプル認識部、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部、
を少なくとも備える画像表示装置と、
前記病理標本に関する情報が記憶された情報記憶部、
前記画像表示装置からの要求に応じて、前記情報記憶部から前記画像表示装置に提供する情報を抽出する情報抽出部、
を少なくとも備える情報処理装置と、
を有する顕微鏡システム。
(12)
前記情報処理装置の情報記憶部には、顕微鏡装置で撮像された病理標本の顕微鏡観察画像と、前記顕微鏡観察画像に関連付けられた前記病理標本の識別情報が記憶されており、
前記情報抽出部は、前記画像表示装置から送信された識別情報に基づいて前記識別情報と関連付けられた顕微鏡観察画像のデータ又は前記顕微鏡観察画像データへのアクセス情報を抽出する(11)に記載の顕微鏡システム。 In addition, the present disclosure can take the following configurations.
(1)
A sample recognition unit for reading identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display apparatus.
(2)
The image display apparatus according to (1), wherein the information related to the pathological specimen is microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
(3)
The image display device according to (2), further including an access information storage unit that stores the access information.
(4)
The image display device according to (2) or (3), further including an image data acquisition unit that accesses the information processing device based on the access information and acquires the microscope observation image data.
(5)
The image display device according to (2), further including an information input unit through which a user inputs information related to the microscope observation image data.
(6)
The image display device according to any one of (1) to (5), wherein the sample recognition unit is a barcode or RF tag reader.
(7)
The image display device according to any one of (1) to (6), wherein the identification information is attached to a slide glass in which the pathological specimen is enclosed.
(8)
The image display device according to any one of (1) to (7), further including a display unit capable of browsing a microscope observation image obtained by imaging the pathological specimen.
(9)
A sample recognition step of reading identification information of a pathological specimen to be browsed by the sample recognition unit;
A sample information acquisition step of transmitting the identification information to an information processing device by a sample information acquisition unit, and acquiring information on the pathological specimen from the information processing device;
An image display method comprising:
(10)
In an image display device comprising at least a sample recognition unit and a sample information acquisition unit,
A sample recognition function that reads the identification information of the pathological specimen to be browsed;
A sample information acquisition function for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
A program that executes
(11)
A sample recognition unit that reads identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display device comprising at least
An information storage unit storing information on the pathological specimen;
An information extraction unit that extracts information to be provided to the image display device from the information storage unit in response to a request from the image display device;
An information processing device comprising at least
A microscope system.
(12)
The information storage unit of the information processing apparatus stores a microscope observation image of a pathological specimen imaged by a microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image,
The information extracting unit extracts data of a microscope observation image associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device (11). Microscope system.
(1)
閲覧対象の病理標本の識別情報を読み取るサンプル認識部と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部と、
を有する画像表示装置。
(2)
前記病理標本に関する情報は、前記病理標本を撮像した顕微鏡観察画像データ又は前記顕微鏡観察画像データへのアクセス情報である(1)に記載の画像表示装置。
(3)
前記アクセス情報を記憶するアクセス情報記憶部を有する(2)に記載の画像表示装置。
(4)
前記アクセス情報に基づいて前記情報処理装置にアクセスし、前記顕微鏡観察画像データを取得する画像データ取得部を有する(2)又は(3)に記載の画像表示装置。
(5)
更に、ユーザが前記顕微鏡観察画像データに関する情報を入力する情報入力部を有する(2)に記載の画像表示装置。
(6)
前記サンプル認識部はバーコード又はRFタグの読み取り機である(1)~(5)のいずれかに記載の画像表示装置。
(7)
前記識別情報は、前記病理標本が封入されたスライドガラスに付されている(1)~(6)のいずれかに記載の画像表示装置。
(8)
前記病理標本を撮像した顕微鏡観察画像を閲覧可能な表示部を備える(1)~(7)のいずれかに記載の画像表示装置。
(9)
サンプル認識部により、閲覧対象の病理標本の識別情報を読み取るサンプル認識工程と、
サンプル情報取得部により、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得工程と、
を有する画像表示方法。
(10)
サンプル認識部と、サンプル情報取得部とを少なくとも備える画像表示装置に、
閲覧対象の病理標本の識別情報を読み取るサンプル認識機能と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得機能と、
を実行させるプログラム。
(11)
閲覧対象の病理標本の識別情報を読み取るサンプル認識部、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部、
を少なくとも備える画像表示装置と、
前記病理標本に関する情報が記憶された情報記憶部、
前記画像表示装置からの要求に応じて、前記情報記憶部から前記画像表示装置に提供する情報を抽出する情報抽出部、
を少なくとも備える情報処理装置と、
を有する顕微鏡システム。
(12)
前記情報処理装置の情報記憶部には、顕微鏡装置で撮像された病理標本の顕微鏡観察画像と、前記顕微鏡観察画像に関連付けられた前記病理標本の識別情報が記憶されており、
前記情報抽出部は、前記画像表示装置から送信された識別情報に基づいて前記識別情報と関連付けられた顕微鏡観察画像のデータ又は前記顕微鏡観察画像データへのアクセス情報を抽出する(11)に記載の顕微鏡システム。 In addition, the present disclosure can take the following configurations.
(1)
A sample recognition unit for reading identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display apparatus.
(2)
The image display apparatus according to (1), wherein the information related to the pathological specimen is microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
(3)
The image display device according to (2), further including an access information storage unit that stores the access information.
(4)
The image display device according to (2) or (3), further including an image data acquisition unit that accesses the information processing device based on the access information and acquires the microscope observation image data.
(5)
The image display device according to (2), further including an information input unit through which a user inputs information related to the microscope observation image data.
(6)
The image display device according to any one of (1) to (5), wherein the sample recognition unit is a barcode or RF tag reader.
(7)
The image display device according to any one of (1) to (6), wherein the identification information is attached to a slide glass in which the pathological specimen is enclosed.
(8)
The image display device according to any one of (1) to (7), further including a display unit capable of browsing a microscope observation image obtained by imaging the pathological specimen.
(9)
A sample recognition step of reading identification information of a pathological specimen to be browsed by the sample recognition unit;
A sample information acquisition step of transmitting the identification information to an information processing device by a sample information acquisition unit, and acquiring information on the pathological specimen from the information processing device;
An image display method comprising:
(10)
In an image display device comprising at least a sample recognition unit and a sample information acquisition unit,
A sample recognition function that reads the identification information of the pathological specimen to be browsed;
A sample information acquisition function for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
A program that executes
(11)
A sample recognition unit that reads identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display device comprising at least
An information storage unit storing information on the pathological specimen;
An information extraction unit that extracts information to be provided to the image display device from the information storage unit in response to a request from the image display device;
An information processing device comprising at least
A microscope system.
(12)
The information storage unit of the information processing apparatus stores a microscope observation image of a pathological specimen imaged by a microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image,
The information extracting unit extracts data of a microscope observation image associated with the identification information or access information to the microscope observation image data based on the identification information transmitted from the image display device (11). Microscope system.
1:デジタル顕微鏡、2:情報処理装置、3:サーバ、4,6:画像表示装置、5:ネットワーク、11:全体画像撮像部、12:部分画像撮像部、13:撮像装置コントローラ、14,27,28,34,35,48:インターフェース、21:撮像制御部、22:識別情報認識部、23:画像処理部、24,33,45:CPU、25:メモリ、26:ハードディスク、31:情報記憶部、32:情報抽出部、41:表示部、42:サンプル認識部、43:サンプル情報取得部、44:アクセス情報記憶部、46:画像データ取得部、47:情報入力部、100:スライド、101:検体、102:ラベル、103:バーコード、311:受付部、312:画像データ記憶部、313:標本情報記憶部
1: Digital microscope, 2: Information processing device, 3: Server, 4, 6: Image display device, 5: Network, 11: Whole image imaging unit, 12: Partial image imaging unit, 13: Imaging device controller, 14, 27 , 28, 34, 35, 48: interface, 21: imaging control unit, 22: identification information recognition unit, 23: image processing unit, 24, 33, 45: CPU, 25: memory, 26: hard disk, 31: information storage Unit: 32: information extraction unit, 41: display unit, 42: sample recognition unit, 43: sample information acquisition unit, 44: access information storage unit, 46: image data acquisition unit, 47: information input unit, 100: slide, 101: Sample, 102: Label, 103: Barcode, 311: Accepting unit, 312: Image data storage unit, 313: Sample information storage unit
Claims (12)
- 閲覧対象の病理標本の識別情報を読み取るサンプル認識部と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部と、
を有する画像表示装置。 A sample recognition unit for reading identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display apparatus. - 前記病理標本に関する情報は、前記病理標本を撮像した顕微鏡観察画像データ又は前記顕微鏡観察画像データへのアクセス情報である請求項1に記載の画像表示装置。 2. The image display device according to claim 1, wherein the information related to the pathological specimen is microscope observation image data obtained by imaging the pathological specimen or access information to the microscope observation image data.
- 前記アクセス情報を記憶するアクセス情報記憶部を有する請求項2に記載の画像表示装置。 The image display device according to claim 2, further comprising an access information storage unit that stores the access information.
- 前記アクセス情報に基づいて前記情報処理装置にアクセスし、前記顕微鏡観察画像データを取得する画像データ取得部を有する請求項2に記載の画像表示装置。 The image display device according to claim 2, further comprising an image data acquisition unit that accesses the information processing device based on the access information and acquires the microscope observation image data.
- 更に、ユーザが前記顕微鏡観察画像データに関する情報を入力する情報入力部を有する請求項2に記載の画像表示装置。 The image display device according to claim 2, further comprising an information input unit through which a user inputs information related to the microscope observation image data.
- 前記サンプル認識部はバーコード又はRFタグの読み取り機である請求項1に記載の画像表示装置。 The image display device according to claim 1, wherein the sample recognition unit is a barcode or RF tag reader.
- 前記識別情報は、前記病理標本が封入されたスライドガラスに付されている請求項1に記載の画像表示装置。 The image display device according to claim 1, wherein the identification information is attached to a slide glass in which the pathological specimen is enclosed.
- 前記病理標本を撮像した顕微鏡観察画像を閲覧可能な表示部を備える請求項1に記載の画像表示装置。 The image display device according to claim 1, further comprising a display unit capable of browsing a microscope observation image obtained by imaging the pathological specimen.
- サンプル認識部により、閲覧対象の病理標本の識別情報を読み取るサンプル認識工程と、
サンプル情報取得部により、前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得工程と、
を有する画像表示方法。 A sample recognition step of reading identification information of a pathological specimen to be browsed by the sample recognition unit;
A sample information acquisition step of transmitting the identification information to an information processing device by a sample information acquisition unit, and acquiring information on the pathological specimen from the information processing device;
An image display method comprising: - サンプル認識部と、サンプル情報取得部とを少なくとも備える画像表示装置に、
閲覧対象の病理標本の識別情報を読み取るサンプル認識機能と、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得機能と、
を実行させるプログラム。 In an image display device comprising at least a sample recognition unit and a sample information acquisition unit,
A sample recognition function that reads the identification information of the pathological specimen to be browsed;
A sample information acquisition function for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
A program that executes - 閲覧対象の病理標本の識別情報を読み取るサンプル認識部、
前記識別情報を情報処理装置に送信し、前記情報処理装置から前記病理標本に関する情報を取得するサンプル情報取得部、
を少なくとも備える画像表示装置と、
前記病理標本に関する情報が記憶された情報記憶部、
前記画像表示装置からの要求に応じて、前記情報記憶部から前記画像表示装置に提供する情報を抽出する情報抽出部、
を少なくとも備える情報処理装置と、
を有する顕微鏡システム。 A sample recognition unit that reads identification information of a pathological specimen to be browsed;
A sample information acquisition unit for transmitting the identification information to an information processing device and acquiring information on the pathological specimen from the information processing device;
An image display device comprising at least
An information storage unit storing information on the pathological specimen;
An information extraction unit that extracts information to be provided to the image display device from the information storage unit in response to a request from the image display device;
An information processing device comprising at least
A microscope system. - 前記情報処理装置の情報記憶部には、顕微鏡装置で撮像された病理標本の顕微鏡観察画像と、前記顕微鏡観察画像に関連付けられた前記病理標本の識別情報が記憶されており、
前記情報抽出部は、前記画像表示装置から送信された識別情報に基づいて前記識別情報と関連付けられた顕微鏡観察画像のデータ又は前記顕微鏡観察画像データへのアクセス情報を抽出する請求項11に記載の顕微鏡システム。 The information storage unit of the information processing apparatus stores a microscope observation image of a pathological specimen imaged by a microscope apparatus, and identification information of the pathological specimen associated with the microscope observation image,
The said information extraction part extracts the data of the microscope observation image linked | related with the said identification information based on the identification information transmitted from the said image display apparatus, or the access information to the said microscope observation image data. Microscope system.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012209487 | 2012-09-24 | ||
JP2012-209487 | 2012-09-24 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2014045759A1 true WO2014045759A1 (en) | 2014-03-27 |
Family
ID=50341083
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2013/071784 WO2014045759A1 (en) | 2012-09-24 | 2013-08-12 | Image display device, method, program, and microscope system |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2014045759A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018190055A1 (en) * | 2017-04-13 | 2018-10-18 | 浜松ホトニクス株式会社 | Image acquisition system and image acquisition method |
CN112329494A (en) * | 2020-10-16 | 2021-02-05 | 湖北三赢兴光电科技股份有限公司 | Two-dimensional code identification method and equipment based on electron microscope |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006049964A (en) * | 2004-07-30 | 2006-02-16 | Sysmex Corp | Image display system, image providing apparatus, image display apparatus and computer program |
WO2006033273A1 (en) * | 2004-09-22 | 2006-03-30 | Nikon Corporation | Microscope system and image processing method |
JP2007101199A (en) * | 2005-09-30 | 2007-04-19 | Sysmex Corp | Specimen imaging device, specimen imaging method, program for controlling specimen imaging device and specimen analyzer |
JP2009080665A (en) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | Medical report preparation support program, medical report preparation apparatus and medical report preparation support method |
JP2011027725A (en) * | 2009-06-25 | 2011-02-10 | Olympus Corp | Medical diagnosis support device, virtual microscope system, and sample supporting member |
WO2012029265A1 (en) * | 2010-08-31 | 2012-03-08 | 富士フイルム株式会社 | Medical treatment information display device and method, and program |
-
2013
- 2013-08-12 WO PCT/JP2013/071784 patent/WO2014045759A1/en active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006049964A (en) * | 2004-07-30 | 2006-02-16 | Sysmex Corp | Image display system, image providing apparatus, image display apparatus and computer program |
WO2006033273A1 (en) * | 2004-09-22 | 2006-03-30 | Nikon Corporation | Microscope system and image processing method |
JP2007101199A (en) * | 2005-09-30 | 2007-04-19 | Sysmex Corp | Specimen imaging device, specimen imaging method, program for controlling specimen imaging device and specimen analyzer |
JP2009080665A (en) * | 2007-09-26 | 2009-04-16 | Fujifilm Corp | Medical report preparation support program, medical report preparation apparatus and medical report preparation support method |
JP2011027725A (en) * | 2009-06-25 | 2011-02-10 | Olympus Corp | Medical diagnosis support device, virtual microscope system, and sample supporting member |
WO2012029265A1 (en) * | 2010-08-31 | 2012-03-08 | 富士フイルム株式会社 | Medical treatment information display device and method, and program |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018190055A1 (en) * | 2017-04-13 | 2018-10-18 | 浜松ホトニクス株式会社 | Image acquisition system and image acquisition method |
JP2018180281A (en) * | 2017-04-13 | 2018-11-15 | 浜松ホトニクス株式会社 | Image acquisition system, and image acquisition method |
US11022621B2 (en) | 2017-04-13 | 2021-06-01 | Hamamatsu Photonics K.K. | Image acquisition system and image acquisition method |
US20210231695A1 (en) * | 2017-04-13 | 2021-07-29 | Hamamatsu Photonics K.K. | Image acquisition system and image acquisition method |
CN112329494A (en) * | 2020-10-16 | 2021-02-05 | 湖北三赢兴光电科技股份有限公司 | Two-dimensional code identification method and equipment based on electron microscope |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11594024B2 (en) | Augmented reality microscope for pathology | |
EP3776458B1 (en) | Augmented reality microscope for pathology with overlay of quantitative biomarker data | |
US9069179B2 (en) | Creating and viewing three dimensional virtual slides | |
Weinstein et al. | An array microscope for ultrarapid virtual slide processing and telepathology. Design, fabrication, and validation study | |
CN101957495B (en) | Virtual telemicroscope | |
US20160217155A1 (en) | Storing and retrieving large images via dicom | |
US20120327211A1 (en) | Diagnostic information distribution device and pathology diagnosis system | |
JP2004500211A (en) | Remote interpretation of medical images | |
JP2009014939A (en) | Microscope system, VS image generation method thereof, and program | |
JP2009176234A (en) | Medical information system and medical image storage apparatus | |
JP2012014013A (en) | Microscope control device, image management server, image processing method, program, and image management system | |
CN103577137A (en) | Information processing apparatus, information processing method, program, and image display apparatus | |
JP2017184737A (en) | MFD inspection support system and inspection method using MFD | |
JP2009268731A (en) | Medical imaging display system, observation apparatus and medical image display method | |
JP2011083032A (en) | Computer-readable recording medium which stores data structure | |
JP2011027725A (en) | Medical diagnosis support device, virtual microscope system, and sample supporting member | |
WO2014045759A1 (en) | Image display device, method, program, and microscope system | |
Auguste et al. | Mobile Whole Slide Imaging (mWSI): a low resource acquisition and transport technique for microscopic pathological specimens | |
JP6513741B2 (en) | Pathological diagnosis support device | |
Weinstein et al. | Reinvention of light microscopy: array microscopy and ultrarapidly scanned virtual slides for diagnostic pathology and medical education | |
JP5967197B2 (en) | Information processing apparatus, information processing method, program, and microscope system | |
CN116997932A (en) | Information processing apparatus, information processing method, information processing system, and conversion model | |
Alvarez et al. | Tele-pathology: A use case in colombia | |
Arunasalam et al. | Development and testing of a smartphone adapter for image quality assurance and whole slide imaging | |
JP2015184612A (en) | Diagnosis system and diagnosis display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 13838684 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 13838684 Country of ref document: EP Kind code of ref document: A1 |
|
NENP | Non-entry into the national phase |
Ref country code: JP |