KR20210012492A - A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen - Google Patents
A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen Download PDFInfo
- Publication number
- KR20210012492A KR20210012492A KR1020190090327A KR20190090327A KR20210012492A KR 20210012492 A KR20210012492 A KR 20210012492A KR 1020190090327 A KR1020190090327 A KR 1020190090327A KR 20190090327 A KR20190090327 A KR 20190090327A KR 20210012492 A KR20210012492 A KR 20210012492A
- Authority
- KR
- South Korea
- Prior art keywords
- lesion
- medical image
- information
- screen
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/465—Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/54—Control of apparatus or devices for radiation diagnosis
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- High Energy & Nuclear Physics (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- Human Computer Interaction (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- General Physics & Mathematics (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법으로서, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계, 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계 및 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계를 포함한다.A method performed in an electronic device having a screen according to an embodiment of the present invention, comprising: displaying at least a part of a plurality of medical image images in which a patient's body section is successively photographed on one side of the screen, the other side of the screen In response to an input for selecting information on at least one lesion from among the information on at least one lesion read as present in the plurality of medical image images and information on the lesion displayed on the other side of the screen, And displaying a medical image image in which a selected lesion is present among the plurality of medical image images on one side of the screen.
Description
본 발명은 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것으로서, 보다 상세하게는 의료 영상 내의 병변 진단을 보조하기 위한 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것이다.The present invention relates to a medical image analysis auxiliary system, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen, and more particularly, a medical image analysis auxiliary system for assisting diagnosis of lesions in a medical image , A method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen.
많은 병원에서는 X-ray, CT, MRI 영상과 같은 의료 영상을 촬영하는 장비와 연계하는 의학영상정보시스템(PACS, Picture Archiving Communications System)을 사용하고 있다.Many hospitals use a medical imaging information system (PACS, Picture Archiving Communications System) that connects with equipment that takes medical images such as X-ray, CT, and MRI images.
의학영상정보시스템은 촬영된 의료 영상을 디지털 형태로 저장하고 임상의의 PC로 전송하여, 임상의가 PC에서 의료 영상을 확인하며 환자의 병변을 진단하도록 한다.The medical imaging information system stores photographed medical images in digital form and transmits them to the clinician's PC, allowing the clinician to check the medical images on the PC and diagnose the patient's lesions.
특히, CT, MRI 영상은 300장의 연속적인 단층 이미지로 구성되는데, 임상의는 300장의 이미지를 확인하여 병변을 빠짐없이 체크하고 정확한 진단을 해야하는 부담을 갖게 된다.In particular, CT and MRI images consist of 300 consecutive tomographic images, and the clinician has the burden of checking 300 images to check all lesions and make an accurate diagnosis.
본 발명이 해결하고자 하는 과제는, 사용자가 보다 편리하고 정확하게 병변을 진단할 수 있는 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 제공하는 것이다.The problem to be solved by the present invention is to provide a medical image analysis assistance system that enables a user to diagnose lesions more conveniently and accurately, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen. .
본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the problems mentioned above, and other problems that are not mentioned will be clearly understood by those skilled in the art from the following description.
상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고, 상기 화면 상에 표시된 상기 썸네일 이미지 상에 입력 장치의 포인터가 위치한 상태로 입력되는 스크롤 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and a thumbnail image of the lesion and the lesion on the other side of the screen Corresponding to the thumbnail image among the plurality of medical image images on one side of the screen in response to a scroll command input while the pointer of the input device is positioned on the thumbnail image displayed on the screen The surrounding medical image image of the medical image image is displayed.
상기 입력 장치는 마우스이며, 상기 스크롤 명령은 상기 마우스의 스크롤 휠의 이동에 의해 입력될 수 있다.The input device is a mouse, and the scroll command may be input by moving a scroll wheel of the mouse.
상기 입력 장치는 마우스이며, 상기 스크롤 명령은 상기 마우스의 드래그에 의해 입력될 수 있다.The input device is a mouse, and the scroll command may be input by dragging the mouse.
상기 입력 장치는 터치 스크린이며, 상기 스크롤 명령은 상기 터치 스크린의 터치 지점의 이동에 의해 입력될 수 있다.The input device is a touch screen, and the scroll command may be input by moving a touch point of the touch screen.
상기 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시될 수 있다.Among the plurality of medical image images, a medical image image in which the existence of the lesion is estimated may be displayed in a state in which the location of the lesion is highlighted.
상기 인터페이스 제어부는, 상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 할 수 있다.When a command for selecting at least one of the thumbnail image and the lesion information displayed on the screen is input, the interface control unit may include a lesion corresponding to the lesion information among the plurality of medical image images on one side of the screen. The marked lesion image can be displayed.
상기 인터페이스 제어부는, 상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시할 수 있다.When any one of the medical image images in which the existence of the lesion is estimated is displayed on one side of the screen, the interface controller is present in the medical image image displayed on one side of the screen among the information on the lesion displayed on the other side of the screen. The information on the lesion to be affected can be displayed in a highlighted state.
상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고, 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지가 상기 화면의 일측에 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and to display information on the lesion on the other side of the screen. And, in response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, a medical image image in which a selected lesion from among the plurality of medical image images is present is displayed on one side of the screen. Let it be.
상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and to display information on the lesion on the other side of the screen. And, when a medical image image including any one of the information on the lesion displayed on the other side of the screen among the plurality of medical image images is displayed on one side of the screen, the lesion displayed on the other side of the screen is displayed. Among the information, information on a lesion included in the medical image image displayed on one side of the screen is displayed in a highlighted state.
상기 과제를 해결하기 위한 본 발명의 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법은, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계, 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계 및 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계를 포함한다.A method performed in an electronic device having a screen according to an embodiment of the present invention for solving the above problem includes the steps of displaying at least some of a plurality of medical image images in which a patient's body cross section is successively photographed on one side of the screen. , Displaying information on at least one lesion read as present in the plurality of medical image images on the other side of the screen, and selecting information on any one lesion from information on the lesion displayed on the other side of the screen And displaying a medical image image in which a selected lesion is present among the plurality of medical image images on one side of the screen in response to the input.
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계를 더 포함할 수 있다.When a medical image image including any one of information on the lesion displayed on the other side of the screen is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen The method may further include displaying information on lesions included in the medical image image displayed on one side of the screen in a highlighted state.
상기 화면의 타측에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지가 표시될 수 있다.A thumbnail image of the lesion may be displayed together with information on the lesion on the other side of the screen.
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는 단계를 더 포함할 수 있다.In response to an input of a scroll command for the thumbnail image, the step of displaying a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images on one side of the screen may be further included. .
상기 과제를 해결하기 위한 본 발명의 실시예에 따른 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스는, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과, 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고, 상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시한다.A graphic user interface of an electronic device having a screen according to an embodiment of the present invention for solving the above problem includes an image display area in which any one of a plurality of medical image images continuously photographed of a patient's body section is displayed, and the Includes a lesion list display area displaying information on at least one lesion that is read as being present in a plurality of medical image images, and displays information on any one of the information on the lesion displayed in the lesion list display area. In response to a selected input, a medical image image in which a selected lesion is present among the plurality of medical image images is displayed on the image display area.
상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시할 수 있다.When a medical image image including any one of information on the lesion displayed in the lesion list display area among the plurality of medical image images is displayed in the image display area, the lesion displayed in the lesion list display area Among the information, information on a lesion included in the medical image image displayed on the image display area may be displayed in a state of being highlighted.
상기 병변 리스트 디스플레이 영역 내에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지를 표시할 수 있다.A thumbnail image of the lesion may be displayed together with information on the lesion within the lesion list display area.
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지를 표시할 수 있다.In response to an input of a scroll command for the thumbnail image, a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images may be displayed on the image display area.
본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the present invention are included in the detailed description and drawings.
본 발명의 실시예들에 의하면 적어도 다음과 같은 효과가 있다.According to the embodiments of the present invention, there are at least the following effects.
사용자가 보다 편리하고 정확하게 병변을 진단할 수 있다.The user can diagnose the lesion more conveniently and accurately.
본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.The effects according to the present invention are not limited by the contents exemplified above, and more various effects are included in the present specification.
도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이다.
도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이다.
도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이다.
도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이다.
도 9 내지 도 16은 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.1 is a diagram schematically illustrating a system in which a medical image analysis auxiliary system according to an embodiment of the present invention is used.
2 is a flow chart illustrating a part of a method performed in an electronic device having a screen according to an exemplary embodiment of the present invention.
3 is a diagram illustrating a graphic user interface displayed on a screen according to steps S11 and S12 of FIG. 2.
4 is a diagram illustrating an example of information on a lesion displayed in a lesion list display area of FIG. 3.
5 is a diagram illustrating a graphic user interface displayed on a screen according to steps S13 to S15 of FIG. 2.
6 is a flowchart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention.
7 is a diagram illustrating a graphic user interface displayed on a screen according to steps S21 and S22 of FIG. 6.
8 is a flow chart illustrating still another part of a method performed in an electronic device having a screen according to an exemplary embodiment of the present invention.
9 to 16 are diagrams illustrating a graphic user interface displayed on a screen according to steps S31 and S32 of FIG. 8.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in a variety of different forms, and only these embodiments make the disclosure of the present invention complete, and are common knowledge in the technical field to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have, and the invention is only defined by the scope of the claims. The same reference numerals refer to the same components throughout the specification.
또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 단면도 및/또는 개략도들을 참고하여 설명될 것이다. 따라서, 제조 기술 및/또는 허용 오차 등에 의해 예시도의 형태가 변형될 수 있다. 또한, 본 발명에 도시된 각 도면에 있어서 각 구성 요소들은 설명의 편의를 고려하여 다소 확대 또는 축소되어 도시된 것일 수 있다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.In addition, the embodiments described in the present specification will be described with reference to sectional views and/or schematic diagrams which are ideal exemplary diagrams of the present invention. Therefore, the shape of the exemplary diagram may be modified by manufacturing technology and/or tolerance. In addition, in each of the drawings shown in the present invention, each component may be somewhat enlarged or reduced in consideration of convenience of description. The same reference numerals refer to the same components throughout the specification.
이하, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 설명하기 위한 도면들을 참고하여 본 발명에 대하여 설명하도록 한다.Hereinafter, the present invention will be described with reference to drawings for explaining a medical image analysis auxiliary system according to an embodiment of the present invention, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen. .
도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.1 is a diagram schematically illustrating a system in which a medical image analysis auxiliary system according to an embodiment of the present invention is used.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(Picture Archiving Communications System, 2)와 통신 가능하게 연결된다. PACS는 현재 병원에서 널리 사용하고 있는 의료 영상 정보 시스템이다.As shown in Figure 1, the medical image
본 실시예에서는 의료 영상 분석 보조 시스템(1)이 연결되는 의료 영상 정보 시스템의 일례로서 PACS(2)를 기준으로 설명하지만, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(2) 이외의 다른 의료 영상 정보 시스템과 통신 가능하게 연결되어 사용될 수도 있다.In the present embodiment, as an example of a medical image information system to which the medical image analysis
의료 영상 분석 보조 시스템(1)은 병원 외부의 원격지에 존재할 수 있으며, 이 경우, PACS(2)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)과 PACS(2)는 인터넷과 같은 광역 네트워크를 통해 연결될 수 있다.The medical image
또는, 의료 영상 분석 보조 시스템(1)은 PACS(2)를 운용하는 병원 내에 위치할 수 있다. 이 경우, 의료 영상 분석 보조 시스템(1)은 병원 내 유무선 통신망을 통해 PACS(2)와 통신 가능하게 연결될 수 있다.Alternatively, the medical image
또한, 의료 영상 분석 보조 시스템(1)은 입력 장치(31)와 화면(32)을 갖는 단말기(3)와 통신 가능하게 연결될 수 있다. 단말기(3)는 데스크탑, 노트북, 태블릿, 스마트폰 등의 전자 장치일 수 있다.In addition, the medical image
의료 영상 분석 보조 시스템(1)은 단말기(3)에 대해 원격지에 존재하고 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)은 클라우드 방식으로 단말기(3)와 연결되어 서비스를 제공할 수 있다.The medical image
또는, 의료 영상 분석 보조 시스템(1)은 단말기(3)에 설치되는 소프트웨어로 제공될 수도 있다.Alternatively, the medical image
또는, 의료 영상 분석 보조 시스템(1)의 일부 구성은 단말기(3)에 설치되는 소프트웨어로 제공되고, 다른 일부 구성은 원격지에 구비되어 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다.Alternatively, some components of the medical image
도 1에 도시된 바와 같이, 의료 영상 분석 보조 시스템(1)은, 의료 영상 정보 수신부(11), 병변 판독부(12) 및 인터페이스 제어부(13)를 포함한다.As shown in FIG. 1, the medical image analysis
의료 영상 정보 수신부(11)는 PACS(2)로부터 PACS(2)에 저장되어 있거나 PACS(2)와 연계된 의료 영상 장치가 생성한 의료 영상 정보를 수신한다. 의료 영상 정보는 현재 일반적으로 사용되는 표준화된 의료 영상 정보인 다이콤(DICOM, Digital Imaging Communication in Medicine) 파일일 수 있다. 본 실시예에서는, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지가 셋트로 구성된, CT(Computer Tomography), MRI(Magnetic Resonance Imaging) 등과 같은 의료 영상 장치를 이용해 촬영한 의료 영상이 포함된 의료 영상 정보를 기준으로 설명한다.The medical image
병변 판독부(12)는 의료 영상 정보 수신부(11)가 수신한 의료 영상 정보에 포함된 의료 영상을 판독하여 병변의 존재를 추정하고 추정된 병변의 영상 내의 위치 및 정보 등을 검출한다. 병변 판독부(12)는 인공 지능(AI, artificial intelligence)을 기반으로 의료 영상을 판독하고, 영상 내에 존재하는 것을 추정되는 병변을 검출하도록 구성될 수 있으며, 병변 판독부(12)는 의료 영상의 촬영 부위(두부, 흉부, 복부, 척추, 손, 발 등), 검출하고자 하는 병변의 종류(골절, 결절 등) 등에 따라 구분된 별도의 분석 알고리즘을 구비할 수 있다.The lesion reading unit 12 estimates the existence of a lesion by reading a medical image included in the medical image information received by the medical image
본 실시예에서는, 의료 영상 분석 보조 시스템(1)에 병변 판독부(12)가 포함되는 구성을 예로 설명하고 있으나, 실시예에 따라 의료 영상 분석 보조 시스템은 병변 판독부(12)를 포함하지 않을 수 있다. 이 경우, 의료 영상 정보 수신부(11)는 병변 판독이 완료된 의료 영상 정보를 수신할 수 있다.In this embodiment, a configuration in which the lesion reading unit 12 is included in the medical image analysis
인터페이스 제어부(13)는 단말기(3)의 화면(32) 상에 표시되는 그래픽 사용자 인터페이스를 생성한다. 인터페이스 제어부(13)는 그래픽 사용자 인터페이스에 대한 정보를 단말기(3)로 전송하여 단말기(3)의 화면(32) 상에 그래픽 사용자 인터페이스가 시각적으로 표시되도록 한다. 또한, 단말기(3)의 입력 장치(31)를 통한 사용자의 입력에 대응하여 화면(32) 상에 표시된 그래픽 사용자 인터페이스를 변화시킨다.The
보다 구체적인 내용은 화면을 갖는 전자 장치에서 수행되는 방법 및 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스와 함께 설명한다.More specific details will be described together with a method performed in an electronic device having a screen and a graphic user interface of the electronic device having a screen.
도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이고, 도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이고, 도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이며, 도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.2 is a flowchart illustrating a part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIG. 3 is a graphic user interface displayed on the screen according to steps S11 and S12 of FIG. FIG. 4 is a diagram showing an example of information on lesions displayed in the lesion list display area of FIG. 3, and FIG. 5 illustrates a graphic user interface displayed on the screen according to steps S13 to S15 of FIG. It is a drawing shown.
도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법(이하, 방법.)은 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11), 병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12), 병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13), 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14), 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)를 포함한다.As shown in FIG. 2, a method (hereinafter, a method.) performed in an electronic device having a screen according to an embodiment of the present invention includes displaying at least a portion of a plurality of medical image images in an image display area (S11 ), displaying information on a lesion in a lesion list display area (S12), detecting an input for selecting any one of information on a lesion (S13), a lesion selected from among a plurality of medical image images in the image display area Displaying the existing medical image image (S14), and highlighting selected lesion information from among lesion information displayed in the lesion list display area (S15).
인터페이스 제어부(13)는 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하고, 병변 판독부(12)로부터 판독된 병변에 대한 정보를 수신할 수 있다. 병변 판독부(12)가 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하여 해당 의료 영상 정보에 판독된 병변에 대한 정보를 추가한 정보를 보유하고 있는 경우에는, 인터페이스 제어부(13)는 병변 판독부(12)로부터 병변에 대한 정보가 추가된 의료 영상 정보를 수신할 수 있다.The
도 3에 도시된 바와 같이, 인터페이스 제어부(13)는 단말기(3)의 화면(32)의 적어도 일부를 환자 정보 표시 영역(A), 이미지 디스플레이 영역(B) 및 병변 리스트 디스플레이 영역(C), 도구 표시 영역(D)으로 분할하여 표시하는 그래픽 사용자 인터페이스를 제공할 수 있다.As shown in FIG. 3, the
인터페이스 제어부(13)는 환자 정보 표시 영역(A)에 환자의 정보를 표시한다.The
환자의 정보는 의료 영상 정보(예를 들어, 다이콤 파일)에 포함된 정보일 수 있으며, 환자의 이름, ID, 의료 영상 촬영일 등이 포함될 수 있다.The patient information may be information included in medical image information (eg, a diecom file), and may include the patient's name, ID, and the date of medical image capture.
이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나를 표시한다. 예를 들어, 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지 중 어느 하나가 이미지 디스플레이 영역(B)에 표시된다.In the step (S11) of displaying at least a part of the plurality of medical image images in the image display area, the
병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12)에서, 인터페이스 제어부(13)는 병변 리스트 디스플레이 영역(C)에 병변 판독부(12)에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 추정되거나, 임상의 등에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 확인된 병변들의 정보를 표시한다. 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지에 존재하거나 존재하는 것으로 추정되는 병변들이 표시된다.In the step of displaying information on the lesion in the lesion list display area (S12), the
도 3 및 도 4에는 4개의 병변에 대한 정보(C1, C2, C3, C4)가 표시된 예가 도시되어 있다. 본 실시예에서는 설명의 편의를 위해, 병변의 일례로서, 폐에 존재하는 노듈(nodule)을 기준으로 설명한다.3 and 4 show examples in which information on four lesions (C1, C2, C3, C4) is displayed. In this embodiment, for convenience of explanation, as an example of a lesion, a nodule present in the lung is described as a reference.
4개의 병변에 대한 정보(C1, C2, C3, C4)는 병변의 썸네일 이미지(C11, C21, C31, C41)와 병변에 대한 문자 정보(C12, C22, C32, C42)를 포함할 수 있다.The information on the four lesions (C1, C2, C3, C4) may include thumbnail images of the lesion (C11, C21, C31, C41) and character information (C12, C22, C32, C42) of the lesion.
도 4에 도시된 바와 같이, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지의 일부(병변이 나타나는 부분)일 수 있다. 또는 다른 실시예로서, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지가 될 수도 있다.As shown in FIG. 4, the thumbnail images C11, C21, C31, and C41 of the lesion may be part of a medical image image in which a lesion exists (a portion where a lesion appears) among a plurality of medical image images. Alternatively, as another embodiment, the thumbnail images C11, C21, C31, and C41 of the lesion may be medical image images in which the lesion exists among a plurality of medical image images.
병변에 대한 문자 정보(C12, C22, C32, C42)는 병변의 타입(Solid, Part Solid 등), 병변의 위치(RLL(Right Lower Lobe), LLL(Left Lower Lobe) 등), 병변이 위치하는 이미지 번호(#54, #99, #110, #137 등), 평균 크기(예: Avg: 7.8mm 등), 최장 길이/최단 길이(예: 8.3/7.2) 등을 포함할 수 있다.Character information about the lesion (C12, C22, C32, C42) is the type of lesion (Solid, Part Solid, etc.), the location of the lesion (RLL (Right Lower Lobe), LLL (Left Lower Lobe), etc.), and the lesion is located. It can include image numbers (#54, #99, #110, #137, etc.), average size (eg Avg: 7.8mm, etc.), longest/shortest length (eg 8.3/7.2).
인터페이스 제어부(13)는 도구 표시 영역(D)에 단말기(3)의 사용자(예를 들어, 임상의 등)가 인터페이스를 통해 명령을 입력할 수 있는 도구들의 아이콘을 표시할 수 있다.The
병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13)에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 선택하는 입력을 검출한다. In the step of detecting an input for selecting any one of the information on the lesion (S13), the
병변에 대한 정보 중 어느 하나를 선택하는 입력은, 입력 장치(31)가 마우스인 경우, 사용자가 마우스를 조작하여 화면(32) 상에 표시되는 마우스 포인터를 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나 위에 위치시키고 마우스를 클릭하여 제공될 수 있다.The input for selecting any one of the lesion information is, when the
또한, 입력 장치(31)가 화면(32) 상에 구성된 터치 스크린으로 구성되는 경우, 사용자는 터치용 펜, 또는 손가락을 이용해 화면(32) 상에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 터치하여 제공될 수 있다.In addition, when the
병변에 대한 정보 중 어느 하나를 선택하는 입력이 검출되면, 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 S13 단계에서 선택된 병변이 존재하는 의료 영상 이미지를 표시한다.When an input for selecting any one of the information on the lesion is detected, in the step of displaying a medical image image in which the selected lesion is present among a plurality of medical image images in the image display area (S14), the
예를 들어, 화면(32) 상에 도 3과 같은 이미지가 표시된 상태에서 사용자가 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 C1을 선택하면, 인터페이스 제어부(13)는 복수의 의료 영상 이미지(예를 들어, 300장의 이미지) 중 C1이 존재하는 의료 영상 이미지(예를 들어, 54번 이미지)가 이미지 디스플레이 영역(B) 상에 표현된 도 5와 같은 이미지가 화면(32) 상에 표시되도록 한다.For example, when the user selects C1 among lesion information (C1, C2, C3, C4) using the
위와 같은 그래픽 유저 인터페이스를 제공하므로, 임상의가 복수의 의료 영상 이미지에서 병변이 존재하는 부분을 빠르게 찾아볼 수 있게 된다.By providing the graphic user interface as described above, the clinician can quickly find a portion where a lesion exists in a plurality of medical image images.
또한, 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)에서, 인터페이스 제어부(13)는 병변에 대한 정보(C1, C2, C3, C4) 중 S13 단계에서 선택된 병변에 대한 정보(C1)가 하이라이트 처리하여 표시되도록 한다. 하이라이트 처리는 해당 영역의 밝기를 주변 영역에 비해 밝게 처리하거나, 투명한 색상(예를 들어, 노란색, 형광색, 붉은색 등)이 오버랩되도록 처리하거나, 글자의 폰트 및/또는 굵기를 다른 부분과 다르게 처리하는 등 주변 영역과 시각적으로 확연하게 분별되도록 하는 이미지 처리를 의미할 수 있다.In addition, in the step (S15) of highlighting the selected lesion information among the lesion information displayed on the lesion list display area, the
인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지 중 추정되거나 확인된 병변이 존재하는 의료 영상 이미지가 표시되는 경우, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 의료 영상 이미지 내에 존재하는 병변에 대한 정보(C1)가 하이라이트 처리되도록 표시할 수 있다.When the medical image image in which the estimated or confirmed lesion exists among a plurality of medical image images is displayed in the image display area B, the
도 2 내지 도 5에 도시된 예에서, 4개의 병변은 300개의 단층 이미지에서 각각 54번째, 99번째, 110번째, 137번째에 존재한다. 따라서, 사용자의 입력에 의해 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지가 순차적으로 표시되는 경우, 54번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C1이 하이라이트 처리되도록 표시되고, 99번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C2가 하이라이트 처리되도록 표시되는 방식으로 처리될 수 있다.In the example shown in Figs. 2 to 5, four lesions are present at the 54th, 99th, 110th, and 137th in 300 tomographic images, respectively. Therefore, when a plurality of medical image images are sequentially displayed in the image display area (B) by user input, when the 54th medical image image is displayed in the image display area (B), the lesion list display area (C) is displayed. If C1 among the information on the lesion (C1, C2, C3, C4) is displayed to be highlighted and the 99th medical image image is displayed in the image display area (B), the information on the lesion displayed in the lesion list display area (C) C2 of (C1, C2, C3, C4) may be processed in a manner that is displayed to be highlighted.
이러한 기능은 임상의가 이미지 디스플레이 영역(B) 표시되는 복수의 단층 이미지를 순차적으로 빠르게 넘기며 확인할 때, 병변이 존재하는 이미지가 이미지 디스플레이 영역(B)에 출현하면, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 그에 대응하는 정보가 하이라이트 처리되도록 하여, 병변이 존재하는 이미지임을 빠르게 인식할 수 있고, 해당 병변에 대한 정보도 즉시 확인할 수 있도록 한다.This function is performed when the clinician quickly flips and confirms a plurality of tomographic images displayed in the image display area (B) in sequence, and when an image with a lesion appears in the image display area (B), the lesion list display area (C) is Among the information on the displayed lesion (C1, C2, C3, C4), the corresponding information is highlighted, so that it is possible to quickly recognize that the image exists and the information on the lesion can be immediately confirmed.
한편, 도 5에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내에 병변이 존재하는 경우, 해당 병변의 위치(B1)가 하이라이트 처리되어 표시되도록 할 수 있다. 또한, 의료 영상 이미지 상에 해당 병변에 대한 구체적인 정보(B2)(예를 들어, XYZ 좌표, 병변에 대한 문자 정보(C12, C22, C32, C42)에 기재되지 않은 병변에 대한 추가적인 정보 등)이 오버랩되어 표시되도록 할 수 있다.Meanwhile, as shown in FIG. 5, when a lesion exists in the medical image image displayed in the image display area B, the location B1 of the lesion may be highlighted and displayed. . In addition, specific information about the lesion (B2) (e.g., XYZ coordinates, text information about the lesion (C12, C22, C32, C42), additional information about the lesion not described in the medical image image) It can be displayed overlapping.
도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이고, 도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.6 is a flow chart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIG. 7 is a graphic user interface displayed on the screen according to steps S21 and S22 of FIG. 6. It is a diagram showing.
본 발명의 일 실시예에 따른 방법은, 병변 영역의 확대를 요청하는 입력을 검출하는 단계(S21) 및 이미지 디스플레이 영역에 이미지 내의 병변 부분을 확대 표시하는 단계(S22)를 더 포함할 수 있다. S21 및 S22 단계는 S14 단계 이후에 수행될 수 있다.The method according to an embodiment of the present invention may further include detecting an input requesting enlargement of the lesion area (S21), and expanding and displaying the lesion area within the image in the image display area (S22). Steps S21 and S22 may be performed after step S14.
S21 단계에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변 영역의 확대를 요청하는 입력을 검출한다. 병변 영역의 확대를 요청하는 입력은 도구 표시 영역(D) 내에 표시된 아이콘들 중 병변 영역의 확대를 실행하는 아이콘을 사용자가 입력 장치(31)를 이용해 선택하여 제공될 수 있다. 또는, 사용자가 입력 장치(31)를 이용해, 의료 영상 이미지에서 하이라이트 처리되어 표시된 병변의 위치(B1)를 선택하여 제공될 수 있다.In step S21, the
병변 영역의 확대를 요청하는 입력이 검출되면, 인터페이스 제어부(13)는 S22 단계를 실행하여, 도 7에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내의 병변 부분이 대략 이미지 디스플레이 영역(B)의 중심에 위치하도록 병변 부분을 확대하여 의료 영상 이미지의 일부가 이미지 디스플레이 영역(B)에 표시되도록 한다. 확대 비율을 미리 설정되거나, 사용자에 의해 결정/조절될 수 있으며, 병변의 크기에 따라 확대 비율이 달라지도록 설정될 수도 있다. 예를 들어, 병변의 크기가 큰 경우에 병변의 크기가 작은 경우에 비해 확대 비율이 작도록 설정될 수 있다.When an input requesting enlargement of the lesion area is detected, the
이러한 기능은 임상의가 병변의 형상, 특성 등을 확인하고자 하는 경우, 손쉽게 병변을 확대하여 보여주므로, 사용자 편의성을 향상시킨다.This function improves user convenience because, when the clinician wants to check the shape and characteristics of the lesion, the lesion is easily enlarged and displayed.
도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이고, 도 9 내지 도 16은 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.8 is a flowchart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIGS. 9 to 16 are displayed on the screen according to steps S31 and S32 of FIG. It is a diagram showing a graphic user interface.
도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 방법은, 썸네일 이미지에 대한 스크롤 명령의 입력을 검출하는 단계(S31) 및 스크롤 방향에 대응하여 이미지 디스플레이 영역에 주변 이미지를 표시하는 단계(S32)를 포함한다. S31 및 S32 단계는 S14 단계 이후에 수행될 수 있다.As shown in FIG. 8, the method according to an embodiment of the present invention includes the steps of detecting an input of a scroll command for a thumbnail image (S31) and displaying a surrounding image in an image display area corresponding to the scroll direction. (S32) is included. Steps S31 and S32 may be performed after step S14.
S31 단계에서, 인터페이스 제어부(13)는 썸네일 이미지에 대한 스크롤 명령의 입력을 검출한다. 썸네일 이미지에 대한 스크롤 명령은, 사용자가 입력 장치(31)를 이용해 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나의 썸네일 이미지(C11, C12, C13, C14) 중 어느 하나에 입력 장치의 포인터를 위치한 상태에서 스크롤 명령을 입력하는 것을 의미한다.In step S31, the
도 9에 도시된 바와 같이, 사용자가 병변에 대한 정보(C1, C2, C3, C4) 중 C3을 선택하여, 이미지 디스플레이 영역(B)에 C3에 대한 병변이 존재하는 110번째 의료 영상 이미지가 표시된 상태에서, 도 10에 도시된 바와 같이, 사용자가 입력 장치(31)인 마우스를 조작하여 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스 휠을 일방향으로 회전시키는 동작에 의해 썸네일 이미지에 대한 스크롤 명령이 입력될 수 있다.As shown in FIG. 9, the user selects C3 from the lesion information (C1, C2, C3, C4), and the 110th medical image image in which the lesion for C3 exists is displayed in the image display area (B). In the state, as shown in FIG. 10, the user manipulates the mouse, which is the
상술한 방식으로 썸네일 이미지에 대한 스크롤 명령의 입력이 검출되면, S32 단계에서, 인터페이스 제어부(13)는 스크롤 방향에 따라 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지의 주변 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되도록 한다.When an input of the scroll command for the thumbnail image is detected in the above-described manner, in step S32, the
예를 들어, 도 10에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째 의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 일방향(사용자의 몸쪽으로 당기는 동작에 의한 회전 방향)으로 회전시키면, 도 11에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 할 수 있다.For example, as shown in FIG. 10, when the user rotates the mouse wheel in one direction (rotation direction by pulling the user's body) while the 110th medical image image is displayed in the image display area (B), As shown in FIG. 11, the
사용자가 계속하여 마우스 휠을 일방향으로 회전시키면 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.If the user continuously rotates the mouse wheel in one direction, the 112th medical image image, the 113th medical image image, and the 114th medical image image may be sequentially displayed in the image display area B.
반대로, 도 12에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째 의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 타방향(사용자의 몸쪽에서 멀어지는 방향으로 밀어내는 동작에 의한 회전 방향)으로 회전시키면, 도 12에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 할 수 있다.On the contrary, as shown in FIG. 12, while the 110th medical image is displayed on the image display area (B), the user moves the mouse wheel in another direction (rotation direction by pushing the mouse wheel away from the user's body). When rotated, as illustrated in FIG. 12, the
사용자가 계속하여 마우스 휠을 타방향으로 회전시키면 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.If the user continuously rotates the mouse wheel in another direction, the 108th medical image image, the 107th medical image image, and the 106th medical image image may be sequentially displayed in the image display area B.
도 14에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스를 클릭한 채로 드래그하는 동작에 의해 입력될 수도 있다.As shown in FIG. 14, the scroll command for the thumbnail image may be input by a user positioning the mouse pointer on the thumbnail image C31 of C3 and clicking and dragging the mouse.
이 경우, 스크롤 방향은 드래그 방향에 의해 결정된다. 예를 들어, 도 14의 상태에서 마우스를 아래 방향으로 드래그하면 도 11에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 아래 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.In this case, the scroll direction is determined by the drag direction. For example, when the mouse is dragged downward in the state of FIG. 14, as shown in FIG. 11, the
또한, 도 14의 상태에서 마우스를 위 방향으로 드래그하면 도 12에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 위 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.In addition, when the mouse is dragged upward in the state of FIG. 14, as shown in FIG. 12, the
도 15에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 터치 펜의 단부를 C3의 썸네일 이미지(C31) 상에 위치시키고, 드래그하는 동작에 의해 입력될 수도 있다. 드래그 방향에 따라 주변의 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는바, 이에 대한 구체적인 설명은 생략한다.As illustrated in FIG. 15, the scroll command for the thumbnail image may be input by a user placing the end of the touch pen on the thumbnail image C31 of C3 and dragging. It has been described above that the surrounding medical image images are displayed on the image display area B according to the drag direction, and a detailed description thereof will be omitted.
도 16에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 손가락을 C3의 썸네일 이미지(C31) 상에 위치시키고, 드래그하는 동작에 의해 입력될 수도 있다. 드래그 방향에 따라 주변의 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는바, 이에 대한 구체적인 설명은 생략한다.As illustrated in FIG. 16, the scroll command for the thumbnail image may be input by a user placing a finger on the thumbnail image C31 of C3 and dragging. It has been described above that the surrounding medical image images are displayed on the image display area B according to the drag direction, and a detailed description thereof will be omitted.
도 14 내지 도 16에서는 드래그 방향의 예로 아래 방향/위 방향으로 설명하였으나, 좌우 방향의 드래그 방향에 따라 주변 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되도록 구성될 수도 있다.In FIGS. 14 to 16, examples of the drag direction have been described downward/upward, but the surrounding medical image images may be displayed on the image display area B according to the left-right drag direction.
이러한 기능은 임상의가 입력 장치(31)를 이용해 특정 병변(예를 들어, C3)을 선택하여 해당 병변이 존재하는 의료 영상 이미지(예를 들어, 110번째 이미지)가 이미지 디스플레이 영역(B)에 표시된 상태에서, 그 주변 조직/기관의 상태를 확인하고자 하는 경우, 입력 장치(31)의 포인터(마우스 포인터, 터치 펜의 단부, 손가락 등)의 이동을 최소화하며 인접하는 의료 영상 이미지를 확인하는 것을 가능하게 한다.This function allows the clinician to select a specific lesion (e.g., C3) using the
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those of ordinary skill in the art to which the present invention pertains will be able to understand that the present invention can be implemented in other specific forms without changing the technical spirit or essential features thereof. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting. The scope of the present invention is indicated by the claims to be described later rather than the detailed description, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.
1: 의료 영상 분석 보조 시스템
2: PACS
3: 단말기
A: 환자 정보 표시 영역
B: 이미지 디스플레이 영역
C: 병변 리스트 디스플레이 영역
C11, C21, C31, C41: 썸네일 이미지
D: 도구 표시 영역1: Medical image analysis auxiliary system
2: PACS 3: Terminal
A: Patient information display area
B: image display area
C: lesion list display area
C11, C21, C31, C41: thumbnail image
D: tool display area
Claims (17)
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고,
상기 화면 상에 표시된 상기 썸네일 이미지 상에 입력 장치의 포인터가 위치한 상태로 입력되는 스크롤 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는, 의료 영상 분석 보조 시스템.A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a patient's body cross section is continuously photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and information on the lesion together on a screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
A thumbnail image of the lesion and information of the lesion are displayed on the other side of the screen,
In response to a scroll command input while a pointer of the input device is positioned on the thumbnail image displayed on the screen, the medical image surrounding the medical image corresponding to the thumbnail image among the plurality of medical image images on one side of the screen A medical image analysis assistant system for displaying an image image.
상기 입력 장치는 마우스이며,
상기 스크롤 명령은 상기 마우스의 스크롤 휠의 이동에 의해 입력되는, 의료 영상 분석 보조 시스템.The method of claim 1,
The input device is a mouse,
The scroll command is input by moving a scroll wheel of the mouse.
상기 입력 장치는 마우스이며,
상기 스크롤 명령은 상기 마우스의 드래그에 의해 입력되는, 의료 영상 분석 보조 시스템.The method of claim 1,
The input device is a mouse,
The scroll command is input by dragging of the mouse, medical image analysis assistance system.
상기 입력 장치는 터치 스크린이며,
상기 스크롤 명령은 상기 터치 스크린의 터치 지점의 이동에 의해 입력되는, 의료 영상 분석 보조 시스템.The method of claim 1,
The input device is a touch screen,
The scroll command is input by moving a touch point of the touch screen.
상기 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시되는, 의료 영상 분석 보조 시스템.The method of claim 1,
The medical image analysis assistance system, wherein the medical image image in which the existence of the lesion is estimated among the plurality of medical image images is displayed in a state in which the location of the lesion is processed with highlighting.
상기 인터페이스 제어부는,
상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 하는, 의료 영상 분석 보조 시스템.The method of claim 1,
The interface control unit,
When a command for selecting at least one of the thumbnail image and the lesion information displayed on the screen is input, a lesion image displaying a lesion corresponding to the lesion information among the plurality of medical image images is displayed on one side of the screen. Display, medical image analysis assistance system.
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시하는, 의료 영상 분석 보조 시스템.The method of claim 1,
The interface control unit,
When any one of the medical image images in which the existence of the lesion is estimated is displayed on one side of the screen, information of the lesion existing in the medical image image displayed on one side of the screen among the information on the lesion displayed on the other side of the screen A medical image analysis assistant system that displays in a highlighted state.
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고,
상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지가 상기 화면의 일측에 표시되게 하는, 의료 영상 분석 보조 시스템.A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a patient's body cross section is continuously photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and information on the lesion together on a screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
To display information on the lesion on the other side of the screen,
In response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, a medical image image containing a selected lesion among the plurality of medical image images is displayed on one side of the screen. , Medical image analysis auxiliary system.
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되게 하는, 의료 영상 분석 보조 시스템.A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a cross section of a patient's body is successively photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and the lesion information together on the screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
To display information on the lesion on the other side of the screen,
When a medical image image including any one of information on the lesion displayed on the other side of the screen among the plurality of medical image images is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen A medical image analysis assistance system that causes information on a lesion included in a medical image displayed on one side of the screen to be displayed in a highlighted state.
상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계;
상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계; 및
상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계;를 포함하는 방법.As a method performed in an electronic device having a screen,
Displaying at least a portion of a plurality of medical image images in which a cross section of a patient's body is continuously captured on one side of the screen;
Displaying information on at least one lesion read as present in the plurality of medical image images on the other side of the screen; And
In response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, displaying a medical image image in which a selected lesion is present from among the plurality of medical image images on one side of the screen How to include ;.
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계;를 더 포함하는, 방법.The method of claim 10,
When a medical image image including any one of information on the lesion displayed on the other side of the screen is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen The method further comprising: displaying information on the lesion included in the medical image image displayed on one side of the screen in a highlighted state.
상기 화면의 타측에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지가 표시되는, 방법.The method of claim 10,
The method, wherein a thumbnail image of the lesion is displayed together with information on the lesion on the other side of the screen.
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는 단계;를 더 포함하는, 방법.The method of claim 12,
In response to an input of a scroll command for the thumbnail image, causing a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images to be displayed on one side of the screen; further comprising, Way.
환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과,
상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고,
상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시하는, 그래픽 사용자 인터페이스.As a graphical user interface of an electronic device having a screen,
An image display area in which any one of a plurality of medical image images in which a patient's body cross section is continuously photographed is displayed;
And a lesion list display area displaying information on at least one lesion read as present in the plurality of medical image images,
In response to an input for selecting information on any one of the lesion information displayed in the lesion list display area, a medical image image in which a selected lesion is present among the plurality of medical image images is displayed on the image display area. A, graphical user interface.
상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시하는, 그래픽 사용자 인터페이스.The method of claim 14,
When a medical image image including any one of information on the lesion displayed in the lesion list display area among the plurality of medical image images is displayed in the image display area, the lesion displayed in the lesion list display area A graphic user interface for displaying information on a lesion included in the medical image image displayed on the image display area among the information in a highlighted state.
상기 병변 리스트 디스플레이 영역 내에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지를 표시하는, 그래픽 사용자 인터페이스.The method of claim 14,
A graphical user interface for displaying a thumbnail image of the lesion together with information on the lesion in the lesion list display area.
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지를 표시하는, 그래픽 사용자 인터페이스.The method of claim 16,
In response to an input of a scroll command for the thumbnail image, displaying a surrounding medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images in the image display area.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190090327A KR20210012492A (en) | 2019-07-25 | 2019-07-25 | A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190090327A KR20210012492A (en) | 2019-07-25 | 2019-07-25 | A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20210012492A true KR20210012492A (en) | 2021-02-03 |
Family
ID=74571960
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020190090327A Pending KR20210012492A (en) | 2019-07-25 | 2019-07-25 | A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20210012492A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024137133A1 (en) * | 2022-12-19 | 2024-06-27 | Genesis Medtech (USA) Inc. | Methods and apparatus for tracking anatomical structure in video assisted surgeries |
| KR102843189B1 (en) * | 2024-12-02 | 2025-08-06 | 주식회사 더블유닷에이아이 | Method and apparatus for providing user interface |
| WO2025161518A1 (en) * | 2024-01-31 | 2025-08-07 | 数坤科技股份有限公司 | Image interaction method, apparatus and device, and storage medium |
-
2019
- 2019-07-25 KR KR1020190090327A patent/KR20210012492A/en active Pending
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024137133A1 (en) * | 2022-12-19 | 2024-06-27 | Genesis Medtech (USA) Inc. | Methods and apparatus for tracking anatomical structure in video assisted surgeries |
| WO2025161518A1 (en) * | 2024-01-31 | 2025-08-07 | 数坤科技股份有限公司 | Image interaction method, apparatus and device, and storage medium |
| KR102843189B1 (en) * | 2024-12-02 | 2025-08-06 | 주식회사 더블유닷에이아이 | Method and apparatus for providing user interface |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110515513B (en) | Display apparatus and image display method using the same | |
| JP4820680B2 (en) | Medical image display device | |
| CN103941855B (en) | Medical image referring apparatus and medical imaging reference method | |
| JP5465135B2 (en) | MEDICAL INFORMATION DISPLAY DEVICE AND METHOD, AND PROGRAM | |
| US10327640B2 (en) | Control method of information terminal and computer-readable recording medium | |
| JP6158509B2 (en) | Inspection information display apparatus and method | |
| US20090138280A1 (en) | Multi-stepped default display protocols | |
| JP5628927B2 (en) | MEDICAL INFORMATION DISPLAY DEVICE AND METHOD, AND PROGRAM | |
| CN106569673B (en) | Display method and display equipment for multimedia medical record report | |
| JP5355782B2 (en) | Control apparatus and method | |
| JP6711676B2 (en) | Medical report creating apparatus and control method thereof, medical report creating system, and program | |
| CN106445435B (en) | Medical image display apparatus, system and method | |
| CA2660952C (en) | Presentation method, presentation device and computer program for presenting an image of an object | |
| JP2018175216A (en) | Medical image display device and program | |
| KR20210012492A (en) | A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen | |
| JP2014183876A (en) | Image display device and method | |
| JP5398791B2 (en) | Medical image display device | |
| KR20220026236A (en) | A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen | |
| US20190196668A1 (en) | Image display system and image display terminal | |
| JP6841136B2 (en) | Medical image display device and program | |
| US20240161231A1 (en) | Recording medium, display device, display system and display method | |
| KR101860910B1 (en) | A displaying apparatus, a method controlling the same and a medical apparatus | |
| US20250148590A1 (en) | Medical image analysis assistance system and method for providing medical image analysis results | |
| US20190196664A1 (en) | Medical image display system and medical image display apparatus | |
| JP2008186267A (en) | Application setting apparatus and setting method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PA0109 | Patent application |
St.27 status event code: A-0-1-A10-A12-nap-PA0109 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |
|
| P13-X000 | Application amended |
St.27 status event code: A-2-2-P10-P13-nap-X000 |
|
| PG1501 | Laying open of application |
St.27 status event code: A-1-1-Q10-Q12-nap-PG1501 |
|
| PA0201 | Request for examination |
St.27 status event code: A-1-2-D10-D11-exm-PA0201 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-3-3-R10-R18-oth-X000 |
|
| D13-X000 | Search requested |
St.27 status event code: A-1-2-D10-D13-srh-X000 |
|
| D14-X000 | Search report completed |
St.27 status event code: A-1-2-D10-D14-srh-X000 |
|
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
St.27 status event code: A-1-2-D10-D21-exm-PE0902 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| E13-X000 | Pre-grant limitation requested |
St.27 status event code: A-2-3-E10-E13-lim-X000 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |
|
| P13-X000 | Application amended |
St.27 status event code: A-2-2-P10-P13-nap-X000 |
|
| E90F | Notification of reason for final refusal | ||
| PE0902 | Notice of grounds for rejection |
St.27 status event code: A-1-2-D10-D21-exm-PE0902 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| T11-X000 | Administrative time limit extension requested |
St.27 status event code: U-3-3-T10-T11-oth-X000 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-3-3-R10-R18-oth-X000 |
|
| R18-X000 | Changes to party contact information recorded |
St.27 status event code: A-3-3-R10-R18-oth-X000 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |
|
| P13-X000 | Application amended |
St.27 status event code: A-2-2-P10-P13-nap-X000 |
|
| R15-X000 | Change to inventor requested |
St.27 status event code: A-3-3-R10-R15-oth-X000 |
|
| R16-X000 | Change to inventor recorded |
St.27 status event code: A-3-3-R10-R16-oth-X000 |
|
| P11-X000 | Amendment of application requested |
St.27 status event code: A-2-2-P10-P11-nap-X000 |