[go: up one dir, main page]

KR20210012492A - A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen - Google Patents

A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen Download PDF

Info

Publication number
KR20210012492A
KR20210012492A KR1020190090327A KR20190090327A KR20210012492A KR 20210012492 A KR20210012492 A KR 20210012492A KR 1020190090327 A KR1020190090327 A KR 1020190090327A KR 20190090327 A KR20190090327 A KR 20190090327A KR 20210012492 A KR20210012492 A KR 20210012492A
Authority
KR
South Korea
Prior art keywords
lesion
medical image
information
screen
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
KR1020190090327A
Other languages
Korean (ko)
Inventor
남창모
Original Assignee
모니터코퍼레이션 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모니터코퍼레이션 주식회사 filed Critical 모니터코퍼레이션 주식회사
Priority to KR1020190090327A priority Critical patent/KR20210012492A/en
Publication of KR20210012492A publication Critical patent/KR20210012492A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/465Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03Computed tomography [CT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46Arrangements for interfacing with the operator or the patient
    • A61B6/467Arrangements for interfacing with the operator or the patient characterised by special input means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/54Control of apparatus or devices for radiation diagnosis
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Veterinary Medicine (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법으로서, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계, 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계 및 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계를 포함한다.A method performed in an electronic device having a screen according to an embodiment of the present invention, comprising: displaying at least a part of a plurality of medical image images in which a patient's body section is successively photographed on one side of the screen, the other side of the screen In response to an input for selecting information on at least one lesion from among the information on at least one lesion read as present in the plurality of medical image images and information on the lesion displayed on the other side of the screen, And displaying a medical image image in which a selected lesion is present among the plurality of medical image images on one side of the screen.

Figure P1020190090327
Figure P1020190090327

Description

의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스{A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen}A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen electronic device having a screen}

본 발명은 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것으로서, 보다 상세하게는 의료 영상 내의 병변 진단을 보조하기 위한 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스에 관한 것이다.The present invention relates to a medical image analysis auxiliary system, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen, and more particularly, a medical image analysis auxiliary system for assisting diagnosis of lesions in a medical image , A method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen.

많은 병원에서는 X-ray, CT, MRI 영상과 같은 의료 영상을 촬영하는 장비와 연계하는 의학영상정보시스템(PACS, Picture Archiving Communications System)을 사용하고 있다.Many hospitals use a medical imaging information system (PACS, Picture Archiving Communications System) that connects with equipment that takes medical images such as X-ray, CT, and MRI images.

의학영상정보시스템은 촬영된 의료 영상을 디지털 형태로 저장하고 임상의의 PC로 전송하여, 임상의가 PC에서 의료 영상을 확인하며 환자의 병변을 진단하도록 한다.The medical imaging information system stores photographed medical images in digital form and transmits them to the clinician's PC, allowing the clinician to check the medical images on the PC and diagnose the patient's lesions.

특히, CT, MRI 영상은 300장의 연속적인 단층 이미지로 구성되는데, 임상의는 300장의 이미지를 확인하여 병변을 빠짐없이 체크하고 정확한 진단을 해야하는 부담을 갖게 된다.In particular, CT and MRI images consist of 300 consecutive tomographic images, and the clinician has the burden of checking 300 images to check all lesions and make an accurate diagnosis.

본 발명이 해결하고자 하는 과제는, 사용자가 보다 편리하고 정확하게 병변을 진단할 수 있는 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 제공하는 것이다.The problem to be solved by the present invention is to provide a medical image analysis assistance system that enables a user to diagnose lesions more conveniently and accurately, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen. .

본 발명의 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the problems mentioned above, and other problems that are not mentioned will be clearly understood by those skilled in the art from the following description.

상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고, 상기 화면 상에 표시된 상기 썸네일 이미지 상에 입력 장치의 포인터가 위치한 상태로 입력되는 스크롤 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and a thumbnail image of the lesion and the lesion on the other side of the screen Corresponding to the thumbnail image among the plurality of medical image images on one side of the screen in response to a scroll command input while the pointer of the input device is positioned on the thumbnail image displayed on the screen The surrounding medical image image of the medical image image is displayed.

상기 입력 장치는 마우스이며, 상기 스크롤 명령은 상기 마우스의 스크롤 휠의 이동에 의해 입력될 수 있다.The input device is a mouse, and the scroll command may be input by moving a scroll wheel of the mouse.

상기 입력 장치는 마우스이며, 상기 스크롤 명령은 상기 마우스의 드래그에 의해 입력될 수 있다.The input device is a mouse, and the scroll command may be input by dragging the mouse.

상기 입력 장치는 터치 스크린이며, 상기 스크롤 명령은 상기 터치 스크린의 터치 지점의 이동에 의해 입력될 수 있다.The input device is a touch screen, and the scroll command may be input by moving a touch point of the touch screen.

상기 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시될 수 있다.Among the plurality of medical image images, a medical image image in which the existence of the lesion is estimated may be displayed in a state in which the location of the lesion is highlighted.

상기 인터페이스 제어부는, 상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 할 수 있다.When a command for selecting at least one of the thumbnail image and the lesion information displayed on the screen is input, the interface control unit may include a lesion corresponding to the lesion information among the plurality of medical image images on one side of the screen. The marked lesion image can be displayed.

상기 인터페이스 제어부는, 상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시할 수 있다.When any one of the medical image images in which the existence of the lesion is estimated is displayed on one side of the screen, the interface controller is present in the medical image image displayed on one side of the screen among the information on the lesion displayed on the other side of the screen. The information on the lesion to be affected can be displayed in a highlighted state.

상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고, 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지가 상기 화면의 일측에 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and to display information on the lesion on the other side of the screen. And, in response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, a medical image image in which a selected lesion from among the plurality of medical image images is present is displayed on one side of the screen. Let it be.

상기 과제를 해결하기 위한 본 발명의 실시예에 따른 의료 영상 분석 보조 시스템은, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부, 수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부 및 상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부를 포함하고, 상기 인터페이스 제어부는, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고, 상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되게 한다.A medical image analysis assistance system according to an embodiment of the present invention for solving the above problem includes a medical image information receiving unit for receiving medical image information including a plurality of medical image images in which a body section of a patient is successively photographed, A lesion reading unit that reads the medical image information to estimate the existence of a lesion in the plurality of medical image images and detects the estimated location and information of the lesion, and at least a part of the plurality of medical image images and information on the lesion And an interface control unit configured to be displayed together on a screen, wherein the interface control unit causes at least a portion of the plurality of medical image images to be displayed on one side of the screen, and to display information on the lesion on the other side of the screen. And, when a medical image image including any one of the information on the lesion displayed on the other side of the screen among the plurality of medical image images is displayed on one side of the screen, the lesion displayed on the other side of the screen is displayed. Among the information, information on a lesion included in the medical image image displayed on one side of the screen is displayed in a highlighted state.

상기 과제를 해결하기 위한 본 발명의 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법은, 상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계, 상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계 및 상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계를 포함한다.A method performed in an electronic device having a screen according to an embodiment of the present invention for solving the above problem includes the steps of displaying at least some of a plurality of medical image images in which a patient's body cross section is successively photographed on one side of the screen. , Displaying information on at least one lesion read as present in the plurality of medical image images on the other side of the screen, and selecting information on any one lesion from information on the lesion displayed on the other side of the screen And displaying a medical image image in which a selected lesion is present among the plurality of medical image images on one side of the screen in response to the input.

상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계를 더 포함할 수 있다.When a medical image image including any one of information on the lesion displayed on the other side of the screen is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen The method may further include displaying information on lesions included in the medical image image displayed on one side of the screen in a highlighted state.

상기 화면의 타측에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지가 표시될 수 있다.A thumbnail image of the lesion may be displayed together with information on the lesion on the other side of the screen.

상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는 단계를 더 포함할 수 있다.In response to an input of a scroll command for the thumbnail image, the step of displaying a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images on one side of the screen may be further included. .

상기 과제를 해결하기 위한 본 발명의 실시예에 따른 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스는, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과, 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고, 상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시한다.A graphic user interface of an electronic device having a screen according to an embodiment of the present invention for solving the above problem includes an image display area in which any one of a plurality of medical image images continuously photographed of a patient's body section is displayed, and the Includes a lesion list display area displaying information on at least one lesion that is read as being present in a plurality of medical image images, and displays information on any one of the information on the lesion displayed in the lesion list display area. In response to a selected input, a medical image image in which a selected lesion is present among the plurality of medical image images is displayed on the image display area.

상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시할 수 있다.When a medical image image including any one of information on the lesion displayed in the lesion list display area among the plurality of medical image images is displayed in the image display area, the lesion displayed in the lesion list display area Among the information, information on a lesion included in the medical image image displayed on the image display area may be displayed in a state of being highlighted.

상기 병변 리스트 디스플레이 영역 내에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지를 표시할 수 있다.A thumbnail image of the lesion may be displayed together with information on the lesion within the lesion list display area.

상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지를 표시할 수 있다.In response to an input of a scroll command for the thumbnail image, a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images may be displayed on the image display area.

본 발명의 기타 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.Other specific details of the present invention are included in the detailed description and drawings.

본 발명의 실시예들에 의하면 적어도 다음과 같은 효과가 있다.According to the embodiments of the present invention, there are at least the following effects.

사용자가 보다 편리하고 정확하게 병변을 진단할 수 있다.The user can diagnose the lesion more conveniently and accurately.

본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.The effects according to the present invention are not limited by the contents exemplified above, and more various effects are included in the present specification.

도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이다.
도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이다.
도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이다.
도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이다.
도 9 내지 도 16은 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.
1 is a diagram schematically illustrating a system in which a medical image analysis auxiliary system according to an embodiment of the present invention is used.
2 is a flow chart illustrating a part of a method performed in an electronic device having a screen according to an exemplary embodiment of the present invention.
3 is a diagram illustrating a graphic user interface displayed on a screen according to steps S11 and S12 of FIG. 2.
4 is a diagram illustrating an example of information on a lesion displayed in a lesion list display area of FIG. 3.
5 is a diagram illustrating a graphic user interface displayed on a screen according to steps S13 to S15 of FIG. 2.
6 is a flowchart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention.
7 is a diagram illustrating a graphic user interface displayed on a screen according to steps S21 and S22 of FIG. 6.
8 is a flow chart illustrating still another part of a method performed in an electronic device having a screen according to an exemplary embodiment of the present invention.
9 to 16 are diagrams illustrating a graphic user interface displayed on a screen according to steps S31 and S32 of FIG. 8.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in a variety of different forms, and only these embodiments make the disclosure of the present invention complete, and are common knowledge in the technical field to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have, and the invention is only defined by the scope of the claims. The same reference numerals refer to the same components throughout the specification.

또한, 본 명세서에서 기술하는 실시예들은 본 발명의 이상적인 예시도인 단면도 및/또는 개략도들을 참고하여 설명될 것이다. 따라서, 제조 기술 및/또는 허용 오차 등에 의해 예시도의 형태가 변형될 수 있다. 또한, 본 발명에 도시된 각 도면에 있어서 각 구성 요소들은 설명의 편의를 고려하여 다소 확대 또는 축소되어 도시된 것일 수 있다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.In addition, the embodiments described in the present specification will be described with reference to sectional views and/or schematic diagrams which are ideal exemplary diagrams of the present invention. Therefore, the shape of the exemplary diagram may be modified by manufacturing technology and/or tolerance. In addition, in each of the drawings shown in the present invention, each component may be somewhat enlarged or reduced in consideration of convenience of description. The same reference numerals refer to the same components throughout the specification.

이하, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템, 화면을 갖는 전자 장치에서 수행되는 방법, 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스를 설명하기 위한 도면들을 참고하여 본 발명에 대하여 설명하도록 한다.Hereinafter, the present invention will be described with reference to drawings for explaining a medical image analysis auxiliary system according to an embodiment of the present invention, a method performed in an electronic device having a screen, and a graphic user interface of an electronic device having a screen. .

도 1은 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템이 사용되는 시스템을 개략적으로 도시한 도면이다.1 is a diagram schematically illustrating a system in which a medical image analysis auxiliary system according to an embodiment of the present invention is used.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(Picture Archiving Communications System, 2)와 통신 가능하게 연결된다. PACS는 현재 병원에서 널리 사용하고 있는 의료 영상 정보 시스템이다.As shown in Figure 1, the medical image analysis assistance system 1 according to an embodiment of the present invention is connected to the PACS (Picture Archiving Communications System, 2) communicatively. PACS is a medical imaging information system widely used in hospitals.

본 실시예에서는 의료 영상 분석 보조 시스템(1)이 연결되는 의료 영상 정보 시스템의 일례로서 PACS(2)를 기준으로 설명하지만, 본 발명의 일 실시예에 따른 의료 영상 분석 보조 시스템(1)은 PACS(2) 이외의 다른 의료 영상 정보 시스템과 통신 가능하게 연결되어 사용될 수도 있다.In the present embodiment, as an example of a medical image information system to which the medical image analysis auxiliary system 1 is connected, the PACS 2 is described, but the medical image analysis auxiliary system 1 according to an embodiment of the present invention is a PACS (2) It may be used in communication with other medical imaging information systems.

의료 영상 분석 보조 시스템(1)은 병원 외부의 원격지에 존재할 수 있으며, 이 경우, PACS(2)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)과 PACS(2)는 인터넷과 같은 광역 네트워크를 통해 연결될 수 있다.The medical image analysis assistance system 1 may exist in a remote location outside the hospital, and in this case, the PACS 2 may be communicatively connected to the PACS 2 through a wired or wireless remote communication network. For example, the medical image analysis assistance system 1 and the PACS 2 may be connected through a wide area network such as the Internet.

또는, 의료 영상 분석 보조 시스템(1)은 PACS(2)를 운용하는 병원 내에 위치할 수 있다. 이 경우, 의료 영상 분석 보조 시스템(1)은 병원 내 유무선 통신망을 통해 PACS(2)와 통신 가능하게 연결될 수 있다.Alternatively, the medical image analysis assistance system 1 may be located in a hospital operating the PACS 2. In this case, the medical image analysis assistance system 1 may be communicatively connected with the PACS 2 through a wired/wireless communication network in the hospital.

또한, 의료 영상 분석 보조 시스템(1)은 입력 장치(31)와 화면(32)을 갖는 단말기(3)와 통신 가능하게 연결될 수 있다. 단말기(3)는 데스크탑, 노트북, 태블릿, 스마트폰 등의 전자 장치일 수 있다.In addition, the medical image analysis assistance system 1 may be communicatively connected with the input device 31 and the terminal 3 having the screen 32. The terminal 3 may be an electronic device such as a desktop, notebook, tablet, or smart phone.

의료 영상 분석 보조 시스템(1)은 단말기(3)에 대해 원격지에 존재하고 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다. 예를 들어, 의료 영상 분석 보조 시스템(1)은 클라우드 방식으로 단말기(3)와 연결되어 서비스를 제공할 수 있다.The medical image analysis assistance system 1 exists at a remote location with respect to the terminal 3 and may be communicatively connected to the terminal 3 through a wired or wireless remote communication network. For example, the medical image analysis assistance system 1 may be connected to the terminal 3 in a cloud manner to provide a service.

또는, 의료 영상 분석 보조 시스템(1)은 단말기(3)에 설치되는 소프트웨어로 제공될 수도 있다.Alternatively, the medical image analysis assistance system 1 may be provided as software installed in the terminal 3.

또는, 의료 영상 분석 보조 시스템(1)의 일부 구성은 단말기(3)에 설치되는 소프트웨어로 제공되고, 다른 일부 구성은 원격지에 구비되어 단말기(3)와 유무선의 원격 통신망을 통해 통신 가능하게 연결될 수 있다.Alternatively, some components of the medical image analysis assistance system 1 are provided as software installed in the terminal 3, and some other components are provided in remote locations and can be connected to the terminal 3 through a wired/wireless remote communication network to enable communication. have.

도 1에 도시된 바와 같이, 의료 영상 분석 보조 시스템(1)은, 의료 영상 정보 수신부(11), 병변 판독부(12) 및 인터페이스 제어부(13)를 포함한다.As shown in FIG. 1, the medical image analysis auxiliary system 1 includes a medical image information receiving unit 11, a lesion reading unit 12, and an interface control unit 13.

의료 영상 정보 수신부(11)는 PACS(2)로부터 PACS(2)에 저장되어 있거나 PACS(2)와 연계된 의료 영상 장치가 생성한 의료 영상 정보를 수신한다. 의료 영상 정보는 현재 일반적으로 사용되는 표준화된 의료 영상 정보인 다이콤(DICOM, Digital Imaging Communication in Medicine) 파일일 수 있다. 본 실시예에서는, 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지가 셋트로 구성된, CT(Computer Tomography), MRI(Magnetic Resonance Imaging) 등과 같은 의료 영상 장치를 이용해 촬영한 의료 영상이 포함된 의료 영상 정보를 기준으로 설명한다.The medical image information receiving unit 11 receives medical image information stored in the PACS 2 from the PACS 2 or generated by a medical imaging device linked to the PACS 2. The medical image information may be a DICOM (Digital Imaging Communication in Medicine) file, which is standardized medical image information currently generally used. In this embodiment, a medical image taken using a medical imaging device such as Computer Tomography (CT) and Magnetic Resonance Imaging (MRI), which consists of a set of a plurality of medical image images in which a patient's body section is continuously photographed, is included. The explanation is based on medical image information.

병변 판독부(12)는 의료 영상 정보 수신부(11)가 수신한 의료 영상 정보에 포함된 의료 영상을 판독하여 병변의 존재를 추정하고 추정된 병변의 영상 내의 위치 및 정보 등을 검출한다. 병변 판독부(12)는 인공 지능(AI, artificial intelligence)을 기반으로 의료 영상을 판독하고, 영상 내에 존재하는 것을 추정되는 병변을 검출하도록 구성될 수 있으며, 병변 판독부(12)는 의료 영상의 촬영 부위(두부, 흉부, 복부, 척추, 손, 발 등), 검출하고자 하는 병변의 종류(골절, 결절 등) 등에 따라 구분된 별도의 분석 알고리즘을 구비할 수 있다.The lesion reading unit 12 estimates the existence of a lesion by reading a medical image included in the medical image information received by the medical image information receiving unit 11 and detects the location and information of the estimated lesion in the image. The lesion reading unit 12 may be configured to read a medical image based on artificial intelligence (AI) and detect a lesion that is estimated to exist in the image, and the lesion reading unit 12 Separate analysis algorithms may be provided according to the photographing area (head, chest, abdomen, spine, hands, feet, etc.), and the type of lesion to be detected (fracture, nodule, etc.).

본 실시예에서는, 의료 영상 분석 보조 시스템(1)에 병변 판독부(12)가 포함되는 구성을 예로 설명하고 있으나, 실시예에 따라 의료 영상 분석 보조 시스템은 병변 판독부(12)를 포함하지 않을 수 있다. 이 경우, 의료 영상 정보 수신부(11)는 병변 판독이 완료된 의료 영상 정보를 수신할 수 있다.In this embodiment, a configuration in which the lesion reading unit 12 is included in the medical image analysis auxiliary system 1 is described as an example, but according to the embodiment, the medical image analysis auxiliary system may not include the lesion reading unit 12. I can. In this case, the medical image information receiving unit 11 may receive medical image information for which lesion reading has been completed.

인터페이스 제어부(13)는 단말기(3)의 화면(32) 상에 표시되는 그래픽 사용자 인터페이스를 생성한다. 인터페이스 제어부(13)는 그래픽 사용자 인터페이스에 대한 정보를 단말기(3)로 전송하여 단말기(3)의 화면(32) 상에 그래픽 사용자 인터페이스가 시각적으로 표시되도록 한다. 또한, 단말기(3)의 입력 장치(31)를 통한 사용자의 입력에 대응하여 화면(32) 상에 표시된 그래픽 사용자 인터페이스를 변화시킨다.The interface control unit 13 generates a graphic user interface displayed on the screen 32 of the terminal 3. The interface control unit 13 transmits information on the graphic user interface to the terminal 3 so that the graphic user interface is visually displayed on the screen 32 of the terminal 3. In addition, the graphic user interface displayed on the screen 32 is changed in response to the user's input through the input device 31 of the terminal 3.

보다 구체적인 내용은 화면을 갖는 전자 장치에서 수행되는 방법 및 화면을 갖는 전자 장치의 그래픽 사용자 인터페이스와 함께 설명한다.More specific details will be described together with a method performed in an electronic device having a screen and a graphic user interface of the electronic device having a screen.

도 2는 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 일부를 설명하기 위한 순서도이고, 도 3은 도 2의 S11 및 S12 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이고, 도 4는 도 3의 병변 리스트 디스플레이 영역에 표시된 병변에 대한 정보의 일례를 도시한 도면이며, 도 5는 도 2의 S13 내지 S15 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.2 is a flowchart illustrating a part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIG. 3 is a graphic user interface displayed on the screen according to steps S11 and S12 of FIG. FIG. 4 is a diagram showing an example of information on lesions displayed in the lesion list display area of FIG. 3, and FIG. 5 illustrates a graphic user interface displayed on the screen according to steps S13 to S15 of FIG. It is a drawing shown.

도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법(이하, 방법.)은 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11), 병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12), 병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13), 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14), 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)를 포함한다.As shown in FIG. 2, a method (hereinafter, a method.) performed in an electronic device having a screen according to an embodiment of the present invention includes displaying at least a portion of a plurality of medical image images in an image display area (S11 ), displaying information on a lesion in a lesion list display area (S12), detecting an input for selecting any one of information on a lesion (S13), a lesion selected from among a plurality of medical image images in the image display area Displaying the existing medical image image (S14), and highlighting selected lesion information from among lesion information displayed in the lesion list display area (S15).

인터페이스 제어부(13)는 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하고, 병변 판독부(12)로부터 판독된 병변에 대한 정보를 수신할 수 있다. 병변 판독부(12)가 의료 영상 정보 수신부(11)로부터 의료 영상 정보를 수신하여 해당 의료 영상 정보에 판독된 병변에 대한 정보를 추가한 정보를 보유하고 있는 경우에는, 인터페이스 제어부(13)는 병변 판독부(12)로부터 병변에 대한 정보가 추가된 의료 영상 정보를 수신할 수 있다.The interface controller 13 may receive medical image information from the medical image information receiving unit 11 and may receive information on a lesion read from the lesion reading unit 12. When the lesion reading unit 12 receives medical image information from the medical image information receiving unit 11 and holds information obtained by adding information on the read lesion to the corresponding medical image information, the interface controller 13 Medical image information to which information on a lesion is added may be received from the reader 12.

도 3에 도시된 바와 같이, 인터페이스 제어부(13)는 단말기(3)의 화면(32)의 적어도 일부를 환자 정보 표시 영역(A), 이미지 디스플레이 영역(B) 및 병변 리스트 디스플레이 영역(C), 도구 표시 영역(D)으로 분할하여 표시하는 그래픽 사용자 인터페이스를 제공할 수 있다.As shown in FIG. 3, the interface control unit 13 includes at least a part of the screen 32 of the terminal 3 in a patient information display area A, an image display area B, and a lesion list display area C, It is possible to provide a graphic user interface that is divided into the tool display area D and displayed.

인터페이스 제어부(13)는 환자 정보 표시 영역(A)에 환자의 정보를 표시한다.The interface controller 13 displays patient information in the patient information display area (A).

환자의 정보는 의료 영상 정보(예를 들어, 다이콤 파일)에 포함된 정보일 수 있으며, 환자의 이름, ID, 의료 영상 촬영일 등이 포함될 수 있다.The patient information may be information included in medical image information (eg, a diecom file), and may include the patient's name, ID, and the date of medical image capture.

이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계(S11)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나를 표시한다. 예를 들어, 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지 중 어느 하나가 이미지 디스플레이 영역(B)에 표시된다.In the step (S11) of displaying at least a part of the plurality of medical image images in the image display area, the interface control unit 13 is Mark one. For example, in the case of an MRI or CT image composed of 300 images, any one of 300 images is displayed on the image display area B.

병변 리스트 디스플레이 영역에 병변에 대한 정보를 표시하는 단계(S12)에서, 인터페이스 제어부(13)는 병변 리스트 디스플레이 영역(C)에 병변 판독부(12)에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 추정되거나, 임상의 등에 의해 복수의 의료 영상 이미지 내에 존재하는 것으로 확인된 병변들의 정보를 표시한다. 300장의 이미지로 구성된 MRI, CT 영상인 경우, 300장의 이미지에 존재하거나 존재하는 것으로 추정되는 병변들이 표시된다.In the step of displaying information on the lesion in the lesion list display area (S12), the interface controller 13 estimates that the lesion list display area C is present in a plurality of medical image images by the lesion reader 12 Or, information on lesions identified as being present in a plurality of medical image images by a clinician or the like is displayed. In the case of an MRI or CT image composed of 300 images, lesions present or estimated to be present in 300 images are displayed.

도 3 및 도 4에는 4개의 병변에 대한 정보(C1, C2, C3, C4)가 표시된 예가 도시되어 있다. 본 실시예에서는 설명의 편의를 위해, 병변의 일례로서, 폐에 존재하는 노듈(nodule)을 기준으로 설명한다.3 and 4 show examples in which information on four lesions (C1, C2, C3, C4) is displayed. In this embodiment, for convenience of explanation, as an example of a lesion, a nodule present in the lung is described as a reference.

4개의 병변에 대한 정보(C1, C2, C3, C4)는 병변의 썸네일 이미지(C11, C21, C31, C41)와 병변에 대한 문자 정보(C12, C22, C32, C42)를 포함할 수 있다.The information on the four lesions (C1, C2, C3, C4) may include thumbnail images of the lesion (C11, C21, C31, C41) and character information (C12, C22, C32, C42) of the lesion.

도 4에 도시된 바와 같이, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지의 일부(병변이 나타나는 부분)일 수 있다. 또는 다른 실시예로서, 병변의 썸네일 이미지(C11, C21, C31, C41)는 복수의 의료 영상 이미지 중 병변이 존재하는 의료 영상 이미지가 될 수도 있다.As shown in FIG. 4, the thumbnail images C11, C21, C31, and C41 of the lesion may be part of a medical image image in which a lesion exists (a portion where a lesion appears) among a plurality of medical image images. Alternatively, as another embodiment, the thumbnail images C11, C21, C31, and C41 of the lesion may be medical image images in which the lesion exists among a plurality of medical image images.

병변에 대한 문자 정보(C12, C22, C32, C42)는 병변의 타입(Solid, Part Solid 등), 병변의 위치(RLL(Right Lower Lobe), LLL(Left Lower Lobe) 등), 병변이 위치하는 이미지 번호(#54, #99, #110, #137 등), 평균 크기(예: Avg: 7.8mm 등), 최장 길이/최단 길이(예: 8.3/7.2) 등을 포함할 수 있다.Character information about the lesion (C12, C22, C32, C42) is the type of lesion (Solid, Part Solid, etc.), the location of the lesion (RLL (Right Lower Lobe), LLL (Left Lower Lobe), etc.), and the lesion is located. It can include image numbers (#54, #99, #110, #137, etc.), average size (eg Avg: 7.8mm, etc.), longest/shortest length (eg 8.3/7.2).

인터페이스 제어부(13)는 도구 표시 영역(D)에 단말기(3)의 사용자(예를 들어, 임상의 등)가 인터페이스를 통해 명령을 입력할 수 있는 도구들의 아이콘을 표시할 수 있다.The interface controller 13 may display icons of tools through which a user (eg, a clinician) of the terminal 3 can input a command through the interface on the tool display area D.

병변에 대한 정보 중 어느 하나를 선택하는 입력을 검출하는 단계(S13)에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 선택하는 입력을 검출한다. In the step of detecting an input for selecting any one of the information on the lesion (S13), the interface control unit 13 uses the input device 31 of the terminal 3 to provide information on the lesion (C1, C2, C3). , C4) detects an input for selecting one of.

병변에 대한 정보 중 어느 하나를 선택하는 입력은, 입력 장치(31)가 마우스인 경우, 사용자가 마우스를 조작하여 화면(32) 상에 표시되는 마우스 포인터를 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나 위에 위치시키고 마우스를 클릭하여 제공될 수 있다.The input for selecting any one of the lesion information is, when the input device 31 is a mouse, a mouse pointer displayed on the screen 32 by the user manipulating the mouse is transferred to the lesion information (C1, C2, C3). , C4) can be provided by placing it on any one of and clicking the mouse.

또한, 입력 장치(31)가 화면(32) 상에 구성된 터치 스크린으로 구성되는 경우, 사용자는 터치용 펜, 또는 손가락을 이용해 화면(32) 상에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나를 터치하여 제공될 수 있다.In addition, when the input device 31 is configured as a touch screen configured on the screen 32, the user may use a touch pen or a finger to display information on the lesion displayed on the screen 32 (C1, C2, C3, It can be provided by touching any one of C4).

병변에 대한 정보 중 어느 하나를 선택하는 입력이 검출되면, 이미지 디스플레이 영역에 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 표시하는 단계(S14)에서, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 S13 단계에서 선택된 병변이 존재하는 의료 영상 이미지를 표시한다.When an input for selecting any one of the information on the lesion is detected, in the step of displaying a medical image image in which the selected lesion is present among a plurality of medical image images in the image display area (S14), the interface controller 13 displays an image. A medical image image in which the lesion selected in step S13 is present is displayed in the region (B).

예를 들어, 화면(32) 상에 도 3과 같은 이미지가 표시된 상태에서 사용자가 입력 장치(31)를 이용해 병변에 대한 정보(C1, C2, C3, C4) 중 C1을 선택하면, 인터페이스 제어부(13)는 복수의 의료 영상 이미지(예를 들어, 300장의 이미지) 중 C1이 존재하는 의료 영상 이미지(예를 들어, 54번 이미지)가 이미지 디스플레이 영역(B) 상에 표현된 도 5와 같은 이미지가 화면(32) 상에 표시되도록 한다.For example, when the user selects C1 among lesion information (C1, C2, C3, C4) using the input device 31 while an image as shown in FIG. 3 is displayed on the screen 32, the interface controller ( 13) is an image as shown in FIG. 5 in which a medical image image (eg, image 54) in which C1 exists among a plurality of medical image images (eg, 300 images) is expressed on the image display area B. Is displayed on the screen 32.

위와 같은 그래픽 유저 인터페이스를 제공하므로, 임상의가 복수의 의료 영상 이미지에서 병변이 존재하는 부분을 빠르게 찾아볼 수 있게 된다.By providing the graphic user interface as described above, the clinician can quickly find a portion where a lesion exists in a plurality of medical image images.

또한, 병변 리스트 디스플레이 영역에 표시된 병변 정보 중 선택된 병변 정보를 하이라이트 처리하는 단계(S15)에서, 인터페이스 제어부(13)는 병변에 대한 정보(C1, C2, C3, C4) 중 S13 단계에서 선택된 병변에 대한 정보(C1)가 하이라이트 처리하여 표시되도록 한다. 하이라이트 처리는 해당 영역의 밝기를 주변 영역에 비해 밝게 처리하거나, 투명한 색상(예를 들어, 노란색, 형광색, 붉은색 등)이 오버랩되도록 처리하거나, 글자의 폰트 및/또는 굵기를 다른 부분과 다르게 처리하는 등 주변 영역과 시각적으로 확연하게 분별되도록 하는 이미지 처리를 의미할 수 있다.In addition, in the step (S15) of highlighting the selected lesion information among the lesion information displayed on the lesion list display area, the interface controller 13 applies to the lesion selected in step S13 among the lesion information (C1, C2, C3, C4). The information C1 is highlighted and displayed. Highlight processing makes the brightness of the corresponding area brighter than the surrounding area, processes such that transparent colors (e.g., yellow, fluorescent color, red color, etc.) overlap, or treats the font and/or thickness of text differently from other parts. It may mean image processing such as to be visually distinct from the surrounding area.

인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지 중 추정되거나 확인된 병변이 존재하는 의료 영상 이미지가 표시되는 경우, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 의료 영상 이미지 내에 존재하는 병변에 대한 정보(C1)가 하이라이트 처리되도록 표시할 수 있다.When the medical image image in which the estimated or confirmed lesion exists among a plurality of medical image images is displayed in the image display area B, the interface control unit 13 includes information on the lesion displayed in the lesion list display area C. , C2, C3, C4) of the lesions present in the medical image image (C1) may be displayed to be highlighted.

도 2 내지 도 5에 도시된 예에서, 4개의 병변은 300개의 단층 이미지에서 각각 54번째, 99번째, 110번째, 137번째에 존재한다. 따라서, 사용자의 입력에 의해 이미지 디스플레이 영역(B)에 복수의 의료 영상 이미지가 순차적으로 표시되는 경우, 54번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C1이 하이라이트 처리되도록 표시되고, 99번째 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되면 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 C2가 하이라이트 처리되도록 표시되는 방식으로 처리될 수 있다.In the example shown in Figs. 2 to 5, four lesions are present at the 54th, 99th, 110th, and 137th in 300 tomographic images, respectively. Therefore, when a plurality of medical image images are sequentially displayed in the image display area (B) by user input, when the 54th medical image image is displayed in the image display area (B), the lesion list display area (C) is displayed. If C1 among the information on the lesion (C1, C2, C3, C4) is displayed to be highlighted and the 99th medical image image is displayed in the image display area (B), the information on the lesion displayed in the lesion list display area (C) C2 of (C1, C2, C3, C4) may be processed in a manner that is displayed to be highlighted.

이러한 기능은 임상의가 이미지 디스플레이 영역(B) 표시되는 복수의 단층 이미지를 순차적으로 빠르게 넘기며 확인할 때, 병변이 존재하는 이미지가 이미지 디스플레이 영역(B)에 출현하면, 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 그에 대응하는 정보가 하이라이트 처리되도록 하여, 병변이 존재하는 이미지임을 빠르게 인식할 수 있고, 해당 병변에 대한 정보도 즉시 확인할 수 있도록 한다.This function is performed when the clinician quickly flips and confirms a plurality of tomographic images displayed in the image display area (B) in sequence, and when an image with a lesion appears in the image display area (B), the lesion list display area (C) is Among the information on the displayed lesion (C1, C2, C3, C4), the corresponding information is highlighted, so that it is possible to quickly recognize that the image exists and the information on the lesion can be immediately confirmed.

한편, 도 5에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내에 병변이 존재하는 경우, 해당 병변의 위치(B1)가 하이라이트 처리되어 표시되도록 할 수 있다. 또한, 의료 영상 이미지 상에 해당 병변에 대한 구체적인 정보(B2)(예를 들어, XYZ 좌표, 병변에 대한 문자 정보(C12, C22, C32, C42)에 기재되지 않은 병변에 대한 추가적인 정보 등)이 오버랩되어 표시되도록 할 수 있다.Meanwhile, as shown in FIG. 5, when a lesion exists in the medical image image displayed in the image display area B, the location B1 of the lesion may be highlighted and displayed. . In addition, specific information about the lesion (B2) (e.g., XYZ coordinates, text information about the lesion (C12, C22, C32, C42), additional information about the lesion not described in the medical image image) It can be displayed overlapping.

도 6은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 다른 일부를 설명하기 위한 순서도이고, 도 7은 도 6의 S21 및 S22 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.6 is a flow chart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIG. 7 is a graphic user interface displayed on the screen according to steps S21 and S22 of FIG. 6. It is a diagram showing.

본 발명의 일 실시예에 따른 방법은, 병변 영역의 확대를 요청하는 입력을 검출하는 단계(S21) 및 이미지 디스플레이 영역에 이미지 내의 병변 부분을 확대 표시하는 단계(S22)를 더 포함할 수 있다. S21 및 S22 단계는 S14 단계 이후에 수행될 수 있다.The method according to an embodiment of the present invention may further include detecting an input requesting enlargement of the lesion area (S21), and expanding and displaying the lesion area within the image in the image display area (S22). Steps S21 and S22 may be performed after step S14.

S21 단계에서, 인터페이스 제어부(13)는 사용자가 단말기(3)의 입력 장치(31)를 이용해 병변 영역의 확대를 요청하는 입력을 검출한다. 병변 영역의 확대를 요청하는 입력은 도구 표시 영역(D) 내에 표시된 아이콘들 중 병변 영역의 확대를 실행하는 아이콘을 사용자가 입력 장치(31)를 이용해 선택하여 제공될 수 있다. 또는, 사용자가 입력 장치(31)를 이용해, 의료 영상 이미지에서 하이라이트 처리되어 표시된 병변의 위치(B1)를 선택하여 제공될 수 있다.In step S21, the interface control unit 13 detects an input requesting the enlargement of the lesion area by the user using the input device 31 of the terminal 3. The input for requesting enlargement of the lesion area may be provided by a user selecting an icon for executing enlargement of the lesion area among icons displayed in the tool display area D using the input device 31. Alternatively, the user may select and provide the location B1 of the lesion displayed by being highlighted in the medical image image using the input device 31.

병변 영역의 확대를 요청하는 입력이 검출되면, 인터페이스 제어부(13)는 S22 단계를 실행하여, 도 7에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지 내의 병변 부분이 대략 이미지 디스플레이 영역(B)의 중심에 위치하도록 병변 부분을 확대하여 의료 영상 이미지의 일부가 이미지 디스플레이 영역(B)에 표시되도록 한다. 확대 비율을 미리 설정되거나, 사용자에 의해 결정/조절될 수 있으며, 병변의 크기에 따라 확대 비율이 달라지도록 설정될 수도 있다. 예를 들어, 병변의 크기가 큰 경우에 병변의 크기가 작은 경우에 비해 확대 비율이 작도록 설정될 수 있다.When an input requesting enlargement of the lesion area is detected, the interface control unit 13 executes step S22, and as shown in FIG. 7, the lesion portion in the medical image image displayed in the image display area B is approximately displayed. The lesion is enlarged so that it is located in the center of the area B so that a part of the medical image is displayed on the image display area B. The enlargement ratio may be set in advance or may be determined/adjusted by the user, and may be set to change the enlargement ratio according to the size of the lesion. For example, when the size of the lesion is large, the enlargement ratio may be set to be smaller than when the size of the lesion is small.

이러한 기능은 임상의가 병변의 형상, 특성 등을 확인하고자 하는 경우, 손쉽게 병변을 확대하여 보여주므로, 사용자 편의성을 향상시킨다.This function improves user convenience because, when the clinician wants to check the shape and characteristics of the lesion, the lesion is easily enlarged and displayed.

도 8은 본 발명의 일 실시예에 따른 화면을 갖는 전자 장치에서 수행되는 방법의 또 다른 일부를 설명하기 위한 순서도이고, 도 9 내지 도 16은 도 8의 S31 및 S32 단계에 따라 화면 상에 표시되는 그래픽 사용자 인터페이스를 도시한 도면이다.8 is a flowchart illustrating another part of a method performed in an electronic device having a screen according to an embodiment of the present invention, and FIGS. 9 to 16 are displayed on the screen according to steps S31 and S32 of FIG. It is a diagram showing a graphic user interface.

도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 방법은, 썸네일 이미지에 대한 스크롤 명령의 입력을 검출하는 단계(S31) 및 스크롤 방향에 대응하여 이미지 디스플레이 영역에 주변 이미지를 표시하는 단계(S32)를 포함한다. S31 및 S32 단계는 S14 단계 이후에 수행될 수 있다.As shown in FIG. 8, the method according to an embodiment of the present invention includes the steps of detecting an input of a scroll command for a thumbnail image (S31) and displaying a surrounding image in an image display area corresponding to the scroll direction. (S32) is included. Steps S31 and S32 may be performed after step S14.

S31 단계에서, 인터페이스 제어부(13)는 썸네일 이미지에 대한 스크롤 명령의 입력을 검출한다. 썸네일 이미지에 대한 스크롤 명령은, 사용자가 입력 장치(31)를 이용해 병변 리스트 디스플레이 영역(C)에 표시된 병변에 대한 정보(C1, C2, C3, C4) 중 어느 하나의 썸네일 이미지(C11, C12, C13, C14) 중 어느 하나에 입력 장치의 포인터를 위치한 상태에서 스크롤 명령을 입력하는 것을 의미한다.In step S31, the interface control unit 13 detects an input of a scroll command for the thumbnail image. The scroll command for the thumbnail image is obtained by the user using the input device 31 to display information on the lesion (C1, C2, C3, C4) displayed in the lesion list display area (C). C13, C14) refers to inputting a scroll command while the pointer of the input device is positioned.

도 9에 도시된 바와 같이, 사용자가 병변에 대한 정보(C1, C2, C3, C4) 중 C3을 선택하여, 이미지 디스플레이 영역(B)에 C3에 대한 병변이 존재하는 110번째 의료 영상 이미지가 표시된 상태에서, 도 10에 도시된 바와 같이, 사용자가 입력 장치(31)인 마우스를 조작하여 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스 휠을 일방향으로 회전시키는 동작에 의해 썸네일 이미지에 대한 스크롤 명령이 입력될 수 있다.As shown in FIG. 9, the user selects C3 from the lesion information (C1, C2, C3, C4), and the 110th medical image image in which the lesion for C3 exists is displayed in the image display area (B). In the state, as shown in FIG. 10, the user manipulates the mouse, which is the input device 31, to place the mouse pointer on the thumbnail image C31 of C3, and rotate the mouse wheel in one direction. A scroll command for may be input.

상술한 방식으로 썸네일 이미지에 대한 스크롤 명령의 입력이 검출되면, S32 단계에서, 인터페이스 제어부(13)는 스크롤 방향에 따라 이미지 디스플레이 영역(B)에 표시된 의료 영상 이미지의 주변 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되도록 한다.When an input of the scroll command for the thumbnail image is detected in the above-described manner, in step S32, the interface controller 13 displays the surrounding medical image image of the medical image image displayed in the image display area B according to the scroll direction in the image display area. It should be indicated in (B).

예를 들어, 도 10에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째 의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 일방향(사용자의 몸쪽으로 당기는 동작에 의한 회전 방향)으로 회전시키면, 도 11에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 할 수 있다.For example, as shown in FIG. 10, when the user rotates the mouse wheel in one direction (rotation direction by pulling the user's body) while the 110th medical image image is displayed in the image display area (B), As shown in FIG. 11, the interface controller 13 may cause the 111th medical image image to be displayed in the image display area B.

사용자가 계속하여 마우스 휠을 일방향으로 회전시키면 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.If the user continuously rotates the mouse wheel in one direction, the 112th medical image image, the 113th medical image image, and the 114th medical image image may be sequentially displayed in the image display area B.

반대로, 도 12에 도시된 바와 같이, 이미지 디스플레이 영역(B)에 110번째 의료 영상 이미지가 표시된 상태에서 사용자가 마우스 휠을 타방향(사용자의 몸쪽에서 멀어지는 방향으로 밀어내는 동작에 의한 회전 방향)으로 회전시키면, 도 12에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 할 수 있다.On the contrary, as shown in FIG. 12, while the 110th medical image is displayed on the image display area (B), the user moves the mouse wheel in another direction (rotation direction by pushing the mouse wheel away from the user's body). When rotated, as illustrated in FIG. 12, the interface controller 13 may display the 109th medical image image in the image display area B.

사용자가 계속하여 마우스 휠을 타방향으로 회전시키면 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.If the user continuously rotates the mouse wheel in another direction, the 108th medical image image, the 107th medical image image, and the 106th medical image image may be sequentially displayed in the image display area B.

도 14에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 마우스 포인터를 C3의 썸네일 이미지(C31) 상에 위치시키고, 마우스를 클릭한 채로 드래그하는 동작에 의해 입력될 수도 있다.As shown in FIG. 14, the scroll command for the thumbnail image may be input by a user positioning the mouse pointer on the thumbnail image C31 of C3 and clicking and dragging the mouse.

이 경우, 스크롤 방향은 드래그 방향에 의해 결정된다. 예를 들어, 도 14의 상태에서 마우스를 아래 방향으로 드래그하면 도 11에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 111번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 아래 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 112번째 의료 영상 이미지, 113번째 의료 영상 이미지, 114번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.In this case, the scroll direction is determined by the drag direction. For example, when the mouse is dragged downward in the state of FIG. 14, as shown in FIG. 11, the interface controller 13 causes the 111th medical image to be displayed in the image display area B, and the user continues Accordingly, when the mouse is dragged downward, the 112th medical image image, the 113th medical image image, and the 114th medical image image may be sequentially displayed in the image display area B.

또한, 도 14의 상태에서 마우스를 위 방향으로 드래그하면 도 12에 도시된 바와 같이, 인터페이스 제어부(13)는 이미지 디스플레이 영역(B)에 109번째 의료 영상 이미지가 표시되도록 하고, 사용자가 계속하여 마우스를 위 방향으로 드래그하면, 이미지 디스플레이 영역(B)에는 108번째 의료 영상 이미지, 107번째 의료 영상 이미지, 106번째 의료 영상 이미지가 순차적으로 표시되도록 할 수 있다.In addition, when the mouse is dragged upward in the state of FIG. 14, as shown in FIG. 12, the interface controller 13 causes the 109th medical image image to be displayed in the image display area B, and the user continues to By dragging in the upward direction, the 108th medical image image, the 107th medical image image, and the 106th medical image image may be sequentially displayed in the image display area B.

도 15에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 터치 펜의 단부를 C3의 썸네일 이미지(C31) 상에 위치시키고, 드래그하는 동작에 의해 입력될 수도 있다. 드래그 방향에 따라 주변의 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는바, 이에 대한 구체적인 설명은 생략한다.As illustrated in FIG. 15, the scroll command for the thumbnail image may be input by a user placing the end of the touch pen on the thumbnail image C31 of C3 and dragging. It has been described above that the surrounding medical image images are displayed on the image display area B according to the drag direction, and a detailed description thereof will be omitted.

도 16에 도시된 바와 같이, 썸네일 이미지에 대한 스크롤 명령은, 사용자가 손가락을 C3의 썸네일 이미지(C31) 상에 위치시키고, 드래그하는 동작에 의해 입력될 수도 있다. 드래그 방향에 따라 주변의 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되는 것에 대해서는 상술하였는바, 이에 대한 구체적인 설명은 생략한다.As illustrated in FIG. 16, the scroll command for the thumbnail image may be input by a user placing a finger on the thumbnail image C31 of C3 and dragging. It has been described above that the surrounding medical image images are displayed on the image display area B according to the drag direction, and a detailed description thereof will be omitted.

도 14 내지 도 16에서는 드래그 방향의 예로 아래 방향/위 방향으로 설명하였으나, 좌우 방향의 드래그 방향에 따라 주변 의료 영상 이미지가 이미지 디스플레이 영역(B)에 표시되도록 구성될 수도 있다.In FIGS. 14 to 16, examples of the drag direction have been described downward/upward, but the surrounding medical image images may be displayed on the image display area B according to the left-right drag direction.

이러한 기능은 임상의가 입력 장치(31)를 이용해 특정 병변(예를 들어, C3)을 선택하여 해당 병변이 존재하는 의료 영상 이미지(예를 들어, 110번째 이미지)가 이미지 디스플레이 영역(B)에 표시된 상태에서, 그 주변 조직/기관의 상태를 확인하고자 하는 경우, 입력 장치(31)의 포인터(마우스 포인터, 터치 펜의 단부, 손가락 등)의 이동을 최소화하며 인접하는 의료 영상 이미지를 확인하는 것을 가능하게 한다.This function allows the clinician to select a specific lesion (e.g., C3) using the input device 31, and a medical image (e.g., the 110th image) in which the lesion is present is displayed on the image display area (B). In the displayed state, if you want to check the state of the surrounding tissues/organs, it is necessary to minimize the movement of the pointer (mouse pointer, end of the touch pen, finger, etc.) of the input device 31 and check adjacent medical image images. Make it possible.

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.Those of ordinary skill in the art to which the present invention pertains will be able to understand that the present invention can be implemented in other specific forms without changing the technical spirit or essential features thereof. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting. The scope of the present invention is indicated by the claims to be described later rather than the detailed description, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts should be interpreted as being included in the scope of the present invention. do.

1: 의료 영상 분석 보조 시스템
2: PACS 3: 단말기
A: 환자 정보 표시 영역
B: 이미지 디스플레이 영역
C: 병변 리스트 디스플레이 영역
C11, C21, C31, C41: 썸네일 이미지
D: 도구 표시 영역
1: Medical image analysis auxiliary system
2: PACS 3: Terminal
A: Patient information display area
B: image display area
C: lesion list display area
C11, C21, C31, C41: thumbnail image
D: tool display area

Claims (17)

환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부;
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 썸네일 이미지와 상기 병변의 정보가 표시되게 하고,
상기 화면 상에 표시된 상기 썸네일 이미지 상에 입력 장치의 포인터가 위치한 상태로 입력되는 스크롤 명령에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는, 의료 영상 분석 보조 시스템.
A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a patient's body cross section is continuously photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and information on the lesion together on a screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
A thumbnail image of the lesion and information of the lesion are displayed on the other side of the screen,
In response to a scroll command input while a pointer of the input device is positioned on the thumbnail image displayed on the screen, the medical image surrounding the medical image corresponding to the thumbnail image among the plurality of medical image images on one side of the screen A medical image analysis assistant system for displaying an image image.
제1항에 있어서,
상기 입력 장치는 마우스이며,
상기 스크롤 명령은 상기 마우스의 스크롤 휠의 이동에 의해 입력되는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The input device is a mouse,
The scroll command is input by moving a scroll wheel of the mouse.
제1항에 있어서,
상기 입력 장치는 마우스이며,
상기 스크롤 명령은 상기 마우스의 드래그에 의해 입력되는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The input device is a mouse,
The scroll command is input by dragging of the mouse, medical image analysis assistance system.
제1항에 있어서,
상기 입력 장치는 터치 스크린이며,
상기 스크롤 명령은 상기 터치 스크린의 터치 지점의 이동에 의해 입력되는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The input device is a touch screen,
The scroll command is input by moving a touch point of the touch screen.
제1항에 있어서,
상기 복수의 의료 영상 이미지 중 상기 병변의 존재가 추정된 의료 영상 이미지는 상기 병변의 위치가 하이라이트 처리된 상태로 표시되는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The medical image analysis assistance system, wherein the medical image image in which the existence of the lesion is estimated among the plurality of medical image images is displayed in a state in which the location of the lesion is processed with highlighting.
제1항에 있어서,
상기 인터페이스 제어부는,
상기 화면 상에 표시된 상기 썸네일 이미지 및 상기 병변의 정보 중 적어도 하나를 선택하는 명령이 입력되는 경우, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 병변의 정보에 대응하는 병변이 표시된 병변 이미지가 표시되게 하는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The interface control unit,
When a command for selecting at least one of the thumbnail image and the lesion information displayed on the screen is input, a lesion image displaying a lesion corresponding to the lesion information among the plurality of medical image images is displayed on one side of the screen. Display, medical image analysis assistance system.
제1항에 있어서,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 병변의 존재가 추정된 의료 영상 이미지 중 어느 하나가 표시되는 경우, 상기 화면의 타측에 표시된 상기 병변의 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 존재하는 병변의 정보를 하이라이트 처리된 상태로 표시하는, 의료 영상 분석 보조 시스템.
The method of claim 1,
The interface control unit,
When any one of the medical image images in which the existence of the lesion is estimated is displayed on one side of the screen, information of the lesion existing in the medical image image displayed on one side of the screen among the information on the lesion displayed on the other side of the screen A medical image analysis assistant system that displays in a highlighted state.
환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부;
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고,
상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지가 상기 화면의 일측에 표시되게 하는, 의료 영상 분석 보조 시스템.
A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a patient's body cross section is continuously photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and information on the lesion together on a screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
To display information on the lesion on the other side of the screen,
In response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, a medical image image containing a selected lesion among the plurality of medical image images is displayed on one side of the screen. , Medical image analysis auxiliary system.
환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지를 포함하는 의료 영상 정보를 수신하는 의료 영상 정보 수신부;
수신된 상기 의료 영상 정보를 판독하여 상기 복수의 의료 영상 이미지에서 병변의 존재를 추정하고 추정된 상기 병변의 위치 및 정보를 검출하는 병변 판독부; 및
상기 복수의 의료 영상 이미지 중 적어도 일부와 상기 병변의 정보가 화면 상에 함께 표시되도록 하는 인터페이스 제어부;를 포함하고,
상기 인터페이스 제어부는,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 적어도 일부가 표시되게 하고,
상기 화면의 타측에 상기 병변의 대한 정보가 표시되게 하고,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되게 하는, 의료 영상 분석 보조 시스템.
A medical image information receiver configured to receive medical image information including a plurality of medical image images in which a cross section of a patient's body is successively photographed;
A lesion reading unit that reads the received medical image information, estimates the existence of a lesion in the plurality of medical image images, and detects the estimated location and information of the lesion; And
Including; an interface controller configured to display at least a portion of the plurality of medical image images and the lesion information together on the screen,
The interface control unit,
At least some of the plurality of medical image images are displayed on one side of the screen,
To display information on the lesion on the other side of the screen,
When a medical image image including any one of information on the lesion displayed on the other side of the screen among the plurality of medical image images is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen A medical image analysis assistance system that causes information on a lesion included in a medical image displayed on one side of the screen to be displayed in a highlighted state.
화면을 갖는 전자 장치에서 수행되는 방법으로서,
상기 화면의 일측에 환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 적어도 일부를 표시하는 단계;
상기 화면의 타측에 상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 단계; 및
상기 화면의 타측에 표시된 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 화면의 일측에 표시하는 단계;를 포함하는 방법.
As a method performed in an electronic device having a screen,
Displaying at least a portion of a plurality of medical image images in which a cross section of a patient's body is continuously captured on one side of the screen;
Displaying information on at least one lesion read as present in the plurality of medical image images on the other side of the screen; And
In response to an input for selecting information on any one of the lesion information displayed on the other side of the screen, displaying a medical image image in which a selected lesion is present from among the plurality of medical image images on one side of the screen How to include ;.
제10항에 있어서,
상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 화면의 타측에 표시된 상기 병변에 대한 정보 중 상기 화면의 일측에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보가 하이라이트 처리된 상태로 표시되는 단계;를 더 포함하는, 방법.
The method of claim 10,
When a medical image image including any one of information on the lesion displayed on the other side of the screen is displayed on one side of the screen, among the information on the lesion displayed on the other side of the screen The method further comprising: displaying information on the lesion included in the medical image image displayed on one side of the screen in a highlighted state.
제10항에 있어서,
상기 화면의 타측에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지가 표시되는, 방법.
The method of claim 10,
The method, wherein a thumbnail image of the lesion is displayed together with information on the lesion on the other side of the screen.
제12항에 있어서,
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 화면의 일측에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지가 표시되게 하는 단계;를 더 포함하는, 방법.
The method of claim 12,
In response to an input of a scroll command for the thumbnail image, causing a peripheral medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images to be displayed on one side of the screen; further comprising, Way.
화면을 갖는 전자 장치의 그래픽 사용자 인터페이스로서,
환자의 신체 단면이 연속적으로 촬영된 복수의 의료 영상 이미지 중 어느 하나가 표시되는 이미지 디스플레이 영역과,
상기 복수의 의료 영상 이미지 내에 존재하는 것으로 판독된 적어도 하나의 병변에 대한 정보를 표시하는 병변 리스트 디스플레이 영역을 포함하고,
상기 병변 리스트 디스플레이 영역 내에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변에 대한 정보를 선택하는 입력에 응답하여, 상기 복수의 의료 영상 이미지 중 선택된 병변이 존재하는 의료 영상 이미지를 상기 이미지 디스플레이 영역에 표시하는, 그래픽 사용자 인터페이스.
As a graphical user interface of an electronic device having a screen,
An image display area in which any one of a plurality of medical image images in which a patient's body cross section is continuously photographed is displayed;
And a lesion list display area displaying information on at least one lesion read as present in the plurality of medical image images,
In response to an input for selecting information on any one of the lesion information displayed in the lesion list display area, a medical image image in which a selected lesion is present among the plurality of medical image images is displayed on the image display area. A, graphical user interface.
제14항에 있어서,
상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 어느 하나의 병변을 포함하는 의료 영상 이미지가 표시되면, 상기 병변 리스트 디스플레이 영역에 표시된 상기 병변에 대한 정보 중 상기 이미지 디스플레이 영역에 표시된 의료 영상 이미지 내에 포함된 병변에 대한 정보를 하이라이트 처리된 상태로 표시하는, 그래픽 사용자 인터페이스.
The method of claim 14,
When a medical image image including any one of information on the lesion displayed in the lesion list display area among the plurality of medical image images is displayed in the image display area, the lesion displayed in the lesion list display area A graphic user interface for displaying information on a lesion included in the medical image image displayed on the image display area among the information in a highlighted state.
제14항에 있어서,
상기 병변 리스트 디스플레이 영역 내에 상기 병변에 대한 정보와 함께 상기 병변의 썸네일 이미지를 표시하는, 그래픽 사용자 인터페이스.
The method of claim 14,
A graphical user interface for displaying a thumbnail image of the lesion together with information on the lesion in the lesion list display area.
제16항에 있어서,
상기 썸네일 이미지에 대한 스크롤 명령의 입력에 응답하여, 상기 이미지 디스플레이 영역에 상기 복수의 의료 영상 이미지 중 상기 썸네일 이미지와 대응하는 의료 영상 이미지의 주변 의료 영상 이미지를 표시하는, 그래픽 사용자 인터페이스.
The method of claim 16,
In response to an input of a scroll command for the thumbnail image, displaying a surrounding medical image image of a medical image corresponding to the thumbnail image among the plurality of medical image images in the image display area.
KR1020190090327A 2019-07-25 2019-07-25 A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen Pending KR20210012492A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190090327A KR20210012492A (en) 2019-07-25 2019-07-25 A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190090327A KR20210012492A (en) 2019-07-25 2019-07-25 A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen

Publications (1)

Publication Number Publication Date
KR20210012492A true KR20210012492A (en) 2021-02-03

Family

ID=74571960

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190090327A Pending KR20210012492A (en) 2019-07-25 2019-07-25 A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen

Country Status (1)

Country Link
KR (1) KR20210012492A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024137133A1 (en) * 2022-12-19 2024-06-27 Genesis Medtech (USA) Inc. Methods and apparatus for tracking anatomical structure in video assisted surgeries
KR102843189B1 (en) * 2024-12-02 2025-08-06 주식회사 더블유닷에이아이 Method and apparatus for providing user interface
WO2025161518A1 (en) * 2024-01-31 2025-08-07 数坤科技股份有限公司 Image interaction method, apparatus and device, and storage medium

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024137133A1 (en) * 2022-12-19 2024-06-27 Genesis Medtech (USA) Inc. Methods and apparatus for tracking anatomical structure in video assisted surgeries
WO2025161518A1 (en) * 2024-01-31 2025-08-07 数坤科技股份有限公司 Image interaction method, apparatus and device, and storage medium
KR102843189B1 (en) * 2024-12-02 2025-08-06 주식회사 더블유닷에이아이 Method and apparatus for providing user interface

Similar Documents

Publication Publication Date Title
CN110515513B (en) Display apparatus and image display method using the same
JP4820680B2 (en) Medical image display device
CN103941855B (en) Medical image referring apparatus and medical imaging reference method
JP5465135B2 (en) MEDICAL INFORMATION DISPLAY DEVICE AND METHOD, AND PROGRAM
US10327640B2 (en) Control method of information terminal and computer-readable recording medium
JP6158509B2 (en) Inspection information display apparatus and method
US20090138280A1 (en) Multi-stepped default display protocols
JP5628927B2 (en) MEDICAL INFORMATION DISPLAY DEVICE AND METHOD, AND PROGRAM
CN106569673B (en) Display method and display equipment for multimedia medical record report
JP5355782B2 (en) Control apparatus and method
JP6711676B2 (en) Medical report creating apparatus and control method thereof, medical report creating system, and program
CN106445435B (en) Medical image display apparatus, system and method
CA2660952C (en) Presentation method, presentation device and computer program for presenting an image of an object
JP2018175216A (en) Medical image display device and program
KR20210012492A (en) A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen
JP2014183876A (en) Image display device and method
JP5398791B2 (en) Medical image display device
KR20220026236A (en) A medical image analysis assistance system, a method performed in an electronic device having a screen, a graphical user interface of an electronic device having a screen
US20190196668A1 (en) Image display system and image display terminal
JP6841136B2 (en) Medical image display device and program
US20240161231A1 (en) Recording medium, display device, display system and display method
KR101860910B1 (en) A displaying apparatus, a method controlling the same and a medical apparatus
US20250148590A1 (en) Medical image analysis assistance system and method for providing medical image analysis results
US20190196664A1 (en) Medical image display system and medical image display apparatus
JP2008186267A (en) Application setting apparatus and setting method

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

D14-X000 Search report completed

St.27 status event code: A-1-2-D10-D14-srh-X000

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

E13-X000 Pre-grant limitation requested

St.27 status event code: A-2-3-E10-E13-lim-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

E90F Notification of reason for final refusal
PE0902 Notice of grounds for rejection

St.27 status event code: A-1-2-D10-D21-exm-PE0902

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

T11-X000 Administrative time limit extension requested

St.27 status event code: U-3-3-T10-T11-oth-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

R18-X000 Changes to party contact information recorded

St.27 status event code: A-3-3-R10-R18-oth-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000

P13-X000 Application amended

St.27 status event code: A-2-2-P10-P13-nap-X000

R15-X000 Change to inventor requested

St.27 status event code: A-3-3-R10-R15-oth-X000

R16-X000 Change to inventor recorded

St.27 status event code: A-3-3-R10-R16-oth-X000

P11-X000 Amendment of application requested

St.27 status event code: A-2-2-P10-P11-nap-X000