[go: up one dir, main page]

WO2021181967A1 - 内視鏡システム、制御方法、及び制御プログラム - Google Patents

内視鏡システム、制御方法、及び制御プログラム Download PDF

Info

Publication number
WO2021181967A1
WO2021181967A1 PCT/JP2021/004175 JP2021004175W WO2021181967A1 WO 2021181967 A1 WO2021181967 A1 WO 2021181967A1 JP 2021004175 W JP2021004175 W JP 2021004175W WO 2021181967 A1 WO2021181967 A1 WO 2021181967A1
Authority
WO
WIPO (PCT)
Prior art keywords
analysis
endoscopic system
area
imaging
illumination light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2021/004175
Other languages
English (en)
French (fr)
Inventor
浩司 下村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to EP21767423.3A priority Critical patent/EP4119999A4/en
Priority to CN202180011084.7A priority patent/CN115038375B/zh
Priority to JP2022505838A priority patent/JP7470776B2/ja
Publication of WO2021181967A1 publication Critical patent/WO2021181967A1/ja
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655—Control therefor
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661—Endoscope light sources
    • A61B1/0669—Endoscope light sources at proximal end of an endoscope
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/07—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2407—Optical details
    • G02B23/2461—Illumination
    • G02B23/2469—Illumination using optical fibres
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476—Non-optical details, e.g. housings, mountings, supports
    • G02B23/2484—Arrangements in relation to a camera or imaging device

Definitions

  • the present invention relates to an endoscopic system, a control method, and a control program.
  • an endoscope system that continuously performs imaging while irradiating a subject with normal light such as white light and displays a live image. Further, there is known an endoscopic system that performs continuous imaging while irradiating a subject with special light such as narrow band light and performs analysis such as IEE (Image-Enhanced Endoscopy).
  • IEE Image-Enhanced Endoscopy
  • Patent Document 1 when the distance information is large (that is, screening observation), the size of the concavo-convex portion to be extracted is increased, and when the distance information is small (that is, magnified observation), the size of the concavo-convex portion to be extracted is decreased.
  • An endoscopic device that adaptively detects uneven portions according to the above is described.
  • Patent Document 2 when the observation target is magnified and observed based on the imaging size signal, a discrimination process for obtaining information further contributing to the diagnosis based on the characteristics of a specific portion or the like is executed, and the observation target is magnified and observed.
  • An endoscopic system that skips the discrimination process when it is not used is described.
  • the appropriate characteristics of the illumination light used for imaging for analysis may vary depending on the type of analysis. Then, if the illumination light having an inappropriate characteristic is used in the analysis to be performed, a highly accurate result cannot be obtained in the analysis.
  • Patent Documents 1 and 2 do not switch and execute a plurality of types of analysis having different characteristics of appropriate illumination light, and the idea of appropriate characteristics of illumination light according to the type of analysis is described in Patent Document 1. , 2 is not disclosed.
  • the present invention has been made in view of the above circumstances, and an object of the present invention is to provide an endoscope system, a control method, and a control program capable of presenting highly accurate analysis results according to an observation situation. And.
  • the endoscope system of the present invention switches and displays a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics and a plurality of types of analysis results based on an captured image obtained by imaging using the illumination light.
  • a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics and a plurality of types of analysis results based on an captured image obtained by imaging using the illumination light.
  • the analysis of displaying the result on the display and the illumination light emitted by the light source are performed according to the possible display and the result of determining the size of the area to be imaged in the subject. It is provided with a characteristic and a processor for switching.
  • control method of the endoscope system of the present invention includes a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics, and a plurality of types of analysis based on an image captured by imaging using the illumination light. It is a control method of an endoscopic system including a display capable of switching and displaying the result, and a processor, depending on the result of the processor determining the size of the target area for imaging in the subject. Of the plurality of types of analysis, the analysis of displaying the result on the display and the characteristic of the illumination light emitted by the light source are switched.
  • control program of the present invention switches and displays a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics and a plurality of types of analysis results based on an captured image obtained by imaging using the illumination light. It is a control program of an endoscopic system including a possible display, and the result is displayed on the display among the plurality of types of analyzes according to the result of determining the size of the target area for imaging in the subject. This is for causing a computer to perform a process of switching between the analysis to be displayed and the characteristics of the illumination light emitted by the light source.
  • an endoscope system a control method, and a control program capable of presenting highly accurate analysis results according to an observation situation.
  • FIG. 100 It is a figure which shows an example of the endoscope apparatus 100 which is one Embodiment of this invention. It is a schematic diagram which shows the internal structure of the endoscope apparatus 100 shown in FIG. It is a figure which shows an example of the spectrum of the light generated by the light source apparatus 5 shown in FIG. It is a plan schematic diagram which shows the schematic structure of the image pickup device 23 shown in FIG. It is a figure which shows an example of the functional block of the system control unit 44 of the signal processing unit 42 shown in FIG. It is a figure which shows an example of the screen which is displayed on the display 7 at the time of wide area observation. It is a figure which shows an example of the screen which is displayed on the display 7 at the time of detailed observation. It is a figure which shows an example of analysis and switching of illumination light in an endoscope apparatus 100.
  • FIG. 1 is a diagram showing an example of an endoscope device 100 according to an embodiment of the present invention.
  • the endoscope device 100 is an example of the endoscope system of the present invention. As shown in FIG. 1, the endoscope device 100 includes an endoscope 1, a control device 4 to which the endoscope 1 is connected, and a light source device 5.
  • the light source device 5 is an example of a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics.
  • the control device 4 includes a display 7 that displays an image captured by imaging the inside of the subject with the endoscope 1, and an input unit 6 that is an interface for inputting various information to the control device 4. , Are connected.
  • the control device 4 controls the endoscope 1, the light source device 5, and the display 7.
  • the display 7 has a display surface in which display pixels are arranged in a two-dimensional manner, and pixel data constituting the image data is drawn on each display pixel of the display surface to obtain an image based on the image data.
  • the display is done.
  • the display 7 switches the display image in response to a command from the control device 4. Further, the display 7 constitutes a display capable of switching and displaying the results of a plurality of types of analysis based on the captured image obtained by imaging.
  • the endoscope 1 is a tubular member extending in one direction and is provided at an insertion portion 10 inserted into a subject and a proximal end portion of the insertion portion 10, and is provided for an observation mode switching operation, an imaging recording operation, a forceps operation, and the like.
  • An operation unit 11 provided with an operation member for performing air supply / water supply operation, suction operation, etc., an angle knob 12 provided adjacent to the operation unit 11, an endoscope 1, a control device 4 and a light source device.
  • a forceps hole for inserting forceps for collecting biological tissues such as cells or polyps is provided inside the operation unit 11 and the insertion unit 10.
  • a channel for air supply and water supply is provided inside the operation unit 11 and the insertion unit 10.
  • Various channels such as a suction channel are provided.
  • the insertion portion 10 is composed of a flexible soft portion 10A, a curved portion 10B provided at the tip of the flexible portion 10A, and a hard tip portion 10C provided at the tip of the curved portion 10B.
  • the curved portion 10B is configured to be bendable by rotating the angle knob 12.
  • the curved portion 10B can be curved in an arbitrary direction and an arbitrary angle according to the part of the subject in which the endoscope 1 is used, and the tip portion 10C can be directed in a desired direction.
  • FIG. 2 is a schematic view showing the internal configuration of the endoscope device 100 shown in FIG.
  • FIG. 3 is a diagram showing an example of a spectrum of light generated by the light source device 5 shown in FIG.
  • the light source device 5 can irradiate the illumination light by switching between normal light and special light.
  • Normal light is light having an emission spectrum suitable for recognition by humans such as doctors, such as white light.
  • the special light is light having an emission spectrum different from that of normal light and having an emission spectrum suitable for image analysis by a computer such as IEE.
  • the light source device 5 includes a light source processor 51, a light source unit 52, and an optical path coupling unit 54.
  • the light source processor 51 is connected to the system control unit 44 of the control device 4, and controls the light source unit 52 based on a command from the system control unit 44.
  • the light source unit 52 has, for example, a plurality of semiconductor light sources, each of which is turned on or off, and when the light source unit 52 is turned on, the amount of light emitted from each semiconductor light source is controlled to emit illumination light that illuminates the observation target.
  • the light source unit 52 includes a V-LED (Violet Light Emitting Diet) 52a, a B-LED (Blue Light Emitting Diode) 52b, a G-LED (Green Light Emitting Diode) 52c, and an R-LED (Red). It has an LED of 4 colors of Emitting DIode) 52d.
  • the light source processor 51 independently controls the V-LED 52a, the B-LED 52b, the G-LED 52c, and the R-LED 52d to independently control the purple light V, the blue light B, the green light G, or the red light R. It is possible to emit light by changing the amount of light.
  • the V-LED 52a generates purple light V having a center wavelength of 405 ⁇ 10 nm and a wavelength range of 380 to 420 nm.
  • the B-LED 52b generates blue light B having a center wavelength of 450 ⁇ 10 nm and a wavelength range of 420 to 500 nm.
  • the G-LED 52c generates green light G having a wavelength range of 480 to 600 nm.
  • the R-LED52d generates red light R having a center wavelength of 620 to 630 nm and a wavelength range of 600 to 650 nm.
  • the light source processor 51 emits white light having a light amount ratio of Vc: Bc: Gc: Rc among purple light V, blue light B, green light G, and red light R when irradiated with normal light.
  • the light source processor 51 has a light amount ratio of Vs: Bs: Gs: Rs with purple light V, blue light B, green light G, and red light R as short-wavelength narrow-band light when irradiated with special light.
  • Each LED 52a to 52d is controlled so as to emit the special light.
  • the light amount ratio Vs: Bs: Gs: Rs is different from the light amount ratio Vc: Bc: Gc: Rc used when irradiating normal light, and is appropriately determined according to the purpose of observation. For example, when emphasizing superficial blood vessels, it is preferable to make Vs larger than other Bs, Gs, Rs, and when emphasizing mesopelagic blood vessels, Gs is made larger than other Vs, Gs, Rs. It is also preferable to increase the size.
  • the optical path coupling unit 54 combines the lights emitted from the V-LED 52a, B-LED 52b, G-LED 52c, and R-LED 52d, and emits the combined light as illumination light.
  • the illumination light emitted from the optical path coupling portion 54 of the light source portion 52 enters the light guide 53 described later built in the universal cord 13, and passes through the illumination lens 50 provided at the tip portion 10C of the insertion portion 10. The subject is illuminated.
  • the tip portion 10C of the endoscope 1 includes an imaging optical system including an objective lens 21 and a lens group 22, an imaging element 23 that images a subject through the imaging optical system, and a memory 25 such as a RAM (Random Access Memory).
  • a communication interface (I / F) 26, an image pickup driving unit 27, and a light guide 53 for guiding the illumination light emitted from the light source unit 52 to the illumination lens 50 are provided.
  • the light guide 53 extends from the tip portion 10C to the connector portion 13A of the universal cord 13. With the connector portion 13A of the universal cord 13 connected to the light source device 5, the illumination light emitted from the light source portion 52 of the light source device 5 can be incident on the light guide 53.
  • the image sensor 23 As the image sensor 23, a CCD (Charge Coupled Device) image sensor, a CMOS (Complementary Metal Oxide Semiconductor) image sensor, or the like is used.
  • the image sensor 23 is a CMOS that uses a rolling shutter.
  • the image sensor 23 has a light receiving surface in which a plurality of pixels are arranged two-dimensionally, and the optical image formed on the light receiving surface by the above imaging optical system is converted into an electric signal (imaging signal) in each pixel. do. Then, the image pickup element 23 converts the converted image pickup signal from an analog signal into a digital signal having a predetermined number of bits, and outputs the image pickup signal converted into the digital signal to the memory 25.
  • the image pickup device 23 for example, one equipped with a color filter such as a primary color or a complementary color is used. A set of image pickup signals output from each pixel on the light receiving surface of the image sensor 23 is called an image pickup image signal.
  • the image sensor 23 may be arranged at the tip portion 10C in a state where the light receiving surface is perpendicular to the optical axis Ax of the objective lens 21, or the light receiving surface is parallel to the optical axis Ax of the objective lens 21. It may be arranged in the tip portion 10C in such a state.
  • the image pickup optical system provided in the endoscope 1 includes optical members (including the above lens group 22) such as a lens and a prism on the optical path of light from the subject between the image pickup element 23 and the objective lens 21. It is composed of an objective lens 21 and.
  • the imaging optical system may be composed of only the objective lens 21.
  • the objective lens 21 and the lens group 22 may be a lens having a variable angle of view (focal length) (for example, a zoom lens).
  • the memory 25 temporarily records the digital image pickup signal output from the image pickup device 23.
  • the communication I / F 26 is connected to the communication interface (I / F) 41 of the control device 4.
  • the communication I / F 26 transmits the image pickup signal recorded in the memory 25 to the control device 4 through the signal line in the universal code 13.
  • the image pickup drive unit 27 is connected to the system control unit 44 of the control device 4 via the communication I / F 26.
  • the image pickup drive unit 27 drives the image pickup element 23 and the memory 25 based on a command from the system control unit 44 received by the communication I / F 26.
  • the control device 4 includes a communication I / F 41 connected to the communication I / F 26 of the endoscope 1 by a universal code 13, a signal processing unit 42, a display controller 43, a system control unit 44, a recording medium 45, and the like. To be equipped.
  • the communication I / F 41 receives the image pickup signal transmitted from the communication I / F 26 of the endoscope 1 and transmits it to the signal processing unit 42.
  • the signal processing unit 42 has a built-in memory for temporarily recording the image pickup signal received from the communication I / F 41, and processes the image pickup image signal which is a set of the image pickup signals recorded in the memory (demosaic processing, gamma correction processing, etc.). Image processing) to generate captured image information in a format capable of recognition processing and the like.
  • the captured image information generated by the signal processing unit 42 is recorded on a recording medium 45 such as a hard disk or a flash memory.
  • the display controller 43 displays the captured image based on the captured image information generated by the signal processing unit 42 on the display 7.
  • the coordinates of each pixel data constituting the captured image information generated by the signal processing unit 42 are managed in association with the coordinates of any of the display pixels constituting the display surface of the display 7.
  • the system control unit 44 controls each part of the control device 4 and sends a command to the image pickup drive unit 27 of the endoscope 1 and the light source processor 51 of the light source device 5, and controls the entire endoscope device 100 in an integrated manner. do.
  • the system control unit 44 controls the image pickup device 23 via the image pickup drive unit 27.
  • the system control unit 44 controls the light source unit 52 via the light source processor 51.
  • the control device 4 is composed of various processors that execute programs and perform processing, RAM, and ROM (Read Only Memory).
  • programmable logic is a processor whose circuit configuration can be changed after manufacturing such as a general-purpose processor that executes a program and performs various processes, such as a CPU (Application Specific Processing Unit) and an FPGA (Field Programmable Gate Array).
  • a dedicated electric circuit or the like which is a processor having a circuit configuration specially designed for executing a specific process such as a device (Programmable Logic Device: PLD) or an ASIC (Application Specific Integrated Circuit), is included.
  • the structure of these various processors is an electric circuit that combines circuit elements such as semiconductor elements.
  • the system control unit 44 and the signal processing unit 42 may be composed of one of various processors, or a combination of two or more processors of the same type or different types (for example, a combination of a plurality of FPGAs or a CPU and an FPGA). It may be composed of a combination of).
  • FIG. 4 is a schematic plan view showing a schematic configuration of the image pickup device 23 shown in FIG.
  • the image pickup element 23 has a pixel row 62 composed of a plurality of pixels 61 arranged in the row direction X, a plurality of pixel rows 62 arranged in a column direction Y orthogonal to the row direction X, and a pixel arranged on the image pickup surface 60.
  • a drive circuit 63 for driving the 61 and a signal processing circuit 64 for processing a pixel signal read from each pixel 61 of the pixel rows 62 arranged on the imaging surface 60 into a signal line are provided.
  • the imaging surface 60 constitutes a light receiving surface.
  • the end of the imaging surface 60 on one end side (upper side in the drawing) of the imaging surface 60 in the row direction Y is referred to as the upper end, and the other end of the imaging surface 60 in the row direction Y (lower side in the drawing).
  • the part is called the lower end.
  • the drive circuit 63 shown in FIG. 4 independently drives each pixel row 62 based on the signal from the image pickup drive unit 27, and resets each pixel 61 included in the pixel row 62 (stored in the photoelectric conversion element). (Emission of electric charge), reading out the pixel signal according to the electric charge accumulated in the photoelectric conversion element of each pixel 61 to the signal line, and the like.
  • the signal processing circuit 64 shown in FIG. 4 performs correlation double sampling processing on the pixel signal read from each pixel 61 of the pixel row 62 into the signal line, and digitally signals the pixel signal after the correlation double sampling processing. Convert to and output.
  • the signal processing circuit 64 is controlled by the image pickup driving unit 27.
  • the signal processing unit 42 generates captured image information by performing signal processing such as demosaic processing and gamma correction processing on the pixel signal output from the image sensor 23.
  • the endoscope device 100 is equipped with a continuous shooting mode that continuously generates a plurality of captured image information in response to one imaging instruction.
  • the system control unit 44 drives the image sensor 23 by the image pickup drive unit 27 by the rolling shutter method to image the subject.
  • the rolling shutter type drive includes a rolling reset drive and a rolling read drive.
  • the rolling reset drive is a drive in which the process of resetting each pixel 61 of the pixel row 62 and starting the exposure of each pixel 61 is sequentially performed while changing the pixel row 62.
  • the rolling read-out drive is a drive in which a signal is read from each pixel 61 of the exposed pixel row 62 and the process of ending the exposure of the pixel row 62 is sequentially performed while changing the pixel row 62.
  • FIG. 5 is a diagram showing an example of a functional block of the system control unit 44 of the signal processing unit 42 shown in FIG.
  • the processor of the signal processing unit 42 for example, by executing a control program stored in the ROM built in the signal processing unit 42, causes the captured image information generation unit 42a, the live image generation unit 42b, the analysis unit 42c, and the analysis unit 42c. It constitutes an analysis image generation unit 42d.
  • the captured image information generation unit 42a generates captured image information by performing image processing such as demosaic processing or gamma correction processing on the image pickup signal obtained by the image pickup of the image pickup element 23.
  • the captured image information generation unit 42a outputs the captured image information based on the imaging signal obtained by imaging during irradiation with normal light to the live image generation unit 42b as an imaging frame among the generated captured image information, and outputs the special light to the live image generation unit 42b.
  • the captured image information based on the imaging signal obtained by imaging during irradiation is output to the analysis unit 42c as an imaging frame.
  • the imaging frame is an imaging signal obtained by one imaging.
  • the captured image information generation unit 42a has a determination unit 42e.
  • the determination unit 42e determines, for example, the size of the image pickup target area by the image pickup device 23 in the subject into which the endoscope 1 is inserted, based on the image pickup image information generated by the image pickup image information generation unit 42a. do.
  • the target area for imaging by the image sensor 23 is, for example, an area in the subject that is captured in the captured image obtained by imaging and output to the live image generation unit 42b as an imaging frame.
  • the captured image information used by the determination unit 42e for determination may be captured image information of normal light, captured image information of special light, or captured image information of normal light and special light. You may.
  • a user of the endoscope 1 inserts the endoscope 1 into a subject and performs an examination
  • he / she first observes a wide area in the subject and observes an abnormal part such as a lesion.
  • the user can increase the distance between the inner surface of the subject and the tip of the endoscope 1 (image sensor 23), or change the angle of view of the objective lens 21 and the lens group 22. In that case, the angle of view is widened or the digital zoom is used to widen the target area for imaging.
  • the user finds an abnormal part by wide area observation, he / she performs detailed observation to observe the abnormal part in detail.
  • the user shortens the distance between the inner surface of the subject and the tip of the endoscope 1, or if the angle of view of the objective lens 21 or the lens group 22 is variable, the angle of view thereof.
  • the target area for imaging is narrowed by narrowing the angle of view or using the digital zoom.
  • the determination unit 42e determines the size of the imaging target area, which changes according to the observation situation, and outputs the result of this determination to the analysis unit 42c. For example, the determination unit 42e determines the size of the imaging target area in two stages of “wide” and “narrow”. “Wide” constitutes the first size. “Narrow” constitutes a second area that is narrower than the first area.
  • the determination of the size of the target area for imaging based on the captured image information is, for example, a trained model of AI (Artificial Intelligence) obtained by learning based on a large number of samples of a combination of the captured image and the size of the target area for imaging. Is done using. Alternatively, this determination may be made based on the captured image and a predetermined algorithm. However, as will be described later, the determination method by the determination unit 42e is not limited to these.
  • AI Artificial Intelligence
  • the live image generation unit 42b generates live image information for displaying a live image based on an imaging frame of normal light output from the captured image information generation unit 42a, and uses the generated live image information as captured image information. Output to the display controller 43 (see FIG. 2).
  • the live image is a moving image that displays the result of continuous imaging by the image sensor 23 in real time.
  • the analysis unit 42c performs analysis (image analysis) based on the image pickup frame of the special light output from the image capture image information generation unit 42a, and outputs the analysis result to the analysis image generation unit 42d. Further, the analysis unit 42c can perform a plurality of types of analysis based on the image pickup frame output from the image capture image information generation unit 42a. The analysis unit 42c switches the analysis to be executed based on the result of the determination of the size of the target area for imaging notified from the determination unit 42e.
  • the plurality of types of analysis that can be performed by the analysis unit 42c include a first analysis for determining the presence or absence of an abnormal portion such as a lesion and a second analysis for analyzing the abnormal portion.
  • the first analysis is associated with "wide” among the results of the determination by the determination unit 42e.
  • the second analysis is associated with "narrow” among the results of the determination by the determination unit 42e.
  • the analysis unit 42c performs the first analysis when the determination unit 42e outputs "wide” as the result of the determination, and performs the second analysis when the determination unit 42e outputs "narrow" as the result of the determination. ..
  • the first analysis is, for example, a pick-up analysis for extracting an abnormal part such as a lesion from a captured image.
  • the result of the pick-up analysis may be, for example, information such as the number of extracted abnormal parts, or an image in which the abnormal parts are highlighted in the captured image.
  • the first analysis may be performed using a trained model of AI obtained by learning based on a large number of samples of a combination of the captured image and the extraction result of the abnormal portion, or may be predetermined with the captured image. It may be done based on an algorithm.
  • the second analysis is, for example, a differential analysis that includes at least one analysis of the type of lesion and the degree of lesion at the abnormal site.
  • the differential analysis is, for example, information indicating the type of lesion in the abnormal part of the target by a character string or the like, or information indicating the degree of lesion in the abnormal part of the target by numerical value or the like.
  • the second analysis may be performed using a trained model of AI obtained by learning based on a large number of samples of a combination of the captured image and the analysis result of the type and degree of the lesion, or the captured image and the pre-existing image. It may be performed based on a predetermined algorithm.
  • the analysis unit 42c may perform contour extraction of the captured image as an analysis in parallel with or switched to the above-mentioned pick-up analysis and discrimination analysis. For example, the analysis unit 42c identifies the contour of the biological structure reflected in the image indicated by the captured image information obtained by imaging during irradiation with special light.
  • the biological structure of the specific object is, for example, a superficial blood vessel structure, a middle blood vessel structure, a deep blood vessel structure, or the like.
  • the analysis by the analysis unit 42c is performed in parallel with the display of the live image.
  • the analysis image generation unit 42d generates analysis result image information for displaying the analysis result image indicating the analysis result output from the analysis unit 42c, and displays the generated analysis result image information controller 43 (see FIG. 2). Output to.
  • the analysis result image includes an image showing the result of the above-mentioned pick-up analysis, an image showing the result of the discrimination analysis, an IEE image showing the result of contour extraction, and the like.
  • the IEE image is an image in which the outline of the structure of the subject is emphasized based on the imaging signal obtained by imaging when irradiating special light such as a blue laser.
  • special light such as a blue laser constitutes light for image-enhanced observation.
  • the IEE image is an image in which the surface blood vessel structure is emphasized, an image in which the middle layer blood vessel structure is emphasized, an image in which the deep blood vessel structure is emphasized, and the like.
  • FIG. 6 is a diagram showing an example of a screen displayed on the display 7 during wide area observation.
  • FIG. 7 is a diagram showing an example of a screen displayed on the display 7 during detailed observation.
  • the display controller 43 displays, for example, the screen 70 shown in FIGS. 6 and 7 on the display 7 based on the captured image information and the analysis result image information output from the signal processing unit 42.
  • the screen 70 includes a main screen 71 and a sub screen 72.
  • a live image based on the live image information output from the live image generation unit 42b of the signal processing unit 42 is displayed.
  • an analysis result image based on the analysis result image information output from the analysis image generation unit 42d of the signal processing unit 42 is displayed.
  • the endoscope device 100 is obtained by imaging a live image based on the captured image information obtained by imaging in the first period irradiated with normal light and by imaging in the second period irradiated with special light.
  • the screen 70 including the result of the analysis based on the captured image information and the captured image information is displayed.
  • the above-mentioned determination unit 42e determines that the area to be imaged is "wide", and as a result, the analysis unit 42c executes the pick-up analysis. Therefore, as shown in FIG. 6, the result of the pick-up analysis is displayed on the sub screen 72.
  • the above-mentioned determination unit 42e determines that the area to be imaged is "narrow", and as a result, the analysis unit 42c executes the discrimination analysis. Therefore, as shown in FIG. 7, the result of the discrimination analysis is displayed on the sub screen 72.
  • the endoscope device 100 displays the result on the display 7 of the plurality of types of analysis by switching the analysis to be executed according to the result of determining the size of the image pickup target area in the subject. Switch the analysis to be made.
  • the endoscope device 100 performs a plurality of types of analysis in parallel, and the result is displayed on the display 7 among the plurality of types of analysis according to the result of determining the size of the target area for imaging in the subject. You may switch the analysis to display.
  • the usage pattern of the analysis result of the analysis unit 42c is not limited to this.
  • the analysis result of the analysis unit 42c may be displayed by a display different from the display 7, or may be transmitted to a storage unit of the endoscope device 100 or another device and stored.
  • the display controller 43 displays the IEE image output from the signal processing unit 42 as the main screen of the screen 70. It may be displayed on a portion different from the 71 and the sub screen 72, or on a display different from the display 7.
  • FIG. 8 is a diagram showing an example of analysis and switching of illumination light in the endoscope device 100.
  • the horizontal axis represents time.
  • the user of the endoscope device 100 performs the above-mentioned wide-area observation until the time t1 and performs the detailed observation after the time t1.
  • the illumination light timing 75 is a timing at which the light source device 5 irradiates the illumination light according to a command from the control device 4.
  • the WLI in the illumination light timing 75 is a timing at which the light source device 5 irradiates normal light such as white light as illumination light.
  • the IEE 1 at the illumination light timing 75 is the timing at which the light source device 5 irradiates the first special light as the illumination light.
  • the IEE2 at the illumination light timing 75 is a timing at which the light source device 5 irradiates a second special light different from the first special light as the illumination light.
  • the first special light is special light having the first characteristic (spectrum) suitable for the above-mentioned pick-up analysis (first analysis), and is associated with the pick-up analysis.
  • the first special light is illumination light including narrow-band short-wavelength light and white light, and can generate an image captured image in which minute color tone changes are emphasized as compared with illumination light containing only white light. It is the illumination light.
  • the first special light is not limited to this, and can be, for example, various illumination lights having characteristics suitable for pick-up analysis.
  • the second special light is a special light having a second characteristic suitable for the above-mentioned discrimination analysis (second analysis), and is associated with the discrimination analysis.
  • the second special light is illumination light of narrow band short wavelength light, which enables generation of an captured image suitable for observing blood vessels, surface structures, and the like.
  • the second special light is not limited to this, and can be, for example, various illumination lights having characteristics suitable for differential analysis.
  • the light source device 5 repeatedly executes a predetermined irradiation operation in the period T.
  • This irradiation operation is an operation of irradiating normal light and then irradiating special light (first special light or second special light).
  • the image pickup timing 76 is a timing at which the image pickup device 23 takes an image (exposure) according to a command from the control device 4.
  • the vertical direction at the imaging timing 76 indicates the position of the pixel row 62 in the column direction Y (see FIG. 4).
  • the image pickup timing 76 is deviated for each pixel row 62. In the example shown in FIG. 7, the image sensor 23 performs imaging at a frame rate of 60 fps (frames per second).
  • the first period in which the light source device 5 continuously irradiates the normal light extends over a plurality of consecutive frames in the image pickup by the image pickup element 23.
  • the second period in which the light source device 5 continuously irradiates the special light extends over at least one frame in the image pickup by the image pickup device 23. In the example shown in FIG. 7, the second period extends over a plurality of consecutive frames by the image sensor 23.
  • the light source device 5 repeats the operation of continuously irradiating the normal light over a plurality of continuous imaging operation frames and then irradiating the special light. Then, as described above, the control device 4 displays a live image (moving image) on the display 7 based on the captured image obtained when the normal light is irradiated, and is based on the captured image obtained when the special light is irradiated. Perform analysis.
  • the control device 4 causes the analysis unit 42c to perform the pick-up analysis until the time t1, and sets the illumination light emitted by the light source device 5 as the first special light.
  • the analysis unit 42c can execute the pick-up analysis based on the image pickup frame 76a within the period of irradiation with the first special light suitable for the pick-up analysis, for example.
  • the control device 4 causes the analysis unit 42c to execute the discrimination analysis, and sets the illumination light emitted by the light source device 5 as the second special light.
  • the analysis unit 42c can execute the differential analysis based on the imaging frames 76b and 76c within the period of irradiation with the second special light suitable for the differential analysis, for example.
  • the control device 4 has the illumination lens 50 in addition to the analysis of displaying the result on the display 7 among the plurality of types of analysis according to the result of determining the size of the image pickup target area in the subject.
  • the characteristics of the illumination light emitted by the lens are also switched. Thereby, while presenting the analysis result according to the observation situation, the analysis according to the observation situation can be performed with high accuracy by the captured image obtained by the illumination light having appropriate characteristics.
  • the control device 4 switches the analysis for displaying the result on the display 7 and the characteristics of the illumination light among the plurality of types of analysis.
  • the configuration is not limited to this.
  • the control device 4 after the state in which the determination result by the determination unit 42e is "wide", the state in which the determination result by the determination unit 42e is "narrow" continues for a predetermined time (1 second as an example). If this is the case, the above switching may be performed. That is, even if the determination result by the determination unit 42e changes from “wide” to "narrow", the control device 4 described above when the determination result by the determination unit 42e returns to "wide” within a predetermined time. It is not necessary to switch between.
  • the control device 4 picks up the determination result when the determination result by the determination unit 42e returns to "wide".
  • the result of the analysis may be displayed on the display 7, and the state may be returned to the state in which the light source device 5 is irradiated with the first special light.
  • the determination unit 42e determines the size of the imaging target area in two stages of "wide” and “narrow” has been described, but the determination unit 42e determines the size of the imaging target area in three or more stages. May be good.
  • the control device 4 may switch the characteristics of the analysis and the illumination light for displaying the result on the display 7 in three or more ways according to the determination result of three or more stages by the determination unit 42e.
  • the determination unit 42e is provided in the captured image information generation unit 42a, and the high second position for determining the size of the target area for imaging based on the captured image information generated by the captured image information generation unit 42a has been described.
  • the position where the unit 42e is provided and the determination method by the determination unit 42e are not limited to this.
  • the determination unit 42e acquires information indicating the current angle of view of the objective lens 21 or the lens group 22, and uses the acquired information to perform imaging.
  • the size of the target area may be determined.
  • the determination unit 42e measures with the measuring device.
  • Information indicating the result may be acquired, and the acquired information may be used to determine the size of the image pickup target area. As an example, if the measured distance is equal to or greater than the threshold value, the area to be imaged is determined to be "wide", and if the measured distance is less than the threshold value, the area to be imaged is wide. Is determined to be "narrow".
  • the endoscope device 100 controls to correct the intensity of the illumination light emitted by the light source device 5 so that the brightness of the obtained captured image is within a predetermined range, it is determined.
  • the unit 42e may acquire information indicating the result of this correction and use the acquired information to determine the size of the imaging target area.
  • the intensity of the illumination light emitted by the light source device 5 is controlled to be relatively high so as to maintain the brightness of the captured image.
  • the tip of the endoscope 1 is close to the inner surface of the subject, so that the illumination light easily reaches the inner surface of the subject. Therefore, the intensity of the illumination light emitted by the light source device 5 is controlled to be relatively low so as to maintain the brightness of the captured image.
  • the determination unit 42e determines that the area to be imaged is "wide", and the illumination device 5 irradiates the illumination. If the light intensity is less than the threshold value, the area to be imaged is determined to be "narrow".
  • the determination unit 42e may determine the size of the target area for imaging by using at least two determination methods in combination among the above determination methods.
  • the analysis of the presence or absence of the abnormal portion by the analysis unit 42c is, for example, the detection of the region of interest in the subject into which the endoscope 1 is inserted.
  • the analysis unit 42c detects a region of interest in the subject from the image indicated by the captured image information obtained by imaging during irradiation with special light.
  • the region of interest is, for example, an abnormal region such as an region that is likely to be a lesion, and is an region of interest in the observation in the subject that is recommended for attention.
  • the analysis image generation unit 42d provides image information for displaying an image with emphasis on the region of interest detected by the analysis unit 42c in the image indicated by the captured image information obtained by imaging during irradiation with special light. Generate. As a result, the region-focused image is displayed on the sub-screen 72, and the operator of the endoscope 1 can easily recognize the region of interest in the subject.
  • the analysis image generation unit 42d expands the color difference between the abnormal part (lesion part or the like) and the normal part, which is the region of interest, in the image indicated by the captured image information obtained by imaging during irradiation with special light. Image information for displaying the color difference expansion image that has undergone the color difference expansion processing may be generated. As a result, the color difference expanded image is displayed on the sub screen 72, and the operator of the endoscope 1 can easily distinguish between the abnormal part and the normal part in the subject.
  • the analysis for analyzing the abnormal part by the analysis unit 42c may include, for example, selection of similar case images.
  • the analysis unit 42c selects a case image similar to the captured image information obtained by imaging during irradiation with special light by searching a database accessible to the endoscope device 100.
  • the analysis image generation unit 42d generates image information for displaying an image showing the result of selection by the analysis unit 42c.
  • the result of selection by the analysis unit 42c may be the case image itself selected by the analysis unit 42c, or the case image associated with the case image selected by the analysis unit 42c in the above database. It may be information such as a diagnosis result regarding.
  • the selection result of the similar case image is displayed on the sub screen 72, and the operator of the endoscope 1 can easily compare the state in the subject under observation with the similar case.
  • the analysis for analyzing the abnormal part by the analysis unit 42c may include discrimination between a tumor and a non-tumor.
  • the analysis unit 42c determines whether or not the biological region reflected in the image indicated by the image captured image information obtained by imaging during irradiation with special light is a tumor.
  • the analysis image generation unit 42d generates image information for displaying an image showing the result of discrimination by the analysis unit 42c.
  • the result of discrimination by the analysis unit 42c may be information indicating whether or not the biological region reflected in the most recently captured image is a tumor, or it may be a tumor after the current examination is started. It may be information indicating the number of biological regions determined to be present.
  • the discrimination result of the tumor and the non-tumor is displayed on the sub screen 72, and it is possible to support the observation by the operator of the endoscope 1 and the operation of the endoscope 1.
  • the analysis for analyzing the abnormal part by the analysis unit 42c may include the identification of the state of the organ.
  • the analysis unit 42c identifies the state of the organs reflected in the image indicated by the captured image information obtained by imaging during irradiation with special light.
  • the state of the organ is, for example, the oxygen saturation for each region, the thickness, density, pattern, and uniformity of the vascular structure, the surface structure of the large intestine (for example, pit-like structure), the surface structure of the duodenum (for example, villous structure), and the like.
  • the analysis image generation unit 42d generates image information for displaying an image showing a specific result by the analysis unit 42c.
  • the analysis image generation unit 42d generates an oxygen saturation image that images the oxygen saturation for each specified region.
  • the identification result of the state of the organ is displayed on the sub screen 72, and it is possible to support the observation by the operator of the endoscope 1 and the operation of the endoscope 1.
  • the analysis for analyzing the abnormal part by the analysis unit 42c may include the generation of the planned separation line.
  • the analysis unit 42c is scheduled to be cut off, which is a line to be cut off in order to remove a tumor or the like from the biological region reflected in the image indicated by the captured image information obtained by imaging during irradiation with special light. Determine the line (demarkation line).
  • the analysis image generation unit 42d generates image information for displaying an image with a scheduled separation line determined by the analysis unit 42c in the image indicated by the captured image information obtained by imaging during irradiation with special light. do. As a result, the image with the scheduled separation line is displayed on the sub screen 72, and the operator of the endoscope 1 can easily recognize the scheduled separation line in the subject.
  • the configuration in which the lengths of the first period of irradiating normal light and the second period of irradiating special light are constant in the repetition of each cycle T has been described, but the first period of irradiating normal light and The length of each of the second periods of irradiating the special light may not be constant (or indefinite) in the repetition of each cycle T.
  • the ratio of the lengths of the first period and the second period in one cycle T is 3: 1, and the ratio of the lengths of the first period and the second period in the other cycle T is 3. : 2 may be used.
  • the cycle T which is the repeating cycle of the operation of irradiating the normal light and the special light
  • the cycle T may be indefinite.
  • the cycle T the configuration in which the normal light is first irradiated and then the special light is irradiated has been described, but in the cycle T, the special light may be first irradiated and then the normal light may be irradiated.
  • the spectrum of normal light may be constant at the repetition of each cycle T, or may be indefinite at the repetition of each cycle T.
  • spectrum of the special light may be constant at the repetition of each period T or may be indefinite at the repetition of each period T.
  • the configuration in which the second period of irradiating the special light is immediately after the first period of irradiating the normal light has been described, but the light source device 5 is used between the first period and the second period. There may be a non-irradiation period in which the illumination light is not applied.
  • the endoscope device 100 has been described as an example of the endoscope system of the present invention, the endoscope system of the present invention may be realized by a plurality of devices connected to each other via a network. For example, at least a part of the processing by the control device 4 may be executed by another device connected to the endoscope device 100 via a network.
  • Control program The control program stored in the ROM of the control device 4 is stored in a computer-readable non-transitory storage medium.
  • a "computer-readable storage medium” includes, for example, an optical medium such as a CD-ROM (Compact Disc-ROM), a magnetic storage medium such as a USB (Universal Serial Bus) memory, or a memory card. Also, such a program, It can also be provided by downloading over the network.
  • a light source that can switch between multiple types of illumination light with different characteristics and illuminate
  • a display that can switch and display the results of multiple types of analysis based on the captured image obtained by imaging using the above illumination light, and Depending on the result of determining the size of the area to be imaged in the subject, the analysis of displaying the result on the display among the plurality of types of analysis and the characteristic of the illumination light emitted by the light source are switched.
  • the processor Endoscopic system with.
  • the endoscopic system described The plurality of types of analysis include a first analysis for determining the presence or absence of an abnormal portion based on the captured image and a second analysis for analyzing the abnormal portion based on the captured image.
  • the above processor When the area of the target area is the first area, the result of the first analysis is displayed. When the area of the target area is a second area narrower than the first area, the result of the second analysis is displayed. Endoscopic system.
  • the endoscopic system according to any one of (1) and (2).
  • the plurality of types of analysis include a first analysis and a second analysis that are different from each other.
  • the above processor When the area of the target area is the first area, the result of the first analysis is displayed, and the characteristic of the illumination light is set as the characteristic associated with the first analysis. When the area of the target area is a second area narrower than the first area, the result of the second analysis is displayed, and the characteristics of the illumination light are associated with the second analysis. Characteristic Endoscopic system.
  • the endoscopic system according to any one of (1) to (3).
  • the light source continuously irradiates the illumination light of the first characteristic in the first period over a plurality of consecutive imaging operation frames, and then in the second period over at least one imaging operation frame. Repeat the operation of irradiating the illumination light with the second characteristic, which is different from the characteristic,
  • the plurality of types of analysis are performed based on the captured image obtained by the imaging in the second period.
  • the processor switches the characteristics of the illumination light in the second period according to the result of determining the size of the target area. Endoscopic system.
  • the endoscopic system described above The processor displays a moving image based on the captured image obtained by the imaging in the first period on the display or a display different from the display. Endoscopic system.
  • the endoscopic system according to (4) or (5) The illumination light of the first characteristic is white light, and the illumination light of the second characteristic is light for image enhancement observation. Endoscopic system.
  • the endoscopic system according to any one of (4) to (6).
  • the lengths of the first period and the second period are constant in the repetition of the operation or indefinite in the repetition of the operation. Endoscopic system.
  • the endoscopic system according to any one of (4) to (7).
  • the spectra of the illumination light of the first characteristic and the illumination light of the second characteristic are constant in the repetition of the operation, or indefinite in the repetition of the operation. Endoscopic system.
  • the endoscopic system according to any one of (4) to (9).
  • the first period is longer than the second period, Endoscopic system.
  • the endoscopic system according to any one of (1) to (11).
  • the processor determines the size of the target area for imaging by using the captured image. Endoscopic system.
  • the endoscopic system according to any one of (1) to (12).
  • the above imaging is performed by an optical system with a variable angle of view.
  • the processor determines the size of the target area for imaging by using the angle of view of the optical system. Endoscopic system.
  • the endoscopic system according to any one of (1) to (13).
  • the processor determines the size of the image pickup target area by using the measurement result of the distance between the tip of the endoscope having the image pickup element for performing the image pickup and the image pickup target. Endoscopic system.
  • the endoscopic system according to any one of (1) to (13).
  • the intensity of the illumination light emitted by the light source is corrected according to the distance between the tip of the endoscope having the image sensor that performs the image pickup and the object to be imaged.
  • the processor determines the size of the target area for imaging by using the result of the correction of the intensity. Endoscopic system.
  • the analysis of the presence or absence of the abnormal portion includes the detection of the region of interest in the subject into which the endoscope including the image sensor for performing the imaging is inserted. Endoscopic system.
  • the analysis of the abnormal site includes analysis of at least one of the type of lesion and the degree of lesion at the abnormal site. Endoscopic system.
  • a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics
  • a display capable of switching and displaying the results of a plurality of types of analysis based on an image captured by imaging using the above illumination light
  • a processor It is a control method of the endoscopic system provided.
  • the above processor Depending on the result of determining the size of the area to be imaged in the subject, the analysis of displaying the result on the display among the plurality of types of analysis and the characteristic of the illumination light emitted by the light source are switched. , Control method.
  • An endoscope including a light source capable of switching and irradiating a plurality of types of illumination light having different characteristics, and a display capable of switching and displaying the results of a plurality of types of analysis based on an image captured by imaging using the illumination light.
  • a control program for the mirror system Depending on the result of determining the size of the area to be imaged in the subject, the analysis of displaying the result on the display among the plurality of types of analysis and the characteristic of the illumination light emitted by the light source are switched. , A control program that lets a computer perform processing.
  • an endoscope system a control method, and a control program capable of presenting highly accurate analysis results according to an observation situation.

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Endoscopes (AREA)

Abstract

観察の状況に応じた高精度な解析の結果を提示することのできる内視鏡システム、制御方法、及び制御プログラムを提供する。光源装置５は、特性が異なる複数種類の照明光を切り替えて照射可能である。ディスプレイ７は、その照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能である。制御装置４は、被検体内における撮像の対象エリアの広さを判定した結果に応じて、複数種類の解析のうちディスプレイ７に結果を表示させる解析と、光源装置５が照射する照明光の特性と、を切り替える。

Description

内視鏡システム、制御方法、及び制御プログラム
　本発明は、内視鏡システム、制御方法、及び制御プログラムに関する。
　従来、白色光等の通常光を被検体内に照射しながら連続撮像を行い、ライブ画像を表示する内視鏡システムが知られている。また、狭帯域光等の特殊光を被検体内に照射しながら連続撮像を行い、ＩＥＥ（Ｉｍａｇｅ－Ｅｎｈａｎｃｅｄ　Ｅｎｄｏｓｃｏｐｙ：画像強調観察）などの解析を行う内視鏡システムが知られている。
　特許文献１には、距離情報が大きい場合（即ちスクリーニング観察）は抽出する凹凸部のサイズを大きくし、距離情報が小さい場合（即ち拡大観察）は抽出する凹凸部のサイズを小さくし、観察状態に応じて適応的に凹凸部を検出する内視鏡装置が記載されている。
　特許文献２には、撮像サイズ信号に基づいて、観察対象を拡大観察している場合に、特定部分等の特徴に基づきさらに診断に資する情報を得る判別処理を実行し、観察対象を拡大観察していない場合に判別処理をスキップする内視鏡システムが記載されている。
特開２０１５－８７８２号公報 国際公開第２０１８／１５９４６１号
　しかしながら、上記の従来技術では、観察の状況に応じた高精度な解析の結果を提示することができなかった。例えば、解析のための撮像に用いる照明光の適切な特性は、解析の種類によって異なる場合がある。そして、実行する解析において適切でない特性の照明光を用いると、その解析において精度の高い結果を得ることができない。
　また、特許文献１，２の構成は、適切な照明光の特性が異なる複数種類の解析を切り替えて実行するものではなく、解析の種類に応じた適切な照明光の特性に関する思想は特許文献１，２に開示されていない。
　本発明は、上記事情に鑑みてなされたものであり、観察の状況に応じた高精度な解析の結果を提示することのできる内視鏡システム、制御方法、及び制御プログラムを提供することを目的とする。
　本発明の内視鏡システムは、特性が異なる複数種類の照明光を切り替えて照射可能な光源と、上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替えるプロセッサと、を備えるものである。
　また、本発明の内視鏡システムの制御方法は、特性が異なる複数種類の照明光を切り替えて照射可能な光源と、上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、プロセッサと、を備える内視鏡システムの制御方法であって、上記プロセッサが、被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替えるものである。
　また、本発明の制御プログラムは、特性が異なる複数種類の照明光を切り替えて照射可能な光源と、上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、を備える内視鏡システムの制御プログラムであって、被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替える、処理をコンピュータに実行させるためのものである。
　本発明によれば、観察の状況に応じた高精度な解析の結果を提示することのできる内視鏡システム、制御方法、及び制御プログラムを提供することができる。
本発明の一実施形態である内視鏡装置１００の一例を示す図である。 図１に示す内視鏡装置１００の内部構成を示す模式図である。 図２に示した光源装置５が発生させる光のスペクトルの一例を示す図である。 図２に示した撮像素子２３の概略構成を示す平面模式図である。 図２に示した信号処理部４２のシステム制御部４４の機能ブロックの一例を示す図である。 広域観察時にディスプレイ７に表示される画面の一例を示す図である。 詳細観察時にディスプレイ７に表示される画面の一例を示す図である。 内視鏡装置１００における解析及び照明光の切り替えの一例を示す図である。
　以下、本発明の実施形態について図面を参照して説明する。
（実施形態）
＜本発明の一実施形態である内視鏡装置１００＞
　図１は、本発明の一実施形態である内視鏡装置１００の一例を示す図である。
　内視鏡装置１００は、本発明の内視鏡システムの一例である。図１に示すように、内視鏡装置１００は、内視鏡１と、この内視鏡１が接続される制御装置４及び光源装置５と、を備える。光源装置５は、特性が異なる複数種類の照明光を切り替えて照射可能な光源の一例である。
　制御装置４には、内視鏡１によって被検体内を撮像して得られる撮像画像等を表示するディスプレイ７と、制御装置４に対して各種情報を入力するためのインタフェースである入力部６と、が接続されている。制御装置４は、内視鏡１、光源装置５、及びディスプレイ７を制御する。
　ディスプレイ７は、表示画素が二次元状に配列された表示面を有し、この表示面の各表示画素に、画像データを構成する画素データが描画されることにより、この画像データに基づく画像の表示が行われる。ディスプレイ７は、制御装置４からの指令に応じて表示画像を切り替える。また、ディスプレイ７は、撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイを構成する。
　内視鏡１は、一方向に延びる管状部材であって被検体内に挿入される挿入部１０と、挿入部１０の基端部に設けられ、観察モード切替操作、撮像記録操作、鉗子操作、送気送水操作、及び吸引操作等を行うための操作部材が設けられた操作部１１と、操作部１１に隣接して設けられたアングルノブ１２と、内視鏡１を制御装置４と光源装置５にそれぞれ着脱自在に接続するコネクタ部１３Ａ，１３Ｂを含むユニバーサルコード１３と、を含む。
　なお、図１では省略されているが、操作部１１及び挿入部１０の内部には、細胞又はポリープ等の生体組織を採取するための鉗子を挿入する鉗子孔、送気及び送水用のチャンネル、吸引用のチャンネル等の各種のチャンネルが設けられる。
　挿入部１０は、可撓性を有する軟性部１０Ａと、軟性部１０Ａの先端に設けられた湾曲部１０Ｂと、湾曲部１０Ｂの先端に設けられた硬質の先端部１０Ｃとから構成される。
　湾曲部１０Ｂは、アングルノブ１２の回動操作により湾曲自在に構成されている。この湾曲部１０Ｂは、内視鏡１が使用される被検体の部位等に応じて、任意の方向及び任意の角度に湾曲でき、先端部１０Ｃを所望の方向に向けることができる。
＜図１に示す内視鏡装置１００の内部構成＞
　図２は、図１に示す内視鏡装置１００の内部構成を示す模式図である。図３は、図２に示した光源装置５が発生させる光のスペクトルの一例を示す図である。
　光源装置５は、照明光として、通常光と特殊光とを切り替えて照射可能である。通常光は、白色光等の、医師等の人間による認識に適した発光スペクトルを有する光である。特殊光は、通常光とは発光スペクトルが異なる、ＩＥＥ等のコンピュータによる画像解析に適した発光スペクトルを有する光である。
　具体的には、光源装置５は、光源用プロセッサ５１と、光源部５２と、光路結合部５４と、を備える。光源用プロセッサ５１は、制御装置４のシステム制御部４４と接続されており、システム制御部４４からの指令に基づいて光源部５２を制御する。
　光源部５２は、例えば、複数の半導体光源を有し、これらをそれぞれ点灯又は消灯し、点灯する場合には各半導体光源の発光量を制御することにより、観察対象を照明する照明光を発する。本実施形態では、光源部５２は、Ｖ－ＬＥＤ（Ｖｉｏｌｅｔ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）５２ａ、Ｂ－ＬＥＤ（Ｂｌｕｅ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）５２ｂ、Ｇ－ＬＥＤ（Ｇｒｅｅｎ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）５２ｃ、及びＲ－ＬＥＤ（Ｒｅｄ　Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）５２ｄの４色のＬＥＤを有する。
　光源用プロセッサ５１は、Ｖ－ＬＥＤ５２ａ、Ｂ－ＬＥＤ５２ｂ、Ｇ－ＬＥＤ５２ｃ、及びＲ－ＬＥＤ５２ｄをそれぞれ独立に制御することにより、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、又は赤色光Ｒをそれぞれ独立に光量を変えて発光可能である。図３に示すように、Ｖ－ＬＥＤ５２ａは、中心波長４０５±１０ｎｍ、波長範囲３８０～４２０ｎｍの紫色光Ｖを発生する。Ｂ－ＬＥＤ５２ｂは、中心波長４５０±１０ｎｍ、波長範囲４２０～５００ｎｍの青色光Ｂを発生する。Ｇ－ＬＥＤ５２ｃは、波長範囲が４８０～６００ｎｍに及ぶ緑色光Ｇを発生する。Ｒ－ＬＥＤ５２ｄは、中心波長６２０～６３０ｎｍで、波長範囲が６００～６５０ｎｍに及ぶ赤色光Ｒを発生する。
　また、光源用プロセッサ５１は、通常光の照射時には、紫色光Ｖ、青色光Ｂ、緑色光Ｇ、及び赤色光Ｒ間の光量比がＶｃ：Ｂｃ：Ｇｃ：Ｒｃとなる白色光を発光するように、各ＬＥＤ５２ａ～５２ｄを制御する。なお、Ｖｃ、Ｂｃ、Ｇｃ、Ｒｃ＞０である。
　また、光源用プロセッサ５１は、特殊光の照射時には、短波長の狭帯域光としての紫色光Ｖ、青色光Ｂ、緑色光Ｇ、及び赤色光Ｒとの光量比がＶｓ：Ｂｓ：Ｇｓ：Ｒｓとなる特殊光を発光するように、各ＬＥＤ５２ａ～５２ｄを制御する。
　光量比Ｖｓ：Ｂｓ：Ｇｓ：Ｒｓは、通常光の照射時に使用する光量比Ｖｃ：Ｂｃ：Ｇｃ：Ｒｃと異なっており、観察目的に応じて適宜定められる。例えば、表層血管を強調する場合には、Ｖｓを、他のＢｓ、Ｇｓ、Ｒｓよりも大きくすることが好ましく、中深層血管を強調する場合には、Ｇｓを、他のＶｓ、Ｇｓ、Ｒｓよりも大きくすることが好ましい。
　光路結合部５４は、Ｖ－ＬＥＤ５２ａ、Ｂ－ＬＥＤ５２ｂ、Ｇ－ＬＥＤ５２ｃ、及びＲ－ＬＥＤ５２ｄから出射される各光を結合し、結合した光を照明光として出射する。光源部５２の光路結合部５４から出射された照明光は、ユニバーサルコード１３に内蔵された後述のライトガイド５３に入射し、挿入部１０の先端部１０Ｃに設けられた照明用レンズ５０を通って被写体に照射される。
　内視鏡１の先端部１０Ｃには、対物レンズ２１及びレンズ群２２を含む撮像光学系と、この撮像光学系を通して被写体を撮像する撮像素子２３と、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）等のメモリ２５と、通信インタフェース（Ｉ／Ｆ）２６と、撮像駆動部２７と、光源部５２から出射された照明光を照明用レンズ５０に導くためのライトガイド５３と、が設けられている。
　ライトガイド５３は、先端部１０Ｃからユニバーサルコード１３のコネクタ部１３Ａまで延びている。ユニバーサルコード１３のコネクタ部１３Ａが光源装置５に接続された状態で、光源装置５の光源部５２から出射される照明光がライトガイド５３に入射可能な状態となる。
　撮像素子２３は、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）イメージセンサ又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等が用いられる。本実施形態においては、撮像素子２３は、ローリングシャッタを用いるＣＭＯＳである。
　撮像素子２３は、複数の画素が二次元状に配置された受光面を有し、上記の撮像光学系によってこの受光面に結像された光学像を各画素において電気信号（撮像信号）に変換する。そして、撮像素子２３は、変換した撮像信号をアナログ信号から所定のビット数のデジタル信号に変換し、デジタル信号に変換した撮像信号をメモリ２５に出力する。撮像素子２３は、例えば原色又は補色等のカラーフィルタを搭載するものが用いられる。撮像素子２３の受光面の各画素から出力される撮像信号の集合を撮像画像信号という。
　撮像素子２３は、対物レンズ２１の光軸Ａｘに対して受光面が垂直となる状態で先端部１０Ｃに配置されていてもよいし、対物レンズ２１の光軸Ａｘに対して受光面が平行となる状態で先端部１０Ｃに配置されていてもよい。
　内視鏡１に設けられる撮像光学系は、撮像素子２３と対物レンズ２１との間における被写体からの光の光路上にあるレンズ、プリズム等の光学部材（上記のレンズ群２２を含む）と、対物レンズ２１と、によって構成される。撮像光学系は、対物レンズ２１のみで構成される場合もある。対物レンズ２１やレンズ群２２は、画角（焦点距離）が可変のレンズ（例えばズームレンズ）であってもよい。
　メモリ２５は、撮像素子２３から出力されたデジタルの撮像信号を一時的に記録する。
　通信Ｉ／Ｆ２６は、制御装置４の通信インタフェース（Ｉ／Ｆ）４１と接続される。通信Ｉ／Ｆ２６は、メモリ２５に記録された撮像信号を、ユニバーサルコード１３内の信号線を通して制御装置４に伝送する。
　撮像駆動部２７は、通信Ｉ／Ｆ２６を介して制御装置４のシステム制御部４４と接続されている。撮像駆動部２７は、通信Ｉ／Ｆ２６で受信されるシステム制御部４４からの指令に基づいて、撮像素子２３及びメモリ２５を駆動する。
　制御装置４は、ユニバーサルコード１３によって内視鏡１の通信Ｉ／Ｆ２６と接続される通信Ｉ／Ｆ４１と、信号処理部４２と、表示コントローラ４３と、システム制御部４４と、記録媒体４５と、を備える。
　通信Ｉ／Ｆ４１は、内視鏡１の通信Ｉ／Ｆ２６から伝送されてきた撮像信号を受信して信号処理部４２に伝達する。
　信号処理部４２は、通信Ｉ／Ｆ４１から受けた撮像信号を一時記録するメモリを内蔵しており、メモリに記録された撮像信号の集合である撮像画像信号を処理（デモザイク処理又はガンマ補正処理等の画像処理）して、認識処理等が可能な形式の撮像画像情報を生成する。信号処理部４２によって生成された撮像画像情報は、ハードディスク又はフラッシュメモリ等の記録媒体４５に記録される。
　表示コントローラ４３は、信号処理部４２によって生成された撮像画像情報に基づく撮像画像をディスプレイ７に表示させる。信号処理部４２によって生成された撮像画像情報を構成する各画素データの座標は、ディスプレイ７の表示面を構成するいずれかの表示画素の座標と対応付けて管理されている。
　システム制御部４４は、制御装置４の各部を制御すると共に、内視鏡１の撮像駆動部２７と光源装置５の光源用プロセッサ５１とに指令を送り、内視鏡装置１００の全体を統括制御する。例えば、システム制御部４４は、撮像駆動部２７を介して撮像素子２３の制御を行う。また、システム制御部４４は、光源用プロセッサ５１を介して光源部５２の制御を行う。
　制御装置４は、プログラムを実行して処理を行う各種のプロセッサと、ＲＡＭと、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）により構成される。
　各種のプロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｇａｔｅ　Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ　Ｌｏｇｉｃ　Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ　Ｓｐｅｃｉｆｉｃ　Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
　これら各種のプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
　システム制御部４４や信号処理部４２は、各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。
＜図２に示した撮像素子２３の概略構成＞
　図４は、図２に示した撮像素子２３の概略構成を示す平面模式図である。
　撮像素子２３は、行方向Ｘに配列された複数の画素６１からなる画素行６２が、行方向Ｘと直交する列方向Ｙに複数配列された撮像面６０と、撮像面６０に配列された画素６１を駆動する駆動回路６３と、撮像面６０に配列された画素行６２の各画素６１から信号線に読み出される画素信号を処理する信号処理回路６４と、を備える。撮像面６０は受光面を構成する。
　以下では、図４において撮像面６０の列方向Ｙの一端側（図中の上側）の端部を上端といい、撮像面６０の列方向Ｙの他端側（図中の下側）の端部を下端という。
　図４に示す駆動回路６３は、撮像駆動部２７からの信号に基づいて、各画素行６２を独立に駆動し、画素行６２に含まれる各画素６１のリセット（光電変換素子に蓄積されている電荷の排出）、この各画素６１の光電変換素子に蓄積された電荷に応じた画素信号の信号線への読み出し等を行う。
　図４に示す信号処理回路６４は、画素行６２の各画素６１から信号線に読み出された画素信号に対し、相関二重サンプリング処理を行い、相関二重サンプリング処理後の画素信号をデジタル信号に変換して出力する。信号処理回路６４は、撮像駆動部２７によって制御される。
　信号処理部４２は、撮像素子２３から出力された画素信号にデモザイク処理及びガンマ補正処理等の信号処理を施して撮像画像情報を生成する。
　内視鏡装置１００は、１回の撮像指示に応じて複数の撮像画像情報を連続して生成する連写モードを搭載している。システム制御部４４は、連写モードにおいては、撮像駆動部２７により撮像素子２３をローリングシャッタ方式により駆動して被写体を撮像させる。
　ローリングシャッタ方式の駆動は、ローリングリセット駆動と、ローリング読み出し駆動と、を含む。ローリングリセット駆動は、画素行６２の各画素６１をリセットしてその各画素６１の露光を開始する処理を、画素行６２を変えながら順次行う駆動である。ローリング読み出し駆動は、露光されている画素行６２の各画素６１から信号を読み出して、その画素行６２の露光を終了する処理を、画素行６２を変えながら順次行う駆動である。
＜図２に示した信号処理部４２のシステム制御部４４の機能ブロック＞
　図５は、図２に示した信号処理部４２のシステム制御部４４の機能ブロックの一例を示す図である。
　信号処理部４２のプロセッサは、例えば信号処理部４２に内蔵されるＲＯＭに格納された制御プログラムを実行することにより、撮像画像情報生成部４２ａと、ライブ画像生成部４２ｂと、解析部４２ｃと、解析画像生成部４２ｄと、を構成する。
　撮像画像情報生成部４２ａは、撮像素子２３の撮像により得られた撮像信号に対して、デモザイク処理又はガンマ補正処理等の画像処理を行うことにより撮像画像情報を生成する。撮像画像情報生成部４２ａは、生成した撮像画像情報のうち、通常光の照射時の撮像により得られた撮像信号に基づく撮像画像情報を撮像フレームとしてライブ画像生成部４２ｂへ出力し、特殊光の照射時の撮像により得られた撮像信号に基づく撮像画像情報を撮像フレームとして解析部４２ｃへ出力する。撮像フレームは、１回の撮像により得られた撮像信号である。
　また、撮像画像情報生成部４２ａは、判定部４２ｅを有する。判定部４２ｅは、例えば、撮像画像情報生成部４２ａにおいて生成された撮像画像情報に基づいて、内視鏡１が挿入された被検体内における、撮像素子２３による撮像の対象エリアの広さを判定する。
　撮像素子２３による撮像の対象エリアは、例えば、撮像によって得られ、撮像フレームとしてライブ画像生成部４２ｂへ出力される撮像画像に写っている被検体内のエリアである。判定部４２ｅが判定に用いる撮像画像情報は、通常光の撮像画像情報であってもよいし、特殊光の撮像画像情報であってもよいし、通常光及び特殊光の各撮像画像情報であってもよい。
　例えば、内視鏡１のユーザ（例えば医師）は、被検体内に内視鏡１を挿入して検査を行う場合に、まず、被検体内の広い範囲を観察しながら病変等の異常個所を探す広域観察を行う。広域観察の際に、ユーザは、被検体内の内表面と内視鏡１の先端（撮像素子２３）との間の距離を長くしたり、対物レンズ２１やレンズ群２２の画角が可変の場合はその画角を広くしたり、デジタルズームを用いたりして、撮像の対象エリアを広くする。
　また、ユーザは、広域観察によって異常個所を見つけると、その異常個所を詳細に観察する詳細観察を行う。詳細観察の際に、ユーザは、被検体内の内表面と内視鏡１の先端との間の距離を短くしたり、対物レンズ２１やレンズ群２２の画角が可変の場合はその画角を狭くしたり、デジタルズームを用いたりして、撮像の対象エリアを狭くする。
　判定部４２ｅは、このように観察の状況に応じて変化する、撮像の対象エリアの広さを判定し、この判定の結果を解析部４２ｃへ出力する。例えば、判定部４２ｅは、撮像の対象エリアの広さを、「広い」及び「狭い」の２段階で判定する。「広い」は、第１の広さを構成する。「狭い」は、第１の広さより狭い第２の広さを構成する。
　撮像画像情報に基づく撮像の対象エリアの広さの判定は、例えば、撮像画像と撮像の対象エリアの広さとの組み合わせの多数のサンプルに基づく学習により得られたＡＩ（Ａｒｔｉｆｉｃｉａｌ　Ｉｎｔｅｌｌｉｇｅｎｃｅ）の学習済みモデルを用いて行われる。又は、この判定は、撮像画像と予め定められたアルゴリズムとに基づいて行われてもよい。ただし、後述のように、判定部４２ｅによる判定方法はこれらに限らない。
　ライブ画像生成部４２ｂは、撮像画像情報生成部４２ａから出力された通常光の撮像フレームに基づいて、ライブ画像を表示するためのライブ画像情報を生成し、生成したライブ画像情報を撮像画像情報として表示コントローラ４３（図２参照）へ出力する。ライブ画像は、撮像素子２３による連続した撮像の結果をリアルタイムで表示する動画である。
　解析部４２ｃは、撮像画像情報生成部４２ａから出力された特殊光の撮像フレームに基づく解析（画像解析）を行い、その解析の結果を解析画像生成部４２ｄへ出力する。また、解析部４２ｃは、撮像画像情報生成部４２ａから出力された撮像フレームに基づく複数種類の解析が可能である。解析部４２ｃは、実行する解析を、判定部４２ｅから通知される、撮像の対象エリアの広さの判定の結果に基づいて切り替える。
　例えば、解析部４２ｃが実行可能な複数種類の解析は、病変等の異常個所の有無を判別する第１の解析と、異常個所を分析する第２の解析と、を含む。第１の解析は、上記の判定部４２ｅによる判定の結果のうち「広い」と対応付けられている。第２の解析は、上記の判定部４２ｅによる判定の結果のうち「狭い」と対応付けられている。解析部４２ｃは、判定部４２ｅから判定の結果として「広い」が出力されると第１の解析を行い、判定部４２ｅから判定の結果として「狭い」が出力されると第２の解析を行う。
　第１の解析は、例えば、撮像画像の中から病変等の異常個所を抽出する拾い上げ解析である。拾い上げ解析の結果は、例えば、抽出された異常個所の数などの情報であってもよいし、撮像画像のうち異常個所を強調表示した画像などであってもよい。第１の解析は、撮像画像と異常個所の抽出結果との組み合わせの多数のサンプルに基づく学習により得られたＡＩの学習済みモデルを用いて行われてもよいし、撮像画像と予め定められたアルゴリズムとに基づいて行われてもよい。
　第２の解析は、例えば、異常個所における、病変の種類及び病変の程度の少なくともいずれかの分析を含む鑑別解析である。鑑別解析は、例えば、対象の異常個所における病変の種類を文字列等で示す情報や、対象の異常個所における病変の程度を数値等で示す情報である。第２の解析は、撮像画像と病変の種類や程度の分析結果との組み合わせの多数のサンプルに基づく学習により得られたＡＩの学習済みモデルを用いて行われてもよいし、撮像画像と予め定められたアルゴリズムとに基づいて行われてもよい。
　また、解析部４２ｃは、上記の拾い上げ解析や鑑別解析と並行して、又はこれらの解析と切り替えて、解析として撮像画像の輪郭抽出を行ってもよい。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体構造の輪郭を特定する。特定対象の生体構造は、例えば、表層血管構造、中層血管構造、又は深層血管構造などである。解析部４２ｃによる解析は、ライブ画像の表示と並行して行われる。
　解析画像生成部４２ｄは、解析部４２ｃから出力された解析の結果を示す解析結果画像を表示するための解析結果画像情報を生成し、生成した解析結果画像情報を表示コントローラ４３（図２参照）へ出力する。解析結果画像には、上記の拾い上げ解析の結果を示す画像、鑑別解析の結果を示す画像、輪郭抽出の結果を示すＩＥＥ画像などがある。
　ＩＥＥ画像は、青色レーザ等の特殊光の照射時の撮像により得られた撮像信号に基づく、被写体の構造の輪郭が強調された画像である。この場合、青色レーザ等の特殊光は、画像強調観察用の光を構成する。例えば、ＩＥＥ画像は、表層血管構造を強調した画像、中層血管構造を強調した画像、深層血管構造を強調した画像などである。
＜ディスプレイ７に表示される画面＞
　図６は、広域観察時にディスプレイ７に表示される画面の一例を示す図である。図７は、詳細観察時にディスプレイ７に表示される画面の一例を示す図である。
　表示コントローラ４３は、信号処理部４２から出力された撮像画像情報及び解析結果画像情報に基づいて、例えば図６，図７に示す画面７０をディスプレイ７に表示させる。画面７０には、メイン画面７１と、サブ画面７２と、が含まれる。
　メイン画面７１には、信号処理部４２のライブ画像生成部４２ｂから出力されたライブ画像情報に基づくライブ画像が表示される。サブ画面７２には、信号処理部４２の解析画像生成部４２ｄから出力された解析結果画像情報に基づく解析結果画像が表示される。
　このように、内視鏡装置１００は、通常光が照射された第１の期間の撮像により得られた撮像画像情報に基づくライブ画像と、特殊光が照射された第２の期間の撮像により得られた撮像画像情報に基づく解析の結果と、を含む画面７０を表示する。
　ユーザが広域観察を行っている場合、上記の判定部４２ｅによって撮像の対象エリアの広さが「広い」と判定され、その結果、解析部４２ｃによって拾い上げ解析が実行される。このため、図６に示すように、サブ画面７２には拾い上げ解析の結果が表示される。
　ユーザが詳細観察を行っている場合、上記の判定部４２ｅによって撮像の対象エリアの広さが「狭い」と判定され、その結果、解析部４２ｃによって鑑別解析が実行される。このため、図７に示すように、サブ画面７２には鑑別解析の結果が表示される。
　このように、内視鏡装置１００は、被検体内における撮像の対象エリアの広さを判定した結果に応じて、実行する解析を切り替えることにより、複数種類の解析のうちディスプレイ７に結果を表示させる解析を切り替える。
　なお、内視鏡装置１００は、複数種類の解析を並行して実行しつつ、被検体内における撮像の対象エリアの広さを判定した結果に応じて、複数種類の解析のうちディスプレイ７に結果を表示させる解析を切り替えてもよい。
　図５に示した解析部４２ｃの解析結果をライブ画像とともにディスプレイ７に表示させる構成について説明したが、解析部４２ｃの解析結果の利用形態はこれに限らない。例えば、解析部４２ｃの解析結果は、ディスプレイ７とは異なるディスプレイによって表示されてもよいし、内視鏡装置１００又は他の装置の記憶部に送信されて記憶されてもよい。
　また、解析部４２ｃにおいて、拾い上げ解析又は鑑別解析と並行して撮像画像の輪郭抽出が行われる場合に、表示コントローラ４３は、信号処理部４２から出力されるＩＥＥ画像を、画面７０のうちメイン画面７１及びサブ画面７２と異なる部分、又はディスプレイ７とは異なるディスプレイに表示させてもよい。
＜内視鏡装置１００における解析及び照明光の切り替え＞
　図８は、内視鏡装置１００における解析及び照明光の切り替えの一例を示す図である。
　図８において、横軸は時間を示す。図８に示す例では、内視鏡装置１００のユーザは、時刻ｔ１までは上記の広域観察を行い、時刻ｔ１以降は詳細観察を行ったとする。
　照明光タイミング７５は、制御装置４からの指令により光源装置５が照明光を照射するタイミングである。照明光タイミング７５におけるＷＬＩは、光源装置５が照明光として白色光等の通常光を照射するタイミングである。
　照明光タイミング７５におけるＩＥＥ１は、光源装置５が照明光として第１の特殊光を照射するタイミングである。照明光タイミング７５におけるＩＥＥ２は、光源装置５が照明光として第１の特殊光とは異なる第２の特殊光を照射するタイミングである。
　第１の特殊光は、上記の拾い上げ解析（第１の解析）に適した第１の特性（スペクトル）の特殊光であり、拾い上げ解析と対応付けられている。一例としては、第１の特殊光は、狭帯域短波長光と白色光とを含む照明光であり、白色光のみの照明光と比べて、微細な色調変化を強調した撮像画像の生成を可能とする照明光である。ただし、第１の特殊光は、これに限らず、例えば拾い上げ解析に適した特性の各種の照明光とすることができる。
　第２の特殊光は、上記の鑑別解析（第２の解析）に適した第２の特性の特殊光であり、鑑別解析と対応付けられている。一例としては、第２の特殊光は、狭帯域短波長光の照明光であり、血管や表面構造などの観察に適した撮像画像の生成を可能とする照明光である。ただし、第２の特殊光は、これに限らず、例えば鑑別解析に適した特性の各種の照明光とすることができる。
　照明光タイミング７５に示すように、光源装置５は、予め定められた照射動作を周期Ｔで繰り返し実行する。この照射動作は、通常光を照射し、その後に特殊光（第１の特殊光又は第２の特殊光）を照射する動作である。
　撮像タイミング７６は、制御装置４からの指令により撮像素子２３が撮像（露光）を行うタイミングである。撮像タイミング７６における縦方向は画素行６２の列方向Ｙ（図４参照）の位置を示している。上記のように、本実施形態における撮像素子２３はローリングシャッタ方式の撮像を行うため、撮像タイミング７６は画素行６２ごとにずれている。図７に示す例では、撮像素子２３は、６０ｆｐｓ（ｆｒａｍｅｓ　ｐｅｒ　ｓｅｃｏｎｄ）のフレームレートにより撮像を行っている。
　照明光タイミング７５及び撮像タイミング７６に示すように、光源装置５が連続して通常光を照射する第１の期間は、撮像素子２３による撮像における連続する複数のフレームに渡る。また、光源装置５が連続して特殊光を照射する第２の期間は、撮像素子２３による撮像における少なくとも１フレームに渡る。図７に示す例では、第２の期間は、撮像素子２３による連続する複数のフレームに渡っている。
　このように、光源装置５は、通常光を連続した複数の撮像動作フレームに渡って連続して照射した後に特殊光を照射する動作を繰り返す。そして、上記のように、制御装置４は、通常光の照射時に得られた撮像画像に基づいてライブ画像（動画）をディスプレイ７に表示させるとともに、特殊光の照射時に得られた撮像画像に基づく解析を行う。
　図８に示す例において、時刻ｔ１までは、広域観察が行われているため、上記の判定部４２ｅによって撮像の対象エリアが「広い」と判定される。このため、制御装置４は、時刻ｔ１までは、解析部４２ｃに対して拾い上げ解析を実行させるとともに、光源装置５が照射する照明光を第１の特殊光とする。これにより、解析部４２ｃは、例えば、拾い上げ解析に適した第１の特殊光が照射される期間内の撮像フレーム７６ａに基づいて拾い上げ解析を実行することができる。
　また、時刻ｔ１以降は、詳細観察が行われているため、上記の判定部４２ｅによって撮像の対象エリアが「狭い」と判定される。このため、制御装置４は、時刻ｔ１以降は、解析部４２ｃに対して鑑別解析を実行させるとともに、光源装置５が照射する照明光を第２の特殊光とする。これにより、解析部４２ｃは、例えば、鑑別解析に適した第２の特殊光が照射される期間内の撮像フレーム７６ｂ，７６ｃに基づいて鑑別解析を実行することができる。
　このように、制御装置４は、被検体内における撮像の対象エリアの広さを判定した結果に応じて、複数種類の解析のうちディスプレイ７に結果を表示させる解析に加えて、照明用レンズ５０が照射する照明光の特性も切り替える。これにより、観察の状況に応じた解析の結果を提示しつつ、観察の状況に応じた解析を、それぞれ適切な特性の照明光で得られた撮像画像によって高精度に行うことができる。
　また、制御装置４が、判定部４２ｅによる判定結果が「広い」から「狭い」に変化する時刻ｔ１において、複数種類の解析のうちディスプレイ７に結果を表示させる解析及び照明光の特性を切り替える構成について説明したが、このような構成に限らない。
　例えば、制御装置４は、判定部４２ｅによる判定結果が「広い」である状態の後、判定部４２ｅによる判定結果が「狭い」である状態が予め定められた時間（一例としては１秒）継続した場合に上記の切り替えを行ってもよい。すなわち、制御装置４は、判定部４２ｅによる判定結果が「広い」から「狭い」に変化しても、予め定められた時間内に判定部４２ｅによる判定結果が「広い」に戻った場合は上記の切り替えを行わなくてもよい。
　また、制御装置４は、判定部４２ｅによる判定結果が「広い」から「狭い」に変化して上記の切り替えを行った後に、判定部４２ｅによる判定結果が「広い」に戻った場合は、拾い上げ解析の結果をディスプレイ７に表示させ、光源装置５に第１の特殊光を照射させる状態に戻ってもよい。これにより、ユーザが詳細観察から広域観察に戻った場合に対応することができる。
（撮像素子２３の他の例）
　ローリングシャッタ方式の撮像素子２３を用いる構成について説明したが、グローバルシャッタ方式の撮像素子２３を用いる構成としてもよい。
（判定の段階の他の例）
　判定部４２ｅが撮像の対象エリアの広さを「広い」及び「狭い」の２段階で判定する構成について説明したが、判定部４２ｅが撮像の対象エリアの広さを３段階以上で判定してもよい。この場合に、制御装置４は、判定部４２ｅによる３段階以上の判定結果に応じて、ディスプレイ７に結果を表示させる解析及び照明光の特性を３通り以上に切り替えてもよい。
（判定方法の他の例１）
　また、判定部４２ｅが撮像画像情報生成部４２ａに設けられ、撮像画像情報生成部４２ａにおいて生成された撮像画像情報に基づいて撮像の対象エリアの広さを判定する高二位について説明したが、判定部４２ｅを設ける位置や判定部４２ｅによる判定方法はこれに限らない。
　例えば、対物レンズ２１やレンズ群２２の画角が可変の場合に、判定部４２ｅは、対物レンズ２１やレンズ群２２の現在の画角を示す情報を取得し、取得した情報を用いて、撮像の対象エリアの広さを判定してもよい。
（判定方法の他の例２）
　また、内視鏡１の先端に、撮像素子２３による撮像の対象（被検体内の内表面）との距離を測定する測定器が設けられている場合、判定部４２ｅは、その測定器による測定結果を示す情報を取得し、取得した情報を用いて、撮像の対象エリアの広さを判定してもよい。一例としては、測定された上記の距離が閾値以上であれば撮像の対象エリアの広さを「広い」と判定し、測定された上記の距離が閾値未満であれば撮像の対象エリアの広さを「狭い」と判定する。
（判定方法の他の例３）
　また、内視鏡装置１００において、得られる撮像画像の明るさが予め定められた範囲の明るさになるように、光源装置５が照射する照明光の強度を補正する制御が行われる場合、判定部４２ｅは、この補正の結果を示す情報を取得し、取得した情報を用いて、撮像の対象エリアの広さを判定してもよい。
　例えば、ユーザが広域観察を行う場合、内視鏡１の先端が被検体内の内表面から遠くなるため、照明光が被検体内の内表面に届きにくくなる。このため、撮像画像の明るさを維持するように、光源装置５が照射する照明光の強度が比較的高くなるように制御される。
　一方で、ユーザが詳細観察を行う場合、内視鏡１の先端が被検体内の内表面に近くなるため、照明光が被検体内の内表面に届きやすくなる。このため、撮像画像の明るさを維持するように、光源装置５が照射する照明光の強度が比較的低くなるように制御される。
　したがって、判定部４２ｅは、一例としては、光源装置５が照射する照明光の強度が閾値以上であれば、撮像の対象エリアの広さを「広い」と判定し、光源装置５が照射する照明光の強度が閾値未満であれば撮像の対象エリアの広さを「狭い」と判定する。
（判定方法の他の例４）
　また、判定部４２ｅは、上記の各判定方法のうち少なくとも２つの判定方法を組み合わせて用いて、撮像の対象エリアの広さを判定してもよい。
（異常個所の有無の解析の具体例）
　解析部４２ｃによる異常個所の有無の解析は、例えば、内視鏡１が挿入された被検体内の注目領域の検出である。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像から、被検体内の注目領域を検出する。注目領域は、例えば、病変である可能性が高い領域などの異常個所であり、被検体内の観察のうち注目が推奨される領域である。解析画像生成部４２ｄは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、解析部４２ｃにより検出された注目領域を強調した注目領域強調画像を表示するための画像情報を生成する。これにより、注目領域強調画像がサブ画面７２に表示され、内視鏡１の操作者は、被検体内における注目領域を容易に認識できる。又は、解析画像生成部４２ｄは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、注目領域である異常部（病変部など）と正常部との色の差を拡張する色差拡張処理を行った色差拡張画像を表示するための画像情報を生成してもよい。これにより、色差拡張画像がサブ画面７２に表示され、内視鏡１の操作者は、被検体内における異常部と正常部を容易に見分けることができる。
（異常個所を分析する解析の具体例）
　解析部４２ｃによる異常個所を分析する解析は、例えば、類似症例画像の選択を含んでもよい。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報と類似する症例画像を、内視鏡装置１００がアクセス可能なデータベースを検索することにより選択する。解析画像生成部４２ｄは、解析部４２ｃによる選択の結果を示す画像を表示するための画像情報を生成する。解析部４２ｃによる選択の結果とは、解析部４２ｃが選択した症例画像そのものであってもよいし、解析部４２ｃが選択した症例画像に対して上記のデータベースにおいて対応付けられている、その症例画像に関する診断結果等の情報であってもよい。これにより、類似症例画像の選択結果がサブ画面７２に表示され、内視鏡１の操作者は、観察中の被検体内の状態と、類似症例との比較を容易に行うことができる。
　又は、解析部４２ｃによる異常個所を分析する解析は、腫瘍及び非腫瘍の判別を含んでもよい。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体領域が腫瘍であるか否かを判別する。解析画像生成部４２ｄは、解析部４２ｃによる判別の結果を示す画像を表示するための画像情報を生成する。解析部４２ｃによる判別の結果とは、直近に撮像された画像に写り込んでいる生体領域が腫瘍であるか否かを示す情報であってもよいし、現在の検査が開始されてから腫瘍であると判別された生体領域の数を示す情報などであってもよい。これにより、腫瘍及び非腫瘍の判別結果がサブ画面７２に表示され、内視鏡１の操作者による観察や内視鏡１の操作を支援することができる。
　又は、解析部４２ｃによる異常個所を分析する解析は、器官の状態の特定を含んでもよい。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる器官の状態を特定する。器官の状態は、例えば、領域ごとの酸素飽和度、血管構造の太さ、密度、模様、均一性や、大腸の表面構造（例えばｐｉｔ様構造）、十二指腸の表面構造（例えば絨毛構造）などである。解析画像生成部４２ｄは、解析部４２ｃによる特定の結果を示す画像を表示するための画像情報を生成する。例えば、解析画像生成部４２ｄは、特定した領域ごとの酸素飽和度を画像化した酸素飽和度画像を生成する。これにより、器官の状態の特定結果がサブ画面７２に表示され、内視鏡１の操作者による観察や内視鏡１の操作を支援することができる。
　又は、解析部４２ｃによる異常個所を分析する解析は、切離予定線の生成を含んでもよい。例えば、解析部４２ｃは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像に写り込んでいる生体領域のうち、腫瘍等を除去するために切離すべき線である切離予定線（デマルケーションライン）を決定する。解析画像生成部４２ｄは、特殊光の照射時の撮像により得られた撮像画像情報が示す画像において、解析部４２ｃにより決定された切離予定線を付した画像を表示するための画像情報を生成する。これにより、切離予定線が付された画像がサブ画面７２に表示され、内視鏡１の操作者は、被検体内における切離予定線を容易に認識できる。
（第１の期間、第２の期間、及び周期Ｔの変形例）
　通常光を照射する第１の期間及び特殊光を照射する第２の期間の各長さが、周期Ｔごとの繰り返しにおいて一定である構成について説明したが、通常光を照射する第１の期間及び特殊光を照射する第２の期間の各長さが、周期Ｔごとの繰り返しにおいて一定でなくても（不定であっても）よい。例えば、ある周期Ｔにおける第１の期間及び第２の期間の各長さの比が３：１であり、他の周期Ｔにおける第１の期間及び第２の期間の各長さの比が３：２であってもよい。
　また、通常光及び特殊光を照射する動作の繰り返し周期である周期Ｔが一定である場合について説明したが、周期Ｔは不定であってもよい。また、周期Ｔにおいて、まず通常光を照射し、その後に特殊光を照射する構成について説明したが、周期Ｔにおいて、まず特殊光を照射し、その後に通常光を照射する構成としてもよい。
　また、通常光のスペクトルは、周期Ｔごとの繰り返しにおいて一定であってもよいし、周期Ｔごとの繰り返しにおいて不定であってもよい。同様に、特殊光のスペクトルは、周期Ｔごとの繰り返しにおいて一定であってもよいし、周期Ｔごとの繰り返しにおいて不定であってもよい。
　また、通常光を照射する第１の期間の直後に、特殊光を照射する第２の期間となる構成について説明したが、第１の期間と第２の期間との間に、光源装置５が照明光を照射しない無照射期間があってもよい。
　また、上記の通常光又は特殊光として、狭帯域短波調光と白色光とを同時に照射する構成としてもよい。これにより、色の微細な違いを色彩強調して表示し、炎症観察や拾上げ観察等の観察が容易になる。
（内視鏡システムの別の形態）
　本発明の内視鏡システムの一例として内視鏡装置１００を説明したが、本発明の内視鏡システムは、ネットワークを介して互いに接続される複数の装置によって実現されてもよい。例えば、上記の制御装置４による処理の少なくとも一部を、内視鏡装置１００とネットワークを介して接続される他の装置により実行する構成としてもよい。
（制御プログラム）
　制御装置４のＲＯＭに記憶される制御プログラムは、プログラムをコンピュータが読取可能な一時的でない（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ）記憶媒体に記憶される。このような「コンピュータ読取可能な記憶媒体」は、例えば、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ－ＲＯＭ）等の光学媒体や、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）メモリ又はメモリカード等の磁気記憶媒体等を含む。また、このようなプログラムを、
ネットワークを介したダウンロードによって提供することもできる。
　以上説明してきたように、本明細書には以下の事項が開示されている。
（１）
　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、
　上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、
　被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替えるプロセッサと、
　を備える内視鏡システム。
（２）
　（１）記載の内視鏡システムであって、
　上記複数種類の解析は、上記撮像画像に基づいて異常個所の有無を判別する第１の解析と、上記撮像画像に基づいて異常個所を分析する第２の解析と、を含み、
　上記プロセッサは、
　上記対象エリアの広さが第１の広さである場合、上記第１の解析の結果を表示させ、
　上記対象エリアの広さが上記第１の広さより狭い第２の広さである場合、上記第２の解析の結果を表示させる、
　内視鏡システム。
（３）
　（１）又は（２）のいずれか１つに記載の内視鏡システムであって、
　上記複数種類の解析は、互いに異なる第１の解析と第２の解析とを含み、
　上記プロセッサは、
　上記対象エリアの広さが第１の広さである場合、上記第１の解析の結果を表示させ、上記照明光の特性を上記第１の解析と対応付けられた特性とし、
　上記対象エリアの広さが上記第１の広さより狭い第２の広さである場合、上記第２の解析の結果を表示させ、上記照明光の特性を上記第２の解析と対応付けられた特性とする、
　内視鏡システム。
（４）
　（１）から（３）のいずれか１つに記載の内視鏡システムであって、
　上記光源は、連続した複数の撮像動作フレームに渡る第１の期間に第１の特性の照明光を連続して照射した後、少なくとも１つの撮像動作フレームに渡る第２の期間に上記第１の特性と異なる第２の特性の照明光を照射する動作を繰り返し、
　上記複数種類の解析は、上記第２の期間の上記撮像により得られる上記撮像画像に基づいて行われ、
　上記プロセッサは、上記対象エリアの広さを判定した結果に応じて、上記第２の期間における上記照明光の特性を切り替える、
　内視鏡システム。
（５）
　（４）記載の内視鏡システムであって、
　上記プロセッサは、上記第１の期間の上記撮像により得られる撮像画像に基づく動画を、上記ディスプレイ、又は上記ディスプレイと異なるディスプレイに表示させる、
　内視鏡システム。
（６）
　（４）又は（５）記載の内視鏡システムであって、
　上記第１の特性の照明光は白色光であり、上記第２の特性の照明光は画像強調観察用の光である、
　内視鏡システム。
（７）
　（４）から（６）のいずれか１つに記載の内視鏡システムであって、
　上記第１の期間及び上記第２の期間の各長さは、上記動作の繰り返しにおいて一定であり、又は上記動作の繰り返しにおいて不定である、
　内視鏡システム。
（８）
　（４）から（７）のいずれか１つに記載の内視鏡システムであって、
　上記第１の特性の照明光及び上記第２の特性の照明光のスペクトルは、上記動作の繰り返しにおいて一定であり、又は上記動作の繰り返しにおいて不定である、
　内視鏡システム。
（９）
　（４）から（８）のいずれか１つに記載の内視鏡システムであって、
　上記第１の期間と上記第２の期間との間に上記光源の無照射期間がある、
　内視鏡システム。
（１０）
　（４）から（９）のいずれか１つに記載の内視鏡システムであって、
　上記第１の期間は上記第２の期間より長い期間である、
　内視鏡システム。
（１１）
　（１）から（１０）のいずれか１つに記載の内視鏡システムであって、
　上記プロセッサは、上記対象エリアの広さが第１の広さである状態の後、上記対象エリアの広さが上記第１の広さより狭い第２の広さである状態が予め定められた時間以上継続すると、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替える、
　内視鏡システム。
（１２）
　（１）から（１１）のいずれか１つに記載の内視鏡システムであって、
　上記プロセッサは、上記撮像の対象エリアの広さを、上記撮像画像を用いて判定する、
　内視鏡システム。
（１３）
　（１）から（１２）のいずれか１つに記載の内視鏡システムであって、
　上記撮像は、画角が可変の光学系により行われ、
　上記プロセッサは、上記撮像の対象エリアの広さを、上記光学系の画角を用いて判定する、
　内視鏡システム。
（１４）
　（１）から（１３）のいずれか１つに記載の内視鏡システムであって、
　上記プロセッサは、上記撮像の対象エリアの広さを、上記撮像を行う撮像素子を有する内視鏡の先端と、上記撮像の対象と、の間の距離の測定結果を用いて判定する、
　内視鏡システム。
（１５）
　（１）から（１３）のいずれか１つに記載の内視鏡システムであって、
　上記撮像を行う撮像素子を有する内視鏡の先端と、上記撮像の対象と、の間の距離に応じて、上記光源が照射する照明光の強度の補正が行われ、
　上記プロセッサは、上記撮像の対象エリアの広さを、上記強度の補正の結果を用いて判定する、
　内視鏡システム。
（１６）
　（２）記載の内視鏡システムであって、
　上記異常個所の有無の解析は、上記撮像を行う撮像素子を備える内視鏡が挿入された被検体内の注目領域の検出を含む、
　内視鏡システム。
（１７）
　（２）記載の内視鏡システムであって、
　上記異常個所の分析は、上記異常個所における、病変の種類及び病変の程度の少なくともいずれかの分析を含む、
　内視鏡システム。
（１８）
　（２）記載の内視鏡システムであって、
　上記異常個所の分析は、類似症例画像の選択を含む、
　内視鏡システム。
（１９）
　（２）記載の内視鏡システムであって、
　上記異常個所の分析は、腫瘍及び非腫瘍の判別を含む、
　内視鏡システム。
（２０）
　（２）記載の内視鏡システムであって、
　上記異常個所の分析は、器官の状態の特定を含む、
　内視鏡システム。
（２１）
　（２）記載の内視鏡システムであって、
　上記異常個所の分析は、切離予定線の生成を含む、
　内視鏡システム。
（２２）
　（１）から（２０）のいずれか１つに記載の内視鏡システムであって、
　上記撮像は、ローリングシャッタ方式の撮像素子により行われる、
　内視鏡システム。
（２３）
　（１）から（２１）のいずれか１つに記載の内視鏡システムであって、
　上記撮像は、グローバルシャッタ方式の撮像素子により行われる、
　内視鏡システム。
（２４）
　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、プロセッサと、を備える内視鏡システムの制御方法であって、
　上記プロセッサが、
　被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替える、
　制御方法。
（２５）
　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、上記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、を備える内視鏡システムの制御プログラムであって、
　被検体内における上記撮像の対象エリアの広さを判定した結果に応じて、上記複数種類の解析のうち上記ディスプレイに結果を表示させる解析と、上記光源が照射する照明光の特性と、を切り替える、
　処理をコンピュータに実行させるための制御プログラム。
　本発明によれば、観察の状況に応じた高精度な解析の結果を提示することのできる内視鏡システム、制御方法、及び制御プログラムを提供することができる。
　１　内視鏡
　４　制御装置
　５　光源装置
　６　入力部
　７　ディスプレイ
　１０　挿入部
　１０Ａ　軟性部
　１０Ｂ　湾曲部
　１０Ｃ　先端部
　１１　操作部
　１２　アングルノブ
　１３　ユニバーサルコード
　１３Ａ　コネクタ部
　１３Ｂ　コネクタ部１３Ａ
　２１　対物レンズ
　２２　レンズ群
　２３　撮像素子
　２５　メモリ
　２６，４１　通信Ｉ／Ｆ
　２７　撮像駆動部
　４２　信号処理部
　４２ａ　撮像画像情報生成部
　４２ｂ　ライブ画像生成部
　４２ｃ　解析部
　４２ｄ　解析画像生成部
　４２ｅ　判定部
　４３　表示コントローラ
　４４　システム制御部
　４５　記録媒体
　５０　照明用レンズ
　５１　光源用プロセッサ
　５２　光源部
　５２ａ　Ｖ－ＬＥＤ
　５２ｂ　Ｂ－ＬＥＤ
　５２ｃ　Ｇ－ＬＥＤ
　５２ｄ　Ｒ－ＬＥＤ
　５３　ライトガイド
　５４　光路結合部
　６０　撮像面
　６１　画素
　６２　画素行
　６３　駆動回路
　６４　信号処理回路
　７０　画面
　７１　メイン画面
　７２　サブ画面
　７５　照明光タイミング
　７６　撮像タイミング
　７６ａ，７６ｂ，７６ｃ　撮像フレーム
　１００　内視鏡装置
　ｔ１　時刻

Claims (25)

  1. 　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、
    　前記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、
    　被検体内における前記撮像の対象エリアの広さを判定した結果に応じて、前記複数種類の解析のうち前記ディスプレイに結果を表示させる解析と、前記光源が照射する照明光の特性と、を切り替えるプロセッサと、
    　を備える内視鏡システム。
  2. 　請求項１記載の内視鏡システムであって、
    　前記複数種類の解析は、前記撮像画像に基づいて異常個所の有無を判別する第１の解析と、前記撮像画像に基づいて異常個所を分析する第２の解析と、を含み、
    　前記プロセッサは、
    　前記対象エリアの広さが第１の広さである場合、前記第１の解析の結果を表示させ、　前記対象エリアの広さが前記第１の広さより狭い第２の広さである場合、前記第２の解析の結果を表示させる、
    　内視鏡システム。
  3. 　請求項１又は２のいずれか１項記載の内視鏡システムであって、
    　前記複数種類の解析は、互いに異なる第１の解析と第２の解析とを含み、
    　前記プロセッサは、
    　前記対象エリアの広さが第１の広さである場合、前記第１の解析の結果を表示させ、前記照明光の特性を前記第１の解析と対応付けられた特性とし、
    　前記対象エリアの広さが前記第１の広さより狭い第２の広さである場合、前記第２の解析の結果を表示させ、前記照明光の特性を前記第２の解析と対応付けられた特性とする、　内視鏡システム。
  4. 　請求項１から３のいずれか１項記載の内視鏡システムであって、
    　前記光源は、連続した複数の撮像動作フレームに渡る第１の期間に第１の特性の照明光を連続して照射した後、少なくとも１つの撮像動作フレームに渡る第２の期間に前記第１の特性と異なる第２の特性の照明光を照射する動作を繰り返し、
    　前記複数種類の解析は、前記第２の期間の前記撮像により得られる前記撮像画像に基づいて行われ、
    　前記プロセッサは、前記対象エリアの広さを判定した結果に応じて、前記第２の期間における前記照明光の特性を切り替える、
    　内視鏡システム。
  5. 　請求項４記載の内視鏡システムであって、
    　前記プロセッサは、前記第１の期間の前記撮像により得られる撮像画像に基づく動画を、前記ディスプレイ、又は前記ディスプレイと異なるディスプレイに表示させる、
    　内視鏡システム。
  6. 　請求項４又は５記載の内視鏡システムであって、
    　前記第１の特性の照明光は白色光であり、前記第２の特性の照明光は画像強調観察用の光である、
    　内視鏡システム。
  7. 　請求項４から６のいずれか１項記載の内視鏡システムであって、
    　前記第１の期間及び前記第２の期間の各長さは、前記動作の繰り返しにおいて一定であり、又は前記動作の繰り返しにおいて不定である、
    　内視鏡システム。
  8. 　請求項４から７のいずれか１項記載の内視鏡システムであって、
    　前記第１の特性の照明光及び前記第２の特性の照明光のスペクトルは、前記動作の繰り返しにおいて一定であり、又は前記動作の繰り返しにおいて不定である、
    　内視鏡システム。
  9. 　請求項４から８のいずれか１項記載の内視鏡システムであって、
    　前記第１の期間と前記第２の期間との間に前記光源の無照射期間がある、
    　内視鏡システム。
  10. 　請求項４から９のいずれか１項記載の内視鏡システムであって、
    　前記第１の期間は前記第２の期間より長い期間である、
    　内視鏡システム。
  11. 　請求項１から１０のいずれか１項記載の内視鏡システムであって、
    　前記プロセッサは、前記対象エリアの広さが第１の広さである状態の後、前記対象エリアの広さが前記第１の広さより狭い第２の広さである状態が予め定められた時間以上継続すると、前記複数種類の解析のうち前記ディスプレイに結果を表示させる解析と、前記光源が照射する照明光の特性と、を切り替える、
    　内視鏡システム。
  12. 　請求項１から１１のいずれか１項記載の内視鏡システムであって、
    　前記プロセッサは、前記撮像の対象エリアの広さを、前記撮像画像を用いて判定する、　内視鏡システム。
  13. 　請求項１から１２のいずれか１項記載の内視鏡システムであって、
    　前記撮像は、画角が可変の光学系により行われ、
    　前記プロセッサは、前記撮像の対象エリアの広さを、前記光学系の画角を用いて判定する、
    　内視鏡システム。
  14. 　請求項１から１３のいずれか１項記載の内視鏡システムであって、
    　前記プロセッサは、前記撮像の対象エリアの広さを、前記撮像を行う撮像素子を有する内視鏡の先端と、前記撮像の対象と、の間の距離の測定結果を用いて判定する、
    　内視鏡システム。
  15. 　請求項１から１３のいずれか１項記載の内視鏡システムであって、
    　前記撮像を行う撮像素子を有する内視鏡の先端と、前記撮像の対象と、の間の距離に応じて、前記光源が照射する照明光の強度の補正が行われ、
    　前記プロセッサは、前記撮像の対象エリアの広さを、前記強度の補正の結果を用いて判定する、
    　内視鏡システム。
  16. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の有無の解析は、前記撮像を行う撮像素子を備える内視鏡が挿入された被検体内の注目領域の検出を含む、
    　内視鏡システム。
  17. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の分析は、前記異常個所における、病変の種類及び病変の程度の少なくともいずれかの分析を含む、
    　内視鏡システム。
  18. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の分析は、類似症例画像の選択を含む、
    　内視鏡システム。
  19. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の分析は、腫瘍及び非腫瘍の判別を含む、
    　内視鏡システム。
  20. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の分析は、器官の状態の特定を含む、
    　内視鏡システム。
  21. 　請求項２記載の内視鏡システムであって、
    　前記異常個所の分析は、切離予定線の生成を含む、
    　内視鏡システム。
  22. 　請求項１から２０のいずれか１項記載の内視鏡システムであって、
    　前記撮像は、ローリングシャッタ方式の撮像素子により行われる、
    　内視鏡システム。
  23. 　請求項１から２１のいずれか１項記載の内視鏡システムであって、
    　前記撮像は、グローバルシャッタ方式の撮像素子により行われる、
    　内視鏡システム。
  24. 　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、前記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、プロセッサと、を備える内視鏡システムの制御方法であって、
    　前記プロセッサが、
    　被検体内における前記撮像の対象エリアの広さを判定した結果に応じて、前記複数種類の解析のうち前記ディスプレイに結果を表示させる解析と、前記光源が照射する照明光の特性と、を切り替える、
    　制御方法。
  25. 　特性が異なる複数種類の照明光を切り替えて照射可能な光源と、前記照明光を用いた撮像により得られる撮像画像に基づく複数種類の解析の結果を切り替えて表示可能なディスプレイと、を備える内視鏡システムの制御プログラムであって、
    　被検体内における前記撮像の対象エリアの広さを判定した結果に応じて、前記複数種類の解析のうち前記ディスプレイに結果を表示させる解析と、前記光源が照射する照明光の特性と、を切り替える、
    　処理をコンピュータに実行させるための制御プログラム。
PCT/JP2021/004175 2020-03-11 2021-02-04 内視鏡システム、制御方法、及び制御プログラム Ceased WO2021181967A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP21767423.3A EP4119999A4 (en) 2020-03-11 2021-02-04 ENDOSCOPE SYSTEM, CONTROL METHOD AND CONTROL PROGRAM
CN202180011084.7A CN115038375B (zh) 2020-03-11 2021-02-04 内窥镜系统、控制方法及计算机程序产品
JP2022505838A JP7470776B2 (ja) 2020-03-11 2021-02-04 内視鏡システム、制御方法、及び制御プログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-042148 2020-03-11
JP2020042148 2020-03-11

Publications (1)

Publication Number Publication Date
WO2021181967A1 true WO2021181967A1 (ja) 2021-09-16

Family

ID=77671379

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/004175 Ceased WO2021181967A1 (ja) 2020-03-11 2021-02-04 内視鏡システム、制御方法、及び制御プログラム

Country Status (4)

Country Link
EP (1) EP4119999A4 (ja)
JP (1) JP7470776B2 (ja)
CN (1) CN115038375B (ja)
WO (1) WO2021181967A1 (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012152279A (ja) * 2011-01-24 2012-08-16 Fujifilm Corp 内視鏡装置
JP2012239815A (ja) * 2011-05-24 2012-12-10 Fujifilm Corp 内視鏡システム及び内視鏡画像の表示方法
JP2012239816A (ja) * 2011-05-24 2012-12-10 Fujifilm Corp 内視鏡システム及び内視鏡診断支援方法
JP2015008782A (ja) 2013-06-27 2015-01-19 オリンパス株式会社 画像処理装置、内視鏡装置及び画像処理方法
WO2016189629A1 (ja) * 2015-05-25 2016-12-01 オリンパス株式会社 内視鏡システム及び内視鏡システムの制御方法
WO2018159461A1 (ja) 2017-03-03 2018-09-07 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
WO2019016912A1 (ja) * 2017-07-20 2019-01-24 オリンパス株式会社 診断支援装置、診断支援方法及びプログラム
JP2019042156A (ja) * 2017-09-01 2019-03-22 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5371920B2 (ja) 2010-09-29 2013-12-18 富士フイルム株式会社 内視鏡装置
JP5663283B2 (ja) * 2010-12-02 2015-02-04 オリンパス株式会社 内視鏡画像処理装置及びプログラム
JP6053673B2 (ja) * 2011-04-28 2016-12-27 オリンパス株式会社 蛍光観察装置とその画像表示方法
JP6203127B2 (ja) * 2014-06-11 2017-09-27 富士フイルム株式会社 内視鏡用光源装置及び内視鏡システム
JP6389136B2 (ja) * 2015-03-30 2018-09-12 富士フイルム株式会社 内視鏡撮影部位特定装置、プログラム
JP2017148432A (ja) 2016-02-26 2017-08-31 富士フイルム株式会社 内視鏡用光源装置
JP6368871B2 (ja) * 2016-05-19 2018-08-01 オリンパス株式会社 生体観察システム
JP6943246B2 (ja) * 2016-08-08 2021-09-29 ソニーグループ株式会社 内視鏡装置及び内視鏡装置の制御方法
CN110475503A (zh) * 2017-03-30 2019-11-19 富士胶片株式会社 医疗用图像处理装置及内窥镜系统以及医疗用图像处理装置的工作方法
JP6543013B2 (ja) * 2017-06-13 2019-07-10 オリンパス株式会社 内視鏡装置
JP6505792B2 (ja) 2017-08-29 2019-04-24 富士フイルム株式会社 内視鏡用光源装置及び内視鏡システム
JP6941233B2 (ja) 2018-06-04 2021-09-29 富士フイルム株式会社 画像処理装置、内視鏡システム、及び画像処理方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012152279A (ja) * 2011-01-24 2012-08-16 Fujifilm Corp 内視鏡装置
JP2012239815A (ja) * 2011-05-24 2012-12-10 Fujifilm Corp 内視鏡システム及び内視鏡画像の表示方法
JP2012239816A (ja) * 2011-05-24 2012-12-10 Fujifilm Corp 内視鏡システム及び内視鏡診断支援方法
JP2015008782A (ja) 2013-06-27 2015-01-19 オリンパス株式会社 画像処理装置、内視鏡装置及び画像処理方法
WO2016189629A1 (ja) * 2015-05-25 2016-12-01 オリンパス株式会社 内視鏡システム及び内視鏡システムの制御方法
WO2018159461A1 (ja) 2017-03-03 2018-09-07 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
WO2019016912A1 (ja) * 2017-07-20 2019-01-24 オリンパス株式会社 診断支援装置、診断支援方法及びプログラム
JP2019042156A (ja) * 2017-09-01 2019-03-22 富士フイルム株式会社 医療画像処理装置、内視鏡装置、診断支援装置、及び、医療業務支援装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4119999A4

Also Published As

Publication number Publication date
CN115038375A (zh) 2022-09-09
CN115038375B (zh) 2025-09-12
JPWO2021181967A1 (ja) 2021-09-16
EP4119999A1 (en) 2023-01-18
JP7470776B2 (ja) 2024-04-18
EP4119999A4 (en) 2023-09-06

Similar Documents

Publication Publication Date Title
US11033175B2 (en) Endoscope system and operation method therefor
JP7542585B2 (ja) 画像処理装置、内視鏡システム及び画像処理装置の作動方法
JP6952214B2 (ja) 内視鏡用プロセッサ、情報処理装置、内視鏡システム、プログラム及び情報処理方法
CN112218570B (zh) 图像处理装置、内窥镜系统及图像处理方法
CN112105284B (zh) 图像处理装置、内窥镜系统及图像处理方法
JPWO2019198637A1 (ja) 画像処理装置、内視鏡システム、及び画像処理方法
US20120190922A1 (en) Endoscope system
CN112689469B (zh) 内窥镜装置、内窥镜处理器及内窥镜装置的操作方法
US20250275674A1 (en) Endoscope system, control method, and control program for emitting different illumination lights in different periods
JP7470776B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
US12283068B2 (en) Medical image processing device, endoscope system, and medical image processing device operation method
JP7335976B2 (ja) 内視鏡システム、制御プログラム、及び表示方法
JP7524307B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
JP7519429B2 (ja) 内視鏡システム、作動方法、及び制御プログラム
CN116997284A (zh) 控制装置、内窥镜装置以及控制方法
WO2022230607A1 (ja) 医療画像処理装置、内視鏡システム、及び医療画像処理装置の作動方法
JP7470779B2 (ja) 内視鏡システム、制御方法、及び制御プログラム
JP2023178526A (ja) 画像処理装置、内視鏡システム、画像処理装置の作動方法、及び画像処理装置用プログラム
WO2024166306A1 (ja) 医療用装置、内視鏡システム、制御方法、制御プログラム、及び学習装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21767423

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2022505838

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2021767423

Country of ref document: EP

Effective date: 20221011

WWG Wipo information: grant in national office

Ref document number: 202180011084.7

Country of ref document: CN