JP2009105687A

JP2009105687A - Imaging system

Info

Publication number: JP2009105687A
Application number: JP2007275862A
Authority: JP
Inventors: Yoshitaka Toyoda; 善隆豊田; Kozo Ishida; 晃三石田; Takashi Ito; 俊伊藤; Koichi Yamashita; 孝一山下; Takanori Ishii; 孝典石井; Tadashi Otsuki; 正大槻
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2007-10-24
Filing date: 2007-10-24
Publication date: 2009-05-14

Abstract

PROBLEM TO BE SOLVED: To provide an imaging system which is inexpensive and compact and is easy to install and has an excellent workability. SOLUTION: An imaging device 10 includes an imaging means 11 which sets imaging condition information of the image device 10 according to input control information and generates digital data containing image data acquired by imaging under the set imaging conditions and the imaging condition information, and a digital transmission and reception means 12. An information processing device 30 includes a digital transmission and reception means 31, an image analyzing means 32 for analyzing the data transmitted from the digital transmission and reception means 12 to the digital transmission and reception means 31, and a controlling means for generating control information for changing the imaging conditions of the imaging means 11 according to the analysis result of the image analyzing means 32. Digital data containing the control information generated by the controlling means 33 is transmitted from the digital transmission and reception means 31 to the digital transmission and reception means 12 and is provided to the imaging means 11. COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、被写体を撮影する撮像装置と、この撮像装置と分離して備えられ、撮像装置の撮像条件を変更する制御情報を生成して撮像装置に与える情報処理装置とを有する撮像システムに関するものである。 The present invention relates to an imaging system including an imaging device that captures a subject, and an information processing device that is provided separately from the imaging device and generates control information that changes imaging conditions of the imaging device and supplies the control information to the imaging device. It is.

カメラヘッド部（撮像装置）と、このカメラヘッド部とコネクタやケーブルで接続されたカメラ本体部とを有する撮像システムの提案がある（例えば、特許文献１参照）。このシステムにおいては、カメラヘッド部の露出及びホワイトバランスなど撮像条件情報をカメラヘッド部内に設けられた不揮発性メモリに保持している。 There is a proposal of an imaging system having a camera head unit (imaging device) and a camera body unit connected to the camera head unit with a connector or a cable (for example, see Patent Document 1). In this system, imaging condition information such as exposure and white balance of the camera head unit is held in a nonvolatile memory provided in the camera head unit.

また、カメラヘッド部（撮像装置）と、このカメラヘッド部とアナログ伝送可能に接続された画像処理装置とを有する撮像システムの提案がある（例えば、特許文献２参照）。特許文献２は、カメラヘッド部と画像処理装置との間の信号線及び制御線の本数を削減するため方法を提案している（例えば、特許文献２参照）。 Also, there is a proposal of an imaging system having a camera head unit (imaging device) and an image processing device connected to the camera head unit so as to be able to perform analog transmission (for example, see Patent Document 2). Patent Document 2 proposes a method for reducing the number of signal lines and control lines between the camera head unit and the image processing apparatus (see, for example, Patent Document 2).

特開２００５−２３６７７３号公報（段落０００９、図１）Japanese Patent Laying-Open No. 2005-236773 (paragraph 0009, FIG. 1) 特開平１０−２３３９５４号公報（段落０００６、図１）Japanese Patent Laid-Open No. 10-233594 (paragraph 0006, FIG. 1)

しかしながら、特許文献１の撮像システムにおいては、カメラヘッド部が露出及びホワイトバランスなどの撮像条件情報を保持するための不揮発性メモリを備えているので、メモリ実装の面積が必要となってカメラヘッド部のサイズが大きくなり、また、メモリを備えることによってカメラヘッド部の価格が上昇するという問題があった。 However, in the imaging system of Patent Document 1, since the camera head unit includes a nonvolatile memory for holding imaging condition information such as exposure and white balance, an area for memory mounting is required, and the camera head unit In addition, there is a problem that the size of the camera head increases and the price of the camera head increases due to the provision of the memory.

また、特許文献１の撮像システムにおいては、カメラヘッド部が露出及びホワイトバランスなどの撮像条件情報を保持するための不揮発性メモリを備えているので、ユーザは、カメラヘッド部の近くで撮像条件の設定作業を行うことが必要になり、特に、多数のカメラヘッド部を異なる場所に設置したシステムの場合には、作業性が悪いという問題があった。 Further, in the imaging system of Patent Document 1, the camera head unit includes a nonvolatile memory for holding imaging condition information such as exposure and white balance, so that the user can set the imaging condition near the camera head unit. It is necessary to perform setting work, and particularly in the case of a system in which a large number of camera head units are installed in different places, there is a problem that workability is poor.

さらに、特許文献２の撮像システムにおいては、画像処理装置からカメラヘッド部にアナログ伝送によって撮像条件の制御信号を伝送しているので、信号線とは別に撮像条件変更のための専用の配線が必要になり、カメラヘッド部と画像処理装置との接続方法が複雑になってシステムの価格が上昇するという問題があった。さらにまた、カメラヘッド部と画像処理装置とを接続する配線の数が多くなることによってシステム設置などの作業が複雑になり、また、システムの設置性が悪くなるという問題があった。 Furthermore, in the imaging system of Patent Document 2, since a control signal for imaging conditions is transmitted from the image processing apparatus to the camera head by analog transmission, a dedicated wiring for changing the imaging conditions is required in addition to the signal line. Thus, there is a problem that the connection method between the camera head unit and the image processing apparatus becomes complicated and the price of the system increases. Furthermore, since the number of wires connecting the camera head unit and the image processing apparatus is increased, work such as system installation becomes complicated, and the system installation property is deteriorated.

そこで、本発明は、上記従来技術の課題を解決するためになされたものであり、その目的は、安価であり、小型で設置性が良く、作業性を向上させることができる撮像システムを提供することにある。 Accordingly, the present invention has been made to solve the above-described problems of the prior art, and an object of the present invention is to provide an imaging system that is inexpensive, small, easy to install, and can improve workability. There is.

本発明は、少なくとも１台の撮像装置と、前記撮像装置と分離して備えられた情報処理装置とを有する撮像システムであって、前記撮像装置は、入力される制御情報に応じて自身の撮像条件を変更し、この変更された撮像条件の撮影で取得された画像データと前記撮像条件情報とを含むデジタルの第１のデータを生成する撮像手段と、デジタル信号を送信及び受信する第１の送受信手段とを有し、前記情報処理装置は、前記第１の送受信手段との間で、デジタル信号を送信及び受信する第２の送受信手段と、前記第１の送受信手段から前記第２の送受信手段に送信された信号に含まれる前記第１のデータを解析する画像解析手段と、前記画像解析手段の解析結果に応じて、前記撮像手段の撮像条件を変更する制御情報を生成する制御手段とを有し、前記情報処理装置は、生成された前記制御情報を含むデジタルの第２のデータを、前記第２の送受信手段から前記第１の送受信手段に送信して前記撮像手段に与えることを特徴としている。 The present invention is an imaging system having at least one imaging device and an information processing device provided separately from the imaging device, and the imaging device captures its own image in accordance with input control information. An imaging unit that changes the conditions, generates digital first data including the image data acquired by imaging under the changed imaging conditions and the imaging condition information, and a first that transmits and receives a digital signal The information processing apparatus includes: a second transmitting / receiving unit that transmits and receives digital signals to and from the first transmitting / receiving unit; and the second transmitting / receiving unit from the first transmitting / receiving unit. Image analysis means for analyzing the first data contained in the signal transmitted to the means, and control means for generating control information for changing the imaging condition of the imaging means according to the analysis result of the image analysis means; The The information processing apparatus transmits the digital second data including the generated control information from the second transmission / reception unit to the first transmission / reception unit and supplies the second data to the imaging unit. Yes.

本発明によれば、撮像装置が撮像条件情報を保持するためのメモリを備える必要がないので、撮像システムの低価格化及び小型化を実現できるという効果がある。 According to the present invention, since it is not necessary for the imaging apparatus to include a memory for holding imaging condition information, there is an effect that the imaging system can be reduced in price and size.

また、本発明によれば、撮像装置の撮像条件を変更する制御情報を含む第２のデータを情報処理装置から撮像装置に送信するので、撮像装置の撮像条件情報を情報処理装置において一元管理でき、撮像条件の設定作業における作業性を著しく向上させることができるという効果がある。 According to the present invention, since the second data including the control information for changing the imaging condition of the imaging device is transmitted from the information processing device to the imaging device, the imaging condition information of the imaging device can be centrally managed in the information processing device. There is an effect that the workability in the setting operation of the imaging condition can be remarkably improved.

さらに、本発明によれば、撮像装置の撮像条件を変更する制御情報を含む第２のデータを送信するための専用の配線は不要であるので、撮像システムの設置性を向上させることができるという効果がある。 Furthermore, according to the present invention, the dedicated wiring for transmitting the second data including the control information for changing the imaging condition of the imaging device is not necessary, so that the installation of the imaging system can be improved. effective.

実施の形態１．
〈撮像システムの説明〉
図１は、本発明の実施の形態１に係る撮像システムの構成を概略的に示す図である。図１に示されるように、実施の形態１に係る撮像システムは、撮像装置１０と、情報処理装置３０と、撮像装置１０と情報処理装置３０とを接続する伝送線２０とを有している。また、撮像システムは、情報処理装置３０に接続されるユーザインターフェースとして、表示装置４０と外部入力装置５０とを有してもよい。さらに、表示装置及び入力装置は、情報処理装置３０の本体に一体的に備えられてもよい。さらにまた、撮像装置１０と情報処理装置３０との間の信号の送受信を無線方式で行うことも可能であり、その場合には、伝送線２０は不要になる。 Embodiment 1 FIG.
<Description of imaging system>
FIG. 1 is a diagram schematically showing a configuration of an imaging system according to Embodiment 1 of the present invention. As illustrated in FIG. 1, the imaging system according to Embodiment 1 includes an imaging device 10, an information processing device 30, and a transmission line 20 that connects the imaging device 10 and the information processing device 30. . In addition, the imaging system may include a display device 40 and an external input device 50 as a user interface connected to the information processing device 30. Further, the display device and the input device may be integrally provided in the main body of the information processing device 30. Furthermore, transmission / reception of signals between the imaging device 10 and the information processing device 30 can be performed in a wireless manner, and in this case, the transmission line 20 is not necessary.

〈撮像装置１０の説明〉
図２は、実施の形態１に係る撮像システムの撮像装置１０及び情報処理装置３０の構成を概略的に示すブロック図である。図２に示されるように、撮像装置１０は、撮像手段１１と、デジタル送受信手段（第１の送受信手段）１２と、記憶手段１３とを有している。なお、本出願において「…手段」と呼ばれる構成は、電気回路などのハードウェア、プログラムにより動作するソフトウェア、又はハードウェアとソフトウェアの組み合わせのいずれで構成してもよい。撮像手段１１は、入力される制御情報ＢＢに応じて自身の撮像条件を変更し、この変更された撮像条件の撮影によって取得された画像データとそのときの撮像条件情報とを含むデジタルの第１のデータＡＤを生成する。デジタル送受信手段１２は、情報処理装置３０との間でデジタル信号ＡＥを送信及び受信する。 <Description of Imaging Device 10>
FIG. 2 is a block diagram schematically showing the configuration of the imaging device 10 and the information processing device 30 of the imaging system according to the first embodiment. As illustrated in FIG. 2, the imaging apparatus 10 includes an imaging unit 11, a digital transmission / reception unit (first transmission / reception unit) 12, and a storage unit 13. In the present application, the configuration called “... Means” may be configured by hardware such as an electric circuit, software operated by a program, or a combination of hardware and software. The imaging unit 11 changes its own imaging condition in accordance with the input control information BB, and the digital first including the image data acquired by photographing under the changed imaging condition and the imaging condition information at that time. The data AD is generated. The digital transmission / reception means 12 transmits and receives a digital signal AE to and from the information processing apparatus 30.

〈情報処理装置３０の説明〉
図２に示されるように、情報処理装置３０は、デジタル送受信手段（第２の送受信手段）３１と、画像解析手段３２と、制御手段３３と、画像処理手段３４と、メモリ手段（図示せず）とを有している。デジタル送受信手段３１は、撮像装置１０のデジタル送受信手段１２との間で、伝送路２０を介してデジタル信号ＡＥを送信及び受信する。デジタル送受信手段３１からの出力ＡＦは、画像解析手段３２及び画像処理手段３４に入力される。画像解析手段３２は、デジタル送受信手段３１からの出力に含まれる第１のデータを解析する。制御手段３３は、画像解析手段３２の解析結果ＢＤに応じて、撮像手段１１の撮像条件を変更する制御情報ＢＣを生成する。制御手段３３によって生成された制御情報は、デジタル送受信手段３１から撮像装置１０のデジタル送受信手段１２を介して撮像手段１１に入力される。画像処理手段３４は、デジタル画像信号に対して信号処理を行って、処理後の画像信号ＡＨを表示装置４０に出力する。なお、情報処理装置３０は、パーソナルコンピュータとしての機能、ハードディスクストレージ用コントローラとしての機能などを満たす装置であってもよい。 <Description of Information Processing Device 30>
As shown in FIG. 2, the information processing apparatus 30 includes a digital transmission / reception unit (second transmission / reception unit) 31, an image analysis unit 32, a control unit 33, an image processing unit 34, and a memory unit (not shown). ). The digital transmission / reception unit 31 transmits and receives a digital signal AE to and from the digital transmission / reception unit 12 of the imaging apparatus 10 via the transmission path 20. The output AF from the digital transmission / reception means 31 is input to the image analysis means 32 and the image processing means 34. The image analysis unit 32 analyzes the first data included in the output from the digital transmission / reception unit 31. The control unit 33 generates control information BC for changing the imaging condition of the imaging unit 11 according to the analysis result BD of the image analysis unit 32. The control information generated by the control unit 33 is input from the digital transmission / reception unit 31 to the imaging unit 11 via the digital transmission / reception unit 12 of the imaging apparatus 10. The image processing unit 34 performs signal processing on the digital image signal and outputs the processed image signal AH to the display device 40. Note that the information processing device 30 may be a device that satisfies the functions of a personal computer, a function of a hard disk storage controller, and the like.

〈撮像装置１０の撮像手段１１の説明〉
図３は、撮像装置１０の撮像手段１１の構成を概略的に示すブロック図である。図３に示されるように、撮像手段１１は、固体撮像素子１１１と、固体撮像素子１１１からのアナログ信号ＡＡにＣＤＳ（ＣｏｒｒｅｌａｔｅｄＤｏｕｂｌｅＳａｍｐｌｉｎｇ、相関二重サンプリング）処理を行うアナログ信号処理手段１１２と、アナログ信号処理手段１１２のアナログ出力ＡＢをデジタル信号に変換するＡ／Ｄ変換手段１１３と、Ａ／Ｄ変換手段１１３の出力ＡＣにヘッダ情報を付加し、画像伝送形式のデジタル信号ＡＤを生成するカメラ信号処理手段１１４と、入力される制御情報ＢＢに応じて固体撮像素子１１１の駆動タイミングのパルスＢＡを生成するタイミング生成手段１１５とを有している。 <Description of Imaging Unit 11 of Imaging Device 10>
FIG. 3 is a block diagram schematically showing the configuration of the imaging means 11 of the imaging apparatus 10. As shown in FIG. 3, the imaging unit 11 includes a solid-state imaging device 111, an analog signal processing unit 112 that performs CDS (Correlated Double Sampling) processing on the analog signal AA from the solid-state imaging device 111, A / D conversion means 113 for converting the analog output AB of the analog signal processing means 112 into a digital signal, and a camera for adding header information to the output AC of the A / D conversion means 113 and generating a digital signal AD in an image transmission format The signal processing unit 114 and the timing generation unit 115 that generates the pulse BA of the driving timing of the solid-state imaging device 111 according to the input control information BB are included.

固体撮像素子１１１は、例えば、ＣＣＤ（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ）センサである。ＣＣＤセンサは、被写体からの光信号を受光し、光電変換するフォトダイオードと、フォトダイオードの信号を垂直転送ＣＣＤ、水平転送ＣＣＤと経由し電気信号として取り出す回路とを有している。固体撮像素子１１１は、タイミング生成手段１１５からの電荷読出しパルスの印加によって、１フレーム期間内ごとに、フォトダイオードから垂直転送ＣＣＤの蓄積電荷が読み出される。また、固体撮像素子１１１は、タイミング生成手段１１５からの電荷掃き出しパルスによって、フォトダイオード内の蓄積電荷を固体撮像素子１１１の基板電位へ掃き出すことができる。この掃き出し電荷パルスの印加を止めてから、電荷読出しパルスで垂直転送ＣＣＤに蓄積電荷を読み出すまでの時間が、電荷蓄積時間である。この電荷蓄積時間を調整することによって、撮像手段１１のシャッタースピードを制御することができる。 The solid-state image sensor 111 is, for example, a CCD (Charge Coupled Device) sensor. The CCD sensor includes a photodiode that receives an optical signal from a subject and performs photoelectric conversion, and a circuit that extracts the photodiode signal as an electrical signal via a vertical transfer CCD and a horizontal transfer CCD. In the solid-state imaging device 111, the charge accumulated in the vertical transfer CCD is read out from the photodiode every frame period by the application of the charge readout pulse from the timing generation unit 115. Further, the solid-state imaging device 111 can sweep out the accumulated charges in the photodiode to the substrate potential of the solid-state imaging device 111 by the charge sweeping pulse from the timing generation unit 115. The time from when the application of the sweeping-out charge pulse is stopped until the accumulated charge is read out to the vertical transfer CCD by the charge readout pulse is the charge accumulation time. By adjusting the charge accumulation time, the shutter speed of the imaging means 11 can be controlled.

固体撮像素子１１１に画素ＣＣＤを用いる場合に読出し画素数を減少させ高速に読み出すための手段として、一般的に、ドラフトモード、モニターモード、画素混合駆動、間引きモードなどの駆動モードがある。固体撮像素子１１１がＣＣＤである場合には、水平画素混合読み出しの水平画素方向の間引モードを使用するシステムも存在するが、垂直ＣＣＤの読出しラインを間引くことで固体撮像素子１１１から読み出す画素数を制御する構成が多い。固体撮像素子１１１は、光電変換を行う機能を有し、固体撮像素子１１１の電荷の露出量や利得を制御することができる機能を有する素子であれば、ＣＭＯＳセンサであっても良い。固体撮像素子１１１としてＣＭＯＳセンサを用いる場合は、読み出す画素の位置を画素単位で切り替えることができ、読み出す画素数を切り替えることができる。固体撮像素子１１１がＣＭＯＳセンサである場合は、ＲＯＩ（ＲｅｇｉｏｎＯｆＩｎｔｅｒｅｓｔ）や、前述の間引きモードと呼ばれる駆動モードを用いることで、読み出す画素数を制御することができる。 When a pixel CCD is used for the solid-state image sensor 111, there are generally drive modes such as a draft mode, a monitor mode, a pixel mixture drive, and a thinning mode as a means for reducing the number of read pixels and reading at high speed. When the solid-state imaging device 111 is a CCD, there is a system that uses a thinning mode in the horizontal pixel direction of horizontal pixel mixed readout, but the number of pixels read out from the solid-state imaging device 111 by thinning out the readout line of the vertical CCD. There are many configurations that control this. The solid-state imaging device 111 may be a CMOS sensor as long as it has a function of performing photoelectric conversion and has a function of controlling the exposure amount and gain of the charge of the solid-state imaging device 111. When a CMOS sensor is used as the solid-state image sensor 111, the position of the pixel to be read can be switched in units of pixels, and the number of pixels to be read can be switched. When the solid-state imaging device 111 is a CMOS sensor, the number of pixels to be read can be controlled by using a drive mode called ROI (Region Of Interest) or the above-described thinning mode.

アナログ信号処理手段１１２は、固体撮像素子１１１からの撮像信号を受け取り、ＣＤＳ処理を行い、また、ＣＤＳ処理された撮像信号に対して利得をかけて、アナログ信号を出力する。Ａ／Ｄ変換手段１１３は、アナログ信号処理手段１１２からのアナログ信号を受け取り、このアナログ信号をデジタル信号に変換して出力する。なお、固体撮像素子１１１としてＣＭＯＳセンサを用いた場合は、アナログ信号処理手段１１２、Ａ／Ｄ変換手段１１３、及びタイミング生成手段１１５をワンチップ内で実現できるので、撮像手段１１を小型化することができる。 The analog signal processing unit 112 receives an imaging signal from the solid-state imaging device 111, performs CDS processing, applies a gain to the imaging signal subjected to CDS processing, and outputs an analog signal. The A / D conversion means 113 receives the analog signal from the analog signal processing means 112, converts this analog signal into a digital signal, and outputs it. When a CMOS sensor is used as the solid-state imaging device 111, the analog signal processing unit 112, the A / D conversion unit 113, and the timing generation unit 115 can be realized in one chip, so that the imaging unit 11 can be downsized. Can do.

カメラ信号処理手段１１４は、撮像システムの構成に応じて、様々なデジタル信号処理を行う。撮像装置１０が固体撮像素子１１１の出力（ＲＡＷ画像データ）を情報処理装置３０にそのまま出力する場合には、カメラ信号処理手段１１４は、デジタルクランプ処理などの画像処理を行う。なお、以上の説明においては、情報処理装置３０が、Ａ／Ｄ変換手段１１３から出力されるＲＡＷ画像に対して、補間処理、カラー化処理、Ｓ／Ｎ処理などの信号処理を行う撮像システムを説明したが、これらの信号処理を撮像装置１０のカメラ信号処理手段１１４で行うように構成することもできる。この場合には、情報処理装置３０の画像処理手段３４で補間処理、カラー化処理、Ｓ／Ｎ処理などの信号処理を行う必要が無くなる。また、カメラ信号処理手段１１４は、Ａ／Ｄ変換手段１１３から出力された画像信号ＡＣに、ヘッダ情報を付加する。 The camera signal processing unit 114 performs various digital signal processing depending on the configuration of the imaging system. When the imaging apparatus 10 outputs the output (RAW image data) of the solid-state imaging element 111 to the information processing apparatus 30 as it is, the camera signal processing unit 114 performs image processing such as digital clamp processing. In the above description, the imaging system in which the information processing apparatus 30 performs signal processing such as interpolation processing, colorization processing, and S / N processing on the RAW image output from the A / D conversion unit 113 is described. As described above, the signal processing can be configured to be performed by the camera signal processing unit 114 of the imaging apparatus 10. In this case, it is not necessary to perform signal processing such as interpolation processing, colorization processing, and S / N processing in the image processing unit 34 of the information processing apparatus 30. Further, the camera signal processing unit 114 adds header information to the image signal AC output from the A / D conversion unit 113.

タイミング生成手段１１５は、入力される制御情報に応じて固体撮像素子１１１の駆動タイミングパルスを生成する。駆動タイミングパルスは、例えば、ＣＣＤセンサでは、水平ＣＣＤの電荷転送を行うタイミングを与える水平転送パルス、垂直ＣＣＤの電荷転送を行うタイミングを与える垂直転送パルス、蓄積された電荷をＣＣＤ基板電位へ掃き出し、電子シャッタとしての動作を実現させる電荷掃き出しパルス、水平ＣＣＤの水平転送された電荷を画素ごとにリセットするリセットパルスなどのパルスを含む。また、タイミング生成手段１１５は、アナログ信号処理手段１１２のサンプリングパルスと、Ａ／Ｄ変換手段１１３のＡ／Ｄクロックをも生成する。さらに、画素間引きを行う際には、タイミング生成手段１１５は、画素間引きを実現する水平転送パルス、垂直転送パルスの駆動タイミング仕様に基づき、出力される駆動タイミングパルスを切替えることができる。 The timing generation unit 115 generates a drive timing pulse for the solid-state imaging device 111 according to the input control information. For example, in the CCD sensor, the drive timing pulse is a horizontal transfer pulse that gives the timing for performing the charge transfer of the horizontal CCD, a vertical transfer pulse that gives the timing for performing the charge transfer of the vertical CCD, and sweeps the accumulated charges to the CCD substrate potential. It includes pulses such as a charge sweep pulse for realizing an operation as an electronic shutter and a reset pulse for resetting the horizontally transferred charge of the horizontal CCD for each pixel. The timing generation unit 115 also generates a sampling pulse of the analog signal processing unit 112 and an A / D clock of the A / D conversion unit 113. Further, when performing pixel thinning, the timing generation unit 115 can switch the drive timing pulse to be output based on the drive timing specifications of the horizontal transfer pulse and the vertical transfer pulse that realize pixel thinning.

以上に説明した撮像手段１１の構成は、一例に過ぎず、利得、シャッタースピードなどの制御を行うことができ、撮像信号を出力することができる他の撮像手段を採用してもよい。また、撮像手段１１は、センサ出力（ＲＡＷデータ）を補間処理してＹＣｂＣｒ信号を生成するカメラ信号処理や画質を改善する簡易処理を行う信号処理手段、及び／又は、撮像手段１１内の露出など自動制御を行う制御手段などの他の構成要素を有してもよい。 The configuration of the imaging means 11 described above is merely an example, and other imaging means that can control gain, shutter speed, and the like and can output an imaging signal may be employed. In addition, the imaging unit 11 is a signal processing unit that performs camera signal processing for generating a YCbCr signal by interpolating sensor output (RAW data) and simple processing for improving image quality, and / or exposure in the imaging unit 11. You may have other components, such as a control means which performs automatic control.

図４は、実施の形態１に係る撮像システムの撮像装置１０からの送信情報を示す図である。図４は、プロトコルとしてＴＣＰ（ＴｒａｎｓｍｉｓｓｉｏｎＣｏｎｔｒｏｌＰｒｏｔｏｃｏｌ）を用いた場合を示す。図４に示されるように、送信情報のヘッダ情報は、ネットワークのプロトコルによって既定されるネットワークヘッダＮ１０と、撮像画像を伝送する際に設けられる画像ヘッダＩＭ１０とから構成され、撮像装置１０の撮像画像のデータ（図４におけるデータＩｄ）に付加される。ここで、図４に示されるネットワークヘッダＮ１０のフィールドを説明する。送信元ポート番号は、送信元（撮像装置１０）のポート番号を示すフィールドである。宛て先ポート番号は、宛て先（情報処理装置３０）のポート番号を示すフィールドである。シーケンス番号は、データ位置を示すフィールドである。ＡＣＫ番号は、次に送られて来るべきシーケンス番号を示すフィールドである。データオフセットは、データの開始位置を示すフィールドである。制御ビットは、ＡＣＫ番号使用の有無、上位層へのデータの受け渡しタイミング指定等の制御を示すフィールドである。ウインドウは、１度に受信できるデータ量を示すフィールドである。チェックサムは、データ誤りを検出するためのフィールドである。緊急ポインタは、制御ビットＵＲＧ（緊急処理用ビット）がオン時の緊急データ位置を示すフィールドである。パディングは、ＴＣＰヘッダが３２ビットの倍数になるように調整するフィールドである。 FIG. 4 is a diagram illustrating transmission information from the imaging device 10 of the imaging system according to the first embodiment. FIG. 4 shows a case where TCP (Transmission Control Protocol) is used as a protocol. As shown in FIG. 4, the header information of the transmission information includes a network header N10 that is defined by a network protocol and an image header IM10 that is provided when the captured image is transmitted. Is added to the data (data Id in FIG. 4). Here, the fields of the network header N10 shown in FIG. 4 will be described. The transmission source port number is a field indicating the port number of the transmission source (imaging device 10). The destination port number is a field indicating the port number of the destination (information processing apparatus 30). The sequence number is a field indicating a data position. The ACK number is a field indicating a sequence number to be sent next. The data offset is a field indicating the start position of data. The control bit is a field indicating control of whether or not an ACK number is used, designation of data transfer timing to an upper layer, and the like. The window is a field indicating the amount of data that can be received at one time. The checksum is a field for detecting a data error. The urgent pointer is a field indicating the urgent data position when the control bit URG (emergency processing bit) is on. Padding is a field that is adjusted so that the TCP header is a multiple of 32 bits.

画像ヘッダ情報は、フレーム単位や、数フレームをまとめた画像パケット単位で、生成する送信画像番号の情報を有している。送信画像番号は、撮像装置１０から送信される際に、撮像データを判別するために、区別可能なように個別に付される番号である。画像ヘッダ情報ＩＭ１０は、撮像装置１０から情報処理装置３０へ伝送する撮像画像データの送信順番、送信時間を特定できる送信画像番号が付加されている。送信された複数の送信画像番号に関する履歴情報は、撮像装置１０内の記憶手段１３内に保持され、遅延時間検出などに用いることができる。画像ヘッダ情報ＩＭ１０は、送信される画像データの撮像条件情報を有しており、例えば、画像データの露出情報を有している。後段の処理で画像解析を行う際に、どのような露出状態で撮影がされたかを知ることができる。また、画像ヘッダ情報ＩＭ１０は、送信される画像データのホワイトバランスや画質調整に関する設定値を有している。後段の処理で画像処理を行うために、これらの情報を利用することもできる。なお、送信情報の構造は、撮像画像と、露出などの撮像条件を判別するための情報があれば、プロトコルとして、独自のプロトコル体系であっても良く、また、他の伝送規格に準ずるプロトコル体系であっても良い。 The image header information includes information on the transmission image number to be generated in frame units or image packet units in which several frames are combined. The transmission image number is a number assigned individually so as to be distinguishable in order to discriminate imaging data when transmitted from the imaging device 10. In the image header information IM10, a transmission image number that can specify the transmission order and transmission time of the captured image data transmitted from the imaging device 10 to the information processing device 30 is added. The history information regarding a plurality of transmission image numbers transmitted is held in the storage unit 13 in the imaging apparatus 10 and can be used for delay time detection or the like. The image header information IM10 includes imaging condition information of image data to be transmitted, for example, exposure information of image data. When performing image analysis in the subsequent processing, it is possible to know in what exposure state the image was taken. Further, the image header information IM10 has setting values relating to white balance and image quality adjustment of transmitted image data. These pieces of information can also be used to perform image processing in subsequent processing. The structure of the transmission information may be a unique protocol system as a protocol as long as there is captured image and information for determining an imaging condition such as exposure, and a protocol system according to other transmission standards. It may be.

〈撮像装置１０の記憶手段１３の説明〉
記憶手段１３は、ＦＰＧＡ（ＦｉｅｌｄＰｒｏｇｒａｍｍａｂｌｅＧａｔｅＡｒｒａｙ）やＡＳＩＣ（ＡｐｐｌｉｃａｔｉｏｎＳｐｅｃｉｆｉｃＩｎｔｅｇｒａｔｅｄＣｉｒｃｕｉｔ）内に構成できるラインメモリや、ＳＤＲＡＭ（ＳｙｎｃｈｒｏｎｏｕｓＤＲＡＭ）などの一時的にデータを保持する手段である。記憶手段１３は、デジタル送受信手段１２から伝送される画像データを一時記憶し、タイミング調整を行ってデジタル送受信手段３１に伝送するために使用される。また、記憶手段１３は、情報処理装置３０のデジタル送受信手段３１から伝送されてくる初期設定や変更後の設定データを一時記憶することもできる。 <Description of Storage Unit 13 of Imaging Device 10>
The storage unit 13 is a unit that temporarily stores data such as a line memory that can be configured in a field programmable gate array (FPGA) or an application specific integrated circuit (ASIC), or an SDRAM (synchronous DRAM). The storage unit 13 is used to temporarily store the image data transmitted from the digital transmission / reception unit 12, perform timing adjustment, and transmit the image data to the digital transmission / reception unit 31. The storage unit 13 can also temporarily store initial settings and changed setting data transmitted from the digital transmission / reception unit 31 of the information processing apparatus 30.

〈撮像装置１０のデジタル送受信手段１２の説明〉
デジタル送受信手段１２は、撮像手段１１からの撮像画像（第１のデータ）とヘッダ情報とを含む送信情報を、伝送線２０を経由して情報処理装置３０のデジタル送受信手段３１に伝送するためのインターフェースである。デジタル送受信手段１２は、情報処理装置３０の制御手段３３からデジタル送受信手段３１経由で送られてきた第２のデータのヘッダ情報を解析し、解析結果に基づく撮像条件を変更する制御情報ＢＢを撮像手段１１に与える。 <Description of Digital Transmission / Reception Unit 12 of Imaging Device 10>
The digital transmission / reception unit 12 transmits transmission information including the captured image (first data) from the imaging unit 11 and header information to the digital transmission / reception unit 31 of the information processing apparatus 30 via the transmission line 20. Interface. The digital transmission / reception means 12 analyzes the header information of the second data sent from the control means 33 of the information processing device 30 via the digital transmission / reception means 31, and images the control information BB that changes the imaging condition based on the analysis result. It gives to the means 11.

〈情報処理装置３０の画像解析手段３２の説明〉
画像解析手段３２は、デジタル送受信手段３１を経由して受け取った第１のデータ（画像信号）を解析して、解析結果を制御手段３３に出力する。例えば、画像解析手段３２は、デジタル送受信手段３１からの画像信号から所定の手順で決められた測光窓ごとに画素値の積算値を求める。所定の手順とは、測光窓の大きさを、例えば、１０画素×１０画素として、この測光窓で有効画素数の画面を分割するなどの手順である。１０画素×１０画素の測光窓サイズを用いると、有効画素数６４０×４８０の画面から、６４×４８の測光窓数が得られる。なお、測光窓サイズ、測光窓数、及び使用する測光窓の位置は、撮像装置１０の仕様に応じて任意の測光窓サイズ、測光窓数、及び測光窓の位置を用いることができる。 <Description of Image Analysis Unit 32 of Information Processing Apparatus 30>
The image analysis unit 32 analyzes the first data (image signal) received via the digital transmission / reception unit 31 and outputs the analysis result to the control unit 33. For example, the image analysis unit 32 obtains an integrated value of pixel values for each photometric window determined by a predetermined procedure from the image signal from the digital transmission / reception unit 31. The predetermined procedure is a procedure in which the size of the photometric window is set to 10 pixels × 10 pixels, for example, and a screen having the effective pixel number is divided by the photometric window. When a photometric window size of 10 pixels × 10 pixels is used, a photometric window number of 64 × 48 can be obtained from a screen having an effective pixel count of 640 × 480. Note that, as the photometric window size, the number of photometric windows, and the position of the photometric window to be used, an arbitrary photometric window size, the number of photometric windows, and the position of the photometric window can be used according to the specifications of the imaging device 10.

また、画像解析手段３２は、画像データの測光窓毎に画素値（輝度値）の最大値及び最小値を検出する構成とすることもできる。測光窓内の画素値の最大値及び最小値の検出結果を、測光窓内の画素値の積算値と比較することで、測光窓内の画像データの輝度分布を判断できる。ここで、測光窓内の画素値の積算値の１画素あたりの平均値が、１２５（信号は、８ｂｉｔ精度）の場合で、最大値及び最小値が、１２５近傍の値であるとき（例えば、最大値が１３５であり、最小値が１１５であるとき）は、測光窓内の画像データの輝度分布は、均一性の高い（ほぼ均一な）輝度分布であると判断できる。画素値の最大値が２５５近傍で、最小値が０に近い値であるときは、測光窓内の輝度分布は、大きく変動している（均一性が低い）と判断できる。 Further, the image analysis unit 32 may be configured to detect the maximum value and the minimum value of the pixel value (luminance value) for each photometric window of the image data. The luminance distribution of the image data in the photometric window can be determined by comparing the detection result of the maximum and minimum pixel values in the photometric window with the integrated value of the pixel values in the photometric window. Here, when the average value per pixel of the integrated values of the pixel values in the photometric window is 125 (the signal is 8-bit accuracy), and the maximum value and the minimum value are values in the vicinity of 125 (for example, When the maximum value is 135 and the minimum value is 115), it can be determined that the luminance distribution of the image data in the photometric window is a highly uniform (substantially uniform) luminance distribution. When the maximum pixel value is near 255 and the minimum value is close to 0, it can be determined that the luminance distribution in the photometric window has greatly fluctuated (low uniformity).

画像解析手段３２の輝度分布の判断結果を、画像処理手段３４に接続された表示装置４０に積算値、最大値、及び最小値などの数値データとして表示させた場合には、ユーザは画像を直接見て画質を判断できるだけでなく、数値データを確認することができるので、露出及び／又はホワイトバランスの調整精度を向上させることができる。また、画像解析手段３２で測光窓ごとのヒストグラムを検出することもできる。測光窓ごとのヒストグラムを検出することで、測光窓内の輝度分布の検出精度が向上する。また、ヒストグラムを表示装置４０に表示させる場合には、ユーザは、数値データをヒストグラムを示すチャートとして確認することもできるので、露出及びホワイトバランスの調整精度を向上させることができる。 When the determination result of the luminance distribution of the image analyzing unit 32 is displayed as numerical data such as an integrated value, a maximum value, and a minimum value on the display device 40 connected to the image processing unit 34, the user directly displays the image. Not only can the image quality be determined by viewing, but also numerical data can be confirmed, so that the exposure and / or white balance adjustment accuracy can be improved. Further, the image analysis means 32 can detect a histogram for each photometric window. By detecting the histogram for each photometric window, the detection accuracy of the luminance distribution in the photometric window is improved. Further, when displaying the histogram on the display device 40, the user can also confirm the numerical data as a chart indicating the histogram, so that the exposure and white balance adjustment accuracy can be improved.

〈情報処理装置３０の制御手段３３の説明〉
画像解析手段３２の解析結果を表示装置４０に表示する機能に加え、画像解析手段３２の結果を制御手段３３による露出及び／又はホワイトバランスの自動制御に用いることができる。測光窓の積算値やヒストグラムから抽出した値を、制御手段３３の自動制御に用いることで、自動制御の露出制御の精度及び／又はホワイトバランスの調整精度を向上させることができる。 <Description of Control Unit 33 of Information Processing Device 30>
In addition to the function of displaying the analysis result of the image analysis means 32 on the display device 40, the result of the image analysis means 32 can be used for automatic control of exposure and / or white balance by the control means 33. By using the integrated value of the photometric window or the value extracted from the histogram for the automatic control of the control means 33, the accuracy of automatic control exposure control and / or the white balance adjustment accuracy can be improved.

制御手段３３は、撮像装置１０の撮像手段１１の初期設定データを変更する制御情報を、デジタル送受信手段３１及びデジタル送受信手段１２を経由して送信する。初期設定データは、後述の図５の情報処理装置３０からの送信データに初期設定データであることが分かる情報（情報ＩＤ）とともに伝送される。撮像装置１０のデジタル送受信手段１２は、初期設定データに関する情報ＩＤであることを判断して、撮像装置１０内の撮像手段１１の撮像条件の初期設定データを設定する。 The control unit 33 transmits control information for changing the initial setting data of the imaging unit 11 of the imaging apparatus 10 via the digital transmission / reception unit 31 and the digital transmission / reception unit 12. The initial setting data is transmitted together with information (information ID) indicating that it is the initial setting data to transmission data from the information processing apparatus 30 in FIG. The digital transmission / reception unit 12 of the imaging apparatus 10 determines that the information ID is related to the initial setting data, and sets initial setting data of imaging conditions of the imaging unit 11 in the imaging apparatus 10.

また、制御手段３３は、ユーザが、例えば、外部入力装置５０から情報処理装置３０を通して変更した設定データを、デジタル送受信手段３１へ出力する。設定データは、図５の情報処理装置３０からの送信データに変更した設定データであることを示す情報（情報ＩＤ）とともに伝送される。撮像装置１０のデジタル送受信手段１２は、受信したデータが、変更した設定データであることを示す情報ＩＤを有しているか否かを判断し、変更した設定データであることを示す情報ＩＤを有していると判断した場合には、設定データを検出し、撮像手段１１に与える。 Further, the control unit 33 outputs setting data changed by the user from the external input device 50 through the information processing device 30 to the digital transmission / reception unit 31, for example. The setting data is transmitted together with information (information ID) indicating that the setting data is changed to the transmission data from the information processing apparatus 30 in FIG. The digital transmission / reception unit 12 of the imaging apparatus 10 determines whether or not the received data has an information ID indicating changed setting data, and has an information ID indicating changed setting data. If it is determined that it is, the setting data is detected and given to the imaging means 11.

なお、このときの初期設定データと、変更後の設定データは、情報処理装置３０内に設けられるメモリ手段（図示せず）に記憶することができる。このメモリ手段は、例えば、ＦＬＡＳＨメモリ、Ｅ２ＰＲＯＭなどの不揮発性メモリ、ＳＤＲＡＭなどの一時記憶メモリである。設定データを情報処理装置３０内に保持することで、撮像装置１０内のメモリに初期設定データや変更後の設定データを保持する必要がない。 Note that the initial setting data and the changed setting data at this time can be stored in a memory means (not shown) provided in the information processing apparatus 30. This memory means is, for example, a FLASH memory, a non-volatile memory such as E2PROM, or a temporary storage memory such as SDRAM. By holding the setting data in the information processing device 30, it is not necessary to hold the initial setting data or the changed setting data in the memory in the imaging device 10.

制御手段３３は、画像解析手段３２の結果に基づく制御情報をデジタル送受信手段３１に出力する。デジタル送受信手段３１を経由して、制御手段３３の判定結果を撮像装置１０に送ることによって、撮像手段１１における利得、シャッタースピードを制御することで露出制御を行うことができる。 The control unit 33 outputs control information based on the result of the image analysis unit 32 to the digital transmission / reception unit 31. By sending the determination result of the control means 33 to the imaging device 10 via the digital transmission / reception means 31, exposure control can be performed by controlling the gain and shutter speed in the imaging means 11.

以下に、制御手段３３による、撮像手段１１の撮像条件の一つである露出の制御方法について説明する。制御手段３３は、画像解析手段３２によって求められた測光窓毎の画素値の積算値を用いて、被写体の露出条件を求める。制御手段３３は、求めた被写体の露出条件から、デジタル送受信手段３１及びデジタル送受信手段１２を経由して撮像手段１１に露出制御のための制御情報ＢＢを送信する。撮像手段１１においては、制御手段３３からデジタル送受信手段３１及びデジタル送受信手段１２を経由して送られてきた制御情報に応じて、タイミング生成手段１１５の電子シャッタパルスのパルス数を調整することによって、固体撮像素子１１１の露出時間を制御する。撮像手段１１においては、制御手段３３からデジタル送受信手段３１及びデジタル送受信手段１２を経由して送られてきた制御情報に応じて、アナログ信号処理手段１１２の利得を制御する。制御手段３３は、例えば、測光窓の積算値から経験的及び／又は統計的に得られたアルゴリズムに従い、有効な測光窓を選択し、選択した測光窓の積算値が、ＡＰＬ（ＡｖｅｒａｇｅＰｉｃｔｕｒｅＬｅｖｅｌ）になるように、撮像手段１１のシャッタースピードと利得を調整することによって、撮像手段１１の露出を制御する。 Hereinafter, an exposure control method that is one of the imaging conditions of the imaging unit 11 by the control unit 33 will be described. The control unit 33 obtains the exposure condition of the subject using the integrated value of the pixel values for each photometric window obtained by the image analysis unit 32. The control unit 33 transmits control information BB for exposure control to the imaging unit 11 via the digital transmission / reception unit 31 and the digital transmission / reception unit 12 based on the obtained subject exposure condition. In the imaging unit 11, by adjusting the number of electronic shutter pulses of the timing generation unit 115 according to the control information transmitted from the control unit 33 via the digital transmission / reception unit 31 and the digital transmission / reception unit 12, The exposure time of the solid-state image sensor 111 is controlled. In the imaging unit 11, the gain of the analog signal processing unit 112 is controlled in accordance with control information sent from the control unit 33 via the digital transmission / reception unit 31 and the digital transmission / reception unit 12. The control means 33 selects an effective photometric window, for example, according to an algorithm empirically and / or statistically obtained from the integrated value of the photometric window, and the integrated value of the selected photometric window is APL (Average Picture Level). By adjusting the shutter speed and gain of the image pickup means 11, the exposure of the image pickup means 11 is controlled.

また、制御手段３３は、画像解析手段３２における測光窓ごとの色別の積算値（ＲＧＢ色毎の積算値）を用いて、Ｇ色積算値に対するＲ色積算値の利得及びＧ色積算値に対するＢ色積算値の利得を求め、画像処理手段３４内で構成する、各色のホワイトバランスの利得を調整する。 Further, the control means 33 uses the integrated value for each color (integrated value for each RGB color) for each photometric window in the image analyzing means 32, and the gain of the R color integrated value for the G color integrated value and the G color integrated value. The gain of the B color integrated value is obtained, and the white balance gain of each color, which is configured in the image processing means 34, is adjusted.

図５は、実施の形態１に係る撮像システムの情報処理装置３０から送信されるデータを示す図である。図５には、情報処理装置３０から撮像装置１０へ伝送される画像のヘッダ情報が示されている。図５に示されるデータにおいては、送信元ポート番号として情報処理装置３０のポート番号を用いる点、及び、宛て先ポート番号として撮像装置１０のポート番号を用いる点が、図４のヘッダ情報と相違する。図５に示されるデータにおいては、ネットワークヘッダＮ３０に続いて、撮像装置１０に送信されるデータ（第２のデータ）が付加されている。 FIG. 5 is a diagram illustrating data transmitted from the information processing apparatus 30 of the imaging system according to the first embodiment. FIG. 5 shows header information of an image transmitted from the information processing apparatus 30 to the imaging apparatus 10. The data shown in FIG. 5 differs from the header information of FIG. 4 in that the port number of the information processing device 30 is used as the transmission source port number and the port number of the imaging device 10 is used as the destination port number. To do. In the data shown in FIG. 5, data (second data) transmitted to the imaging device 10 is added after the network header N30.

情報処理装置３０から送信されるデータは、情報処理装置３０内のメモリ手段（図示せず）にて保持されている撮像装置１０の初期設定データ、ユーザによる撮像装置１０の設定値変更データ、制御手段３３で求められた利得やシャッタースピードなどの露出データ（撮像条件の制御情報）、及び制御手段３３で求められたホワイトバランスの利得データ（撮像条件の制御情報）などを含む。 Data transmitted from the information processing device 30 includes initial setting data of the imaging device 10 held in a memory unit (not shown) in the information processing device 30, setting value change data of the imaging device 10 by the user, and control. Exposure data (imaging condition control information) such as gain and shutter speed obtained by means 33, white balance gain data (imaging condition control information) obtained by control means 33, and the like.

また、情報処理装置３０から送信されるデータは、情報処理装置３０が受信した受信画像番号を有している。受信画像番号は、以下のステップで生成される番号である。受信したヘッダ情報から、受信データを抽出し、画像解析手段３２で画像処理を行う撮像装置１０からの画像データの送信画像番号を検出する。送信画像番号から、受信画像番号を生成する。受信画像番号は、送信画像番号と対応付けできる番号である。撮像装置１０において、受信画像番号を受信した際も、撮像装置１０自身が送信した画像データの送信画像番号と対応付けすることができる。 Further, the data transmitted from the information processing device 30 has a received image number received by the information processing device 30. The received image number is a number generated in the following steps. Received data is extracted from the received header information, and the image analysis unit 32 detects the transmission image number of the image data from the imaging device 10 that performs image processing. A reception image number is generated from the transmission image number. The reception image number is a number that can be associated with the transmission image number. In the imaging device 10, even when the received image number is received, it can be associated with the transmission image number of the image data transmitted by the imaging device 10 itself.

情報処理装置３０は、画像データの全データの受信を確認し、ヘッダ情報を送信する。ここで、情報処理装置３０は、露出条件を記憶しておくことで、最新露出設定を常に保持することはできる。また、情報処理装置３０に接続された表示装置４０や外部入力装置５０（マウス、キーボードなど）により、露出設定の変更やホワイトバランス設定の変更（すなわち、撮影条件の設定値の変更）を行うことができ、情報処理装置３０のみで調整を行うことができる。 The information processing apparatus 30 confirms reception of all the image data and transmits header information. Here, the information processing apparatus 30 can always hold the latest exposure setting by storing the exposure condition. Further, the display device 40 or the external input device 50 (mouse, keyboard, etc.) connected to the information processing device 30 is used to change the exposure setting or the white balance setting (that is, change the setting value of the shooting condition). Adjustment can be performed only by the information processing device 30.

また、制御手段３３は、情報処理装置３０を用いるユーザや管理者のシステム要求により、撮像装置１０の電源ＯＮ／ＯＦＦ、撮像サイズ、レンズズーム制御など撮像装置１０の動作状態を制御する動作状態制御機能も有するように構成することもできる。 The control unit 33 is an operation state control that controls the operation state of the imaging apparatus 10 such as power ON / OFF, imaging size, and lens zoom control of the imaging apparatus 10 according to a system request of a user or administrator who uses the information processing apparatus 30. It can also be configured to have a function.

〈情報処理装置３０の画像処理手段３４の説明〉
画像処理手段３４は、撮像装置１０からの撮像信号をデジタル送受信手段３１経由で受け取り、ホワイトバランス処理、補間処理によるＲＧＢ信号生成、ＹＣｂＣｒ変換、カラーマトリクスを用いる変換、階調変換、ＪＰＥＧ又はＭＰＥＧなどの圧縮処理などを行う。画像処理手段３４は、撮像信号Ｘａ（図４においける信号ＡＨ）を出力する。撮像信号Ｘａは、例えば、８ビット階調で、水平６４０×垂直４８０画素に２次元配列された赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３色の撮像信号（以下「ＲＧＢ信号」と言う。）である。撮像信号ＸａのＲ信号レベルをＲ（Ｍ，Ｎ）、撮像信号ＸａのＧ信号レベルをＧ（Ｍ，Ｎ）、撮像信号ＸａのＢ信号レベルをＢ（Ｍ，Ｎ）と表記する。ここで、Ｍは水平画素位置、Ｎは垂直画素位置を示す。画像処理手段３４の撮像信号Ｘａは、ＲＧＢ信号に限らず、ＹＣｂＣｒ信号、Ｌ＊ａ＊ｂ＊信号、又はＨＳＶ（Ｈｕｅ、Ｓａｔｕｒａｔｉｏｎ、Ｖａｌｕｅ）信号などであってもよい。撮像装置１０が撮像信号ＸａとしてＹＣｂＣｒ信号、Ｌ＊ａ＊ｂ＊信号、又はＨＳＶ信号を用いる場合には、画像処理手段３４は、各色空間の信号をＲＧＢ信号に色変換処理する色変換手段（図示せず）を備える。また、撮像信号Ｘａの階調数は、上記８ビットに限定されず、静止画ファイルで用いられる１０ビット又は１２ビットなどの他の階調数であってもよい。さらに、撮像信号Ｘａの画素数は、上記値に限定されず、水平１０２４×垂直９６０画素などの他の画素数であってもよい。 <Description of Image Processing Unit 34 of Information Processing Apparatus 30>
The image processing means 34 receives the image pickup signal from the image pickup apparatus 10 via the digital transmission / reception means 31, and performs white balance processing, RGB signal generation by interpolation processing, YCbCr conversion, conversion using a color matrix, gradation conversion, JPEG or MPEG, etc. Perform compression processing. The image processing means 34 outputs the imaging signal Xa (signal AH in FIG. 4). The imaging signal Xa is, for example, an imaging signal of three colors of red (R), green (G), and blue (B) that is two-dimensionally arranged in horizontal 640 × vertical 480 pixels with 8-bit gradation (hereinafter referred to as “RGB signal”). "" The R signal level of the imaging signal Xa is expressed as R (M, N), the G signal level of the imaging signal Xa is expressed as G (M, N), and the B signal level of the imaging signal Xa is expressed as B (M, N). Here, M represents a horizontal pixel position, and N represents a vertical pixel position. The imaging signal Xa of the image processing means 34 is not limited to an RGB signal, and may be a YCbCr signal, an L * a * b * signal, or an HSV (Hue, Saturation, Value) signal. When the imaging apparatus 10 uses a YCbCr signal, an L * a * b * signal, or an HSV signal as the imaging signal Xa, the image processing means 34 is a color conversion means (color conversion means for color-converting signals in each color space into RGB signals) (Not shown). Further, the number of gradations of the imaging signal Xa is not limited to the above 8 bits, and may be other gradations such as 10 bits or 12 bits used in the still image file. Further, the number of pixels of the imaging signal Xa is not limited to the above value, and may be other number of pixels such as horizontal 1024 × vertical 960 pixels.

また、画像処理手段３４は、静止画時のＪＰＥＧ圧縮や、動画時のＭＰＥＧ、モーションＪＰＥＧ圧縮などの圧縮機能を有し、制御手段３３により圧縮率を制御し、単位時間当たりの情報伝送量を可変できる。実施の形態１の撮像システムにおいては、ネットワークの負荷に応じて、制御手段３３の画像伝送削減量の割合を調整することで、圧縮率を変更する。 The image processing unit 34 has a compression function such as JPEG compression for still images, MPEG for moving images, and motion JPEG compression. The control unit 33 controls the compression rate to reduce the amount of information transmitted per unit time. Variable. In the imaging system of the first embodiment, the compression rate is changed by adjusting the ratio of the image transmission reduction amount of the control means 33 according to the load on the network.

さらに、画像処理手段３４は、撮像装置１０からの送信データの画像データに画像処理する機能を有する。画像処理としては、例えば、ノイズ除去、階調制御、圧縮画像の解凍処理などの画像処理と、撮像画像から特徴点を抽出し、特徴点を検出、特徴点に基づく認証処理などが含まれる。 Further, the image processing unit 34 has a function of performing image processing on the image data of the transmission data from the imaging device 10. Image processing includes, for example, image processing such as noise removal, gradation control, and decompression processing of a compressed image, extraction of feature points from the captured image, detection of feature points, and authentication processing based on the feature points.

〈表示装置４０の説明〉
図６は、表示装置４０の表示画面の一例を示す図である。表示装置４０は、情報処理装置３０から出力される画像信号に基づく画像を表示する。表示装置４０の表示画面には、例えば、表示画像の明るさ、コントラスト、色温度（ホワイトバランス）などの設定値データを示す調整用バー、調整後の画像データの画像解析手段３２の解析結果を表示する画面などが含まれる。システムの構成によっては、表示装置４０に、調整前の画像データの画像解析手段３２の解析結果を表示する画面を表示させることもできる。また、表示装置４０に、情報処理装置３０の出力を表示させることで、設定変更を反映した画像データの表示を確認できるようにし、調整精度を向上させることができる。 <Description of Display Device 40>
FIG. 6 is a diagram illustrating an example of a display screen of the display device 40. The display device 40 displays an image based on the image signal output from the information processing device 30. On the display screen of the display device 40, for example, an adjustment bar indicating set value data such as brightness, contrast, and color temperature (white balance) of the display image, and an analysis result of the image analysis means 32 of the adjusted image data are displayed. Includes screens to be displayed. Depending on the configuration of the system, a screen for displaying the analysis result of the image analysis means 32 of the image data before adjustment can be displayed on the display device 40. Further, by displaying the output of the information processing device 30 on the display device 40, it is possible to check the display of the image data reflecting the setting change, and it is possible to improve the adjustment accuracy.

〈外部入力装置５０の説明〉
外部入力装置５０は、マウス、キーボード、テンキー、スイッチ、ボタンなどの外部入力デバイスである。ユーザは、外部入力装置５０を操作することによって、表示画像の明るさ、コントラスト、色温度（ホワイトバランス）などを調整することができる。外部入力装置５０の操作によって入力された変更情報は、制御手段３３を経由して、撮像装置１０における露出制御などに反映される。また、外部入力装置５０の操作によって入力された変更情報を、表示装置４０に表示させることもできる。 <Description of External Input Device 50>
The external input device 50 is an external input device such as a mouse, a keyboard, a numeric keypad, a switch, or a button. The user can adjust the brightness, contrast, color temperature (white balance), and the like of the display image by operating the external input device 50. The change information input by the operation of the external input device 50 is reflected in exposure control or the like in the imaging device 10 via the control unit 33. Further, the change information input by operating the external input device 50 can be displayed on the display device 40.

〈実施の形態１に係る撮像システムの動作〉
図７は、実施の形態１に係る撮像システムの動作を示すタイミング図であり、図８は、実施の形態１に係る撮像システムの動作を示すシーケンス図である。図７及び図８は、撮像装置１０から情報処理装置３０に送られた送信データに基づいて、制御手段３３が撮像手段１１の撮像条件を変更させる制御情報を自動的に生成し、生成された制御情報を含む第２のデータをデジタル送受信手段３１及びデジタル送受信手段１２を経由して撮像手段１１に与える動作を示している。図７におけるステップＳ１〜Ｓ５の動作は、図８におけるステップＳ１〜Ｓ５の動作と同じ動作を示す。 <Operation of Imaging System According to Embodiment 1>
FIG. 7 is a timing diagram illustrating the operation of the imaging system according to the first embodiment, and FIG. 8 is a sequence diagram illustrating the operation of the imaging system according to the first embodiment. 7 and 8, the control unit 33 automatically generates control information for changing the imaging condition of the imaging unit 11 based on the transmission data sent from the imaging device 10 to the information processing device 30. The operation of supplying second data including control information to the imaging means 11 via the digital transmission / reception means 31 and the digital transmission / reception means 12 is shown. The operations in steps S1 to S5 in FIG. 7 are the same as the operations in steps S1 to S5 in FIG.

ステップＳ１は、撮像装置１０のデジタル送受信手段１２から情報処理装置３０のデジタル送受信手段３１に、画像データ（第１のデータ）を含むデータを送信する処理ステップである。撮像装置１０は、撮像手段１１の撮像出力ＡＤをデジタル送受信手段１２を経由してデジタル信号として出力する。撮像手段１１は、垂直同期信号ＶＤを基準として、毎フレームに画像データを出力する。情報処理装置３０が、デジタル送受信手段１２からのデータを受信できない場合は、記憶手段１３に画像データを一時記憶させる。 Step S 1 is a processing step for transmitting data including image data (first data) from the digital transmission / reception unit 12 of the imaging apparatus 10 to the digital transmission / reception unit 31 of the information processing apparatus 30. The imaging device 10 outputs the imaging output AD of the imaging unit 11 as a digital signal via the digital transmission / reception unit 12. The imaging unit 11 outputs image data for each frame with the vertical synchronization signal VD as a reference. When the information processing apparatus 30 cannot receive data from the digital transmission / reception unit 12, the image data is temporarily stored in the storage unit 13.

ステップＳ２は、情報処理装置３０のデジタル送受信手段３１が撮像装置１０からのデータを受信する処理ステップである。情報処理装置３０は、撮像装置１０からの画像伝送開始の要求を受け取り、受信可能になった状態で、データの受信を開始する。 Step S 2 is a processing step in which the digital transmission / reception means 31 of the information processing device 30 receives data from the imaging device 10. The information processing apparatus 30 receives the image transmission start request from the imaging apparatus 10 and starts receiving data in a state where reception is possible.

ステップＳ３は、情報処理装置３０の画像解析手段３２が受信したデータを解析する処理ステップである。画像解析手段３２は、決められた測光窓の積算値や特徴点の露出状態を解析する。制御手段３３は、画像解析手段３２による画像データの解析結果に基づいて、撮像手段１１のホワイトバランス及び露出の調整のための利得及びシャッタースピードを含む条件を設定するための情報を生成する。生成された情報には、露出条件の露出データに関する露出設定番号や画像番号をあらかじめ付加する。 Step S 3 is a processing step for analyzing the data received by the image analysis means 32 of the information processing apparatus 30. The image analysis means 32 analyzes the integrated value of the determined photometric window and the exposure state of the feature points. The control unit 33 generates information for setting a condition including a gain and a shutter speed for adjusting the white balance and exposure of the imaging unit 11 based on the analysis result of the image data by the image analysis unit 32. To the generated information, an exposure setting number and an image number relating to exposure data of the exposure condition are added in advance.

ステップＳ４は、情報処理装置３０の制御手段３３がデジタル送受信手段３１を経由して画像データの解析結果に基づく制御情報を撮像装置１０へ伝送する処理ステップである。ステップＳ３の結果をもとに、露出条件の制御情報及び／又はホワイトバランスの制御情報を、デジタル送受信手段３１経由で、撮像装置１０へ送る。このように、データの送信タイミングとして、画像伝送されている期間ではなく、ブランキング期間を用いることで、画像伝送に影響を与えずに露出データを送信することができる。 Step S 4 is a processing step in which the control unit 33 of the information processing apparatus 30 transmits control information based on the analysis result of the image data to the imaging apparatus 10 via the digital transmission / reception unit 31. Based on the result of step S 3, exposure condition control information and / or white balance control information is sent to the imaging apparatus 10 via the digital transmission / reception means 31. As described above, the exposure data can be transmitted without affecting the image transmission by using the blanking period instead of the image transmission period as the data transmission timing.

ステップＳ５は、ステップＳ４の結果（情報処理装置３０からの制御情報）を撮像装置１０で受信し、受信した制御情報を用いて、撮像手段１１を制御するステップである。撮像装置１０は、前フレームで送信されてきた露出データ及び／又はホワイトバランスデータを反映した画像を送信する。このように、露出データ及び／又はホワイトバランスデータの反映タイミングは、撮像手段１１において、１フレーム期間遅延するために、１フレーム期間遅れたタイミングとなる。 Step S5 is a step in which the imaging device 10 receives the result of step S4 (control information from the information processing device 30), and controls the imaging means 11 using the received control information. The imaging device 10 transmits an image reflecting the exposure data and / or white balance data transmitted in the previous frame. As described above, the reflection timing of exposure data and / or white balance data is delayed by one frame period because the imaging means 11 is delayed by one frame period.

〈実施の形態１に係る撮像システムの効果〉
以上に説明したように、実施の形態１に係る撮像システムによれば、撮像装置１０の撮像条件を変更する制御情報を含むデジタルの第２のデータを情報処理装置３０から撮像装置１０にフレームごとに、ブランキング期間に送信するので、撮像装置１０が撮像条件の設定値（ユーザー設定値）及び／又は撮像条件情報（情報処理装置３０からの制御情報）を保持するためのメモリを備える必要がなく、よって、撮像システムの低価格化及び小型化を実現できる。 <Effects of Imaging System According to Embodiment 1>
As described above, according to the imaging system according to the first embodiment, digital second data including control information for changing the imaging condition of the imaging device 10 is transferred from the information processing device 30 to the imaging device 10 for each frame. In addition, since it is transmitted during the blanking period, it is necessary for the imaging device 10 to include a memory for holding the imaging condition setting value (user setting value) and / or imaging condition information (control information from the information processing device 30). Therefore, it is possible to reduce the price and size of the imaging system.

また、実施の形態１に係る撮像システムによれば、撮像装置１０の撮像条件を変更する制御情報を情報処理装置３０において記憶することができるので、撮像装置１０の撮像条件情報を情報処理装置３０において一元管理でき、撮像条件の設定作業における作業性を著しく向上させることができる。 Further, according to the imaging system according to the first embodiment, the control information for changing the imaging condition of the imaging device 10 can be stored in the information processing device 30, so the imaging condition information of the imaging device 10 is stored in the information processing device 30. Can be centrally managed, and the workability in the setting operation of the imaging conditions can be remarkably improved.

さらに、実施の形態１に係る撮像システムによれば、撮像装置１０の撮像条件を変更する制御情報を含むデジタルの第２のデータを送信するための専用の配線は不要であるので、撮像システムの設置性を向上させることができる。 Furthermore, according to the imaging system according to the first embodiment, the dedicated wiring for transmitting the second digital data including the control information for changing the imaging condition of the imaging device 10 is not necessary. Installation can be improved.

実施の形態２．
図９は、本発明の実施の形態２に係る撮像システムの撮像装置１０ａ，１０ｂと情報処理装置６０の構成を概略的に示すブロック図である。図９に示されるように、実施の形態２に係る撮像システムは、２台の撮像装置１０ａ，１０ｂと、情報処理装置６０と、伝送線２０ａ，２０ｂとを有している。撮像装置１０ａは、伝送線２０ａによって情報処理装置６０に接続されており、撮像装置１０ｂは、伝送線２０ｂによって情報処理装置６０に接続されている。 Embodiment 2. FIG.
FIG. 9 is a block diagram schematically showing the configuration of the imaging devices 10a and 10b and the information processing device 60 of the imaging system according to Embodiment 2 of the present invention. As shown in FIG. 9, the imaging system according to Embodiment 2 includes two imaging devices 10a and 10b, an information processing device 60, and transmission lines 20a and 20b. The imaging device 10a is connected to the information processing device 60 through a transmission line 20a, and the imaging device 10b is connected to the information processing device 60 through a transmission line 20b.

図９に示されるように、撮像装置１０ａは、撮像手段１１ａと、デジタル送受信手段（第１の送受信手段）１２ａと、記憶手段１３ａとを有しており、撮像装置１０ｂは、撮像手段１１ｂと、デジタル送受信手段（第１の送受信手段）１２ｂと、記憶手段１３ｂとを有している。撮像装置１０ａ，１０ｂは、実施の形態１における撮像装置１０と同様の構成を有しており、撮像手段１１ａ，１１ｂは、実施の形態１における撮像手段１１に対応し、デジタル送受信手段１２ａ，１２ｂは、実施の形態１におけるデジタル送受信手段１２に対応し、記憶手段１３ａ，１３ｂは、実施の形態１における記憶手段１３に対応する。 As shown in FIG. 9, the imaging device 10a includes an imaging unit 11a, a digital transmission / reception unit (first transmission / reception unit) 12a, and a storage unit 13a. The imaging device 10b includes an imaging unit 11b. And a digital transmission / reception means (first transmission / reception means) 12b and a storage means 13b. The imaging devices 10a and 10b have the same configuration as the imaging device 10 in the first embodiment, and the imaging means 11a and 11b correspond to the imaging means 11 in the first embodiment and are digital transmission / reception means 12a and 12b. Corresponds to the digital transmission / reception means 12 in the first embodiment, and the storage means 13a, 13b correspond to the storage means 13 in the first embodiment.

また、図９に示されるように、情報処理装置６０は、デジタル送受信手段（第２の送受信手段）６１ａ，６１ｂと、画像解析手段６２と、制御手段６３と、画像処理手段６４と、メモリ手段（図示せず）とを有している。情報処理装置６０は、実施の形態１における情報処理装置３０に対応しているが、情報処理装置６０は、２台のデジタル送受信手段６１ａ，６１ｂを有する点が、１台のデジタル送受信手段３１を有する実施の形態１における情報処理装置３０と相違する。情報処理装置６０のデジタル送受信手段６１ａ，６１ｂは、実施の形態１におけるデジタル送受信手段３１に対応し、画像解析手段６２は、実施の形態１における画像解析手段３２に対応し、制御手段６３は、実施の形態１における制御手段３３に対応し、画像処理手段６４は、実施の形態１における画像処理手段３４に対応し、メモリ手段（図示せず）は、実施の形態１におけるメモリ手段（図示せず）に対応する。 As shown in FIG. 9, the information processing apparatus 60 includes digital transmission / reception means (second transmission / reception means) 61a and 61b, image analysis means 62, control means 63, image processing means 64, and memory means. (Not shown). The information processing apparatus 60 corresponds to the information processing apparatus 30 in the first embodiment. However, the information processing apparatus 60 has one digital transmission / reception means 31 in that it has two digital transmission / reception means 61a and 61b. This is different from the information processing apparatus 30 in the first embodiment. The digital transmission / reception means 61a and 61b of the information processing apparatus 60 correspond to the digital transmission / reception means 31 in the first embodiment, the image analysis means 62 corresponds to the image analysis means 32 in the first embodiment, and the control means 63 Corresponding to the control means 33 in the first embodiment, the image processing means 64 corresponds to the image processing means 34 in the first embodiment, and the memory means (not shown) is the memory means (not shown) in the first embodiment. )).

図９に示される撮像システムは、例えば、ＣＣＴＶ（ＣｌｏｓｅｄＣｉｒｃｕｉｔＴｅｌｅｖｉｓｉｏｎ）システムであり、１台の撮像装置と、情報処理装置６０内の１台のデジタル送受信手段とが、１対１に対応している。撮像装置１０ａは、伝送線２０ａによってデジタル送受信手段６１ａに接続され、撮像装置１０ｂは、伝送線２０ｂによってデジタル送受信手段６１ｂに接続されている。実施の形態２の撮像システムにおける撮像装置の台数は、３台以上であってもよく、その場合には、情報処理装置６０内のデジタル送受信手段の数も、撮像装置の台数と同じ数になる。 The imaging system shown in FIG. 9 is, for example, a CCTV (Closed Circuit Television) system, in which one imaging device and one digital transmission / reception means in the information processing device 60 correspond one-to-one. Yes. The imaging device 10a is connected to the digital transmission / reception means 61a by the transmission line 20a, and the imaging device 10b is connected to the digital transmission / reception means 61b by the transmission line 20b. The number of imaging devices in the imaging system according to the second embodiment may be three or more. In that case, the number of digital transmission / reception means in the information processing device 60 is the same as the number of imaging devices. .

画像解析手段６２には、２台のデジタル送受信手段６１ａ，６１ｂが接続されている。画像解析手段６２は、撮像装置１０ａ，１０ｂからの２枚の画像の比較を行うことができる。撮像装置１０ａ，１０ｂと情報処理装置６０との間の信号伝送は、デジタル伝送によって行われているので、アナログ伝送を採用しているシステムに比べて信号劣化が小さく、２台の撮像装置１０ａ，１０ｂからのデジタルデータの比較を行うことができる。 Two digital transmission / reception means 61 a and 61 b are connected to the image analysis means 62. The image analysis means 62 can compare two images from the imaging devices 10a and 10b. Since signal transmission between the imaging devices 10a and 10b and the information processing device 60 is performed by digital transmission, signal degradation is small compared to a system employing analog transmission, and the two imaging devices 10a, The digital data from 10b can be compared.

また、デジタル伝送を用いたことで、２台の撮像装置１０ａ，１０ｂの露出制御の比較データを解析し、この解析結果をもとに、撮像装置１０ａ，１０ｂの撮像条件情報（例えば、露出設定及び／又はホワイトバランス設定など）を切替えることができる。 In addition, by using digital transmission, the exposure control comparison data of the two imaging devices 10a and 10b is analyzed, and based on the analysis result, imaging condition information (for example, exposure setting) of the imaging devices 10a and 10b is analyzed. And / or white balance setting).

なお、実施の形態２において、上記以外の点は、上記実施の形態１の場合と同じである。 In the second embodiment, points other than those described above are the same as those in the first embodiment.

本発明の実施の形態１に係る撮像システムの構成を概略的に示す図である。1 is a diagram schematically showing a configuration of an imaging system according to Embodiment 1 of the present invention. 実施の形態１に係る撮像システムの撮像装置及び情報処理装置の構成を概略的に示すブロック図である。1 is a block diagram schematically showing the configuration of an imaging device and an information processing device of an imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムの撮像装置の撮像手段の構成を概略的に示すブロック図である。2 is a block diagram schematically showing a configuration of an imaging unit of the imaging apparatus of the imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムの撮像装置からの送信データのヘッダ情報を示す図である。6 is a diagram illustrating header information of transmission data from the imaging device of the imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムの情報処理装置からの送信データのヘッダ情報を示す図である。6 is a diagram illustrating header information of transmission data from the information processing apparatus of the imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムにおける表示画面の一例を示す図である。3 is a diagram illustrating an example of a display screen in the imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムの動作を示すタイミング図である。3 is a timing chart showing the operation of the imaging system according to Embodiment 1. FIG. 実施の形態１に係る撮像システムの動作を示すシーケンス図である。6 is a sequence diagram illustrating an operation of the imaging system according to Embodiment 1. FIG. 本発明の実施の形態２に係る撮像システムの撮像装置及び情報処理装置の構成を概略的に示すブロック図である。It is a block diagram which shows roughly the structure of the imaging device and information processing apparatus of the imaging system which concerns on Embodiment 2 of this invention.

Explanation of symbols

１０，１０ａ，１０ｂ撮像装置、２０，２０ａ，２０ｂ伝送線、３０，６０情報処理装置、１１，１１ａ，１１ｂ撮像手段、１２，１２ａ，１２ｂデジタル送受信手段、１３，１３ａ，１３ｂ記憶手段、３１，６１ａ，６１ｂデジタル送受信手段、３２，６２画像解析手段、３３，６３制御手段、３４，６４画像処理手段、４０表示装置、５０外部入力装置、１１１固体撮像素子（ＣＣＤ）、１１２アナログ信号処理手段、１１３Ａ／Ｄ変換手段、１１４カメラ信号処理手段、１１５タイミング生成手段。 10, 10a, 10b imaging device, 20, 20a, 20b transmission line, 30, 60 information processing device, 11, 11a, 11b imaging means, 12, 12a, 12b digital transmission / reception means, 13, 13a, 13b storage means, 31, 61a, 61b Digital transmission / reception means, 32, 62 Image analysis means, 33, 63 Control means, 34, 64 Image processing means, 40 Display device, 50 External input device, 111 Solid-state imaging device (CCD), 112 Analog signal processing means, 113 A / D conversion means, 114 Camera signal processing means, 115 Timing generation means.

Claims

At least one imaging device;
In an imaging system having an information processing device provided separately from the imaging device,
The imaging device
An imaging unit that changes its own imaging condition in accordance with input control information, and generates digital first data including image data acquired by imaging under the changed imaging condition and the imaging condition information; ,
First transmitting / receiving means for transmitting and receiving digital signals;
The information processing apparatus includes:
Second transmission / reception means for transmitting and receiving digital signals to and from the first transmission / reception means;
Image analysis means for analyzing the first data included in the signal transmitted from the first transmission / reception means to the second transmission / reception means;
Control means for generating control information for changing the imaging condition of the imaging means according to the analysis result of the image analysis means,
The information processing apparatus transmits digital second data including the generated control information from the second transmission / reception unit to the first transmission / reception unit and supplies the second data to the imaging unit. system.

At least one of the imaging devices is a plurality of imaging devices,
A plurality of the second transmission / reception means are provided corresponding to the plurality of the imaging devices,
The image analysis means analyzes the first data included in signals input from a plurality of the imaging devices to the plurality of second transmission / reception means,
The control means generates control information for changing the imaging condition of each imaging means of the plurality of imaging devices according to the analysis result of the image analysis means,
The information processing apparatus transfers second data including the control information generated for each imaging unit from a plurality of the second transmitting / receiving units to the first transmitting / receiving unit of the plurality of imaging devices, respectively. The imaging system according to claim 1, wherein the imaging system is transmitted to the imaging unit of the plurality of imaging apparatuses.

The first data includes image header information and the image data,
The imaging system according to claim 1, wherein the image header information includes imaging condition information of the imaging unit.

The information processing apparatus performs processing for supplying the second data from the second transmission / reception unit to the imaging unit via the first transmission / reception unit during a blanking period of the imaging device. The imaging system according to any one of claims 1 to 3.

The imaging system according to any one of claims 1 to 4, wherein the imaging condition information of the imaging means included in the first data includes at least one of exposure information and white balance information.

6. The control information included in the second data includes at least one of control information for changing exposure and control information for changing white balance. Imaging system.