[go: up one dir, main page]

JP2019161249A - Image processing device, mounting device, image processing method, and program - Google Patents

Image processing device, mounting device, image processing method, and program Download PDF

Info

Publication number
JP2019161249A
JP2019161249A JP2018040504A JP2018040504A JP2019161249A JP 2019161249 A JP2019161249 A JP 2019161249A JP 2018040504 A JP2018040504 A JP 2018040504A JP 2018040504 A JP2018040504 A JP 2018040504A JP 2019161249 A JP2019161249 A JP 2019161249A
Authority
JP
Japan
Prior art keywords
image
imaging
mode
standard
quality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018040504A
Other languages
Japanese (ja)
Inventor
山田 和範
Kazunori Yamada
山田  和範
仁彦 横瀬
Yoshihiko Yokose
仁彦 横瀬
槙太郎 田中
Shintaro Tanaka
槙太郎 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juki Corp
Original Assignee
Juki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juki Corp filed Critical Juki Corp
Priority to JP2018040504A priority Critical patent/JP2019161249A/en
Priority to CN201910171309.XA priority patent/CN110248086B/en
Publication of JP2019161249A publication Critical patent/JP2019161249A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/32Normalisation of the pattern dimensions
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/667Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Supply And Installment Of Electrical Components (AREA)
  • Image Processing (AREA)

Abstract

【課題】設備コストを抑えると共にサイズが異なる撮像対象を適切に撮像すること。【解決手段】単一の撮像装置(32)から入力された撮像データに基づいて部品を画像認識する画像処理装置(30)が、標準モード又は画質優先モードを選択するモード選択部(41)と、通常の撮像条件の撮像データから標準画像を生成する画像生成部(45)と、画質優先モードで標準画像から高画質画像に画像変換する画像変換部(46)と、標準画像又は高画質画像から部品を画像認識する画像認識部(47)とを備える構成にした。【選択図】図3An object of the present invention is to appropriately image imaging targets having different sizes while suppressing equipment costs. An image processing device (30) for recognizing a component based on image data input from a single image capturing device (32) includes a mode selector (41) for selecting a standard mode or an image quality priority mode. An image generation unit (45) for generating a standard image from imaging data under normal imaging conditions; an image conversion unit (46) for converting an image from a standard image to a high-quality image in an image quality priority mode; And an image recognizing unit (47) for recognizing an image of a component. [Selection diagram] FIG.

Description

本発明は、撮像画像の画像認識に用いられる画像処理装置、実装装置、画像処理方法、プログラムに関する。   The present invention relates to an image processing device, a mounting device, an image processing method, and a program used for image recognition of a captured image.

従来、各種製造装置に搭載された撮像システムとして、撮像対象の大きさに応じて撮像装置の撮像視野を使い分けるものが知られている(例えば、特許文献1参照)。特許文献1に記載の撮像システムでは、標準サイズの撮像対象については標準視野の撮像装置で撮像され、微小形状の撮像対象については高解像度視野の撮像装置で撮像される。各撮像装置で撮像された撮像画像は、それぞれキャプチャボードに送られて撮像画像がデジタル化された後に、プロセッサ等によって撮像画像に対して各種の画像処理が施されて撮像対象が画像認識される。   2. Description of the Related Art Conventionally, as an imaging system mounted on various manufacturing apparatuses, one that uses an imaging field of view of an imaging apparatus depending on the size of an imaging target is known (see, for example, Patent Document 1). In the imaging system described in Patent Document 1, a standard-size imaging target is imaged by a standard visual field imaging device, and a minute-shaped imaging target is imaged by a high-resolution visual field imaging device. The captured image captured by each imaging device is sent to a capture board and digitized. Then, the captured image is subjected to various image processing by a processor or the like, and the imaging target is recognized. .

特開2005−064048号公報Japanese Patent Laid-Open No. 2005-064048

しかしながら、特許文献1の記載の撮像システムでは、撮像視野の変更に複数の撮像系を用意しなければならず、撮像システムの設備コストが増加していた。1系統の撮像系で撮像対象を撮像することも考えられるが、標準視野の撮像装置だけでは、微小形状の撮像対象に対しては解像度不足で認識エラーや認識精度が悪化する。一方で、高解像度視野の撮像装置だけでは、撮像対象のサイズによっては分割認識しなければならず処理時間が長くなるという問題があった。   However, in the imaging system described in Patent Document 1, a plurality of imaging systems must be prepared for changing the imaging field of view, which increases the equipment cost of the imaging system. Although it is conceivable to capture an imaging target with a single imaging system, with only a standard visual field imaging device, a resolution error and recognition accuracy deteriorate due to insufficient resolution for an imaging target with a minute shape. On the other hand, there is a problem that only an imaging device with a high resolution field of view has to be divided and recognized depending on the size of the imaging target, resulting in a long processing time.

本発明はかかる点に鑑みてなされたものであり、設備コストを抑えると共にサイズが異なる撮像対象を適切に撮像することができる画像処理装置、実装装置、画像処理方法、プログラムを提供することを目的の1つとする。   The present invention has been made in view of the above points, and an object thereof is to provide an image processing device, a mounting device, an image processing method, and a program capable of appropriately capturing images of imaging objects having different sizes while reducing facility costs. One of them.

本発明の一態様の画像処理装置は、単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理装置であって、標準モード又は画質優先モードを選択するモード選択部と、通常の撮像条件の撮像データから標準画像を生成する画像生成部と、画質優先モードで標準画像から高画質画像に画像変換する画像変換部と、標準画像又は高画質画像から撮像対象を画像認識する画像認識部とを備えたことを特徴とする。   An image processing apparatus according to an aspect of the present invention is an image processing apparatus that recognizes an image of an imaging target based on imaging data input from a single imaging apparatus, and selects a standard mode or an image quality priority mode. An image generation unit that generates a standard image from imaging data under normal imaging conditions, an image conversion unit that converts a standard image to a high-quality image in the image quality priority mode, and an imaging target from the standard image or the high-quality image And an image recognition unit for recognizing the image.

本発明の一態様の画像処理方法は、単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理方法であって、標準モード又は画質優先モードを選択するステップと、通常の撮像条件の撮像データから標準画像を生成するステップと、画質優先モードで標準画像から高画質画像に画像変換するステップと、標準画像又は高画質画像から撮像対象を画像認識するステップとを有することを特徴とする。   An image processing method according to an aspect of the present invention is an image processing method for recognizing an imaging target based on imaging data input from a single imaging device, and selecting a standard mode or an image quality priority mode; Generating a standard image from imaging data under normal imaging conditions, converting an image from a standard image to a high-quality image in an image quality priority mode, and recognizing an imaging target from the standard image or the high-quality image. It is characterized by that.

これらの構成によれば、標準モードでは標準画像によって撮像対象が画像認識され、画質優先モードでは高画質画像によって撮像対象が画像認識される。よって、撮像対象のサイズに応じて標準モードと画質優先モードを使い分けることで撮像対象を適切に画像認識することができる。また、ソフトウェアモジュール側の処理によって標準画像から高画質画像が生成されるため、複数の撮像装置を用意する必要がなく、設備コストを低減することができる。   According to these configurations, the imaging target is image-recognized by the standard image in the standard mode, and the imaging target is image-recognized by the high-quality image in the image quality priority mode. Therefore, by appropriately using the standard mode and the image quality priority mode according to the size of the imaging target, it is possible to appropriately recognize the imaging target. In addition, since a high-quality image is generated from the standard image by processing on the software module side, it is not necessary to prepare a plurality of imaging devices, and the equipment cost can be reduced.

上記の画像処理装置において、前記モード選択部が、撮像対象のサイズに応じて標準モード又は画質優先モードを選択する。この構成によれば、撮像対象のサイズに適したモードが自動的に選択される。   In the image processing apparatus, the mode selection unit selects a standard mode or an image quality priority mode according to the size of the imaging target. According to this configuration, a mode suitable for the size of the imaging target is automatically selected.

上記の画像処理装置において、前記画像変換部は、超解像度処理によって画像変換する。この構成によれば、超解像度処理を用いることで、ソフトウェアモジュール側の処理であっても、十分に解像度を高めることができ、解像度不足による認識精度の低下を抑えることができる。   In the image processing apparatus, the image conversion unit performs image conversion by super-resolution processing. According to this configuration, by using the super-resolution processing, the resolution can be sufficiently increased even in the processing on the software module side, and a reduction in recognition accuracy due to insufficient resolution can be suppressed.

上記の画像処理装置において、キャプチャボードを介して前記撮像装置から撮像データが入力され、前記キャプチャボードに対して撮像データの転送条件を設定する転送条件設定部を備える。この構成によれば、画像処理装置側でキャプチャボードの転送条件を設定して、キャプチャボードから画像処理装置への撮像データの転送速度を高めることができる。撮像データの転送時間の短縮分を画像変換の処理時間に充てることで、タクトタイムの増加を抑えることができる。   The image processing apparatus includes a transfer condition setting unit that receives imaging data from the imaging apparatus via a capture board and sets a transfer condition of the imaging data for the capture board. According to this configuration, the transfer rate of the capture board can be set on the image processing apparatus side, and the transfer speed of the imaging data from the capture board to the image processing apparatus can be increased. An increase in tact time can be suppressed by allocating a reduction in the transfer time of imaging data to the processing time of image conversion.

上記の画像処理装置において、前記転送条件設定部は、転送条件として撮像対象の外形サイズに応じて切り出し転送の有無を設定する。この構成によれば、切り出し転送によって撮像データのデータサイズを小さくして転送速度を高めることができる。   In the above-described image processing apparatus, the transfer condition setting unit sets the presence / absence of cutout transfer according to the outer size of the imaging target as the transfer condition. According to this configuration, it is possible to increase the transfer speed by reducing the data size of the imaging data by cutout transfer.

上記の画像処理装置において、前記撮像装置に対して撮像条件を設定する撮像条件設定部を備える。この構成によれば、画像処理装置側で撮像装置の撮像条件を設定して、撮像装置から画像処理装置への撮像画像の転送速度を高めることができる。   The image processing apparatus includes an imaging condition setting unit that sets imaging conditions for the imaging apparatus. According to this configuration, the imaging condition of the imaging device can be set on the image processing device side, and the transfer speed of the captured image from the imaging device to the image processing device can be increased.

上記の画像処理装置において、前記モード選択部は、標準モード、画質優先モード、速度優先モードのいずれかを選択し、前記撮像条件設定部は、標準モード及び画質優先モードで通常の撮像条件を設定し、速度優先モードで通常の撮像条件よりも低画質の撮像条件を設定し、前記画像生成部は、標準モード及び画質優先モードで通常の撮像データから標準画像を生成し、速度優先モードで低画質の撮像データから低画質画像を生成し、前記画像変換部は、画質優先モードで標準画像から高画質画像に画像変換し、前記画像認識部は、標準画像、高画質画像、低画質画像から撮像対象を画像認識する。この構成によれば、速度優先モードでは画質を落として撮像するため、撮像装置から画像処理装置への撮像画像の転送速度を高めることができる。   In the above image processing apparatus, the mode selection unit selects any one of a standard mode, an image quality priority mode, and a speed priority mode, and the imaging condition setting unit sets normal imaging conditions in the standard mode and the image quality priority mode. In the speed priority mode, an image pickup condition having a lower image quality than the normal image pickup condition is set. The image generation unit generates a standard image from normal image pickup data in the standard mode and the image quality priority mode, and lower in the speed priority mode. A low-quality image is generated from image-captured image data, and the image conversion unit converts the standard image into a high-quality image in an image quality priority mode, and the image recognition unit converts the standard image, the high-quality image, and the low-quality image from Image recognition is performed on the imaging target. According to this configuration, in the speed priority mode, the image quality is lowered, and thus the transfer speed of the captured image from the imaging device to the image processing device can be increased.

上記の画像処理装置において、前記撮像条件設定部は、低画質の撮像条件として速度優先モードで前記撮像装置のビニング処理を設定する。この構成によれば、撮像装置をビニング動作させることで、データサイズを減らしたビニング画像によって撮像装置から画像処理装置への撮像画像の転送速度を高めることができる。   In the image processing apparatus, the imaging condition setting unit sets a binning process of the imaging apparatus in a speed priority mode as an imaging condition with low image quality. According to this configuration, by performing the binning operation of the imaging device, it is possible to increase the transfer speed of the captured image from the imaging device to the image processing device using a binning image with a reduced data size.

上記の画像処理装置において、標準モード、画質優先モード、速度優先モードの指定をユーザから受け付けるモード指定部を備え、前記モード選択部で選択されたモードよりも前記モード指定部で指定されたモードを優先させる。この構成によれば、モード選択部で自動的に選択されたモードを、ユーザの判断によって変更することができる。   The image processing apparatus includes a mode designating unit that accepts designation of a standard mode, an image quality priority mode, and a speed priority mode from a user, and has a mode designated by the mode designating unit rather than a mode selected by the mode selection unit. Prioritize. According to this structure, the mode automatically selected by the mode selection part can be changed by a user's judgment.

上記の画像処理装置において、前記画像認識部の画像認識及び前記画像変換部の画像変換がマルチプロセッサ又はマルチコアプロセッサによって並列に実行される。この構成によれば、画像認識及び画像変換にそれぞれコアが割り付けられ、画像認識と画像変換を並列に動かして処理速度を高めることができる。   In the image processing apparatus, the image recognition of the image recognition unit and the image conversion of the image conversion unit are executed in parallel by a multiprocessor or a multicore processor. According to this configuration, a core is assigned to each of image recognition and image conversion, and the processing speed can be increased by moving image recognition and image conversion in parallel.

本発明の一態様の実装装置は、上記に記載の画像処理装置と、前記画像処理装置に撮像画像として部品画像を入力する撮像装置とを備え、前記画像処理装置で部品画像から部品を画像認識することを特徴とする。この構成によれば、部品サイズに応じて適切に部品を画像認識できるため、認識結果に応じて部品を適切に実装することができる。   A mounting device according to an aspect of the present invention includes the image processing device described above and an imaging device that inputs a component image as a captured image to the image processing device, and recognizes a component from the component image by the image processing device. It is characterized by doing. According to this configuration, the image of the component can be appropriately recognized according to the component size, and thus the component can be appropriately mounted according to the recognition result.

本発明の一態様のプログラムは、単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理装置のプログラムであって、標準モード又は画質優先モードを選択するステップと、通常の撮像条件の撮像データから標準画像を生成するステップと、画質優先モードで標準画像から高画質画像に画像変換するステップと、標準画像又は高画質画像から撮像対象を画像認識するステップとを、前記画像処理装置に実行させることを特徴とする。この構成によれば、画像処理装置にプログラムをインストールすることで、設備コストを抑えると共にサイズが異なる撮像対象を適切に撮像することができる。   A program according to one aspect of the present invention is a program for an image processing device that recognizes an image of an imaging target based on imaging data input from a single imaging device, and selects a standard mode or an image quality priority mode. Generating a standard image from imaging data of normal imaging conditions, converting an image from a standard image to a high-quality image in an image quality priority mode, and recognizing an imaging target from the standard image or the high-quality image, The image processing apparatus is executed. According to this configuration, by installing the program in the image processing apparatus, it is possible to appropriately capture images of imaging objects having different sizes while suppressing facility costs.

本発明によれば、標準モードと画質優先モードを使い分けることで、設備コストを抑えると共にサイズが異なる撮像対象を適切に撮像することができる。   According to the present invention, by properly using the standard mode and the image quality priority mode, it is possible to appropriately capture images of imaging objects having different sizes while suppressing the equipment cost.

本実施の形態の実装装置全体を示す模式図である。It is a schematic diagram which shows the whole mounting apparatus of this Embodiment. 本実施の形態の実装ヘッド周辺を示す模式図である。It is a schematic diagram which shows the mounting head periphery of this Embodiment. 本実施の形態の撮像装置及び画像処理装置のブロック図である。It is a block diagram of an imaging device and an image processing device of this embodiment. 本実施の形態のモード選択処理のフローチャートである。It is a flowchart of the mode selection process of this Embodiment.

以下、添付図面を参照して、本実施の形態の実装装置について説明する。図1は、本実施の形態の実装装置全体を示す模式図である。図2は、本実施の形態の実装ヘッド周辺を示す模式図である。なお、本実施の形態の実装装置は一例に過ぎず、適宜変更が可能である。   Hereinafter, the mounting apparatus of the present embodiment will be described with reference to the accompanying drawings. FIG. 1 is a schematic diagram showing the entire mounting apparatus of the present embodiment. FIG. 2 is a schematic diagram showing the periphery of the mounting head of the present embodiment. In addition, the mounting apparatus of this Embodiment is only an example, and can be changed suitably.

図1に示すように、実装装置1は、フィーダ13によって供給された部品P(図2参照)を、実装ヘッド12によって基板Wの所定位置に実装するように構成されている。実装装置1の基台10には、X軸方向に基板Wを搬送する基板搬送部11が配設されている。基板搬送部11は、X軸方向の一端側から部品実装前の基板Wを実装ヘッド12の下方に搬入して位置決めし、部品実装後の基板WをX軸方向の他端側から装置外に搬出している。また、基板搬送部11を挟んだ両側には、複数のフィーダ13がX軸方向に横並びに配置されたフィーダバンク14が分離可能に連結されている。   As shown in FIG. 1, the mounting apparatus 1 is configured to mount a component P (see FIG. 2) supplied by a feeder 13 at a predetermined position on a substrate W by a mounting head 12. A substrate transport unit 11 that transports the substrate W in the X-axis direction is disposed on the base 10 of the mounting apparatus 1. The board transport unit 11 loads and positions the board W before component mounting from one end side in the X-axis direction below the mounting head 12, and moves the board W after component mounting from the other end side in the X-axis direction to the outside of the apparatus. I am carrying it out. A feeder bank 14 in which a plurality of feeders 13 are arranged side by side in the X-axis direction is detachably connected to both sides of the substrate transport unit 11.

フィーダ13にはテープリール15が着脱自在に装着され、テープリール15には多数の部品Pをパッケージングしたキャリアテープが巻回されている。フィーダ13は、装置内のスプロケットホイールの回転によって、実装ヘッド12にピックアップされる供給位置に向けて順番に部品Pを送り出している。実装ヘッド12の供給位置では、キャリアテープから表面のカバーテープが剥離され、キャリアテープのポケット内の部品Pが外部に露出される。なお、本実施の形態では、フィーダ13としてテープフィーダを例示したが、他のフィーダを備えていてもよい。   A tape reel 15 is detachably mounted on the feeder 13, and a carrier tape in which a large number of parts P are packaged is wound around the tape reel 15. The feeder 13 sequentially feeds the parts P toward the supply position picked up by the mounting head 12 by the rotation of the sprocket wheel in the apparatus. At the supply position of the mounting head 12, the cover tape on the surface is peeled from the carrier tape, and the component P in the pocket of the carrier tape is exposed to the outside. In the present embodiment, a tape feeder is illustrated as the feeder 13, but another feeder may be provided.

基台10上には、一対の実装ヘッド12をX軸方向及びY軸方向に水平移動させる移動機構16が設けられている。移動機構16は、Y軸方向に延びる一対のY軸駆動部17と、X軸方向に延びるX軸駆動部18とを有している。一対のY軸駆動部17は基台10の四隅に立設した支持部(不図示)に支持されており、X軸駆動部18は一対のY軸駆動部17にY軸方向に移動可能に設置されている。また、X軸駆動部18上には実装ヘッド12がX軸方向に移動可能に設置され、X軸駆動部18とY軸駆動部17とによって実装ヘッド12が水平移動されてフィーダ13からピックアップした部品Pが基板Wの所望の位置に実装される。   A moving mechanism 16 that horizontally moves the pair of mounting heads 12 in the X-axis direction and the Y-axis direction is provided on the base 10. The moving mechanism 16 has a pair of Y-axis drive units 17 extending in the Y-axis direction and an X-axis drive unit 18 extending in the X-axis direction. The pair of Y-axis drive parts 17 are supported by support parts (not shown) erected at the four corners of the base 10, and the X-axis drive part 18 is movable to the pair of Y-axis drive parts 17 in the Y-axis direction. is set up. The mounting head 12 is installed on the X-axis drive unit 18 so as to be movable in the X-axis direction. The mounting head 12 is horizontally moved by the X-axis drive unit 18 and the Y-axis drive unit 17 and picked up from the feeder 13. The component P is mounted at a desired position on the substrate W.

図2に示すように、実装ヘッド12は、X軸駆動部18(図1参照)に支持されたヘッド本体21に複数の吸着ノズル22(本実施の形態では1つのみ図示)を設けて構成されている。各吸着ノズル22は、ノズル駆動部23を介してヘッド本体21に支持されており、ノズル駆動部23によってZ軸方向に上下動すると共にZ軸回りに回転する。各吸着ノズル22は吸引源(不図示)に接続されており、吸引源からの吸引力によって部品Pを保持する。吸着ノズル22にはコイルバネが設けられており、コイルバネを収縮させながら吸着ノズル22に吸着された部品Pを基板Wに搭載している。   As shown in FIG. 2, the mounting head 12 is configured by providing a plurality of suction nozzles 22 (only one is shown in the present embodiment) on a head body 21 supported by an X-axis drive unit 18 (see FIG. 1). Has been. Each suction nozzle 22 is supported by the head main body 21 via a nozzle driving unit 23, and moves up and down in the Z-axis direction and rotates about the Z-axis by the nozzle driving unit 23. Each suction nozzle 22 is connected to a suction source (not shown), and holds the component P by a suction force from the suction source. The suction nozzle 22 is provided with a coil spring, and the component P sucked by the suction nozzle 22 is mounted on the substrate W while the coil spring is contracted.

ヘッド本体21には、基板Wからの高さを検出する高さ測定センサ24(図1参照)や、部品形状の画像認識や吸着ミスの検知を実施する部品検知部25が設けられている。高さ測定センサ24では、検査光の反射によって基板Wから吸着ノズル22までの距離が検出され、検出結果に基づいて吸着ノズル22の上下方向の移動量が制御される。部品検知部25では、発光部26と受光部27とが水平方向で対向され、発光部26からの光が部品Pで遮光された遮光状態から部品形状や吸着ミス等が検査される。なお、部品検知部25は、発光部から受光部に向かってLED光が発光されてもよいし、発光部から受光部に向かってレーザ光が発光されてもよい。   The head main body 21 is provided with a height measurement sensor 24 (see FIG. 1) for detecting the height from the substrate W, and a component detection unit 25 for performing image recognition of component shapes and detection of suction mistakes. In the height measurement sensor 24, the distance from the substrate W to the suction nozzle 22 is detected by reflection of the inspection light, and the vertical movement amount of the suction nozzle 22 is controlled based on the detection result. In the component detection unit 25, the light emitting unit 26 and the light receiving unit 27 are opposed to each other in the horizontal direction, and the component shape, suction error, and the like are inspected from the light shielding state in which the light from the light emitting unit 26 is shielded by the component P. The component detection unit 25 may emit LED light from the light emitting unit toward the light receiving unit, or may emit laser light from the light emitting unit toward the light receiving unit.

ヘッド本体21には、基板W上のBOCマークを真上から撮像する基板撮像部28(図1参照)と、吸着ノズル22による部品Pの搭載動作を斜め上方から撮像する部品撮像部29とが設けられている。基板撮像部28では、BOCマークの撮像画像に基づいて基板Wの位置、反り等が画像認識され、これらの認識結果に基づいて基板Wに対する部品Pの搭載位置が補正される。部品撮像部29では、部品Pの撮像画像に応じて吸着ノズル22による部品Pの吸着有無、基板Wにおける部品Pの搭載有無が検査される。部品撮像部29等の撮像装置32から画像処理装置30(図3参照)に撮像データが入力され、画像処理装置30で撮像データに基づいて部品Pが画像認識される。   The head main body 21 includes a substrate imaging unit 28 (see FIG. 1) that images the BOC mark on the substrate W from directly above, and a component imaging unit 29 that images the mounting operation of the component P by the suction nozzle 22 from obliquely above. Is provided. In the board imaging unit 28, the position, warpage, and the like of the board W are image-recognized based on the captured image of the BOC mark, and the mounting position of the component P on the board W is corrected based on these recognition results. In the component imaging unit 29, whether or not the component P is sucked by the suction nozzle 22 and whether or not the component P is mounted on the substrate W is inspected according to the captured image of the component P. Imaging data is input from the imaging device 32 such as the component imaging unit 29 to the image processing device 30 (see FIG. 3), and the image processing device 30 recognizes the image of the component P based on the imaging data.

ところで、一般的な実装装置では、基板に対して様々な部品が実装されるが、部品サイズによっては撮像装置の視野を変えて撮像しなければならない。このため、標準視野の撮像装置に加えて、高解像度視野に対応した撮像装置やレンズをオプションとして持つことで、部品サイズに応じて標準視野と高解像度視野を切り替えながら撮像している。しかしながら、高解像度視野の撮像装置やレンズを用意する必要があり、設備コストが増大するという不具合がある。一方で、高解像度視野の撮像装置だけでは、部品サイズによっては分割認識しなければならず、撮像処理を繰り返すことで処理時間が長くなる。   By the way, in a general mounting apparatus, various components are mounted on a substrate, but depending on the component size, imaging must be performed by changing the field of view of the imaging device. For this reason, in addition to the standard visual field imaging device, an imaging device and a lens corresponding to the high resolution visual field are provided as an option, and imaging is performed while switching between the standard visual field and the high resolution visual field according to the component size. However, it is necessary to prepare an imaging device and a lens with a high resolution visual field, and there is a problem that the equipment cost increases. On the other hand, only an imaging device with a high-resolution field of view must be divided and recognized depending on the component size, and the processing time is increased by repeating the imaging process.

そこで、本実施の形態の画像処理装置では、超解像度視野の撮像装置をオプションとして持つ代わりに、標準視野の撮像装置から取得した標準画像に対してソフトウェアモジュールで超解像度変換等の画像変換を行って画質を高めている。ソフトウェアモジュールで超解像度視野に対応した高画質画像を作り出すことで、標準視野の撮像装置と高解像度視野の撮像装置を統合して設備コストを低減することが可能になっている。また、撮像データの転送速度を高めて、転送時間の短縮時間をソフトウェアモジュール側の画像変換の処理時間を充てることでタクトタイムの増加を抑えている。   Therefore, in the image processing apparatus of the present embodiment, instead of having the super resolution visual field imaging device as an option, the software module performs image conversion such as super resolution conversion on the standard image acquired from the standard visual field imaging device. To improve image quality. By creating a high-quality image corresponding to a super-resolution field of view with a software module, it is possible to integrate an image pickup device with a standard field of view and an image pickup device with a high-resolution field of view to reduce equipment costs. Further, the increase in the tact time is suppressed by increasing the transfer speed of the imaging data and using the image conversion processing time on the software module side as the transfer time reduction time.

以下、図3を参照して、撮像装置及び画像処理装置について説明する。図3は、本実施の形態の撮像装置及び画像処理装置のブロック図である。なお、図3のブロック図には、撮像装置及び画像処理装置が簡略化して記載されているが、撮像装置及び画像処理装置が通常備える構成については備えているものとする。また、図3の撮像画像及び画像処理装置の動作は一例を示すものであり、この構成に限定されない。   Hereinafter, the imaging apparatus and the image processing apparatus will be described with reference to FIG. FIG. 3 is a block diagram of the imaging apparatus and the image processing apparatus of the present embodiment. In the block diagram of FIG. 3, the imaging device and the image processing device are described in a simplified manner. However, it is assumed that the imaging device and the image processing device normally include the configuration. The operations of the captured image and the image processing apparatus in FIG. 3 are merely examples, and the present invention is not limited to this configuration.

図3に示すように、画像処理装置30にはキャプチャボード31を介して撮像装置32が接続されており、撮像装置32で撮像された撮像データはキャプチャボード31でデジタル化されて画像処理装置30に入力されている。画像処理装置30では、部品サイズに応じて撮像データに各種処理が施されることで、撮像画像から部品Pが画像認識されて、位置決め、検査、計測等が実施されている。この画像処理装置30には、モード選択部41、モード指定部42、転送条件設定部43、撮像条件設定部44、画像生成部45、画像変換部46、画像認識部47が設けられている。   As shown in FIG. 3, an imaging device 32 is connected to the image processing device 30 via a capture board 31, and imaging data captured by the imaging device 32 is digitized by the capture board 31 and image processing device 30. Has been entered. In the image processing apparatus 30, various processes are performed on the captured data according to the component size, so that the component P is recognized from the captured image, and positioning, inspection, measurement, and the like are performed. The image processing apparatus 30 includes a mode selection unit 41, a mode specification unit 42, a transfer condition setting unit 43, an imaging condition setting unit 44, an image generation unit 45, an image conversion unit 46, and an image recognition unit 47.

モード選択部41では、部品サイズに応じて標準モード又は画質優先モードが自動的に選択される。この場合、部品サイズとして部品の外形サイズ又は電極サイズが基準値と比較される。例えば、部品の短辺サイズが基準値以上であれば標準モードが選択され、部品の短辺サイズが基準値未満であれば画質優先モードが選択される。また、例えば、部品Pの電極長が基準長以上であれば標準モードが選択され、部品Pの電極長が基準長未満であれば画質優先モードが選択される。モード選択部41では、部品サイズに応じてモード選択する構成に限定されず、部品名やその他の選択条件に応じてモード選択されてもよい。   In the mode selection unit 41, the standard mode or the image quality priority mode is automatically selected according to the component size. In this case, the external size or electrode size of the component is compared with the reference value as the component size. For example, the standard mode is selected if the short side size of the component is greater than or equal to the reference value, and the image quality priority mode is selected if the short side size of the component is less than the reference value. For example, if the electrode length of the component P is equal to or greater than the reference length, the standard mode is selected, and if the electrode length of the component P is less than the reference length, the image quality priority mode is selected. The mode selection unit 41 is not limited to the configuration in which the mode is selected according to the component size, and the mode may be selected according to the component name and other selection conditions.

また、モード選択部41では、標準モード及び画質優先モードの他に、速度優先モードが選択されてもよい。標準モードは、通常の撮像条件で撮像した標準画像を使用するモードであり、主に中型部品から大型部品の撮像処理で使用される。画質優先モードは、標準画像よりも画質を高めた高画質画像を使用するモードであり、主に小型部品の撮像処理で使用される。速度優先モードは、標準画像よりも画質を下げた低画質画像を使用するモードであり、部品サイズに関わらず、部品の認識精度よりも処理速度を優先させたい場合に使用される。   The mode selection unit 41 may select the speed priority mode in addition to the standard mode and the image quality priority mode. The standard mode is a mode in which a standard image captured under normal imaging conditions is used, and is mainly used in an imaging process from a medium-sized component to a large component. The image quality priority mode is a mode that uses a high-quality image in which the image quality is higher than that of a standard image, and is mainly used for imaging processing of small parts. The speed priority mode is a mode in which a low-quality image with a lower image quality than that of a standard image is used, and is used when it is desired to prioritize the processing speed over the component recognition accuracy regardless of the component size.

モード指定部42では、標準モード、画質優先モード、速度優先モードのモード指定をユーザから受け付けている。モード指定部42でユーザからモードが指定されると、モード選択部41で選択されたモードよりもモード指定部42で指定されたモードが優先される。このため、部品サイズに応じてモード選択部41に自動的に選択されたモードを、ユーザの判断によって変更することができる。例えば、誤差レベルの精度低下であれば速度優先モードを指定し、誤差レベルの速度低下であれば精度優先モードを使用することができ、ユーザの用途に応じてモードを柔軟に変更することができる。   The mode designation unit 42 accepts from the user the mode designation of the standard mode, the image quality priority mode, and the speed priority mode. When the mode is specified by the mode specification unit 42 from the user, the mode specified by the mode specification unit 42 is given priority over the mode selected by the mode selection unit 41. For this reason, the mode automatically selected by the mode selection unit 41 according to the component size can be changed by the user's judgment. For example, the speed priority mode can be designated if the error level accuracy is lowered, and the accuracy priority mode can be used if the error level speed is lowered, and the mode can be flexibly changed according to the user's application. .

転送条件設定部43では、キャプチャボード31に対する撮像データの転送条件が設定される。転送条件としては、標準モード及び画質優先モードで部品の外形サイズに応じて切り出し転送の有無が設定される。転送条件設定部43からキャプチャボード31に転送条件が入力されると、キャプチャボード31に対して転送条件が反映される。切り出し転送が「無効」に設定されると、キャプチャボード31から画像処理装置30に撮像データ全体が転送され、切り出し転送が「有効」に設定されると、キャプチャボード31から画像処理装置30に撮像データの一部分が切り出されて転送される。   In the transfer condition setting unit 43, the transfer condition of the imaging data for the capture board 31 is set. As the transfer condition, the presence or absence of cut-out transfer is set according to the external size of the part in the standard mode and the image quality priority mode. When a transfer condition is input from the transfer condition setting unit 43 to the capture board 31, the transfer condition is reflected on the capture board 31. When the cut-out transfer is set to “invalid”, the entire imaging data is transferred from the capture board 31 to the image processing apparatus 30, and when the cut-out transfer is set to “valid”, the image is captured from the capture board 31 to the image processing apparatus 30. A part of the data is cut out and transferred.

例えば、部品サイズが基準値以上であれば、切り出し転送が「無効」に設定されて、キャプチャボード31で撮像データが切り出されることなく転送される。一方で、部品サイズが基準値未満であれば、切り出し転送が「有効」に設定されて、キャプチャボード31で撮像データの中央領域が転送サイズに応じて切り出されて転送される。撮像装置32は部品を中央に収めて撮像されるため、撮像データの中央領域を切り出すことで部品画像が欠けることがない。切り出し転送によって撮像データのデータサイズを小さくして転送速度を高めることができる。したがって、標準モードであっても、切り出し転送によって速度を優先させることが可能である。   For example, if the component size is equal to or larger than the reference value, the cut-out transfer is set to “invalid”, and the captured data is transferred without being cut out by the capture board 31. On the other hand, if the component size is less than the reference value, the cut-out transfer is set to “valid”, and the central area of the imaging data is cut out according to the transfer size by the capture board 31 and transferred. Since the imaging device 32 captures an image with the component in the center, the component image is not lost by cutting out the central region of the imaging data. The transfer speed can be increased by reducing the data size of the imaging data by cut-out transfer. Therefore, even in the standard mode, it is possible to prioritize speed by cut-out transfer.

撮像条件設定部44では、撮像装置32に対する撮像条件が設定される。撮像条件としては、標準モード及び画質優先モードで「通常」が設定され、速度優先モードで「通常」よりも画質を落とした「低画質」が設定される。撮像条件設定部44からキャプチャボード31を介して撮像装置32に撮像条件が入力されると、撮像装置32に対して撮像条件が反映される。撮像条件が「通常」の場合には撮像装置32によって標準仕様で部品が撮像され、撮像条件が「低画質」の場合には撮像装置32によって標準仕様よりも解像度や圧縮率を下げて部品が撮像される。   In the imaging condition setting unit 44, imaging conditions for the imaging device 32 are set. As the imaging condition, “normal” is set in the standard mode and the image quality priority mode, and “low image quality” in which the image quality is lower than “normal” is set in the speed priority mode. When an imaging condition is input from the imaging condition setting unit 44 to the imaging device 32 via the capture board 31, the imaging condition is reflected to the imaging device 32. When the image pickup condition is “normal”, the image pickup device 32 picks up the part with the standard specification, and when the image pickup condition is “low image quality”, the image pickup device 32 lowers the resolution and the compression rate from the standard specification and the part is picked up. Imaged.

例えば、標準モード及び画質優先モードでは、標準仕様で部品が撮像されるため、データサイズを減らすことなく撮像される。一方で、速度優先モードでは、撮像時にビニング処理されるため、複数の画素を1画素として読み込むことでデータサイズを減らした状態で撮像される。速度優先モードでは撮像装置32をビニング動作させることで、データサイズを減らしたビニング画像によって転送速度を高めることができる。なお、低画質の撮像条件としては、ビニング処理の他に、所定割合で画素を間引く間引き処理が設定されてもよい。   For example, in the standard mode and the image quality priority mode, the parts are imaged with the standard specifications, and thus the images are captured without reducing the data size. On the other hand, in the speed priority mode, since a binning process is performed at the time of imaging, imaging is performed with a reduced data size by reading a plurality of pixels as one pixel. In the speed priority mode, by performing the binning operation of the imaging device 32, the transfer speed can be increased by a binning image with a reduced data size. In addition to the binning process, a thinning process that thins out pixels at a predetermined rate may be set as the low image quality imaging condition.

画像生成部45では、標準モード及び画質優先モードで通常の撮像条件の撮像データから標準画像が生成され、速度優先モードで低画質の撮像条件の撮像データから低画質画像が生成される。また、画像変換部46では、画質優先モードで標準画像から高画質画像に画像変換される。標準画像は標準サイズで標準ピクセルレートの画像であり、低解像度画像は縮小サイズで高ピクセルレートの画像であり、高解像度画像は拡大サイズで低ピクセルレートの画像である。このようにして、モード毎に標準画像、低解像度画像、高解像度画像が生成されている。   In the image generation unit 45, a standard image is generated from imaging data under normal imaging conditions in the standard mode and image quality priority mode, and a low quality image is generated from imaging data under low image quality conditions in the speed priority mode. Further, the image conversion unit 46 performs image conversion from the standard image to the high-quality image in the image quality priority mode. The standard image is a standard size and standard pixel rate image, the low resolution image is a reduced size and high pixel rate image, and the high resolution image is an enlarged size and low pixel rate image. In this way, a standard image, a low resolution image, and a high resolution image are generated for each mode.

また、本実施の形態の画像変換部46の画像変換には超解像度処理が用いられており、標準画像から正しい画素値を推定して画素数を増やすことで高解像度化が実現されている。超解像度処理を用いることで、ソフトウェアモジュール側の処理であっても、十分に解像度を高めることができ、解像度不足による認識精度の低下を抑えることができる。なお、画像変換は超解像度処理に限定されるものでなく、例えば、画像変換として注目画素の周囲4画素の輝度値の加重平均を用いて補間するバイリニア補間や、注目画素の周囲16画素の輝度値を3次式で近似して補間するバイキュービック補間が用いられてもよい。   Further, super-resolution processing is used for image conversion of the image conversion unit 46 of the present embodiment, and high resolution is realized by estimating the correct pixel value from the standard image and increasing the number of pixels. By using the super-resolution processing, the resolution can be sufficiently increased even in the processing on the software module side, and a reduction in recognition accuracy due to insufficient resolution can be suppressed. Note that image conversion is not limited to super-resolution processing. For example, bilinear interpolation for performing image conversion using a weighted average of luminance values of four pixels around the pixel of interest, or luminance of 16 pixels around the pixel of interest. Bicubic interpolation that approximates and interpolates values by a cubic equation may be used.

画像認識部47では、標準モードでは標準画像から部品Pが画像認識され、画質優先モードでは高画質画像から部品Pが画像認識され、速度優先モードでは低画質画像から部品Pが画像認識される。部品サイズ等に応じてモードが選択されて、適切な画質で画像認識されるため、解像度不足による認識エラーや認識精度の悪化が抑えられている。例えば、小型部品については高画質モードで高画質画像が生成されて、高画質画像から高精度で小型部品が画像認識される。そして、画像認識部47の認識結果に基づいて位置決め処理、検査処理、測定処理等の各種処理が実施される。   The image recognition unit 47 recognizes the component P from the standard image in the standard mode, recognizes the component P from the high quality image in the image quality priority mode, and recognizes the component P from the low quality image in the speed priority mode. Since the mode is selected according to the component size and the like and the image is recognized with an appropriate image quality, the recognition error and the deterioration of the recognition accuracy due to insufficient resolution are suppressed. For example, for a small component, a high-quality image is generated in the high-quality mode, and the small component is recognized with high accuracy from the high-quality image. Based on the recognition result of the image recognition unit 47, various processes such as a positioning process, an inspection process, and a measurement process are performed.

また、モード選択部41、モード指定部42、転送条件設定部43、撮像条件設定部44、画像生成部45、画像変換部46、画像認識部47は各種処理を実行するプロセッサやメモリ等により構成されている。プロセッサとしては、複数のプロセッサコアを持ったマルチコアプロセッサ又はマルチプロセッサが設けられている。メモリは、用途に応じてROM(Read Only Memory)、RAM(Random Access Memory)等の一つ又は複数の記憶媒体で構成されている。メモリには、画像処理方法を画像処理装置30に実行させるブログラムが記憶されている。   The mode selection unit 41, the mode specification unit 42, the transfer condition setting unit 43, the imaging condition setting unit 44, the image generation unit 45, the image conversion unit 46, and the image recognition unit 47 are configured by a processor, a memory, and the like that execute various processes. Has been. As the processor, a multi-core processor having a plurality of processor cores or a multi-processor is provided. The memory is composed of one or a plurality of storage media such as a ROM (Read Only Memory) and a RAM (Random Access Memory) depending on the application. The memory stores a program that causes the image processing apparatus 30 to execute the image processing method.

ここでは、一般的な画像処理装置で実施される画像認識等についてはプロセッサコア51が割り付けられ、新たに追加された画像変換等についてはプロセッサコア52が割り付けられている。画像認識と画像変換が並列で動かされることで処理速度が高められている。なお、プロセッサコア52には、画像変換だけでなく、モード選択、モード指定、転送条件設定、撮像条件設定のいずれかの処理又は全ての処理が割り付けられてもよい。また、2つのプロセッサコア51、52に限定されず、3つ以上のプロセッサコアが設けられていてもよい。   Here, the processor core 51 is assigned for image recognition and the like performed in a general image processing apparatus, and the processor core 52 is assigned for newly added image conversion and the like. Processing speed is increased by moving image recognition and image conversion in parallel. In addition to the image conversion, the processor core 52 may be assigned any one or all of the processes of mode selection, mode designation, transfer condition setting, and imaging condition setting. Moreover, it is not limited to the two processor cores 51 and 52, and three or more processor cores may be provided.

続いて、画像処理装置30の処理動作の流れについて説明する。先ずモード選択部41で部品サイズに応じてモード選択される。上記したように、部品サイズとしての外形サイズや電極長が基準値と比較されることで、標準モード及び画質優先モードのいずれかが選択される。また、モード指定部42でユーザによってモードが指定されると、モード選択部41のモード選択が覆される。例えば、画質を落としても認識精度の低下が少ない場合に速度優先モードが手動で選択される。なお、モード選択部41による部品サイズに応じたモード選択の詳細については後述する。   Next, the flow of processing operations of the image processing apparatus 30 will be described. First, the mode selection unit 41 selects a mode according to the component size. As described above, either the standard mode or the image quality priority mode is selected by comparing the external size or electrode length as the component size with the reference value. Further, when the mode is specified by the user in the mode specifying unit 42, the mode selection of the mode selecting unit 41 is reversed. For example, the speed priority mode is manually selected when the degradation in recognition accuracy is small even when the image quality is lowered. Details of mode selection according to the component size by the mode selection unit 41 will be described later.

画像処理装置30のモードが確定すると、転送条件設定部43によってキャプチャボード31に転送条件が設定されると共に、撮像条件設定部44によって撮像装置32に撮像条件が設定される。転送条件設定部43では、外形サイズが基準値と比較されることで、切り出し転送が「無効」又は「有効」に設定される。撮像条件設定部44では、標準モード及び画質優先モードで「通常」に設定され、速度優先モードで「低画質」に設定される。そして、撮像装置32によって標準視野(例えば、54mm視野)で部品が撮像されると、キャプチャボード31を介して撮像装置32から画像処理装置30に撮像データが転送される。   When the mode of the image processing device 30 is confirmed, the transfer condition setting unit 43 sets the transfer condition on the capture board 31 and the imaging condition setting unit 44 sets the imaging condition on the imaging device 32. The transfer condition setting unit 43 sets the cutout transfer to “invalid” or “valid” by comparing the outer size with the reference value. In the imaging condition setting unit 44, “normal” is set in the standard mode and image quality priority mode, and “low image quality” is set in the speed priority mode. When a part is imaged with a standard field of view (for example, a 54 mm field of view) by the imaging device 32, imaging data is transferred from the imaging device 32 to the image processing device 30 via the capture board 31.

標準モードの選択時には、撮像条件が「通常」に設定されているため、撮像装置32からキャプチャボード31に標準サイズ(例えば、1024×1024)の撮像データが転送される。キャプチャボード31の切り出し転送が「無効」に設定されている場合には、キャプチャボード31から画像処理装置30に標準サイズの撮像データが転送される。一方でキャプチャボード31の切り出し転送が「有効」に設定されている場合には、キャプチャボード31から画像処理装置30に撮像データから中央領域(例えば、512×512)だけ切り出した撮像データが転送される。   When the standard mode is selected, since the imaging condition is set to “normal”, imaging data of a standard size (for example, 1024 × 1024) is transferred from the imaging device 32 to the capture board 31. When the cut-out transfer of the capture board 31 is set to “invalid”, standard-size imaging data is transferred from the capture board 31 to the image processing apparatus 30. On the other hand, when the cutout transfer of the capture board 31 is set to “valid”, the image pickup data cut out from the image pickup data only in the central area (for example, 512 × 512) is transferred from the capture board 31 to the image processing device 30. The

画質優先モードの選択時も標準モードの選択時と同様に、撮像装置32からキャプチャボード31に標準サイズ(例えば、1024×1024)の撮像データが転送される。また、キャプチャボード31の切り出し転送の有無に応じて標準サイズの撮像データ又は撮像データから中央領域を切り出して転送される。速度優先モードの選択時には、撮像条件が「低画質」に設定されているため、撮像装置32からキャプチャボード31に縮小サイズ(例えば、512×512)の撮像データが転送される。さらに、キャプチャボード31から画像処理装置30に縮小サイズの撮像データが転送される。   When the image quality priority mode is selected, imaging data of a standard size (for example, 1024 × 1024) is transferred from the imaging device 32 to the capture board 31 as in the case of selecting the standard mode. Further, depending on whether or not the capture board 31 is cut out and transferred, the central area is cut out from the standard size image data or the image data and transferred. When the speed priority mode is selected, since the imaging condition is set to “low image quality”, imaging data of a reduced size (for example, 512 × 512) is transferred from the imaging device 32 to the capture board 31. Further, reduced-size imaging data is transferred from the capture board 31 to the image processing apparatus 30.

画像処理装置30に撮像データが入力されると、画像生成部45によって撮像画像が生成される。標準モードでは、撮像データから標準サイズ(例えば、1024×1024)で標準ピクセルレート(例えば、56μm)の標準画像が生成される。画質優先モードでは、画像変換部46で標準画像が画像変換されて、拡大サイズ(例えば、2048×2048)で低ピクセルレート(例えば、28μm)の高画質画像が生成される。速度優先モードでは、撮像データから縮小サイズ(例えば、512×512)で高ピクセルレート(例えば、112μm)の低画質画像が生成される。   When captured data is input to the image processing device 30, a captured image is generated by the image generation unit 45. In the standard mode, a standard image with a standard pixel rate (for example, 56 μm) is generated from the imaging data with a standard size (for example, 1024 × 1024). In the image quality priority mode, the standard image is converted by the image conversion unit 46, and a high-quality image with an enlarged size (for example, 2048 × 2048) and a low pixel rate (for example, 28 μm) is generated. In the speed priority mode, a low-quality image with a reduced size (for example, 512 × 512) and a high pixel rate (for example, 112 μm) is generated from the captured image data.

そして、画像認識部47に標準画像、高画質画像、低画質画像が入力されると、標準画像、高画質画像、低画質画像から部品が画像認識される。このように、画質優先モードでは、画像変換によって標準画像から高画質画像が生成されるため、高画質用の撮像装置をオプションとして用意する必要がない。また、転送条件として切り出し転送が「有効」に設定されると、切り出し転送によって撮像データのデータサイズが小さくなり、転送時間の短縮分を画像変換の処理時間に使用できる。よって、設備コスト及び全体の処理時間を増加させることなく、部品を適切に画像認識することが可能になっている。   When a standard image, a high-quality image, and a low-quality image are input to the image recognition unit 47, components are recognized from the standard image, the high-quality image, and the low-quality image. As described above, in the image quality priority mode, a high-quality image is generated from the standard image by image conversion, so that it is not necessary to prepare an imaging device for high image quality as an option. Further, when cut-out transfer is set to “valid” as the transfer condition, the data size of the imaging data is reduced by cut-out transfer, and the reduced transfer time can be used as the image conversion processing time. Therefore, it is possible to appropriately recognize the image of the component without increasing the equipment cost and the entire processing time.

次に、図4を参照して、モード選択処理について説明する。図4は、本実施の形態のモード選択処理のフローチャートである。なお、図4のフローチャートでは部品の外形サイズとして短辺サイズをモード選択に使用する構成にしたが、このフローチャートは一例を示すものであり、この構成に限定されない。また、図4では、図3の符号を適宜使用して説明する。   Next, the mode selection process will be described with reference to FIG. FIG. 4 is a flowchart of the mode selection process of the present embodiment. In the flowchart of FIG. 4, the short side size is used for mode selection as the external size of the part. However, this flowchart shows an example and is not limited to this configuration. Further, in FIG. 4, description will be made using the reference numerals in FIG. 3 as appropriate.

図4に示すように、モード選択部41によってモード選択処理が開始されると、モード指定部42でユーザからのモード指定の有無が判定される(ステップS01)。「モード指定有り」と判定された場合には(ステップS01でYes)、ユーザによって指定されたモードが優先的に設定される(ステップS02)。これにより、部品サイズに関わらずにモードを手動で設定することができる。「モード指定無し」と判定された場合には(ステップS01でNo)、モード選択部41によって部品の寸法データが参照されて部品の電極の有無が判定される(ステップS03)。   As shown in FIG. 4, when the mode selection process is started by the mode selection unit 41, the mode designation unit 42 determines whether or not the user has designated a mode (step S01). If it is determined that “mode is specified” (Yes in step S01), the mode specified by the user is preferentially set (step S02). As a result, the mode can be set manually regardless of the component size. When it is determined that “no mode is specified” (No in step S01), the mode selection unit 41 refers to the dimension data of the component to determine the presence or absence of the electrode of the component (step S03).

「部品の電極無し」と判定された場合には(ステップS03でNo)、部品の短辺サイズが基準値(例えば、0.5mm)以上か否かが判定される(ステップS04)。部品の短辺サイズが基準値以上と判定された場合には(ステップS04でYes)、撮像条件が「通常」で転送条件の切り出し転送が「無効」に設定された標準モードが選択される(ステップS05)。部品の短辺サイズが基準値未満と判定された場合には(ステップS04でNo)、撮像条件が「通常」で転送条件の切り出し転送が「有効」に設定された画質優先モードが選択される(ステップS06)。   When it is determined that “there is no component electrode” (No in step S03), it is determined whether the short side size of the component is equal to or larger than a reference value (for example, 0.5 mm) (step S04). When it is determined that the short side size of the component is equal to or larger than the reference value (Yes in step S04), the standard mode in which the imaging condition is “normal” and the transfer condition cut-out transfer is set to “invalid” is selected ( Step S05). When it is determined that the short side size of the component is less than the reference value (No in step S04), the image quality priority mode in which the imaging condition is “normal” and the transfer condition cut-out transfer is set to “valid” is selected. (Step S06).

「部品の電極有り」と判定された場合には(ステップS03でYes)、部品の電極長が基準値(例えば、0.4mm)以上か否かが判定される(ステップS07)。部品の電極長が基準値未満と判定された場合には(ステップS07でNo)、撮像条件が「通常」で転送条件の切り出し転送が「無効」に設定された画質優先モードが選択される(ステップS08)。部品の電極長が基準値以上と判定された場合には(ステップS07でYes)、部品の短辺サイズが基準値(例えば、0.5mm)以上か否かが判定される(ステップS09)。   If it is determined that “there is an electrode for the component” (Yes in step S03), it is determined whether the electrode length of the component is a reference value (for example, 0.4 mm) or more (step S07). If it is determined that the electrode length of the component is less than the reference value (No in step S07), the image quality priority mode in which the imaging condition is set to “normal” and the transfer condition cut-out transfer is set to “invalid” is selected ( Step S08). When it is determined that the electrode length of the component is greater than or equal to the reference value (Yes in step S07), it is determined whether or not the short side size of the component is greater than or equal to a reference value (for example, 0.5 mm) (step S09).

部品の短辺サイズが基準値以上と判定された場合には(ステップS9でYes)、撮像条件が「通常」で転送条件の切り出し転送が「無効」に設定された標準モードが選択される(ステップS10)。部品の短辺サイズが基準値未満と判定された場合には(ステップS9でNo)、撮像条件が「通常」で転送条件の切り出し転送が「有効」に設定された標準モードが選択される(ステップS11)。なお、撮像条件が「低画質」の速度優先モードについては、部品の外形サイズや電極長に依らずに、ステップS02においてモード指定部42でユーザによって手動で指定される。   When it is determined that the short side size of the component is equal to or larger than the reference value (Yes in step S9), the standard mode in which the imaging condition is “normal” and the transfer condition cut-out transfer is set to “invalid” is selected ( Step S10). When it is determined that the short side size of the component is less than the reference value (No in step S9), the standard mode in which the imaging condition is “normal” and the transfer condition cut-out transfer is set to “valid” is selected ( Step S11). Note that the speed priority mode in which the imaging condition is “low image quality” is manually designated by the user in the mode designation unit 42 in step S02 regardless of the external size of the component and the electrode length.

以上のように、本実施の形態の画像処理装置30では、標準モードでは標準画像によって部品Pが画像認識され、画質優先モードでは高画質画像によって部品Pが画像認識される。よって、撮像対象のサイズに応じて標準モードと画質優先モードを使い分けることで部品Pを適切に画像認識することができる。また、ソフトウェアモジュール側の処理によって標準画像から高画質画像が生成されるため、複数の撮像装置を用意する必要がなく、設備コストを低減することができる。   As described above, in the image processing apparatus 30 according to the present embodiment, the component P is image-recognized by the standard image in the standard mode, and the component P is image-recognized by the high-quality image in the image quality priority mode. Therefore, by properly using the standard mode and the image quality priority mode according to the size of the imaging target, it is possible to appropriately recognize the image of the component P. In addition, since a high-quality image is generated from the standard image by processing on the software module side, it is not necessary to prepare a plurality of imaging devices, and the equipment cost can be reduced.

なお、本実施の形態において、部品撮像部の撮像装置によって撮像対象として部品を撮像する構成について説明したが、この構成に限定されない。例えば、基板撮像部の撮像装置で撮像対象として基板マークを撮像する構成でもよい。   In the present embodiment, the configuration has been described in which a component is imaged as an imaging target by the imaging device of the component imaging unit, but the present invention is not limited to this configuration. For example, a configuration in which a substrate mark is imaged as an imaging target by an imaging device of a substrate imaging unit may be used.

また、本実施の形態において、高画質画像は、必ずしも解像度の大きさによって決定されるものではない。高画質画像は標準画像と同じ解像度でも見た目が良く見える画像を含んでいる。したがって、画像変換部は解像度が高くなるような画像変換に限定されない。   In the present embodiment, the high-quality image is not necessarily determined by the size of the resolution. High-quality images include images that look good at the same resolution as standard images. Therefore, the image conversion unit is not limited to image conversion with high resolution.

また、本実施の形態において、低画質画像は、必ずしも解像度の大きさによって決定されるものではない。低画質画像は標準画像と同じ解像度でも見た目が悪く見える画像を含んでいる。したがって、低画質の撮像条件は、解像度が低くなるような撮像条件に限定されない。   In the present embodiment, the low-quality image is not necessarily determined by the size of the resolution. Low-quality images include images that look bad at the same resolution as standard images. Therefore, the imaging condition with low image quality is not limited to the imaging condition that reduces the resolution.

また、本実施の形態において、モード選択部でモードが部品の外形サイズや電極長等の部品サイズに基づいて選択される構成にしたが、この構成に限定されない。モード選択部は、選択条件に基づいてモード選択可能であればよく、例えば、部品名を選択条件にして部品の種類に応じても自動的にモードを選択してもよい。   In the present embodiment, the mode selection unit selects the mode based on the component size such as the external size of the component and the electrode length. However, the present invention is not limited to this configuration. The mode selection unit only needs to be able to select the mode based on the selection condition. For example, the mode selection unit may automatically select the mode depending on the type of the component using the component name as the selection condition.

また、本実施の形態において、画像処理装置に標準モード、画質優先モード、速度優先モードを設定可能な構成にしたが、この構成に限定されない。画像処理装置は、少なくとも標準モード、画質優先モードを設定可能であればよい。   In this embodiment, the image processing apparatus is configured to be able to set the standard mode, the image quality priority mode, and the speed priority mode. However, the present invention is not limited to this configuration. The image processing apparatus only needs to be able to set at least the standard mode and the image quality priority mode.

また、本実施の形態において、モード選択部で標準モード、画質優先モードを選択する構成にしたが、この構成に限定されない。モード選択部は、標準モード、画質優先モードに加えて、速度優先モードを選択してもよい。   In the present embodiment, the mode selection unit selects the standard mode and the image quality priority mode. However, the present invention is not limited to this configuration. The mode selection unit may select the speed priority mode in addition to the standard mode and the image quality priority mode.

また、本実施の形態において、転送条件として切り出し転送の有無を設定する構成にしたが、この構成に限定されない。転送条件は撮像データの転送時の条件であればよく、例えば転送速度等が設定されてもよい。   In the present embodiment, the presence / absence of cut-out transfer is set as the transfer condition. However, the present invention is not limited to this configuration. The transfer condition may be any condition at the time of transferring the imaging data. For example, a transfer speed may be set.

また、本実施の形態において、切り出し転送では、部品の外形サイズに応じて切り出し量を設定する構成にしたが、この構成に限定されない。切り出し転送では、撮像データから一定サイズで中央領域が切り出されてもよい。   In the present embodiment, in the cutout transfer, the cutout amount is set according to the external size of the component, but the present invention is not limited to this configuration. In the cut-out transfer, the central area may be cut out from the imaging data with a certain size.

また、本実施の形態において、低画質の撮像条件としてビニング処理や間引き処理等の解像度によって画質を落とす条件を設定する構成にしたが、この構成に限定されない。低画質の撮像条件は、圧縮処理によって画質を落とす条件を設定してもよい。   In the present embodiment, a configuration for setting a condition for reducing the image quality depending on the resolution such as binning processing or thinning-out processing is set as the imaging condition for low image quality. However, the present invention is not limited to this configuration. As the low image quality imaging condition, a condition for reducing the image quality by compression processing may be set.

また、本実施の形態において、モード選択部で選択されたモードよりもモード指定部で指定されたモードを優先させる構成にしたが、この構成に限定されない。画像処理装置にはモード指定部が設けられていなくてもよい。   In the present embodiment, the mode designated by the mode designation unit is prioritized over the mode selected by the mode selection unit. However, the present invention is not limited to this configuration. The image processing apparatus may not be provided with the mode specifying unit.

また、本実施の形態において、撮像対象として部品を例示して説明したが、この構成に限定されない。撮像対象は、撮像装置によって撮像されるものであれば、特に限定されない。   Further, in the present embodiment, the parts are exemplified as the imaging target, but the present invention is not limited to this configuration. The imaging target is not particularly limited as long as it is captured by the imaging device.

また、本実施の形態において、実装装置に画像処理装置を備える構成について説明したが、画像処理装置は撮像装置を備えた他の装置に適用可能である。例えば、画像処理装置は、基板にペースト状の半田を印刷する印刷装置、半田の印刷状態を検査する検査装置、半田を溶かして部品付けするリフロー装置等に適用可能である。   In the present embodiment, the configuration in which the mounting apparatus includes the image processing apparatus has been described. However, the image processing apparatus can be applied to other apparatuses including the imaging device. For example, the image processing apparatus can be applied to a printing apparatus that prints paste solder on a substrate, an inspection apparatus that inspects the printed state of solder, a reflow apparatus that melts solder and attaches components.

また、本実施の形態において、ノズルとして吸着ノズルを例示したが、この構成に限定されない。ノズルは部品を保持可能であればよく、例えば、グリッパーノズルであってもよい。   Moreover, in this Embodiment, although the suction nozzle was illustrated as a nozzle, it is not limited to this structure. The nozzle is not particularly limited as long as it can hold a component, and may be, for example, a gripper nozzle.

また、本実施の形態において、基板は各種部品を実装可能なものであればよく、プリント基板に限定されず、治具基板上に載せられたフレキシブル基板であってもよい。   In the present embodiment, the substrate is not limited to a printed circuit board as long as various components can be mounted, and may be a flexible substrate placed on a jig substrate.

また、本実施の形態のプログラムは記憶媒体に記憶されてもよい。記録媒体は、特に限定されないが、光ディスク、光磁気ディスク、フラッシュメモリ等の非一過性の記録媒体であってもよい。   Moreover, the program of this Embodiment may be memorize | stored in a storage medium. The recording medium is not particularly limited, but may be a non-transitory recording medium such as an optical disk, a magneto-optical disk, or a flash memory.

また、本発明の実施の形態及び変形例を説明したが、本発明の他の実施の形態として、上記実施の形態及び変形例を全体的又は部分的に組み合わせたものでもよい。   Moreover, although embodiment and modification of this invention were demonstrated, what combined the said embodiment and modification as the other embodiment of this invention entirely or partially may be sufficient.

また、本発明の実施の形態は上記の実施の形態及び変形例に限定されるものではなく、本発明の技術的思想の趣旨を逸脱しない範囲において様々に変更、置換、変形されてもよい。さらには、技術の進歩又は派生する別技術によって、本発明の技術的思想を別の仕方で実現することができれば、その方法を用いて実施されてもよい。したがって、特許請求の範囲は、本発明の技術的思想の範囲内に含まれ得る全ての実施態様をカバーしている。   The embodiments of the present invention are not limited to the above-described embodiments and modifications, and various changes, substitutions, and modifications may be made without departing from the spirit of the technical idea of the present invention. Furthermore, if the technical idea of the present invention can be realized in another way by technological advancement or another derived technique, the method may be used. Accordingly, the claims cover all embodiments that can be included within the scope of the technical idea of the present invention.

さらに、上記実施形態では、単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理装置であって、標準モード又は画質優先モードを選択するモード選択部と、通常の撮像条件の撮像データから標準画像を生成する画像生成部と、画質優先モードで標準画像から高画質画像に画像変換する画像変換部と、標準画像又は高画質画像から撮像対象を画像認識する画像認識部とを備えたことを特徴とする。この構成によれば、標準モードでは標準画像によって撮像対象が画像認識され、画質優先モードでは高画質画像によって撮像対象が画像認識される。よって、撮像対象のサイズに応じて標準モードと画質優先モードを使い分けることで撮像対象を適切に画像認識することができる。また、ソフトウェアモジュール側の処理によって標準画像から高画質画像が生成されるため、複数の撮像装置を用意する必要がなく、設備コストを低減することができる。   Furthermore, in the above-described embodiment, the image processing apparatus recognizes an image to be captured based on imaging data input from a single imaging apparatus, and includes a mode selection unit that selects a standard mode or an image quality priority mode, An image generation unit that generates a standard image from imaging data under imaging conditions, an image conversion unit that converts a standard image to a high-quality image in image quality priority mode, and image recognition that recognizes an imaging target from the standard image or high-quality image And a section. According to this configuration, the imaging target is image-recognized by the standard image in the standard mode, and the imaging target is image-recognized by the high-quality image in the image quality priority mode. Therefore, by appropriately using the standard mode and the image quality priority mode according to the size of the imaging target, it is possible to appropriately recognize the imaging target. In addition, since a high-quality image is generated from the standard image by processing on the software module side, it is not necessary to prepare a plurality of imaging devices, and the equipment cost can be reduced.

以上説明したように、本発明は、設備コストを抑えると共にサイズが異なる撮像対象を適切に撮像することができるという効果を有し、特に、実装装置の部品の画像認識に使用される画像処理装置、実装装置、画像処理方法、プログラムに有用である。   As described above, the present invention has an effect that it is possible to appropriately capture images of imaging objects having different sizes while suppressing equipment costs, and in particular, an image processing device used for image recognition of components of a mounting device. This is useful for mounting apparatuses, image processing methods, and programs.

1 :実装装置
30 :画像処理装置
31 :キャプチャボード
32 :撮像装置
41 :モード選択部
42 :モード指定部
43 :転送条件設定部
44 :撮像条件設定部
45 :画像生成部
46 :画像変換部
47 :画像認識部
51 :プロセッサコア
52 :プロセッサコア
P :部品(撮像対象)
W :基板
1: mounting device 30: image processing device 31: capture board 32: imaging device 41: mode selection unit 42: mode specification unit 43: transfer condition setting unit 44: imaging condition setting unit 45: image generation unit 46: image conversion unit 47 : Image recognition unit 51: Processor core 52: Processor core P: Parts (imaging target)
W: Substrate

Claims (13)

単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理装置であって、
標準モード又は画質優先モードを選択するモード選択部と、
通常の撮像条件の撮像データから標準画像を生成する画像生成部と、
画質優先モードで標準画像から高画質画像に画像変換する画像変換部と、
標準画像又は高画質画像から撮像対象を画像認識する画像認識部とを備えたことを特徴とする画像処理装置。
An image processing apparatus that recognizes an image of an imaging target based on imaging data input from a single imaging apparatus,
A mode selection unit for selecting a standard mode or an image quality priority mode;
An image generation unit that generates a standard image from imaging data under normal imaging conditions;
An image conversion unit that converts a standard image to a high-quality image in the image quality priority mode;
An image processing apparatus comprising: an image recognition unit that recognizes an imaging target from a standard image or a high-quality image.
前記モード選択部が、撮像対象のサイズに応じて標準モード又は画質優先モードを選択することを特徴とする請求項1に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the mode selection unit selects a standard mode or an image quality priority mode according to a size of an imaging target. 前記画像変換部は、超解像度処理によって画像変換することを特徴とする請求項1又は請求項2に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the image conversion unit performs image conversion by super-resolution processing. キャプチャボードを介して前記撮像装置から撮像データが入力され、
前記キャプチャボードに対して撮像データの転送条件を設定する転送条件設定部を備えることを特徴とする請求項1から請求項3のいずれかに記載の画像処理装置。
Imaging data is input from the imaging device via the capture board,
The image processing apparatus according to claim 1, further comprising a transfer condition setting unit configured to set a transfer condition of imaging data with respect to the capture board.
前記転送条件設定部は、転送条件として撮像対象の外形サイズに応じて切り出し転送の有無を設定することを特徴とする請求項4に記載の画像処理装置。   The image processing apparatus according to claim 4, wherein the transfer condition setting unit sets the presence or absence of cutout transfer according to an outer size of an imaging target as a transfer condition. 前記撮像装置に対して撮像条件を設定する撮像条件設定部を備えることを特徴とする請求項1から請求項5のいずれかに記載の画像処理装置。   The image processing apparatus according to claim 1, further comprising an imaging condition setting unit that sets an imaging condition for the imaging apparatus. 前記モード選択部は、標準モード、画質優先モード、速度優先モードのいずれかを選択し、
前記撮像条件設定部は、標準モード及び画質優先モードで通常の撮像条件を設定し、速度優先モードで通常の撮像条件よりも低画質の撮像条件を設定し、
前記画像生成部は、標準モード及び画質優先モードで通常の撮像データから標準画像を生成し、速度優先モードで低画質の撮像データから低画質画像を生成し、
前記画像変換部は、画質優先モードで標準画像から高画質画像に画像変換し、
前記画像認識部は、標準画像、高画質画像、低画質画像から撮像対象を画像認識することを特徴とする請求項6に記載の画像処理装置。
The mode selection unit selects one of a standard mode, an image quality priority mode, and a speed priority mode,
The imaging condition setting unit sets a normal imaging condition in the standard mode and the image quality priority mode, sets an imaging condition having a lower image quality than the normal imaging condition in the speed priority mode,
The image generation unit generates a standard image from normal imaging data in a standard mode and an image quality priority mode, and generates a low quality image from low-quality imaging data in a speed priority mode,
The image conversion unit converts an image from a standard image to a high-quality image in an image quality priority mode,
The image processing apparatus according to claim 6, wherein the image recognition unit recognizes an imaging target from a standard image, a high-quality image, and a low-quality image.
前記撮像条件設定部は、低画質の撮像条件として速度優先モードで前記撮像装置のビニング処理を設定することを特徴とする請求項7に記載の画像処理装置。   The image processing apparatus according to claim 7, wherein the imaging condition setting unit sets a binning process of the imaging apparatus in a speed priority mode as an imaging condition with low image quality. 標準モード、画質優先モード、速度優先モードの指定をユーザから受け付けるモード指定部を備え、
前記モード選択部で選択されたモードよりも前記モード指定部で指定されたモードを優先させることを特徴とする請求項7又は請求項8に記載の画像処理装置。
It has a mode specification part that accepts specification of standard mode, image quality priority mode, speed priority mode from the user,
The image processing apparatus according to claim 7, wherein the mode specified by the mode specifying unit is prioritized over the mode selected by the mode selecting unit.
前記画像認識部の画像認識及び前記画像変換部の画像変換がマルチプロセッサ又はマルチコアプロセッサによって並列に実行されることを特徴とする請求項1から請求項9のいずれかに記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the image recognition of the image recognition unit and the image conversion of the image conversion unit are executed in parallel by a multiprocessor or a multicore processor. 請求項1から請求項10のいずかに記載の画像処理装置と、
前記画像処理装置に撮像画像として部品画像を入力する撮像装置とを備え、
前記画像処理装置で部品画像から部品を画像認識することを特徴とする実装装置。
An image processing apparatus according to any one of claims 1 to 10,
An imaging device for inputting a component image as a captured image to the image processing device;
A mounting apparatus for recognizing a part from a part image by the image processing apparatus.
単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理方法であって、
標準モード又は画質優先モードを選択するステップと、
通常の撮像条件の撮像データから標準画像を生成するステップと、
画質優先モードで標準画像から高画質画像に画像変換するステップと、
標準画像又は高画質画像から撮像対象を画像認識するステップとを有することを特徴とする画像処理方法。
An image processing method for recognizing an image of an imaging target based on imaging data input from a single imaging device,
Selecting standard mode or image quality priority mode;
Generating a standard image from imaging data under normal imaging conditions;
Image conversion from standard image to high-quality image in image quality priority mode;
An image processing method comprising: recognizing an imaging target from a standard image or a high-quality image.
単一の撮像装置から入力された撮像データに基づいて撮像対象を画像認識する画像処理装置のプログラムであって、
標準モード又は画質優先モードを選択するステップと、
通常の撮像条件の撮像データから標準画像を生成するステップと、
画質優先モードで標準画像から高画質画像に画像変換するステップと、
標準画像又は高画質画像から撮像対象を画像認識するステップとを、前記画像処理装置に実行させることを特徴とするプログラム。
A program for an image processing device that recognizes an image of an imaging target based on imaging data input from a single imaging device,
Selecting standard mode or image quality priority mode;
Generating a standard image from imaging data under normal imaging conditions;
Image conversion from standard image to high-quality image in image quality priority mode;
A program for causing the image processing apparatus to execute a step of recognizing an imaging target from a standard image or a high-quality image.
JP2018040504A 2018-03-07 2018-03-07 Image processing device, mounting device, image processing method, and program Pending JP2019161249A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2018040504A JP2019161249A (en) 2018-03-07 2018-03-07 Image processing device, mounting device, image processing method, and program
CN201910171309.XA CN110248086B (en) 2018-03-07 2019-03-07 Image processing apparatus, mounting apparatus, image processing method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018040504A JP2019161249A (en) 2018-03-07 2018-03-07 Image processing device, mounting device, image processing method, and program

Publications (1)

Publication Number Publication Date
JP2019161249A true JP2019161249A (en) 2019-09-19

Family

ID=67883006

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018040504A Pending JP2019161249A (en) 2018-03-07 2018-03-07 Image processing device, mounting device, image processing method, and program

Country Status (2)

Country Link
JP (1) JP2019161249A (en)
CN (1) CN110248086B (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024057433A1 (en) * 2022-09-14 2024-03-21 ヤマハ発動機株式会社 Component mounter and component imaging method
JP2024041278A (en) * 2022-09-14 2024-03-27 ヤマハ発動機株式会社 Mounting machine

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0973510A (en) * 1995-09-06 1997-03-18 Hitachi Ltd Bar code recognition processor
JP2000333065A (en) * 1999-05-20 2000-11-30 Juki Corp Image input method and apparatus
JP2003068813A (en) * 2001-08-23 2003-03-07 Dainippon Screen Mfg Co Ltd Method and device for measuring probe mark
JP2007166583A (en) * 2005-11-16 2007-06-28 Canon Inc Video distribution device and viewer device
JP2009206354A (en) * 2008-02-28 2009-09-10 Fuji Mach Mfg Co Ltd Image recognition apparatus and image recognition method of electronic component mounting machine
JPWO2016075790A1 (en) * 2014-11-13 2017-08-24 富士機械製造株式会社 Mounting machine and electronic component suction posture inspection method using mounting machine
JP2017151631A (en) * 2016-02-23 2017-08-31 Juki株式会社 Image processing apparatus, mounting apparatus, image processing method, and program
WO2018020638A1 (en) * 2016-07-28 2018-02-01 富士機械製造株式会社 Imaging device, imaging system, and image processing method

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009246710A (en) * 2008-03-31 2009-10-22 Fujifilm Corp Image processing method and apparatus therefor
JP5079609B2 (en) * 2008-07-08 2012-11-21 京セラドキュメントソリューションズ株式会社 Image reading apparatus and image forming apparatus
JP5673833B2 (en) * 2011-08-30 2015-02-18 富士通株式会社 Imaging device, work support program, and information providing program
JP5832222B2 (en) * 2011-10-04 2015-12-16 富士機械製造株式会社 Camera device
WO2013187033A1 (en) * 2012-06-12 2013-12-19 日本電気株式会社 Control device, image transmission method, and control program
JP6075912B2 (en) * 2013-03-14 2017-02-08 Juki株式会社 Image processing apparatus and image processing method
JP2016177393A (en) * 2015-03-19 2016-10-06 カシオ計算機株式会社 Image processing apparatus, face recognition method, and program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0973510A (en) * 1995-09-06 1997-03-18 Hitachi Ltd Bar code recognition processor
JP2000333065A (en) * 1999-05-20 2000-11-30 Juki Corp Image input method and apparatus
JP2003068813A (en) * 2001-08-23 2003-03-07 Dainippon Screen Mfg Co Ltd Method and device for measuring probe mark
JP2007166583A (en) * 2005-11-16 2007-06-28 Canon Inc Video distribution device and viewer device
JP2009206354A (en) * 2008-02-28 2009-09-10 Fuji Mach Mfg Co Ltd Image recognition apparatus and image recognition method of electronic component mounting machine
JPWO2016075790A1 (en) * 2014-11-13 2017-08-24 富士機械製造株式会社 Mounting machine and electronic component suction posture inspection method using mounting machine
JP2017151631A (en) * 2016-02-23 2017-08-31 Juki株式会社 Image processing apparatus, mounting apparatus, image processing method, and program
WO2018020638A1 (en) * 2016-07-28 2018-02-01 富士機械製造株式会社 Imaging device, imaging system, and image processing method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024057433A1 (en) * 2022-09-14 2024-03-21 ヤマハ発動機株式会社 Component mounter and component imaging method
JPWO2024057433A1 (en) * 2022-09-14 2024-03-21
JP2024041278A (en) * 2022-09-14 2024-03-27 ヤマハ発動機株式会社 Mounting machine
JP7778664B2 (en) 2022-09-14 2025-12-02 ヤマハ発動機株式会社 Mounting machine

Also Published As

Publication number Publication date
CN110248086B (en) 2022-03-11
CN110248086A (en) 2019-09-17

Similar Documents

Publication Publication Date Title
JP5588331B2 (en) 3D shape recognition device
JP6310058B2 (en) Image processing apparatus and substrate production system
US7089656B2 (en) Electric parts mounting apparatus
EP0041870A1 (en) Pattern position recognition apparatus
WO2015083220A1 (en) Assembly machine
CN107006148B (en) Component mounting device and component mounting system
CN101431035A (en) Component mounting device
JP6466960B2 (en) Mounting machine and electronic component suction posture inspection method using mounting machine
JP2012023340A (en) Electronic component mounting device
JP2019161249A (en) Image processing device, mounting device, image processing method, and program
JP2008235739A (en) Method of inspecting transfer material transfer in electronic component mounting device
JP2014090076A (en) Image processing device and electronic component mounting device
JP5507378B2 (en) Electronic component mounting equipment
EP3407696B1 (en) Mounting apparatus and image processing method
JP5296749B2 (en) Component recognition device and surface mounter
JP5297913B2 (en) Mounting machine
JP6475264B2 (en) Component mounter
JP2005340648A (en) Component recognition method, component recognition device, surface mounter, and component inspection device
JP4992934B2 (en) Chip inspection apparatus and chip inspection method
JP7562858B2 (en) Recognition device and recognition method
JP2020009938A (en) Image processing apparatus, mounting apparatus, image processing method, and program
JP6837138B2 (en) Mounting device, information processing device, mounting system, mounting method and information processing method
WO2021166220A1 (en) Surface mounter and image analyzing method
JP7752575B2 (en) How to search for component mounting equipment and backup pins
CN110678060B (en) Image processing device, mounting device, image processing method, storage medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220330

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220823