[go: up one dir, main page]

WO2009141184A1 - Device for improving accuracy properties of handling devices - Google Patents

Device for improving accuracy properties of handling devices Download PDF

Info

Publication number
WO2009141184A1
WO2009141184A1 PCT/EP2009/053403 EP2009053403W WO2009141184A1 WO 2009141184 A1 WO2009141184 A1 WO 2009141184A1 EP 2009053403 W EP2009053403 W EP 2009053403W WO 2009141184 A1 WO2009141184 A1 WO 2009141184A1
Authority
WO
WIPO (PCT)
Prior art keywords
hole
depressions
measuring
holes
markers
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/EP2009/053403
Other languages
German (de)
French (fr)
Inventor
Helmut Ebner
Franz Wimmer
Martin Hirschmanner
Johann Penn
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Primetals Technologies Austria GmbH
Original Assignee
Siemens VAI Metals Technologies GmbH and Co
Siemens VAI Metals Technologies GmbH Austria
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens VAI Metals Technologies GmbH and Co, Siemens VAI Metals Technologies GmbH Austria filed Critical Siemens VAI Metals Technologies GmbH and Co
Priority to DE212009000055U priority Critical patent/DE212009000055U1/en
Priority to CN2009901002524U priority patent/CN202088202U/en
Priority to KR2020107000030U priority patent/KR20110002031U/en
Publication of WO2009141184A1 publication Critical patent/WO2009141184A1/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/18Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
    • G05B19/402Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by control arrangements for positioning, e.g. centring a tool relative to a hole in the workpiece, additional detection means to correct position
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/37Measurements
    • G05B2219/37097Marker on workpiece to detect reference position
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/30Nc systems
    • G05B2219/37Measurements
    • G05B2219/37555Camera detects orientation, position workpiece, points of workpiece

Definitions

  • the invention relates to a device for improving the accuracy characteristics of handling devices in terms of their pose, such as a multi-axis industrial robot, especially when used in the environment of metallurgical plants.
  • such a device comprises for detecting the pose of manipulators
  • At least one control device for moving the handling device at least one control device for moving the handling device
  • a measuring device which is positioned independently of the handling device or directly on the handling device
  • a reference surface or measuring plate with one or more markers or holes on a tool to be controlled or on a device A reference surface or measuring plate with one or more markers or holes on a tool to be controlled or on a device.
  • a handling device formed by a robot is known, which is provided for various manipulations in the region of the bottom outlet of a melt container.
  • a camera coupled to an image evaluation device is arranged for the exact position determination of the spout opening in relation to the image evaluation device.
  • a marker specifically spatial structures, such as positioned marker pens or color-highlighted by the environment marking points on tools or equipment or removable parts.
  • the object of the present invention is therefore to avoid the disadvantages of the known prior art and to propose a device which delivers high-contrast measuring signals or image signals of markers and their surroundings even in heavily contaminated working fields in order to enable a more precise determination of poses.
  • a device for improving accuracy characteristics of handling devices in that the markers or holes formed by hole-like depressions in the reference surface or the measuring plate in the form of blind holes or slots with a certain depth and with a specific blind hole diameter or a certain slot width are where the ratio of depth to blind hole diameter or slot width is greater than 1.
  • a hole-like depression formed in this way allows an approach to a "black body” in the physical sense
  • a black body in physics is an idealized body that completely absorbs electromagnetic radiation, for example light, impinging on it and thus differs in its appearance Reflection behavior of other bodies or surfaces striking black body is not feasible in practice, however, approximating its properties by hole-like depressions minimizes the reflection behavior in the region of these hole-like depressions to a particular extent.
  • the hole-like depressions are formed as blind holes or slots, these slots may preferably be formed straight or as Ringlochbohrept. As a result, particularly high absorption values of the electromagnetic radiation in these areas are achieved.
  • a substantial reduction in reflective properties is achieved when the hole-like depressions are at least 10 mm, preferably at least 15 mm deep.
  • An enhancement of the absorption properties is additionally achieved by a blackening of the hole-like depressions. Particularly effective acts a Berußung the inner walls of the hole-like depressions.
  • the contrast is additionally increased if the surrounding area of the hole-like depressions is kept as light as possible within the possibilities offered by the working environment. In any case, the surrounding area must be held distinctively brighter than the hole-like depressions. Reflections of light from the hole-like recesses are more suppressed when the diameter or slot width of these hole-like recesses is less than 10 mm, preferably less than 6 mm.
  • FIG. 1 shows a robot in cooperation with a measuring plate according to the invention on a metallurgical vessel
  • FIG. 2 shows a measuring plate according to the invention with hole-like depressions according to a first embodiment
  • FIG. 3 shows a measuring plate according to the invention with hole-like depressions according to a second embodiment.
  • Figure 1 shows a schematic representation of a handling device 1, which is designed as a multi-axis industrial robot of conventional design, when coupling a spout 2 to a melt container 3 for transport and treatment of, for example, a molten steel in a steel mill.
  • a measuring plate 4 is fixed, which carries four markers 5. These markers 5 are used to determine the pose of a measuring device 6.
  • the measuring device 6 is embodied as a stereo camera 7 and generates an image of the marker 5 and its surrounding area 8 on the end face of the measuring plate 4 or also an environmental region extending beyond the end face of the measuring plate.
  • the spout 2 in relation to the markers 5 on the melt container 3, a number of reference points are defined in Figure 1 with OCP, CCP, TCP and RCP are designated.
  • the measuring device 6 is associated with an evaluation device 10, which receives the image signals generated by the measuring device 6 and evaluates based on an evaluation program and determines the pose of the measuring device.
  • the determined position characteristics are used to control the many control devices 11 of the handling device, for example in the joints of the robot arms.
  • FIG. 2 shows a top view and a sectional illustration of a measuring plate 4 with four markers 5 according to a first embodiment of the invention.
  • Each marker 5 is formed by an annular slot 12 made through a ring slot bore.
  • the slot has a slot width B of 5 mm and a slot depth T of 15 mm.
  • the diameters D1, D2, D3, D4 of the annular slot bores are different for the individual markers and are between 10 and 40 mm.
  • the arrangement of the markers 5 on the end face of the measuring plate 4 and their dimensions allow an accurate determination of the pose of the measuring device to the center point OCP of the melt container 3.
  • each marker 5 forms a hole-like recess 15 in the measuring plate 4th
  • the measuring plate is made of stainless steel and optionally sandblasted to obtain a diffusely reflecting surface.
  • the ring slots are black coated by a Berußung or a corresponding color order to increase the contrast with the environment.
  • FIG. 3 shows a reference surface 13 with four markers 5 formed by blind holes 16.
  • the blind hole diameters D s are between 3 and 6 mm.
  • the reference surface 13 is either directly part of an object or the melt container 3 or represents the end face of a measuring plate 4, as shown in Figure 2, is.

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Manufacturing & Machinery (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Manipulator (AREA)

Abstract

The object of the invention is a device for improving accuracy properties of handling devices, such as a multi-axis industrial robot, comprising a handling device (1), at least one control device (11) for moving the handling device (1), a measuring device (6) which is positioned independently of or directly on the handling device (1), an evaluation unit (10) for the measurements signals generated by the measuring device (6), and a reference surface (13) or measuring plate (4) having one or more markers (5) or holes on a tool to be actuated or a device (3). An improvement of the accuracy properties is achieved in that the markers (5) or holes of hole-like recesses (15) in the reference surface (13) or the measuring plate (4) are configured in the shape of blind holes (16) or slits (12) having a certain depth and having a certain blind hole diameter, or a certain slit width, wherein the ratio of depth to blind hole diameter or slit width is greater than 1.

Description

Vorrichtung zum Verbessern von Genauiqkeitseiqenschaften von Handhabungsgeräten Device for improving the accuracy of handling devices

Technisches GebietTechnical area

Die Erfindung betrifft eine Vorrichtung zum Verbessern der Genauigkeitseigenschaften von Handhabungsgeräten hinsichtlich ihrer Pose, wie beispielsweise einem Mehrachsen-Industrieroboter, insbesondere bei einem Einsatz im Umfeld metallurgischer Anlagen.The invention relates to a device for improving the accuracy characteristics of handling devices in terms of their pose, such as a multi-axis industrial robot, especially when used in the environment of metallurgical plants.

Bei Vorrichtungen dieser Art wird die Pose einer Messeinrichtung in Bezug auf eine bestimmte Referenzfläche oder Referenzstruktur festgestellt. Als Pose sind die Position und die Orientierung einer Messeinrichtung und im weiteren Sinn des Handhabungsgerätes selbst zu verstehen. Die Messeinrichtung besteht zumindest aus einer Signal- oder Bildempfangseinrichtung, die auswertbare Signal- oder Bilddaten generiert, die in weiterer Folge einer Auswertung im Hinblick auf eine exakte Positionsbestimmung unterzogen werden.In devices of this type, the pose of a measuring device with respect to a particular reference surface or reference structure is determined. As a pose, the position and orientation of a measuring device and in the broader sense of the handling device itself are to be understood. The measuring device consists at least of a signal or image receiving device that generates evaluable signal or image data, which are subsequently subjected to an evaluation with regard to an exact position determination.

Dementsprechend umfasst eine derartige Vorrichtung zum Ermitteln der Pose von HandhabungsgerätenAccordingly, such a device comprises for detecting the pose of manipulators

- ein Handhabungsgerät,a handling device,

- wenigstens eine Steuereinrichtung zum Bewegen des Handhabungsgerätes,at least one control device for moving the handling device,

- eine Messeinrichtung, welche von der Handhabungseinrichtung unabhängig oder unmittelbar auf der Handhabungseinrichtung positioniert ist,a measuring device which is positioned independently of the handling device or directly on the handling device,

- eine Auswerteeinrichtung für die von der Messeinrichtung generierten Messsignale undan evaluation device for the measuring signals generated by the measuring device and

- eine Referenzfläche oder Messplatte mit einem oder mehreren Markern oder Löcher an einem anzusteuernden Werkzeug oder an einer Einrichtung. Stand der Technik- A reference surface or measuring plate with one or more markers or holes on a tool to be controlled or on a device. State of the art

Eine Einrichtung dieser Art ist beispielsweise aus der JP 7-185-754 A2 bereits bekannt. Hier wird ein Handhabungsgerät dazu verwendet, Gießrohre an einem Zwischengefäß einer Stranggießanlage zu wechseln, wobei am Gießrohr und am Gießrohraufsatzstück jeweils zwei zylindrische Marker angeordnet sind, die von zwei externen Kameras erfasst werden und womit letztlich die Position eines z.B. Greifers des Handhabungsgerätes in Relation zum Gießrohraufsatzstück oder zum Gießrohr bestimmt werden kann. Auch die Auswertung der Messsignale bzw. Bilddaten in einer Auswerteeinrichtung, um möglichst genaue Positionsdaten zu erhalten, sowie die mathematischen Grundlagen hierfür, sind skizziert.A device of this type is already known for example from JP 7-185-754 A2. Here, a handling device is used to change the casting tubes at an intermediate vessel of a continuous casting plant, wherein each two cylindrical markers are arranged on the pouring tube and on the pouring nozzle attachment piece, which are detected by two external cameras and ultimately the position of a e.g. Gripper of the handling device in relation to Gießrohraufsatzstück or pouring tube can be determined. The evaluation of the measurement signals or image data in an evaluation device in order to obtain the most accurate position data, as well as the mathematical basis for this, are outlined.

Aus der JP 3-071-959 A ist ein von einem Roboter gebildetes Handhabungsgerät bekannt, welches für verschiedene Manipulationen im Bereich des Bodenauslasses eines Schmelzenbehälters vorgesehen ist. Direkt auf dem Roboter ist eine mit einer Bildauswerteeinrichtung gekoppelte Kamera zur genauen Positionsbestimmung der Ausgussöffnung in Relation zur Bildauswerteeinrichtung angeordnet.From JP 3-071-959 A, a handling device formed by a robot is known, which is provided for various manipulations in the region of the bottom outlet of a melt container. Directly on the robot, a camera coupled to an image evaluation device is arranged for the exact position determination of the spout opening in relation to the image evaluation device.

Auch die DE 103 45 743 A1 und die EP 1 602 456 A2 befassen sich mit der Bestimmung von Position und Orientierung einer Bildempfangseinrichtung anhand von Markern an Einrichtungen.DE 103 45 743 A1 and EP 1 602 456 A2 also deal with the determination of position and orientation of an image receiving device by means of markers on devices.

Stets werden als Marker speziell räumliche Strukturen, wie positionierte Markierungsstifte oder farblich von der Umgebung hervorgehobene Markierungspunkte an Werkzeugen oder Einrichtungen oder Wechselteilen verwendet.Always be used as a marker specifically spatial structures, such as positioned marker pens or color-highlighted by the environment marking points on tools or equipment or removable parts.

Bei Verwendung derartiger Marker in Verbindung mit metallurgischen Einrichtungen und Anlagen, sowie in anderen Anwendungsbereichen, bei denen die Einsatzbereiche der Handhabungseinrichtungen starken Verschmutzungen unterliegen, kommt es zu einer starken Beeinträchtigung oder zu einem Verlust der Kontrasteigenschaften von Markern zu deren Umgebungsbereich durch eine ausgeprägte Schmutzschicht. Die Unterscheidungskraft der Messsignale oder der aufgenommenen Bildsignale reicht daher oftmals für eine genaue Auswertung der Messsignale und damit für eine ausreichend genaue Positionsbestimmung nicht aus. In Fertigungsstraßen zur Herstellung von Fahrzeugrahmen in der Automobilindustrie ist speziell für den punktgenauen Einsatz von Punktschweißmaschinen eine präzise Positionsbestimmung des Fahrzeugrahmens oder des Rahmenträgers erforderlich. Dazu ist aus der EP 328687 A1 , der JP 62-226308 A und der JP 6-035530 A bereits bekannt, die zuvor bereits beschriebenen Marker durch Löcher auszubilden, die im Fahrzeugrahmen zumeist herstellungsbedingt bereits vorgesehen sind. Diese Löcher sind üblicherweise Durchgangslöcher, die beim formgebenden Pressen der Rahmenteile hergestellt werden. Nähere Details zur Ausgestaltung dieser Art von Markern sind diesen Dokumenten nicht zu entnehmen. Die Rahmenfertigung für Fahrzeuge findet in einer weitgehend sauberen Umgebung statt, sodass durch die Löcher ein ausreichender Kontrast zur unmittelbaren Umgebung gegeben ist und daher eine gute Bildauswertung und Positionsermittlung ermöglicht. In verschmutzungsintensiver Umgebung, wie sie beispielsweise in einem Stahlwerk auftritt, ist der für die Bildauswertung notwendige Kontrast jedoch nicht gegeben.When using such markers in conjunction with metallurgical facilities and facilities, as well as in other applications in which the application areas of handling equipment are subject to heavy contamination, there is a strong impairment or loss of contrast properties of markers to their environment by a pronounced dirt layer. The distinctive character of the measurement signals or of the recorded image signals is therefore often insufficient for an accurate evaluation of the measurement signals and thus for a sufficiently accurate position determination. In production lines for the production of vehicle frames in the automotive industry, precise positioning of the vehicle frame or the frame carrier is required especially for the spot-on use of spot welding machines. For this purpose, it is already known from EP 328687 A1, JP 62-226308 A and JP 6-035530 A to form the markers already described above by holes which are already provided in the vehicle frame, usually for reasons of production. These holes are usually through holes that are produced during the forming pressing of the frame parts. Further details on the design of this type of markers can not be found in these documents. The frame production for vehicles takes place in a largely clean environment, so that through the holes a sufficient contrast to the immediate environment is given and therefore allows a good image analysis and position determination. In pollution-intensive environment, as occurs for example in a steel mill, the contrast necessary for the image analysis is not given.

Darstellung der ErfindungPresentation of the invention

Aufgabe der vorliegenden Erfindung ist es daher, die Nachteile des bekannten Standes der Technik zu vermeiden und eine Vorrichtung vorzuschlagen, die auch bei starker Verschmutzung unterliegenden Arbeitsfeldern kontrastreiche Messsignale oder Bildsignale von Markern und deren Umgebung liefert, um eine präzisere Posenbestimmung zu ermöglichen.The object of the present invention is therefore to avoid the disadvantages of the known prior art and to propose a device which delivers high-contrast measuring signals or image signals of markers and their surroundings even in heavily contaminated working fields in order to enable a more precise determination of poses.

Diese Aufgabe wird bei einer erfindungsgemäßen Vorrichtung zum Verbessern von Genauigkeitseigenschaften von Handhabungsgeräten dadurch erreicht, dass die Marker oder Löcher von lochartigen Vertiefungen in der Referenzfläche oder der Messplatte in Form von Sacklöchern oder Schlitzen mit einer bestimmten Tiefe und mit einem bestimmten Sacklochdurchmesser oder einer bestimmten Schlitzbreite gebildet sind, wobei das Verhältnis von Tiefe zu Sacklochdurchmesser oder Schlitzbreite größer als 1 ist.This object is achieved in a device according to the invention for improving accuracy characteristics of handling devices in that the markers or holes formed by hole-like depressions in the reference surface or the measuring plate in the form of blind holes or slots with a certain depth and with a specific blind hole diameter or a certain slot width are where the ratio of depth to blind hole diameter or slot width is greater than 1.

Eine solcherart ausgebildete lochartige Vertiefung ermöglicht eine Annäherung an einen „schwarzen Körper" im physikalischen Sinn. Ein schwarzer Körper ist in der Physik ein idealisierter Körper, der auf ihn auftreffende elektromagnetische Strahlung, z. B. Licht, vollständig absorbiert und unterscheidet sich demnach durch sein Reflexionsverhalten von anderen Körpern oder Oberflächen markant. Der schwarze Körper ist in der Praxis nicht realisierbar, jedoch minimiert eine Annäherung an seine Eigenschaften durch lochartige Vertiefungen das Reflexionsverhalten im Bereich dieser lochartigen Vertiefungen in besonderem Maße.A hole-like depression formed in this way allows an approach to a "black body" in the physical sense A black body in physics is an idealized body that completely absorbs electromagnetic radiation, for example light, impinging on it and thus differs in its appearance Reflection behavior of other bodies or surfaces striking black body is not feasible in practice, however, approximating its properties by hole-like depressions minimizes the reflection behavior in the region of these hole-like depressions to a particular extent.

Die lochartigen Vertiefungen sind als Sacklöcher oder Schlitze ausgebildet, wobei diese Schlitze vorzugsweise gerade oder als Ringlochbohrungen ausgebildet sein können. Dadurch werden besonders hohe Absorptionswerte der elektromagnetischen Strahlung in diesen Bereichen erreicht.The hole-like depressions are formed as blind holes or slots, these slots may preferably be formed straight or as Ringlochbohrungen. As a result, particularly high absorption values of the electromagnetic radiation in these areas are achieved.

Nach einer zweckmäßigen Weiterbildung der Erfindung, die den fertigungstechnischen Möglichkeiten besonders entgegenkommt, sind die Marker oder Löcher von lochartigen Vertiefungen mit mindestens 10 mm Tiefe und mit einem Sacklochdurchmesser oder einer Schlitzbreite kleiner 10 mm in der Referenzfläche oder Messplatte in Form von Sacklöchern oder Schlitzen gebildet.After an expedient development of the invention, which particularly accommodates the production engineering possibilities, the markers or holes are formed by hole-like depressions with at least 10 mm depth and with a blind hole diameter or a slit width of less than 10 mm in the reference surface or measuring plate in the form of blind holes or slots.

Eine wesentliche Verringerung der Reflexionseigenschaften wird erzielt, wenn die lochartigen Vertiefungen mindestens 10 mm, vorzugsweise mindestens 15 mm tief sind.A substantial reduction in reflective properties is achieved when the hole-like depressions are at least 10 mm, preferably at least 15 mm deep.

Eine Verstärkung der Absorptionseigenschaften wird zusätzlich durch eine Schwärzung der lochartigen Vertiefungen erreicht. Besonders effektiv wirkt eine Berußung der Innenwandungen der lochartigen Vertiefungen. Der Kontrast wird zusätzlich erhöht, wenn der Umgebungsbereich der lochartigen Vertiefungen im Rahmen der Möglichkeiten, die das Arbeitsumfeld bietet, möglichst hell gehalten ist. Jedenfalls muss der Umgebungsbereich unterscheidungskräftig heller gehalten sein als die lochartigen Vertiefungen. Lichtreflexionen aus den lochartigen Vertiefungen werden verstärkt unterdrückt, wenn der Durchmesser oder die Schlitzbreite dieser lochartigen Vertiefungen kleiner als 10 mm ist, vorzugsweise weniger als 6 mm beträgt.An enhancement of the absorption properties is additionally achieved by a blackening of the hole-like depressions. Particularly effective acts a Berußung the inner walls of the hole-like depressions. The contrast is additionally increased if the surrounding area of the hole-like depressions is kept as light as possible within the possibilities offered by the working environment. In any case, the surrounding area must be held distinctively brighter than the hole-like depressions. Reflections of light from the hole-like recesses are more suppressed when the diameter or slot width of these hole-like recesses is less than 10 mm, preferably less than 6 mm.

Die Auswertegenauigkeit der erfassten Messsignale wird verbessert, wenn mindestens drei oder vier lochartige Vertiefungen in der Referenzfläche oder Messplatte angeordnet sind. Damit kann bei die Auswertung der generierten Messsignale auf die besten Messergebnisse zurückgegriffen werden und so eine qualitative Auswahl getroffen werden. Die Auswertung der Messsignale wird hinsichtlich der räumlichen Orientierung erleichtert, wenn mindestens zwei der lochartigen Vertiefungen unterschiedliche Dimensionierungen aufweisen.The evaluation accuracy of the detected measurement signals is improved if at least three or four hole-like depressions are arranged in the reference surface or measuring plate. In this way, the best measurement results can be used for the evaluation of the generated measurement signals and thus a qualitative selection can be made. The evaluation of the measurement signals is facilitated with respect to the spatial orientation if at least two of the hole-like depressions have different dimensions.

Die Messeinrichtung ist vorzugsweise als Bilderfassungseinrichtung ausgebildet, die den Kontrast der elektromagnetischen Strahlung bzw. der Lichtreflexion zwischen den lochartigen Vertiefungen und dem Umgebungsbereich dieser lochartigen Vertiefungen erfasst. Nach einer bevorzugten Ausführungsform ist die Messeinrichtung von einer Stereokamera gebildet.The measuring device is preferably designed as an image capture device that detects the contrast of the electromagnetic radiation or the light reflection between the hole-like depressions and the surrounding area of these hole-like depressions. According to a preferred embodiment, the measuring device is formed by a stereo camera.

Kurzbeschreibung der ZeichnungenBrief description of the drawings

Weitere Vorteile und Merkmale der vorliegenden Erfindung ergeben sich aus der nachfolgenden Beschreibung nicht einschränkender Ausführungsbeispiele, wobei auf die folgenden Figuren Bezug genommen wird, die folgendes zeigen:Further advantages and features of the present invention will become apparent from the following description of non-limiting embodiments, reference being made to the following figures, which show:

Fig. 1 einen Roboter im Zusammenwirken mit einer erfindungsgemäßen Messplatte an einem metallurgischen Gefäß, Fig. 2 eine erfindungsgemäße Messplatte mit lochartigen Vertiefungen nach einer ersten Ausführungsform, Fig. 3 eine erfindungsgemäße Messplatte mit lochartigen Vertiefungen nach einer zweiten Ausführungsform.1 shows a robot in cooperation with a measuring plate according to the invention on a metallurgical vessel, FIG. 2 shows a measuring plate according to the invention with hole-like depressions according to a first embodiment, FIG. 3 shows a measuring plate according to the invention with hole-like depressions according to a second embodiment.

Ausführung der ErfindungEmbodiment of the invention

Figur 1 zeigt in einer schematischen Darstellung ein Handhabungsgerät 1 , welches als Mehrachsen-Industrieroboter üblicher Bauart ausgebildet ist, beim Ankoppeln eines Ausgussrohres 2 an einen Schmelzenbehälter 3 zum Transport und zur Behandlung von beispielsweise einer Stahlschmelze in einem Stahlwerk.Figure 1 shows a schematic representation of a handling device 1, which is designed as a multi-axis industrial robot of conventional design, when coupling a spout 2 to a melt container 3 for transport and treatment of, for example, a molten steel in a steel mill.

Am Schmelzenbehälter ist eine Messplatte 4 befestigt, die vier Marker 5 trägt. Diese Marker 5 werden zur Bestimmung der Pose einer Messeinrichtung 6 herangezogen. Die Messeinrichtung 6 ist als Stereokamera 7 ausgebildet und generiert ein Abbild der Marker 5 und deren Umgebungsbereich 8 auf der Stirnfläche der Messplatte 4 oder auch einen über die Stirnfläche der Messplatte hinausgehenden Umgebungsbereich. Für die Bestimmung der Pose der Messeinrichtung 6 und damit letztlich des Handhabungsgerätes 1 und insbesondere seines nicht näher dargestellten Greifers 9, der in diesem Ausführungsbeispiel das Ausgussrohr 2 trägt, in Relation zu den Markern 5 am Schmelzenbehälter 3 sind eine Reihe von Bezugspunkten festgelegt, die in Figur 1 mit OCP, CCP, TCP und RCP bezeichnet sind. Der Messeinrichtung 6 ist eine Auswerteeinrichtung 10 zugeordnet, die von der Messeinrichtung 6 generierte Bildsignale empfängt und anhand eines Auswerteprogramms auswertet und die Pose der Messeinrichtung bestimmt. Die ermittelten Positionskenndaten werden zur Steuerung der vielen Steuereinrichtungen 11 des Handhabungsgerätes, beispielsweise in den Gelenken der Roboterarme herangezogen.At the melt container, a measuring plate 4 is fixed, which carries four markers 5. These markers 5 are used to determine the pose of a measuring device 6. The measuring device 6 is embodied as a stereo camera 7 and generates an image of the marker 5 and its surrounding area 8 on the end face of the measuring plate 4 or also an environmental region extending beyond the end face of the measuring plate. For the determination of the pose of the measuring device 6 and thus ultimately the handling device 1 and in particular its gripper 9, not shown, which carries in this embodiment, the spout 2, in relation to the markers 5 on the melt container 3, a number of reference points are defined in Figure 1 with OCP, CCP, TCP and RCP are designated. The measuring device 6 is associated with an evaluation device 10, which receives the image signals generated by the measuring device 6 and evaluates based on an evaluation program and determines the pose of the measuring device. The determined position characteristics are used to control the many control devices 11 of the handling device, for example in the joints of the robot arms.

In Figur 2 ist in einer Draufsicht und in einer Schnittdarstellung eine Messplatte 4 mit vier Markern 5 nach einer ersten Ausführungsform der Erfindung dargestellt. Jeder Marker 5 ist von einem ringförmigen Schlitz 12 gebildet, der durch eine Ringschlitzbohrung hergestellt wurde. Der Schlitz weist eine Schlitzbreite B von 5 mm und eine Schlitztiefe T von 15 mm auf. Die Durchmesser D1 , D2, D3, D4 der Ringschlitzbohrungen sind bei den einzelnen Markern unterschiedlich und betragen zwischen 10 und 40 mm. Die Anordnung der Marker 5 auf der Stirnfläche der Messplatte 4 und ihre Abmessungen ermöglichen eine genaue Bestimmung der Pose der Messeinrichtung zum Zentrumspunkt OCP des Schmelzenbehälters 3. Generell bildet jeder Marker 5 eine lochartige Vertiefung 15 in der Messplatte 4.FIG. 2 shows a top view and a sectional illustration of a measuring plate 4 with four markers 5 according to a first embodiment of the invention. Each marker 5 is formed by an annular slot 12 made through a ring slot bore. The slot has a slot width B of 5 mm and a slot depth T of 15 mm. The diameters D1, D2, D3, D4 of the annular slot bores are different for the individual markers and are between 10 and 40 mm. The arrangement of the markers 5 on the end face of the measuring plate 4 and their dimensions allow an accurate determination of the pose of the measuring device to the center point OCP of the melt container 3. Generally, each marker 5 forms a hole-like recess 15 in the measuring plate 4th

Zur Optimierung des Kontrastes der Marker 5 zum Umgebungsbereich 8 auf der Stirnfläche der Messplatte 4 ist die Messplatte aus nichtrostendem Stahl gefertigt und gegebenenfalls sandgestrahlt, um eine diffus reflektierende Oberfläche zu erhalten. Die Ringschlitze sind durch eine Berußung oder einen entsprechenden Farbauftrag schwarz beschichtet um den Kontrast zur Umgebung zu erhöhen.To optimize the contrast of the marker 5 to the surrounding area 8 on the end face of the measuring plate 4, the measuring plate is made of stainless steel and optionally sandblasted to obtain a diffusely reflecting surface. The ring slots are black coated by a Berußung or a corresponding color order to increase the contrast with the environment.

Die Ausführungsform der Marker als Schlitze ist nicht auf Ringschlitze beschränkt. Die Schlitze können auch als gerade Schlitze mit begrenzter Länge ausgebildet und durch eine Einfräsung in der Messplatte hergestellt sein. Figur 3 zeigt eine Referenzfläche 13 mit vier von Sacklöchern 16 gebildete Marker 5. Die Sacklochdurchmesser Ds liegen zwischen 3 und 6 mm. Die Referenzfläche 13 ist entweder unmittelbar Teil eines Objektes oder des Schmelzenbehälters 3 oder stellt die Stirnfläche einer Messplatte 4, wie in Figur 2 dargestellt, dar. The embodiment of the markers as slots is not limited to ring slots. The slots may also be formed as straight slots of limited length and made by a milled recess in the measuring plate. FIG. 3 shows a reference surface 13 with four markers 5 formed by blind holes 16. The blind hole diameters D s are between 3 and 6 mm. The reference surface 13 is either directly part of an object or the melt container 3 or represents the end face of a measuring plate 4, as shown in Figure 2, is.

Bezugszeichenliste:LIST OF REFERENCE NUMBERS

1 Handhabungsgerät1 handling device

2 Ausgussrohr2 spout

3 Schmelzenbehälter3 melt container

4 Messplatte4 measuring plate

5 Marker5 markers

6 Messeinrichtung6 measuring device

7 Stereokamera7 stereo camera

8 Umgebungsbereich der Marker auf der Stirnfläche der Messplatte8 Ambient area of the markers on the face of the measuring plate

9 Greifer des Handhabungsgerätes9 gripper of the handling device

10 Auswerteeinrichtung10 evaluation device

11 Steuereinrichtung11 control device

12 Schlitz12 slot

13 Referenzfläche13 reference surface

15 lochartige Vertiefung15 hole-like depression

16 Sackloch16 blind hole

OCP, CCP,OCP, CCP,

TCP, RCP BezugspunkteTCP, RCP reference points

B SchlitzbreiteB slit width

T SchlitztiefeT slot depth

D1. D2,D1. D2,

D3, D4 Durchmesser der RingschlitzbohrungenD3, D4 Diameter of ring slot holes

Ds Sacklochdurchmesser Ds blind hole diameter

Claims

Patentansprüche: claims: 1. Vorrichtung zum Verbessern von Genauigkeitseigenschaften von Handhabungsgeräten, wie einem Mehrachsen-Industrieroboter, mit einem Handhabungsgerät (1 ), wenigstens einer Steuereinrichtung (1 1 ) zum Bewegen des Handhabungsgerätes (1 ), einer Messeinrichtung (6), welche von der Handhabungseinrichtung (1 ) unabhängig oder unmittelbar auf der Handhabungseinrichtung (1 ) positioniert ist, einer Auswerteeinrichtung (10) für die von der Messeinrichtung (6) generierten Messsignale und einer Referenzfläche (13) oder Messplatte (4) mit einem oder mehreren Markern (5) oder Löchern an einem anzusteuernden Werkzeug oder einer Einrichtung (3), dadurch gekennzeichnet, dass die Marker (5) oder Löcher von lochartigen Vertiefungen (15) in der Referenzfläche (13) oder der Messplatte (4) in Form von Sacklöchern (16) oder Schlitzen (12) mit einer bestimmten Tiefe und mit einem bestimmten Sacklochdurchmesser oder einer bestimmten Schlitzbreite gebildet sind, wobei das Verhältnis von Tiefe zu Sacklochdurchmesser oder Schlitzbreite größer als 1 ist.1. A device for improving the accuracy characteristics of handling devices, such as a multi-axis industrial robot, with a handling device (1), at least one control device (1 1) for moving the handling device (1), a measuring device (6), of the handling device (1 ) is positioned independently or directly on the handling device (1), an evaluation device (10) for the measuring signals generated by the measuring device (6) and a reference surface (13) or measuring plate (4) with one or more markers (5) or holes a tool or device to be controlled (3), characterized in that the markers (5) or holes of hole-like depressions (15) in the reference surface (13) or the measuring plate (4) in the form of blind holes (16) or slots (12 ) are formed with a certain depth and with a certain blind hole diameter or a certain slot width, wherein the ratio of depth to Blind hole diameter or slot width is greater than 1. 2. Vorrichtung nach Anspruch 1 , dadurch gekennzeichnet, dass die Marker (5) oder Löcher von lochartigen Vertiefungen (15) mit mindestens 10 mm Tiefe und mit einem Sacklochdurchmesser oder einer Schlitzbreite kleiner 10 mm in der Referenzfläche (13) oder der Messplatte (4) in Form von Sacklöchern (16) oder Schlitzen (12) gebildet sind.2. Apparatus according to claim 1, characterized in that the markers (5) or holes of hole-like depressions (15) with at least 10 mm depth and with a blind hole diameter or a slit width of less than 10 mm in the reference surface (13) or the measuring plate (4 ) are formed in the form of blind holes (16) or slots (12). 3. Vorrichtung nach Anspruch 2, dadurch gekennzeichnet, dass die lochartigen Vertiefungen (15) mindestens 15 mm tief sind. 3. A device according to claim 2, characterized in that the hole-like depressions (15) are at least 15 mm deep. 4. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die lochartigen Vertiefungen (15) geschwärzt, vorzugsweise mit Russ beschichtet sind.4. Device according to one of the preceding claims, characterized in that the hole-like depressions (15) are blackened, preferably coated with soot. 5. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Umgebungsbereich (8) der lochartigen Vertiefungen (15) möglichst hell gehalten ist.5. Device according to one of the preceding claims, characterized in that the surrounding area (8) of the hole-like depressions (15) is kept as light as possible. 6. Vorrichtung nach einem der vorhergehenden Ansprüche 2 bis 5, dadurch gekennzeichnet, dass die lochartigen Vertiefungen (15) einen Sacklochdurchmesser oder eine Schlitzbreite kleiner 6 mm aufweisen.6. Device according to one of the preceding claims 2 to 5, characterized in that the hole-like depressions (15) have a blind hole diameter or a slot width less than 6 mm. 7. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass zumindest zwei der lochartigen Vertiefungen (15) unterschiedliche Dimensionierungen aufweisen.7. Device according to one of the preceding claims, characterized in that at least two of the hole-like depressions (15) have different dimensions. 8. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass mindestens drei oder vier lochartige Vertiefungen (15) in der Referenzfläche (13) oder Messplatte (4) angeordnet sind.8. Device according to one of the preceding claims, characterized in that at least three or four hole-like depressions (15) in the reference surface (13) or measuring plate (4) are arranged. 9. Vorrichtung nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Messeinrichtung (6) den Kontrast zwischen den lochartigen Vertiefungen (15) und dem Umgebungsbereich (8) der Vertiefungen (15) erfasst.9. Device according to one of the preceding claims, characterized in that the measuring device (6) detects the contrast between the hole-like depressions (15) and the surrounding area (8) of the recesses (15). 10. Vorrichtung nach Anspruch 9, dadurch gekennzeichnet, dass die Messeinrichtung (6) von einer Stereokamera (7) gebildet ist. 10. The device according to claim 9, characterized in that the measuring device (6) by a stereo camera (7) is formed.
PCT/EP2009/053403 2008-05-20 2009-03-24 Device for improving accuracy properties of handling devices Ceased WO2009141184A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
DE212009000055U DE212009000055U1 (en) 2008-05-20 2009-03-24 Device for improving accuracy characteristics of handling devices
CN2009901002524U CN202088202U (en) 2008-05-20 2009-03-24 Apparatus for improving the accuracy characteristics of operating equipment
KR2020107000030U KR20110002031U (en) 2008-05-20 2009-03-24 Devices to improve the accuracy of handling devices

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
ATA810/2008 2008-05-20
AT0081008A AT506865B1 (en) 2008-05-20 2008-05-20 DEVICE FOR IMPROVING ACCURACY CHARACTERISTICS OF HANDLING DEVICES

Publications (1)

Publication Number Publication Date
WO2009141184A1 true WO2009141184A1 (en) 2009-11-26

Family

ID=40793290

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2009/053403 Ceased WO2009141184A1 (en) 2008-05-20 2009-03-24 Device for improving accuracy properties of handling devices

Country Status (5)

Country Link
KR (1) KR20110002031U (en)
CN (1) CN202088202U (en)
AT (1) AT506865B1 (en)
DE (1) DE212009000055U1 (en)
WO (1) WO2009141184A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2407261A1 (en) * 2010-07-16 2012-01-18 Siemens VAI Metals Technologies GmbH Method and measurer for automatic positioning a spout of a metallurgical container
EP2482019A1 (en) * 2011-01-31 2012-08-01 Siemens VAI Metals Technologies GmbH Burning lance holder for holding a burning lance by means of a handling device
CN102765063A (en) * 2012-06-26 2012-11-07 南京工程学院 Blind hole docking and positioning system and method for non-magnetic workpiece assembly
EP3345723A1 (en) * 2017-01-10 2018-07-11 Ivoclar Vivadent AG Method for controlling a machine tool

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL2584418T3 (en) 2011-10-21 2014-11-28 Siemens Ag Method and device for locating a grasping point of an object in an assembly
DE102016201736B3 (en) 2016-02-04 2017-03-30 Volkswagen Aktiengesellschaft System and method for loading a container having at least one slot
DE102016212695B4 (en) * 2016-05-31 2019-02-21 Siemens Aktiengesellschaft industrial robots
CN109791403B (en) * 2016-08-12 2022-04-19 西门子股份公司 Method and user interface for monitoring a technical device, and computer-readable storage medium
DE102017003993B4 (en) * 2017-04-25 2020-12-10 Kuka Deutschland Gmbh Calibration of a robot
KR102203439B1 (en) * 2018-01-17 2021-01-14 엘지전자 주식회사 a Moving robot and Controlling method for the moving robot
DE102018109329B4 (en) * 2018-04-19 2019-12-05 Gottfried Wilhelm Leibniz Universität Hannover Multi-unit actuated kinematics, preferably robots, particularly preferably articulated robots
DE102019105466B3 (en) 2019-03-04 2020-08-06 Forward Ttc Gmbh Method for operating a drive system and drive system
DE102019106458A1 (en) * 2019-03-13 2020-09-17 ese-robotics GmbH Method for controlling an industrial robot
DE102021203779B4 (en) 2021-04-16 2023-12-14 Volkswagen Aktiengesellschaft Method and device for annotating images of an object recorded with the aid of a camera

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4654949A (en) * 1982-02-16 1987-04-07 Diffracto Ltd. Method for automatically handling, assembling and working on objects
EP0328687A1 (en) * 1987-08-22 1989-08-23 Fanuc Ltd. Calibration system for visual sensor system
US5956417A (en) * 1982-02-16 1999-09-21 Sensor Adaptive Machines, Inc. Robot vision using target holes, corners and other object features
US20030086626A1 (en) * 2001-11-02 2003-05-08 Fuji Photo Film Co., Ltd. Image evaluating method and apparatus
EP1602456A2 (en) * 2004-06-02 2005-12-07 KUKA Roboter GmbH Method and device for controlling manipulators

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62226308A (en) 1986-03-28 1987-10-05 Fanuc Ltd Control system for robot having visual sensor
JPH0371A (en) 1989-02-03 1991-01-07 Terumo Corp Fluid treating device
JP2871310B2 (en) 1992-07-21 1999-03-17 日産自動車株式会社 Position correction arithmetic unit
JP2735458B2 (en) 1993-06-18 1998-04-02 日本碍子株式会社 Biocatalyst carrier
DE10345743A1 (en) 2003-10-01 2005-05-04 Kuka Roboter Gmbh Method and device for determining the position and orientation of an image receiving device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4654949A (en) * 1982-02-16 1987-04-07 Diffracto Ltd. Method for automatically handling, assembling and working on objects
US5956417A (en) * 1982-02-16 1999-09-21 Sensor Adaptive Machines, Inc. Robot vision using target holes, corners and other object features
EP0328687A1 (en) * 1987-08-22 1989-08-23 Fanuc Ltd. Calibration system for visual sensor system
US20030086626A1 (en) * 2001-11-02 2003-05-08 Fuji Photo Film Co., Ltd. Image evaluating method and apparatus
EP1602456A2 (en) * 2004-06-02 2005-12-07 KUKA Roboter GmbH Method and device for controlling manipulators

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2407261A1 (en) * 2010-07-16 2012-01-18 Siemens VAI Metals Technologies GmbH Method and measurer for automatic positioning a spout of a metallurgical container
EP2482019A1 (en) * 2011-01-31 2012-08-01 Siemens VAI Metals Technologies GmbH Burning lance holder for holding a burning lance by means of a handling device
CN102765063A (en) * 2012-06-26 2012-11-07 南京工程学院 Blind hole docking and positioning system and method for non-magnetic workpiece assembly
EP3345723A1 (en) * 2017-01-10 2018-07-11 Ivoclar Vivadent AG Method for controlling a machine tool
WO2018130313A1 (en) * 2017-01-10 2018-07-19 Ivoclar Vivadent Ag Method for controlling a machine tool
CN110114188A (en) * 2017-01-10 2019-08-09 伊沃克拉尔维瓦登特股份公司 Method for controlling lathe
US11439484B2 (en) 2017-01-10 2022-09-13 Ivoclar Vivadent Ag Method for controlling a machine tool

Also Published As

Publication number Publication date
AT506865A1 (en) 2009-12-15
DE212009000055U1 (en) 2011-01-20
CN202088202U (en) 2011-12-28
AT506865B1 (en) 2010-02-15
KR20110002031U (en) 2011-03-02

Similar Documents

Publication Publication Date Title
AT506865B1 (en) DEVICE FOR IMPROVING ACCURACY CHARACTERISTICS OF HANDLING DEVICES
DE60127644T2 (en) Teaching device for a robot
DE602005000598T2 (en) Three-dimensional optical sensor
EP2166510B1 (en) Method for calculating the position and orientation of a camera in a vehicle
DE4428363C2 (en) X-ray microdiffractometer
DE3216053A1 (en) OPTOELECTRONIC MEASURING METHOD AND DEVICE FOR CARRYING OUT THE METHOD
DE102004050149A1 (en) Drawbar and trailer angle determining method, involves ascertaining drawbar and trailer`s characteristic edges and lines from video stream of sensor e.g. video camera, and determining angles from geometrical conditions of characteristic
EP2356400B1 (en) Robot for automatic 3-d measurement and method
DE69524288T2 (en) Apparatus and scale for measuring a dimension of an object
EP0564535B1 (en) Determination of the relative position of measurement points
EP3295144B1 (en) Device for measuring an imaging property of an optical system
DE69118185T2 (en) Procedure for creating the location and arrangement of an object under investigation
DE4343404A1 (en) Method and device for adjusting reamers and the like
EP3953077A1 (en) Measuring device for determining the bending angle
DE102018124208B4 (en) Method and device for monitoring a laser machining process on a workpiece and the associated laser machining system
DE19733297C2 (en) Non-contact optical thickness measurement
DE102014113070A1 (en) Adjusting device and method for aligning a component on a vehicle
DE102012204498A1 (en) Sewer pipe inspection device has measuring and control circuit to automatically determine light radiated from point light source, and reflected light spot in detected image of camera to evaluate analog video signal of camera
DE102017204629A1 (en) SYSTEM WITH A TOOL AND METHOD FOR LEADING A USER OF A TOOL WHEN TREATING AT LEAST ONE WORKPIECE
DE102007056773A1 (en) Method for determining position of virtual bias point relative to coordinate system of industrial robot, involves determining well-known position of virtual bias point for determining position of measuring point in coordinate system
EP3663017A1 (en) Monitoring of a wear level of a strand guiding roller of a continuous casting plant
DE102004046752B4 (en) Method for the three-dimensional detection of measurement objects
DE3501533A1 (en) Method and apparatus for monitoring tool breakage
DE19636922A1 (en) Adjustment Method for Laser Doppler Wind Speed Measurement
DE4330988C2 (en) Method for adjusting reamers and the like

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 200990100252.4

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09749674

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20107000030

Country of ref document: KR

Kind code of ref document: U

122 Ep: pct application non-entry in european phase

Ref document number: 09749674

Country of ref document: EP

Kind code of ref document: A1