KR101649424B1 - Position control system and method - Google Patents
Position control system and method Download PDFInfo
- Publication number
- KR101649424B1 KR101649424B1 KR1020140194998A KR20140194998A KR101649424B1 KR 101649424 B1 KR101649424 B1 KR 101649424B1 KR 1020140194998 A KR1020140194998 A KR 1020140194998A KR 20140194998 A KR20140194998 A KR 20140194998A KR 101649424 B1 KR101649424 B1 KR 101649424B1
- Authority
- KR
- South Korea
- Prior art keywords
- unit
- markers
- markers provided
- inspection unit
- inspection
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/02—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
- G01S5/10—Position of receiver fixed by co-ordinating a plurality of position lines defined by path-difference measurements, e.g. omega or decca systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1694—Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S1/00—Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith
- G01S1/02—Beacons or beacon systems transmitting signals having a characteristic or characteristics capable of being detected by non-directional receivers and defining directions, positions, or position lines fixed relatively to the beacon transmitters; Receivers co-operating therewith using radio waves
- G01S1/68—Marker, boundary, call-sign, or like beacons transmitting signals not carrying directional information
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
일 실시예에 따른 위치 제어 시스템은, 일 측에 대상체가 고정되고, 대상체의 위치를 제어할 수 있는 구동부; 상기 대상체의 하부에 배치되어, 상기 대상체의 위치 제어 기준을 제공하는 검사부; 및 상기 검사부의 하부에 배치되어, 상기 대상체 및 검사부의 위치 정보를 획득할 수 있는 비전부;를 포함하고, 상기 대상체 및 검사부에는 적어도 두 개의 마커가 서로 대응되는 위치에 각각 구비되고, 상기 구동부에 의해 상기 대상체에 구비된 마커와 상기 검사부에 구비된 마커를 일치시킬 수 있다.A position control system according to an embodiment includes a driving unit to which a target object is fixed to one side and can control a position of the target object; An inspection unit disposed below the object and providing a position control reference of the object; And a vision unit disposed at a lower portion of the examination unit and capable of acquiring positional information of the object and the examination unit, wherein the object and the examination unit are provided at positions where at least two markers correspond to each other, The markers provided on the object and the markers provided on the inspection unit can be matched with each other.
Description
본 발명은 위치 제어 시스템 및 방법에 관한 것으로서, 보다 상세하게는 적어도 두 개의 마커를 이용하여 대상체의 위치를 효율적으로 보정할 수 있는 위치 제어 시스템 및 방법에 관한 것이다.BACKGROUND OF THE
현재 머신 비전 시스템은 로봇의 물체 인식이나 자동 조립 및 검사 장비에 다양하게 활용되고 있다.Currently, machine vision systems are widely used for object recognition and automatic assembly and inspection of robots.
특히 자동 조립 및 검사 장비의 경우에 머신 비전 시스템은 대상 물체의 정확한 위치를 파악하여 원하는 좌표로 이동하거나 제품의 조립상태나 용접 불량 여부 등을 판단하는데 많이 응용되고 있다.Especially, in the case of automatic assembly and inspection equipments, the machine vision system is widely applied to determine the precise position of the object to move to the desired coordinates, and to determine the assembled state of the product or the welding defect.
대상물의 위치 파악을 위한 기존의 일반적인 방법은 대상 물체의 특정 한 부분의 표식을 이용하여 대상물의 좌표만을 측정하였다. A conventional method for locating an object is to measure only the coordinates of the object using a marker of a specific part of the object.
그러나 조립 부품이나 대상물이 점점 소형화됨에 한 점이 일치하더라도 대상 물체가 약간만 회전하면 반대편은 어긋나는 문제가 발생한다.However, even if the assemblies or objects are getting smaller and smaller, there is a problem that the object is misaligned when the object is slightly rotated.
따라서 정밀 부품 조립 및 검사를 위해서는 한 점을 통한 위치 측정뿐 아니라 다중 점 측정을 통해 회전량도 측정할 필요가 생겼다.Therefore, in order to assemble and inspect precision parts, it is necessary to measure the rotation amount through multipoint measurement as well as position measurement through one point.
예를 들어, 2003년 12월 22일에 출원된 KR 2003-0094380에는 "비전 기반 이동로봇의 위치 제어 시스템"에 대하여 개시되어 있다.For example, KR 2003-0094380, filed on December 22, 2003, discloses "Vision-based mobile robot position control system ".
일 실시예에 따른 목적은 적어도 두 개의 마커를 사용하여 대상체의 위치 보정 및 회전각 보정을 동시에 수행할 수 있는 위치 제어 시스템 및 방법을 제공하는 것이다.An object of the present invention is to provide a position control system and method capable of simultaneously performing position correction and rotational angle correction of an object using at least two markers.
일 실시예에 따른 목적은 적어도 두 개의 마커를 구비하여, 위치 제어의 정밀도 및 정확도를 향상시킬 수 있으며, 마커의 크기를 감소시킬 수 있는 위치 제어 시스템 및 방법을 제공하는 것이다.An object according to an exemplary embodiment is to provide a position control system and method that can include at least two markers to improve the precision and accuracy of position control and reduce the size of a marker.
일 실시예에 따른 목적은 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 구동부가 대상체를 이동시킴으로써, 대상체에 구비된 적어도 두 개의 마커와 검사부에 구비된 적어도 두 개의 마커를 신속하게 일치시킬 수 있는 위치 제어 시스템 및 방법을 제공하는 것이다.An object of the present invention is to provide an apparatus and a method for controlling at least two markers provided on a target by moving a target so that a line segment connecting at least two markers provided in a target object and a line segment connecting at least two markers provided in the target are parallel, And a position control system and method capable of promptly matching at least two markers provided in an inspection unit.
일 실시예에 따른 목적은 반도체 부품의 검사뿐만 아니라, 대상체의 위치 제어가 요구되는 경우에 다양하게 이용될 수 있는 위치 제어 시스템 및 방법을 제공하는 것이다.An object of an embodiment is to provide a position control system and method that can be used variously in the case where position control of an object is required as well as inspection of semiconductor components.
상기 목적을 달성하기 위한 일 실시예에 따른 위치 제어 시스템은, 일 측에 대상체가 고정되고, 대상체의 위치를 제어할 수 있는 구동부; 상기 대상체의 하부에 배치되어, 상기 대상체의 위치 제어 기준을 제공하는 검사부; 및 상기 검사부의 하부에 배치되어, 상기 대상체 및 검사부의 위치 정보를 획득할 수 있는 비전부;를 포함하고, 상기 대상체 및 검사부에는 적어도 두 개의 마커가 서로 대응되는 위치에 각각 구비되고, 상기 구동부에 의해 상기 대상체에 구비된 마커와 상기 검사부에 구비된 마커를 일치시킬 수 있다.According to an aspect of the present invention, there is provided a position control system including: a driving unit to which a target object is fixed and which can control a position of a target object; An inspection unit disposed below the object and providing a position control reference of the object; And a vision unit disposed at a lower portion of the examination unit and capable of acquiring positional information of the object and the examination unit, wherein the object and the examination unit are provided at positions where at least two markers correspond to each other, The markers provided on the object and the markers provided on the inspection unit can be matched with each other.
일 측에 의하면, 상기 구동부는 상기 대상체를 회전 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하게 하고, 상기 대상체를 직선 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분을 일치시킬 수 있다.According to one aspect of the present invention, the driving unit rotates the object so that a line segment connecting at least two markers provided in the object and a line segment connecting at least two markers provided in the inspection unit are parallel, The line segment connecting the at least two markers provided on the object and the line segment connecting the at least two markers provided in the inspection unit may be aligned.
일 측에 의하면, 상기 구동부는 상기 대상체를 직선 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커 중 하나와 상기 검사부에 구비된 적어도 두 개의 마커 중 하나를 일치시킨 후에, 상기 대상체를 회전 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분이 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분과 평행하게 하며, 상기 대상체를 직선 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분을 일치시킬 수 있다.According to one aspect of the present invention, the driving unit linearly moves the object, and after one of the at least two markers provided on the object matches one of the at least two markers provided on the inspection unit, Wherein a line segment connecting at least two markers provided on the object is parallel to a line segment connecting at least two markers provided in the inspection unit and the at least two markers provided in the object are connected A line segment connecting one line segment and at least two markers provided in the inspection unit can be matched.
상기 목적을 달성하기 위한 일 실시예에 따른 위치 제어 방법은, 일 측에 대상체가 고정된 구동부, 상기 대상체 하부에 배치된 검사부 및 상기 검사부 하부에 배치된 비전부를 포함하는 위치 제어 시스템이 제공되는 단계; 상기 비전부에 의해 상기 대상체에 구비된 적어도 두 개의 마커의 좌표값 및 상기 검사부에 구비된 적어도 두 개의 마커의 좌표값이 각각 측정되는 단계; 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계; 및 상기 대상체에 구비된 적어도 두 개의 마커와 상기 검사부에 구비된 적어도 두 개의 마커가 일치하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계;를 포함할 수 있다.According to another aspect of the present invention, there is provided a position control method including: a position control system including a driver having a target object fixed to one side thereof, an inspection unit disposed below the target object, and a vision unit disposed below the inspection unit ; Measuring coordinate values of at least two markers provided on the object and coordinate values of at least two markers provided on the inspection unit, respectively, by the vision unit; Moving the object by the driving unit such that a line segment connecting at least two markers provided in the object and a line segment connecting at least two markers provided in the inspection unit are parallel; And moving the object by the driving unit such that at least two markers provided on the object coincide with at least two markers provided on the inspection unit.
일 측에 의하면, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계는, 상기 대상체에 구비된 적어도 두 개의 마커 중 하나와 상기 검사부에 구비된 적어도 두 개의 마커 중 하나가 일치하도록 상기 대상체가 상기 구동부에 의해 직선 이동되는 단계; 상기 대상체에 구비된 적어도 두 개의 마커 중 다른 하나의 좌표값이 상기 비전부에 의해 새로 측정되는 단계; 및 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 회전 이동되는 단계;를 더 포함할 수 있다.According to one aspect of the present invention, the step of moving the object by the driving unit such that a line segment connecting at least two markers provided on the object and a line segment connecting at least two markers provided in the inspection unit are parallel, The object is linearly moved by the driving unit so that one of at least two markers provided and one of at least two markers provided on the inspection unit coincide with each other; The coordinate value of at least one of the at least two markers provided in the object is newly measured by the vision unit; And rotating the object by the driving unit such that a line segment connecting at least two markers provided on the object and a line segment connecting at least two markers provided in the inspection unit are parallel to each other.
일 실시예에 따른 위치 제어 시스템 및 방법에 의하면, 적어도 두 개의 마커를 사용하여 대상체의 위치 보정 및 회전각 보정을 동시에 수행할 수 있다.According to the position control system and method according to an embodiment, at least two markers can be used to simultaneously perform position correction and rotational angle correction of an object.
일 실시예에 따른 위치 제어 시스템 및 방법에 의하면, 적어도 두 개의 마커를 구비하여, 위치 제어의 정밀도 및 정확도를 향상시킬 수 있으며, 마커의 크기를 감소시킬 수 있다.According to the position control system and method according to one embodiment, at least two markers can be provided, thereby improving the precision and accuracy of position control and reducing the size of the marker.
일 실시예에 따른 위치 제어 시스템 및 방법에 의하면, 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 구동부가 대상체를 이동시킴으로써, 대상체에 구비된 적어도 두 개의 마커와 검사부에 구비된 적어도 두 개의 마커를 신속하게 일치시킬 수 있다.According to the position control system and method of the embodiment, the driving unit moves the object so that the line segment connecting the at least two markers provided on the object and the line segment connecting the at least two markers provided in the inspection unit are parallel to each other, The at least two markers provided on the inspection unit can be quickly matched with the at least two markers provided.
일 실시예에 따른 위치 제어 시스템 및 방법에 의하면, 반도체 부품의 검사뿐만 아니라, 대상체의 위치 제어가 요구되는 경우에 다양하게 이용될 수 있다.According to the position control system and method according to the embodiment, not only the inspection of the semiconductor parts but also the position control of the object can be variously used.
도 1은 일 실시예에 따른 위치 제어 시스템을 도시한다.
도 2는 대상체에 적어도 두 개의 마크가 배치된 모습을 도시한다.
도 3은 검사부 상에 대상체가 안착된 모습을 도시한다.
도 4는 비전부에 의해 대상체 및 검사부에 구비된 마크들의 좌표값이 측정된 모습을 도시한다.
도 5는 일 실시예에 따른 위치 제어 방법을 도시한다.
도 6a 내지 6e는 일 실시예에 따른 위치 제어 방법에 의해 대상체의 위치가 제어되는 모습을 도시한다.Figure 1 shows a position control system according to one embodiment.
Fig. 2 shows a state in which at least two marks are arranged on the object.
Fig. 3 shows a state where the object is seated on the inspection unit.
FIG. 4 shows a measured coordinate value of a mark provided on the object and the inspection unit by the non-conversion unit.
5 shows a position control method according to an embodiment.
6A to 6E illustrate how the position of an object is controlled by a position control method according to an embodiment.
이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings. However, the present invention is not limited to or limited by the embodiments. Like reference symbols in the drawings denote like elements.
도 1은 일 실시예에 따른 위치 제어 시스템을 도시하고, 도 2는 대상체에 적어도 두 개의 마크가 배치된 모습을 도시하고, 도 3은 검사부 상에 대상체가 안착된 모습을 도시하고, 도 4는 비전부에 의해 대상체 및 검사부에 구비된 마크들의 좌표값이 측정된 모습을 도시한다.Fig. 1 shows a position control system according to an embodiment, Fig. 2 shows a state in which at least two marks are arranged on a target object, Fig. 3 shows a state where a target object is placed on a test part, And the coordinate values of the marks provided on the object and the inspection unit by the vision unit are measured.
도 1을 참조하여, 일 실시예에 따른 위치 제어 시스템(10)은, 구동부(100), 검사부(200) 및 비전부(300)를 포함할 수 있다.Referring to FIG. 1, a
상기 구동부(100)는 대상체(T)의 위치를 보정 또는 제어할 수 있도록, 플레이트(110) 및 구동 요소(120)를 포함할 수 있다.The
상기 플레이트(110)의 일 측에는 대상체(T)가 예를 들어 진공 흡착에 의해 고정될 수 있다. 플레이트(110)에 대상체(T)가 고정되는 방식은 이에 국한되지 아니하며, 다양한 방식으로 이루어질 수 있다.On one side of the
또한, 플레이트(110)는 대상체(T)의 크기 및 형상에 대응되도록 마련될 수 있으며, 이에 의해 플레이트(110)에 대상체(T)를 효율적으로 고정시킬 수 있다.The
상기 플레이트(110)에는 구동 부재(120)가 연결될 수 있다. 예를 들어, 플레이트(110)의 타 측에 구동 부재(120)가 연결될 수 있다.The
상기 구동 부재(120)는 예를 들어 샤프트(122) 및 상기 샤프트(122)를 직선 또는 회전 이동시키는 구동 요소(124)를 포함할 수 있다.The
구체적으로, 구동 요소(124)에 의해 샤프트(122)가 회전되고, 그에 의해 플레이트(110) 및 플레이트(110)에 고정된 대상체(T)가 회전 이동될 수 있다.Specifically, the
또는, 구동 요소(124)에 의해 샤프트(122)가 직선 이동되고, 그에 의해 플레이트(110) 및 플레이트(110)에 고정된 대상체(T)가 직선 이동될 수 있다.Alternatively, the
또한, 일 실시예에 따른 위치 제어 시스템(10)은 구동부(100)의 작동을 제어하기 위한 제어부(미도시)를 더 포함할 수 있으며, 제어부에 의해 구동부(100)의 이동 속도 또는 이동 방향 등을 조정할 수 있다.The
이와 같이 구성된 구동부(100)에 의해 고정되는 대상체(T)는 예를 들어 COF로 마련될 수 있으며, 상기 COF(Chip On Film)는 반도체 칩을 얇은 필름 형태의 인쇄회로기판에 장착한 것이다.The object T to be fixed by the
그러나, 대상체(T)는 COF에 국한되지 아니하며, 위치 제어가 요구되는 것이라면 어느 것이든지 가능하며, 예를 들어 반도체 웨이퍼로 마련될 수 있다.However, the object T is not limited to the COF, and any object can be used as long as position control is required. For example, the object T may be provided by a semiconductor wafer.
다만, 이하에서는 대상체(T)가 COF인 것을 예로 들어 설명하기로 한다.In the following description, it is assumed that the object T is a COF.
도 2를 참조하여, 대상체(T)가 COF로 마련된 경우, 대상체(T)에는 중앙에 배치된 칩, 상기 칩으로부터 양측으로 연장된 패턴 및 상기 패턴의 단부에 구비된 복수 개의 패드가 구비될 수 있다.2, when the object T is provided with a COF, the object T may be provided with a chip disposed at the center, a pattern extending to both sides from the chip, and a plurality of pads provided at the end of the pattern have.
추가적으로, 대상체(T)에는 적어도 두 개의 마커(M1, M2)가 구비될 수 있다.In addition, the object T may be provided with at least two markers M1 and M2.
상기 마커(M1, M2)는 대상체(T)의 위치 제어를 위한 것으로서, 후술하게 될 검사부(200)에 구비된 마커(M3, M4)와 일치시킬 수 있다.The markers M1 and M2 are for controlling the position of the object T and can be matched with the markers M3 and M4 provided in the
예를 들어, 상기 마커(M1, M2)는 대각선으로 배치될 수 있으며, 하나의 마커(M1)는 대상체(T)의 좌측 하단에 배치되고, 다른 하나의 마커(M2)는 대상체(T)의 우측 상단에 배치될 수 있다.For example, the markers M1 and M2 may be arranged diagonally, one marker M1 is disposed at the lower left of the target T, and the other marker M2 is positioned at the lower left of the target T May be disposed at the upper right corner.
도면에는 두 개의 마커(M1, M2)가 구비된 것으로 도시되었으나, 마커의 개수는 이에 국한되지 아니하며, 세 개 이상의 마커가 구비될 수 있다.Although two markers M1 and M2 are shown in the figure, the number of markers is not limited to three, and three or more markers may be provided.
이하에서는 대상체(T)에 두 개의 마커(M1, M2)가 구비된 것으로 설명하기로 한다.Hereinafter, it is assumed that the target object T is provided with two markers M1 and M2.
이와 같이 대상체(T)에 복수 개의 마커(M1, M2)가 구비됨으로써, 마커(M)의 크기를 작게 유지하면서, 위치 제어의 정밀도를 높일 수 있다. 그리고, 마커(M1, M2)를 이용하여 대상체(T)의 불량 등을 판단할 수 있어 불필요한 패키징의 낭비를 방지할 수 있다.Since the target body T is provided with the plurality of markers M1 and M2 as described above, the accuracy of the position control can be enhanced while keeping the size of the marker M small. The markers M1 and M2 can be used to determine the defects of the target object T and the like, thereby avoiding unnecessary waste of packaging.
다시 도 1을 참조하여, 상기 구동부(100)의 하부에는 검사부(200)가 배치될 수 있다.Referring again to FIG. 1, the
상기 검사부(200)는 검사 요소(210) 및 안착 부재(220)를 포함할 수 있다.The
상기 검사 요소(210)는 대상체(T)의 위치 제어 기준을 제공할 수 있으며, 대상체(T)의 위치 제어를 검사할 수 있다.The
일 실시예에 따른 위치 제어 시스템(10)이 COF의 불량 여부 검사를 위해 이용되는 경우, 상기 검사 요소(210)는 예를 들어, 프로브 카드로 마련될 수 있다.When the
상기 프로브 카드는 반도체 칩의 동작을 검사하기 위한 테스트 장치로서, 프로브 카드에 장착되어 있는 니들이 반도체 칩과 접촉하면서 전기신호를 보내게 되고, 그때 돌아오는 신호에 따라 불량 반도체 칩을 선별할 수 있다.The probe card is a test device for inspecting the operation of the semiconductor chip. The probe mounted on the probe card contacts the semiconductor chip and sends an electrical signal. The defective semiconductor chip can be selected according to a return signal.
전술된 바와 같이 상기 검사 요소(210)에는 니들(미도시)이 구비될 수 있고, 상기 니들이 대상체(T)의 패드와 접촉하면서 보내지는 신호에 의해 대상체(T)의 불량 여부를 검사할 수 있다.As described above, the
도 3을 참조하여, 상기 검사 요소(210)에는 대상체(T)의 마커(M1, M2)에 대응되는 위치에 마커(M3, M4)가 구비될 수 있다. 마커(M3)은 마커(M1)에 대응되고, 마커(M4)는 마커(M2)에 대응될 수 있다.Referring to FIG. 3, the
상기 검사 요소(210)에 구비된 마커(M3, M4)는 대상체(T)의 위치 제어 기준이 될 수 있다. The markers M3 and M4 provided in the
예를 들어, 대상체(T)에 구비된 마커(M1, M2)와 검사 요소(210)에 구비된 마커(M3, M4)와 정확히 일치한다면, 구동부(100)에 의한 대상체(T)의 위치 제어가 요구되지 않을 수 있다.For example, if the markers M1 and M2 provided on the object T and the markers M3 and M4 provided on the
그러나, 대상체(T)에 구비된 마커(M1, M2)와 검사 요소(210)에 구비된 마커(M3, M4)와 일치하지 않는다면, 구동부(100)에 의한 대상체(T)의 위치 제어가 요구될 수 있다. 그러므로, 이러한 경우에, 대상체(T)가 구동부(100)에 의해 직선 또는 회전 이동될 수 있다.However, if the markers M1 and M2 provided on the object T and the markers M3 and M4 provided on the
또한, 검사 요소(210)는 안착 부재(220)에 고정될 수 있다.In addition, the
상기 안착 부재(220)는 구동부(100)의 플레이트(110) 상에 일정한 간격을 두고 배치될 수 있으며, 검사 요소(210)가 대상체(T)의 위치 제어를 위한 기준 지표가 될 수 있도록 고정된 위치에 배치될 수 있다.The mounting
이와 같이 구성된 검사부(200)에 의해 대상체(T)의 위치 제어를 효율적으로 수행할 수 있다.The position control of the object T can be efficiently performed by the
또한, 검사부(200)의 하부에는 비전부(300)가 배치될 수 있다.In addition, the
상기 비전부(300)는 카메라(310) 및 지지체(320)를 포함할 수 있다.The
상기 카메라(310)는 복수 개의 카메라로 마련되어, 대상체(T) 및 검사부(200)의 위치 정보를 획득할 수 있다.The
예를 들어, 두 개의 카메라로 마련될 수 있으며, 각각의 카메라는 서로 다른 마커쌍(M1-M3, M2-M4)을 측정하는 역할을 할 수 있다.For example, it may be provided with two cameras, and each camera can serve to measure different marker pairs (M1-M3, M2-M4).
상기 지지체(320)는 상기 카메라(310)를 지지하는 역할을 할 수 있다. The
예를 들어, 상기 지지체(320)는 검사부(200)의 안착 부재(220)와 비슷하거나 약간 작은 크기로 마련될 수 있다.For example, the
이와 같이 구성된 비전부(300)에 의해서, 대상체(T) 및 검사 요소(210)의 위치 정보를 획득할 수 있으며, 예를 들어, 대상체(T) 및 검사 요소(210)에 구비된 마커(M1, M2, M3, M4)의 좌표값을 측정할 수 있다.Position information of the target object T and the
이때, 마커(M1, M2, M3, M4)의 좌표값의 기준점은 플레이트의 중심점이 될 수 있다. 다시 말해서, 플레이트의 중심점에서 좌표값은 (0, 0)이 될 수 있다.At this time, the reference point of the coordinate values of the markers M1, M2, M3, and M4 may be the center point of the plate. In other words, the coordinate value at the center of the plate can be (0, 0).
도 4에 도시된 바와 같이, 마커(M1)의 좌표값은 (X'1, Y'1)로 측정되고, 마커(M2)의 좌표값은 (X'2, Y'2)로 측정되고, 마커(M3)의 좌표값은 (X1, Y1)로 측정되고, 마커(M4)의 좌표값은 (X2, Y2)로 측정될 수 있다.As shown in Fig. 4, the coordinate value of the marker M1 is measured as (X'1, Y'1), the coordinate value of the marker M2 is measured as (X'2, Y'2) The coordinate value of the marker M3 may be measured as (X1, Y1), and the coordinate value of the marker M4 may be measured as (X2, Y2).
그러므로 비전부(300)에 의해서 측정된 좌표값을 이용하여, 대상체(T)가 이동되어야 하는 거리 또는 대상체(T)의 회전각을 계산할 수 있어, 대상체(T)의 위치 제어를 신속하고 정확하게 수행할 수 있다.Therefore, the distance by which the target object T is moved or the rotation angle of the target object T can be calculated using the coordinate values measured by the
이상 일 실시예에 따른 위치 제어 시스템에 대하여 설명되었으며, 이하에서는 일 실시예에 따른 위치 제어 방법에 대하여 설명하기로 한다.The position control system according to one embodiment has been described, and the position control method according to one embodiment will be described below.
도 5는 일 실시예에 따른 위치 제어 방법을 도시하고, 도 6a 내지 6e는 일 실시예에 따른 위치 제어 방법에 의해 대상체의 위치가 제어되는 모습을 도시한다.FIG. 5 shows a position control method according to an embodiment, and FIGS. 6A to 6E show a state where a position of an object is controlled by a position control method according to an embodiment.
도 5를 참조하여, 일 실시예에 따른 위치 제어 방법은 다음과 같이 수행될 수 있다.Referring to FIG. 5, a position control method according to an embodiment may be performed as follows.
우선 일 측에 대상체가 고정된 구동부, 상기 대상체 하부에 배치된 검사부 및 상기 검사부 하부에 배치된 비전부를 포함하는 위치 제어 시스템이 제공된다(S10).There is provided a position control system including a driving unit in which a target object is fixed on one side, an inspection unit disposed under the target object, and a vision unit disposed under the inspection unit.
이때, 대상체 및 검사부에는 적어도 두 개의 마커가 각각 구비될 수 있다.At this time, at least two markers may be provided in the object and the inspection unit, respectively.
도 6a에 도시된 바와 같이, 플레이트(210)의 중심점(0, 0)으로부터 대상체의 두 개의 마커(M1, M2)와 검사부의 두 개의 마커(M3, M4)가 일치하지 않는다는 것을 확인할 수 있다.It can be confirmed that the two markers M1 and M2 of the object and the two markers M3 and M4 of the inspection unit do not coincide with each other from the center point (0,0) of the
이어서, 비전부에 의해 대상체에 구비된 적어도 두 개의 마커의 좌표값 및 검사부에 구비된 적어도 두 개의 마커의 좌표값이 각각 측정된다(S20).Next, the coordinate values of at least two markers provided in the object and the coordinate values of at least two markers provided in the inspection unit are measured by the non-conversion unit, respectively (S20).
도 6b에 도시된 바와 같이, 대상체의 마커(M1)의 좌표값은 (X'1, Y'1)로 측정되고, 대상체의 마커(M2)의 좌표값은 (X'2, Y'2)로 측정되고, 검사 요소의 마커(M3)의 좌표값은 (X1, Y1)로 측정되고, 검사 요소의 마커(M4)의 좌표값은 (X2, Y2)로 측정될 수 있다.6B, the coordinate value of the marker M1 of the object is measured as (X'1, Y'1), the coordinate value of the marker M2 of the object is (X'2, Y'2) The coordinate value of the marker M3 of the inspection element is measured as (X1, Y1), and the coordinate value of the marker M4 of the inspection element can be measured as (X2, Y2).
이때, 마커(M1)와 마커(M2)를 연결한 선분의 길이와 마커(M3)와 마커(M3)를 연결한 선분의 길이(L)는 동일할 수 있다. 그리고, 그 선분들의 길이는 이미 알려져 있는 값일 수 있다. The length of the line segment connecting the marker M1 and the marker M2 and the length L of the line segment connecting the marker M3 and the marker M3 may be the same. The length of the line segments may be a known value.
이후에, 대상체에 구비된 적어도 두 개의 마커 중 하나와 검사부에 구비된 적어도 두 개의 마커 중 하나가 일치하도록 대상체가 구동부에 의해 직선 이동된다(S30).Thereafter, the object is linearly moved by the driving unit so that one of the at least two markers provided on the object matches one of the at least two markers provided in the inspection unit (S30).
도 6c를 참조하여, 대상체의 마커(M1)와 검사 요소의 마커(M3)가 일치하도록 구동부에 의해 플레이트가 X-Y 축으로 직선 이동될 수 있다.Referring to FIG. 6C, the plate may be linearly moved in the X-Y axis by the driving unit so that the marker M1 of the object matches the marker M3 of the inspection element.
그런 다음, 대상체에 구비된 적어도 두 개의 마커 중 다른 하나의 좌표값이 비전부에 의해 새로 측정된다(S40).Then, the coordinates of the other one of the at least two markers provided in the object are newly measured by the vision unit (S40).
도 6c를 계속 참조하여, 대상체의 마커(M1)와 검사 요소의 마커(M3)가 일치하면서, 대상체의 다른 하나의 마커(M2)의 좌표값은 (X3, Y3)으로 측정될 수 있다. 그러므로, 비전부에 의해서 플레이트 상에 세 개의 마커가 존재하는 것으로 측정될 수 있다.With continued reference to Fig. 6C, the coordinate values of the other marker M2 of the target object can be measured as (X3, Y3) while the marker M1 of the object coincides with the marker M3 of the inspection element. Therefore, it can be determined that there are three markers on the plate by the non-potential portion.
이어서, 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 대상체가 구동부에 의해 회전 이동된다(S50).Then, the object is rotated by the driving unit so that the line segment connecting the at least two markers provided on the object and the line segment connecting the at least two markers provided in the inspection unit are parallel to each other (S50).
이때, 플레이트가 구동부에 의해 회전되어야 하는 회전각은 도 6c에서 두 개의 마커(M3, M4)와 두개의 마커(M3, M2)가 이루는 각도를 측정하여 계산될 수 있다. At this time, the rotation angle at which the plate is rotated by the driving unit can be calculated by measuring the angle formed by the two markers M3 and M4 and the two markers M3 and M2 in FIG. 6C.
도 6d를 참조하여, 상기 (X4, Y4)는 회전에 의한 마커(M1)의 새로운 좌표값이고, (X5, Y5)는 회전에 의한 마커(M2)의 새로운 좌표값이다. 결과적으로 두 개의 마커(M3, M4)와 두 개의 마커(M1, M2)는 평행사변형을 이루게 된다.Referring to FIG. 6D, (X4, Y4) is a new coordinate value of the marker M1 by rotation, and (X5, Y5) is a new coordinate value of the marker M2 by rotation. As a result, the two markers M3 and M4 and the two markers M1 and M2 form a parallelogram.
마지막으로, 대상체에 구비된 적어도 두 개의 마커와 검사부에 구비된 적어도 두 개의 마커가 일치하도록 대상체가 구동부에 의해 직선 이동된다(S60).Finally, the object is linearly moved by the driving unit so that at least two markers provided on the object match with at least two markers provided in the inspection unit (S60).
도 6e를 참조하여, 대상체의 마커(M1)를 검사 요소의 마커(M3)에 일치시키면, 대상체의 마커(M2)가 검사 요소의 마커(M3)에 일치될 수 있다.6E, when the marker M1 of the object is matched with the marker M3 of the inspection element, the marker M2 of the object can be matched with the marker M3 of the inspection element.
이때, 플레이트는 구동부에 의해 직선 이동되므로, 플레이트의 중심점이 이동될 수 있다.At this time, since the plate is linearly moved by the driving unit, the center point of the plate can be moved.
이러한 과정을 거쳐 대상체의 마커와 검사 요소의 마커를 일치시킬 수 있으며, 대상체의 위치를 제어할 수 있다.Through this process, the marker of the object and the marker of the inspection element can be matched, and the position of the object can be controlled.
일 실시예에 따른 위치 제어 방법에서는 대상체를 직선 이동시켜 대상체에 구비된 적어도 두 개의 마커 중 하나와 검사 요소에 구비된 적어도 두 개의 마커 중 하나를 일치시킨 후에, 대상체를 회전 이동시켜, 대상체에 구비된 적어도 두 개의 마커를 연결한 선분이 검사 요소에 구비된 적어도 두 개의 마커를 연결한 선분과 평행하게 하였으나, 우선 대상체를 회전 이동시켜, 대상체에 구비된 적어도 두 개의 마커를 연결한 선분이 검사 요소에 구비된 적어도 두 개의 마커를 연결한 선분과 평행하게 한 후에, 대상체에 구비된 적어도 두 개의 마커와 검사 요소에 구비된 적어도 두 개의 마커를 일치시킬 수 있음은 당연하다.In the position control method according to an embodiment, after the object is linearly moved to match one of at least two markers provided in the object and at least two markers provided in the inspection element, the object is rotated and moved The line segment connecting the at least two markers provided on the object is parallel to the line segment connecting the at least two markers provided in the inspection element, It is of course possible to match at least two markers provided on the object with at least two markers provided on the inspection element after the markers are parallel to the line segment connecting the at least two markers provided on the inspection element.
이와 같이 일 실시예에 따른 위치 제어 시스템 및 방법은, 적어도 두 개의 마커를 사용하여 대상체의 위치 보정 및 회전각 보정을 동시에 수행할 수 있으며, 위치 제어의 정밀도 및 정확도를 향상시킬 수 있다. 그리고, 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 구동부가 대상체를 이동시킴으로써, 대상체에 구비된 적어도 두 개의 마커와 검사부에 구비된 적어도 두 개의 마커를 신속하게 일치시킬 수 있다.As described above, the position control system and method according to the embodiment can simultaneously perform the position correction and the rotation angle correction of the object using at least two markers, and improve the precision and accuracy of the position control. The driving unit moves the object so that the line segment connecting the at least two markers provided on the object and the line segment connecting the at least two markers provided in the inspection unit are parallel to each other, At least two markers can be quickly matched.
이상과 같이 본 발명의 실시예에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다. Although the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, And various modifications and changes may be made thereto without departing from the scope of the present invention. Accordingly, the spirit of the present invention should not be construed as being limited to the embodiments described, and all of the equivalents or equivalents of the claims, as well as the following claims, belong to the scope of the present invention .
10: 위치 제어 시스템
100: 구동부
110: 플레이트
120: 구동 부재
122: 샤프트
124: 구동 요소
200: 검사부
210: 검사 요소
220: 안착 부재
300: 비전부
310: 카메라
320: 지지체
T: 대상체10: Position control system
100:
110: Plate
120:
122: shaft
124: Driving element
200: Inspector
210: Inspection element
220:
300: Vision department
310: camera
320: Support
T: object
Claims (5)
상기 대상체의 하부에 이격 배치되어, 상기 대상체의 위치 제어 기준을 제공하는 검사부; 및
상기 검사부의 하부에 이격 배치되어, 상기 대상체 및 검사부의 위치 정보를 획득할 수 있는 비전부;
를 포함하고,
상기 대상체 및 검사부에는 적어도 두 개의 마커가 서로 대응되는 위치에 각각 구비되고, 상기 구동부에 의해 상기 대상체에 구비된 마커와 상기 검사부에 구비된 마커를 일치시킬 수 있고,
상기 구동부는 상기 대상체를 직선 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커 중 하나와 상기 검사부에 구비된 적어도 두 개의 마커 중 하나를 일치시킨 후에, 상기 대상체를 회전 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분이 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분과 평행하게 하며, 상기 대상체를 직선 이동시켜, 상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분을 일치시킬 수 있으며,
상기 대상체는 상기 검사부에 대하여 비접촉 상태에서 상기 구동부에 의해 이동되며, 상기 구동부에 의해 상기 대상체의 위치 보정 및 회전각 보정이 동시적으로 수행되는 위치 제어 시스템.
A driving unit to which the object is fixed to one side and can control the position of the object;
An inspection unit disposed at a lower portion of the object and providing a position control reference of the object; And
A vision unit disposed at a lower portion of the examination unit and capable of acquiring position information of the subject and the examination unit;
Lt; / RTI >
Wherein the marker and the markers provided on the target body are aligned with the markers provided on the inspection unit by the driving unit,
Wherein the driving unit linearly moves the object so that one of at least two markers provided on the object matches one of at least two markers provided on the inspection unit, Wherein a line segment connecting at least two markers is parallel to a line segment connecting at least two markers provided in the inspection unit and linearly moves the target object to connect at least two markers provided in the target object, The line segments connecting the at least two markers included in the markers can be matched,
Wherein the object is moved by the driving unit in a non-contact state with respect to the inspection unit, and the position correction and the rotation angle correction of the object are simultaneously performed by the driving unit.
상기 비전부에 의해 상기 대상체에 구비된 적어도 두 개의 마커의 좌표값 및 상기 검사부에 구비된 적어도 두 개의 마커의 좌표값이 각각 측정되는 단계;
상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계; 및
상기 대상체에 구비된 적어도 두 개의 마커와 상기 검사부에 구비된 적어도 두 개의 마커가 일치하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계;
를 포함하고,
상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 이동되는 단계는,
상기 대상체에 구비된 적어도 두 개의 마커 중 하나와 상기 검사부에 구비된 적어도 두 개의 마커 중 하나가 일치하도록 상기 대상체가 상기 구동부에 의해 직선 이동되는 단계;
상기 대상체에 구비된 적어도 두 개의 마커 중 다른 하나의 좌표값이 상기 비전부에 의해 새로 측정되는 단계; 및
상기 대상체에 구비된 적어도 두 개의 마커를 연결한 선분과 상기 검사부에 구비된 적어도 두 개의 마커를 연결한 선분이 평행하도록 상기 대상체가 상기 구동부에 의해 회전 이동되는 단계;
를 더 포함하며,
상기 대상체는 상기 검사부에 대하여 비접촉 상태에서 상기 구동부에 의해 이동되며, 상기 구동부에 의해 상기 대상체의 위치 보정 및 회전각 보정이 동시적으로 수행되는 위치 제어 방법.Providing a position control system including a driver having a target fixed to one side thereof, an inspection unit disposed below the target object, and a vision unit disposed below the inspection unit;
Measuring coordinate values of at least two markers provided on the object and coordinate values of at least two markers provided on the inspection unit, respectively, by the vision unit;
Moving the object by the driving unit such that a line segment connecting at least two markers provided in the object and a line segment connecting at least two markers provided in the inspection unit are parallel; And
Moving the object by the driving unit such that at least two markers provided on the object coincide with at least two markers provided on the inspection unit;
Lt; / RTI >
Wherein the step of moving the object by the driving unit such that a line segment connecting at least two markers provided in the object and a line segment connecting at least two markers provided in the inspection unit are parallel,
The object being linearly moved by the driving unit such that one of at least two markers provided on the object coincides with one of at least two markers provided on the inspection unit;
The coordinate value of at least one of the at least two markers provided in the object is newly measured by the vision unit; And
The object being rotated by the driving unit so that a line segment connecting at least two markers provided on the object and a line segment connecting at least two markers provided in the inspection unit are parallel;
Further comprising:
Wherein the object is moved by the driving unit in a non-contact state with respect to the inspection unit, and the position correction and the rotation angle correction of the object are simultaneously performed by the driving unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140194998A KR101649424B1 (en) | 2014-12-31 | 2014-12-31 | Position control system and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020140194998A KR101649424B1 (en) | 2014-12-31 | 2014-12-31 | Position control system and method |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20160081333A KR20160081333A (en) | 2016-07-08 |
KR101649424B1 true KR101649424B1 (en) | 2016-08-30 |
Family
ID=56503589
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140194998A KR101649424B1 (en) | 2014-12-31 | 2014-12-31 | Position control system and method |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101649424B1 (en) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2963603B2 (en) * | 1993-05-31 | 1999-10-18 | 東京エレクトロン株式会社 | Probe device alignment method |
JPH11233397A (en) * | 1998-02-13 | 1999-08-27 | Mitsubishi Electric Corp | Aligning method and semiconductor device |
JP4411588B2 (en) * | 2003-11-27 | 2010-02-10 | 横河電機株式会社 | Defect inspection equipment |
KR20110062721A (en) * | 2009-12-04 | 2011-06-10 | 주식회사 탑 엔지니어링 | Led repair apparatus and method |
-
2014
- 2014-12-31 KR KR1020140194998A patent/KR101649424B1/en active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR20160081333A (en) | 2016-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2019526796A (en) | Offline vision support method and apparatus for vision alignment of integrated circuit devices | |
JP2008053624A (en) | Alignment apparatus | |
JP2013250259A (en) | Substrate inspection device and position correction method thereof | |
CN114441942A (en) | Flying probe testing method, system, equipment and storage medium for PCB | |
JP4652699B2 (en) | Substrate inspection device, position adjustment method | |
US7977957B2 (en) | Method and apparatus for electrical testing of a unit under test, as well as a method for production of a contact-making apparatus which is used for testing | |
TWI516759B (en) | Method of inspecting printed circuit board for semiconductor package | |
KR101183101B1 (en) | Method of die bonding for flip chip | |
JP2017116401A (en) | Substrate position adjustment device and substrate position adjustment method | |
CN111443320A (en) | Probe self-calibration system and method thereof | |
KR101209556B1 (en) | Automated contact alignment tool | |
KR101649424B1 (en) | Position control system and method | |
JP7174555B2 (en) | Substrate inspection device, alignment thereof, and substrate inspection method | |
KR100998999B1 (en) | Method and device for aligning a substrate and a printing screen during solder paste printing | |
JP2013140082A (en) | Height measuring device and height measuring method | |
KR20120071842A (en) | Apparatus and method for marking position recognition | |
JP4867219B2 (en) | Inspection device and positioning method of inspection device | |
KR20150034615A (en) | Machining method | |
JP5004454B2 (en) | Prober and rotation / movement control method in prober | |
JP6821368B2 (en) | Detection sensor and inspection equipment | |
KR20150076544A (en) | Method of reviewing defect of substrate | |
JP2006318965A (en) | Method and apparatus for inspecting semiconductor device | |
KR101325634B1 (en) | Method for inspecting pcb of semiconductor packages | |
US20240149461A1 (en) | Foolproof device and storage medium | |
JP2009170586A (en) | Method and apparatus for recognizing electronic component |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20190805 Year of fee payment: 4 |