KR101313203B1 - Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor - Google Patents
Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor Download PDFInfo
- Publication number
- KR101313203B1 KR101313203B1 KR1020110133390A KR20110133390A KR101313203B1 KR 101313203 B1 KR101313203 B1 KR 101313203B1 KR 1020110133390 A KR1020110133390 A KR 1020110133390A KR 20110133390 A KR20110133390 A KR 20110133390A KR 101313203 B1 KR101313203 B1 KR 101313203B1
- Authority
- KR
- South Korea
- Prior art keywords
- visible light
- sensor
- optical axis
- thermal image
- image sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
본 발명은 가시광선센서와 열영상센서의 광축 정렬 장치 및 방법에 관한 것으로, 가시광선과 적외선을 선택적으로 반사하는 반사수단을 통해 가시광선센서 및 열영상센서로 피사체를 촬영하고, 촬영한 영상을 서로 비교하여 광축이 틀어진 정도를 산출한 후, 가시광선센서, 열영상센서 및 반사수단 등을 조정하여 가시광선센서와 열영상센서의 광축이 일치하도록 제어하는 과정을 포함하며, 본 발명에 따르면, 영상센서들의 광축을 자동으로 정렬할 수 있어 편의가 증진된다.The present invention relates to an optical axis alignment device and method of a visible light sensor and a thermal image sensor, and to photograph a subject with a visible light sensor and a thermal image sensor through reflecting means for selectively reflecting visible light and infrared rays, Comparing the optical axis after calculating the degree of distortion of the optical axis, and adjusting the visible light sensor, the thermal image sensor and the reflecting means and the like to control the optical axis of the visible light sensor and the thermal image sensor, according to the present invention, The optical axis of the sensors can be automatically aligned to increase convenience.
Description
본 발명은 영상센서의 광축 정렬 방법에 관한 것으로서, 더욱 상세하게는 가시광선센서와 열영상센서의 광축을 자동으로 정렬할 수 있는 가시광선센서와 열영상센서의 광축 정렬 장치 및 방법에 관한 것이다.The present invention relates to a method of aligning an optical axis of an image sensor, and more particularly, to an optical axis alignment device and a method of aligning an optical axis of a visible light sensor and a thermal image sensor.
피사체를 촬영하여 그 영상을 육안으로 확인하도록 하는 촬영 기술의 발달은 가시광선(visible light) 영상을 넘어 적외선(infrared ray) 영상의 촬영을 가능하게 하였다.The development of a photographing technique for photographing a subject and visually confirming the image has made it possible to capture an infrared ray image beyond a visible light image.
이러한 적외선 영상은 가시광선 영상과 달리 피사체나 배경의 열 방사(thermal radiation)에 의한 강도(intensity) 정보를 획득할 수 있기 때문에 야간 촬영에 효과적이다.Unlike the visible light image, the infrared image is effective for night photographing because it can acquire intensity information by thermal radiation of a subject or background.
그리고 이렇게 서로 기능이 다른 촬영 장비들은 같은 피사체의 촬영을 통한 비교 및 분석, 영상 합성 등에 이용된다.In addition, the photographing equipments having different functions are used for comparing and analyzing images and synthesizing images by photographing the same subject.
그런데 영상 비교나 합성 등을 위해서는 각 영상 촬영 장비의 광축을 정렬하는 것이 필요하다.However, in order to compare or synthesize images, it is necessary to align the optical axis of each imaging device.
각 영상을 동일한 시점에서 촬영하여 비교 또는 합성하는 것이 효율적이기 때문이다.This is because it is efficient to photograph each image at the same time point and compare or synthesize it.
종래에는 영상 촬영 장비의 광축 정렬을 수동으로 진행하였으며 이에 따른 부정확함과 불편함이 존재해 왔다.Conventionally, alignment of the optical axis of the imaging apparatus has been manually performed, and there have been inaccuracies and inconveniences.
이에 이를 개선하기 위한 방안이 요구된다.Therefore, a way to improve this is required.
본 발명은 영상센서의 광축 정렬 기법을 제안하고자 한 것으로서, 특히 가시광선센서와 열영상센서의 광축을 자동으로 정렬할 수 있는 가시광선센서와 열영상센서의 광축 정렬 장치 및 방법을 제시하고자 한다.An object of the present invention is to propose an optical axis alignment technique of an image sensor, and more particularly, to provide an optical axis alignment apparatus and a method for aligning an optical axis of a visible light sensor and a thermal image sensor and a thermal image sensor.
상기와 같은 목적을 달성하기 위한 본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치는, 피사체를 촬영하는 가시광선센서, 상기 피사체의 열영상을 촬영하는 열영상센서, 상기 피사체로부터의 가시광선을 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 상기 열영상센서로 전달하기 위해 광을 선택적으로 반사하는 반사수단, 및 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 광축이 틀어진 정도를 산출하고, 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 조정하여 상기 가시광선센서와 상기 열영상센서의 광축이 일치하도록 제어하는 제어수단을 포함하는 것을 특징으로 한다.Optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention for achieving the above object, a visible light sensor for photographing the subject, a thermal image sensor for photographing the thermal image of the subject, visible light from the subject Reflecting means for selectively reflecting light to transmit the light to the visible light sensor, and infrared light from the subject to the thermal image sensor, and an image photographed by the visible light sensor and an image photographed by the thermal image sensor. Comprising a control means for calculating the degree of the optical axis is twisted, and adjusting the optical axis of the visible light sensor and the thermal image sensor by adjusting at least one of the visible light sensor, the thermal image sensor and the reflecting means. Characterized in that.
본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치에 있어서, 상기 제어수단은 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 광축이 틀어진 정도를 산출하고 상기 광축이 틀어진 정도가 임계치 이하가 되도록 조정하는 것을 특징으로 한다.In the optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention, the control means compares the image taken by the visible light sensor and the image taken by the thermal image sensor to calculate the degree of the optical axis is distorted and the optical axis It is characterized by adjusting so that this degree of distortion becomes below a threshold value.
본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치에 있어서, 상기 제어수단은 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상의 원근차이, 광축 중심점의 상하차이, 광축 중심점의 좌우차이, 각 영상 내 상하비율, 각 영상 내 좌우비율 중 하나 이상을 참조하여 광축이 틀어진 정도를 산출하는 것을 특징으로 한다.In the optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention, the control means is a perspective difference between the image taken by the visible light sensor and the image taken by the thermal image sensor, the vertical difference between the optical axis center point, the optical axis center point The degree to which the optical axis is distorted is calculated by referring to at least one of a right and left difference, an up-down ratio in each image, and a right-left ratio in each image.
본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치에 있어서, 상기 제어수단은 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 시계방향, 반시계방향, 좌우방향 또는 상하방향 중 하나 이상의 방향으로 회전시켜 조정하는 것을 특징으로 한다.In the optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention, the control means is one or more of the visible light sensor, the thermal image sensor and the reflection means clockwise, counterclockwise, left and right or up and down direction It is characterized by rotating in one or more directions.
본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치에 있어서, 상기 반사수단은 상기 피사체로부터의 가시광선을 투과하여 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 반사하여 상기 열영상센서로 전달하는 것을 특징으로 한다.In the optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention, the reflecting means transmits visible light from the subject to the visible light sensor, and reflects infrared rays from the subject to reflect the thermal image sensor Characterized in that delivered to.
본 발명의 가시광선센서와 열영상센서의 광축 정렬 장치에 있어서, 상기 반사수단은 상기 피사체로부터의 가시광선을 반사하여 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 투과하여 상기 열영상센서로 전달하는 것을 특징으로 한다.In the optical axis alignment device of the visible light sensor and the thermal image sensor of the present invention, the reflecting means reflects visible light from the subject and transmits the visible light to the visible light sensor, and transmits infrared rays from the subject to the thermal image sensor Characterized in that delivered to.
상기와 같은 목적을 달성하기 위한 본 발명의 가시광선센서와 열영상센서의 광축 정렬 방법은, 피사체로부터의 가시광선을 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 상기 열영상센서로 전달하기 위해 광을 선택적으로 반사하는 반사수단을 통해 상기 가시광선센서 및 상기 열영상센서로 상기 피사체를 촬영하는 촬영단계, 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 상기 가시광선센서와 상기 열영상센서 간의 광축이 틀어진 정도를 산출하는 영상비교단계, 및 상가 광축이 틀어진 정도를 참조하여 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 조정하여 상기 가시광선센서와 상기 열영상센서의 광축이 일치하도록 제어하는 제어단계를 포함하는 것을 특징으로 한다.Optical axis alignment method of the visible light sensor and the thermal image sensor of the present invention for achieving the above object, to transmit the visible light from the subject to the visible light sensor, and to transmit the infrared light from the subject to the thermal image sensor A photographing step of photographing the subject with the visible light sensor and the thermal image sensor through reflecting means for selectively reflecting light, by comparing the image photographed by the visible light sensor with the image photographed by the thermal image sensor An image comparison step of calculating the degree of misalignment of the optical axis between the visible light sensor and the thermal image sensor, and adjusting at least one of the visible light sensor, the thermal image sensor, and the reflecting means with reference to the degree of misalignment of the optical axis. And a control step of controlling the optical axis of the light sensor and the thermal image sensor to coincide with each other.
본 발명에 따르면, 가시광선센서와 열영상센서의 광축 정렬이 자동으로 이루어져 광축 정렬에 요구되는 시간 및 노력을 절감할 수 있고, 광축 정렬의 정확도를 높일 수 있으며, 사용자 편의와 효율성 재고를 기대할 수 있다.According to the present invention, the optical axis alignment of the visible light sensor and the thermal image sensor is automatically performed, thereby reducing the time and effort required for optical axis alignment, increasing the accuracy of the optical axis alignment, and expecting user convenience and efficiency inventory. have.
도 1은 본 발명의 일 실시예에 따른 광축 정렬 장치의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 광축 정렬 과정의 예시도이다.
도 3은 본 발명의 일 실시예에 따른 광축 정렬 방법의 흐름도이다.1 is a block diagram of an optical axis alignment device according to an embodiment of the present invention.
2 is an exemplary diagram of an optical axis alignment process according to an embodiment of the present invention.
3 is a flowchart of an optical axis alignment method according to an embodiment of the present invention.
이하 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있는 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예에 대한 동작 원리를 상세하게 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 도면 전체에 걸쳐 유사한 기능 및 작용을 하는 부분에 대해서는 동일한 도면 부호를 사용한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. However, the detailed description of known functions and configurations incorporated herein will be omitted when it may unnecessarily obscure the subject matter of the present invention. The same reference numerals are used for portions having similar functions and functions throughout the drawings.
도 1은 본 발명의 일 실시예에 따른 광축 정렬 장치의 구성도이다.1 is a block diagram of an optical axis alignment device according to an embodiment of the present invention.
도 1을 참조하면, 본 실시예에의 광축 정렬 장치는 가시광선센서(100), 열영상센서(200), 반사수단(300)과 제어수단(400)을 포함한다.Referring to FIG. 1, the optical axis alignment device according to the present embodiment includes a
가시광선센서(100)는 인간의 눈으로 볼 수 있는 가시광선을 촬영하기 위한 장치이다.The
가시광선센서(100)는 파장 범위 380~780nm의 가시광선을 촬영할 수 있으며 이를 위한 카메라 등의 촬영장치를 포함할 수 있다.The
본 발명의 가시광선센서(100)는 반사수단(300)이 투과하거나 반사한 가시광선을 전달받아 촬영 기능을 수행한다.The
열영상센서(200)는 인간의 눈으로 볼 수 없는 적외선을 포함한 열영상을 촬영하기 위한 장치이다.The
열영상센서(200)는 파장 범위 0.75~25μm의 적외선을 촬영할 수 있으며 이를 위한 카메라 등의 촬영장치를 포함할 수 있다.The
본 발명의 열영상센서(200)는 반사수단(300)이 투과하거나 반사한 적외선을 전달받아 촬영 기능을 수행한다.The
반사수단(300)은 촬영 피사체로부터의 가시광선을 가시광선센서(100)로 전달하고, 해당 피사체로부터의 적외선을 열영상센서(200)로 전달하는 기능을 한다.The reflecting means 300 transmits visible light from the photographing subject to the
본 발명에서 피사체는 단일 물체뿐만 아니라 복수의 물체, 배경, 움직이는 물체 등을 포함하는 넓은 개념으로 이해되어야 한다.In the present invention, the subject should be understood as a broad concept including not only a single object but a plurality of objects, a background, a moving object, and the like.
본 발명의 반사수단(300)은 피사체로부터의 가시광선 또는 적외선을 선택적으로 투과하거나 반사하는 역할을 한다.Reflecting means 300 of the present invention serves to selectively transmit or reflect visible light or infrared light from the subject.
본 발명의 일 실시예에서, 반사수단(300)은 피사체로부터의 가시광선을 투과하여 가시광선센서(100)로 전달하고, 피사체로부터의 적외선을 반사하여 열영상센서(200)로 전달할 수 있다.In an embodiment of the present invention, the reflecting means 300 may transmit the visible light from the subject to the
본 발명의 다른 일 실시예에서, 반사수단(300)은 피사체로부터의 가시광선을 반사하여 가시광선센서(100)로 전달하고, 피사체로부터의 적외선을 투과하여 열영상센서(200)로 전달할 수 있다.In another embodiment of the present invention, the reflecting
이러한 방식으로 반사수단(300)은 피사체로부터의 빛을 각 영상센서(100, 200)가 촬영가능한 파장의 것으로 분리하여 전달할 수 있으며, 이를 위한 거울 등의 형상을 포함할 수 있다.In this way, the reflecting
제어수단(400)은 가시광선센서(100)와 열영상센서(200) 간의 광축이 틀어진 정도에 따라, 가시광선센서(100), 열영상센서(200), 반사수단(300) 등을 조정하여 가시광선센서(100)와 열영상센서(200)의 광축이 일치하도록 정렬하는 기능을 하며, 이를 위한 구동 부재나 연산 수단 등을 포함할 수 있다.The control means 400 adjusts the
광축(optical axis)이란 빛의 반사나 굴절을 이용하여 물체의 상(像)을 만드는 광학계에서 각 면의 중심을 연결한 직선을 의미한다.The optical axis refers to a straight line connecting the centers of the surfaces in an optical system that makes an image of an object using reflection or refraction of light.
광축을 따라 지나가는 빛은 렌즈 표면에 수직으로 들어가므로 크기나 방향의 변화가 없게 된다.Light passing along the optical axis enters the lens surface perpendicularly, leaving no change in size or direction.
본 발명에서 가시광선센서(100)와 열영상센서(200)의 광축이 일치하게 되면, 동일 피사체를 동일 시점에서 촬영하는 것이 가능한 반면, 광축이 틀어지게 되면 각 영상의 피사체는 좌우 또는 상하의 비율 및 원근 비율 등이 달라지게 되어 영상의 비교나 합성 등이 어렵게 된다.In the present invention, when the optical axes of the
본 발명의 일 실시예에서 제어수단(400)은, 가시광선센서(100)가 촬영한 영상과 열영상센서(200)가 촬영한 영상을 비교하여 양 영상센서(100, 200)의 광축이 서로 틀어진 정도를 산출할 수 있다.In one embodiment of the present invention, the control means 400, the optical axis of the
예를 들어, 제어수단(400)은 가시광선센서(100)가 촬영한 영상과 열영상센서(200)가 촬영한 영상의 원근차이, 광축 중심점의 상하차이, 광축 중심점의 좌우차이, 각 영상 내 상하비율, 각 영상 내 좌우비율 등을 참조하여 광축이 틀어진 정도를 산출할 수 있을 것이다.For example, the control means 400 is a perspective difference between the image captured by the
그리고 제어수단(400)은 이렇게 산출한 결과를 이용하여 가시광선센서(100), 열영상센서(200), 반사수단(300) 등을 조정하게 되는데, 광축이 틀어진 정도가 임계치 이하가 되도록 광축의 틀어진 정도를 산출하는 과정과 조정과정을 반복할 수 있다.In addition, the control means 400 adjusts the
이때, 제어수단(400)은 가시광선센서(100), 열영상센서(200), 반사수단(300) 중 하나 이상을, 시계방향, 반시계방향, 좌우방향, 상하방향 등으로 회전시켜 조정할 수 있다.At this time, the control means 400 can be adjusted by rotating one or more of the
이러한 과정을 통해 가시광선센서(100)와 열영상센서(200)의 광축이 일치하게 되면, 각 영상센서(100, 200)에 촬영한 영상을 이용하여 피사체를 비교, 분석하거나, 각 영상을 합성하는 과정이 용이해진다.When the optical axes of the
본 발명에 따라 광축이 일치하도록 정렬하는 과정의 일 예에 대해서는 도 2를 참조하여 좀 더 상세하게 설명하기로 한다.An example of a process of aligning the optical axes according to the present invention will be described in more detail with reference to FIG. 2.
도 2는 본 발명의 일 실시예에 따른 광축 정렬 과정의 예시도이다.2 is an exemplary diagram of an optical axis alignment process according to an embodiment of the present invention.
도 2를 참조하면, 피사체를 촬영하고 있는 가시광선센서(100), 열영상센서(200) 및 반사수단(300)을 확인할 수 있다.Referring to FIG. 2, the
도 2의 실시예에서는 반사수단(300)이 피사체로부터의 가시광선을 반사하여 가시광선센서(100)로 전달하고 있고, 피사체로부터의 적외선을 투과하여 열영상센서(200)로 전달하고 있다.In the embodiment of FIG. 2, the reflecting
각 영상센서(100, 200)로 전달되는 빛은 단일 피사체로부터 비롯된 것으로서, 반사수단(300)에서 가시광선이 반사되기 전의 광경로와 반사수단(300)에서 투과되는 적외선의 광경로가 일치하고 있으며, 이는 가시광선센서(100)와 열영상센서(200)의 광축이 일치하고 있음을 나타낸다.The light transmitted to each of the
본 발명의 다른 실시예에서는 반사수단(300)이 피사체로부터의 가시광선을 투과하여 가시광선센서(100)로 전달하고, 피사체로부터의 적외선을 반사하여 열영상센서(200)로 전달할 수도 있으며, 이 역시 본 발명의 기술적 범위에 포함되는 것이다.In another embodiment of the present invention, the reflecting means 300 may transmit the visible light from the subject to the
본 발명에 따라 가시광선센서(100)와 열영상센서(200)의 광축을 정렬하는 과정에 대해서는 도 3을 참조하여 좀 더 상세하게 설명하기로 한다.A process of aligning the optical axes of the
도 3은 본 발명의 일 실시예에 따른 광축 정렬 방법의 흐름도이다.3 is a flowchart of an optical axis alignment method according to an embodiment of the present invention.
도 3을 참조하면, 가시광선센서(100)로 피사체의 촬영을 시작하고(S100), 열영상센서(200)로 피사체의 촬영을 시작한다(S200).Referring to FIG. 3, the photographing of the subject is started by the visible light sensor 100 (S100), and the photographing of the subject is started by the thermal image sensor 200 (S200).
단계(S100)의 촬영과정과 단계(S200)의 촬영과정은 동시에 진행되거나 그 순서를 바꾸어 전후로 진행될 수 있으며, 이 모두는 본 발명의 기술적 범위에 포함된다.The photographing process of step (S100) and the photographing process of step (S200) may be carried out at the same time or proceed back and forth by changing the order, all of which are included in the technical scope of the present invention.
단계(S100)에서는 인간의 육안으로 확인할 수 있는 피사체의 가시광선 영상을 확보할 수 있다.In operation S100, a visible light image of a subject that can be checked by the human eye may be obtained.
단계(S200)에서는 가시광선보다 파장이 긴 적외선을 감지하여 피사체의 열영상을 확보할 수 있다.In operation S200, an infrared ray having a wavelength longer than that of visible light may be detected to obtain a thermal image of the subject.
단계(S100)와 단계(S200)에서 각 영상센서(100, 200)가 전달받는 빛은, 피사체로부터의 빛을 파장별에 따라 선택적으로 반사하거나 투과하는 반사수단(300)으로부터 전달된 것이다.The light received by each of the
본 발명의 일실시예에서, 단계(S100, S200)에서의 반사수단(300)은 피사체로부터의 가시광선을 투과하여 가시광선센서(100)로 전달하고, 피사체로부터의 적외선을 반사하여 열영상센서(200)로 전달할 수 있다.In one embodiment of the present invention, the reflecting means 300 in the step (S100, S200) is transmitted to the
본 발명의 다른 일 실시예에서, 단계(S100, S200)에서의 반사수단(300)은 피사체로부터의 가시광선을 반사하여 가시광선센서(100)로 전달하고, 피사체로부터의 적외선을 투과하여 열영상센서(200)로 전달할 수 있다.In another embodiment of the present invention, the reflecting means 300 in steps S100 and S200 reflects the visible light from the subject and transmits it to the
이러한 동작을 위해, 단계(S100, S200)에서의 반사수단(300)은 파장에 따른 빛을 선택적으로 투과하거나 반사하기 위한 거울 등의 형상을 포함할 수 있다.For this operation, the reflecting means 300 in steps S100 and S200 may include a shape such as a mirror for selectively transmitting or reflecting light according to the wavelength.
단계(S100, S200)에서 영상 촬영이 이루어지면, 광축 정렬을 위한 제어를 담당하는 제어수단(400)이 해당 영상을 서로 비교하고, 가시광선센서(100)와 열영상센서(200) 간의 광축이 틀어진 정도를 산출한다(S300).When the image is taken in steps S100 and S200, the control means 400 for controlling the optical axis is compared with each other, and the optical axis between the
단계(S300)에서의 제어수단(400)은, 예를 들어, 가시광선센서(100)가 촬영한 영상과 열영상센서(200)가 촬영한 영상의 원근차이, 광축 중심점의 상하차이, 광축 중심점의 좌우차이, 각 영상 내 상하비율, 각 영상 내 좌우비율 등을 참조하여 광축이 틀어진 정도를 산출할 수 있을 것이다.The control means 400 in step S300, for example, the perspective difference between the image taken by the
단계(S300)에서 광축이 틀어진 정도를 산출한 결과 임계치 이하인 경우라면(S400), 광축 정렬 과정을 종료하게 된다.If the result of calculating the degree of distortion of the optical axis in step S300 is a threshold value or less (S400), the optical axis alignment process is terminated.
반대로, 단계(S300)에서 광축이 틀어진 정도를 산출한 결과 임계치 이하가 아니라면(S400), 제어수단(400)은 구동 부재 등을 이용해 가시광선센서(100), 열영상센서(200), 반사수단(300) 등을 조정하여, 가시광선센서(100)와 열영상센서(200)의 광축이 일치하도록 제어한다(S500).On the contrary, as a result of calculating the degree to which the optical axis is distorted in step S300 (S400), the control means 400 is a
단계(S500)에서는 예를 들어, 가시광선센서(100), 열영상센서(200), 반사수단(300) 등을 시계방향, 반시계방향, 좌우방향 또는 상하방향 중 하나 이상의 방향으로 회전시켜 조정 과정을 수행할 수 있다.In step S500, for example, the
단계(S500)에서 광축을 제어하고 나면, 단계(S100)과 단계(S200)에서의 촬영과정, 단계(S300)에서의 광축이 틀어진 정도의 산출과정, 단계(S400)에서의 광축이 틀어진 정도가 임계치 이하인지 확인하는 과정, 및 필요에 따라 단계(S500)의 광축 제어 과정을 반복하여, 가시광선센서(100)와 열영상센서(200)의 광축이 일치하도록 정렬한다.After controlling the optical axis in step S500, the photographing process in step S100 and step S200, the calculation process of the degree of the optical axis in step S300, the degree of the optical axis in step S400 The process of checking whether the threshold value is less than the threshold value and the optical axis control process of step S500 are repeated as necessary, and the optical axes of the
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것은 아니며, 기술적 사상의 범주를 일탈함 없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.As described above and described with reference to a preferred embodiment for illustrating the technical idea of the present invention, the present invention is not limited to the configuration and operation as shown and described as such, without departing from the scope of the technical idea Those skilled in the art will appreciate that many variations and modifications to the present invention are possible. And all such modifications and changes as fall within the scope of the present invention are therefore to be regarded as being within the scope of the present invention.
100: 가시광선센서
200: 열영상센서
300: 반사수단
400: 제어수단100: visible light sensor
200: thermal image sensor
300: reflecting means
400: control means
Claims (7)
상기 피사체의 열영상을 촬영하는 열영상센서;
상기 피사체로부터의 가시광선을 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 상기 열영상센서로 전달하기 위해 광을 선택적으로 반사하는 반사수단; 및
상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 광축이 틀어진 정도를 산출하고, 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 조정하여 상기 가시광선센서와 상기 열영상센서의 광축이 일치하도록 제어하는 제어수단;
을 포함하고,
상기 제어수단은 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 광축이 틀어진 정도를 산출하고 상기 광축이 틀어진 정도가 임계치 이하가 되도록 조정하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 장치.A visible light sensor for photographing a subject;
A thermal image sensor for capturing a thermal image of the subject;
Reflecting means for transmitting visible light from the subject to the visible light sensor and selectively reflecting light to transmit infrared light from the subject to the thermal image sensor; And
Comparing the image taken by the visible light sensor and the image taken by the thermal image sensor to calculate the degree of the optical axis is distorted, and by adjusting one or more of the visible light sensor, the thermal image sensor and the reflecting means the visible light Control means for controlling an optical axis of a sensor and the thermal image sensor to coincide;
/ RTI >
The control means compares the image taken by the visible light sensor and the image taken by the thermal image sensor to calculate the degree of the optical axis is distorted, and adjusts the degree of the optical axis is adjusted to be below the threshold value. And optical axis alignment device of thermal image sensor.
상기 제어수단은 상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상의 원근차이, 광축 중심점의 상하차이, 광축 중심점의 좌우차이, 각 영상 내 상하비율, 각 영상 내 좌우비율 중 하나 이상을 참조하여 광축이 틀어진 정도를 산출하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 장치.The method of claim 1,
The control means includes one of a perspective difference between an image photographed by the visible light sensor and an image photographed by the thermal image sensor, a vertical difference between an optical axis center point, a horizontal difference between an optical axis center point, an upper and lower ratio in each image, and a horizontal ratio in each image. The optical axis alignment device of the visible light sensor and the thermal image sensor, characterized in that to calculate the degree of distortion of the optical axis with reference to the above.
상기 제어수단은 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 시계방향, 반시계방향, 좌우방향 또는 상하방향 중 하나 이상의 방향으로 회전시켜 조정하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 장치.The method of claim 1,
The control means is a visible light sensor, characterized in that for rotating by adjusting at least one of the visible light sensor, the thermal image sensor and the reflecting means in one or more of the clockwise, counterclockwise, left and right or up and down direction and Optical axis alignment device of thermal imaging sensor.
상기 반사수단은 상기 피사체로부터의 가시광선을 투과하여 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 반사하여 상기 열영상센서로 전달하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 장치.The method of claim 1,
The reflective means transmits visible light from the subject to the visible light sensor, and reflects infrared rays from the subject to the thermal image sensor, thereby aligning the optical axis of the visible light sensor and the thermal image sensor. Device.
상기 반사수단은 상기 피사체로부터의 가시광선을 반사하여 상기 가시광선센서로 전달하고, 상기 피사체로부터의 적외선을 투과하여 상기 열영상센서로 전달하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 장치.The method of claim 1,
The reflecting means reflects visible light from the subject and transmits it to the visible light sensor, and transmits infrared rays from the subject to the thermal image sensor to align the optical axis of the visible light sensor and the thermal image sensor. Device.
상기 가시광선센서가 촬영한 영상과 상기 열영상센서가 촬영한 영상을 비교하여 상기 가시광선센서와 상기 열영상센서 간의 광축이 틀어진 정도를 산출하는 영상비교단계; 및
상가 광축이 틀어진 정도를 참조하여 상기 가시광선센서, 상기 열영상센서 및 상기 반사수단 중 하나 이상을 조정하여 상기 가시광선센서와 상기 열영상센서의 광축이 일치하도록 제어하는 제어단계;
를 포함하고,
상기 제어단계는, 상기 광축이 틀어진 정도가 임계치 이하가 되도록 조정하는 것을 특징으로 하는 가시광선센서와 열영상센서의 광축 정렬 방법.The subject is photographed by the visible light sensor and the thermal image sensor through reflecting means for transmitting visible light from a subject to a visible light sensor and selectively reflecting light to transmit infrared light from the subject to the thermal image sensor. Shooting step;
An image comparing step of comparing an image photographed by the visible light sensor and an image photographed by the thermal image sensor to calculate a degree of distorting the optical axis between the visible light sensor and the thermal image sensor; And
A control step of controlling an optical axis of the visible light sensor and the thermal image sensor to coincide with each other by adjusting at least one of the visible light sensor, the thermal image sensor, and the reflecting means with reference to the degree of the optical axis being misaligned;
Lt; / RTI >
The control step, the optical axis alignment method of the visible light sensor and the thermal image sensor, characterized in that the degree of adjustment of the optical axis is less than the threshold value.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110133390A KR101313203B1 (en) | 2011-12-13 | 2011-12-13 | Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110133390A KR101313203B1 (en) | 2011-12-13 | 2011-12-13 | Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20130066759A KR20130066759A (en) | 2013-06-21 |
| KR101313203B1 true KR101313203B1 (en) | 2013-09-30 |
Family
ID=48862815
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020110133390A Active KR101313203B1 (en) | 2011-12-13 | 2011-12-13 | Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101313203B1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102166636B1 (en) | 2019-07-05 | 2020-10-16 | 엘아이지넥스원 주식회사 | Optical axis alignment apparatus and method |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102223469B1 (en) * | 2018-12-17 | 2021-03-05 | 주식회사 영국전자 | Surveillance camera including an optical axis unifying configuration |
| CN111953882A (en) * | 2020-09-11 | 2020-11-17 | 上海瞳观智能科技有限公司 | Optical axis alignment device based on half mirror |
| KR102758589B1 (en) * | 2023-04-21 | 2025-01-22 | 티.비.티. 주식회사 | thermal camera |
| CN117784414B (en) * | 2024-02-28 | 2024-06-07 | 北京萨诺光电科技发展有限公司 | Visible light calibrator, laser device and calibration method |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20010038750A (en) * | 1999-10-27 | 2001-05-15 | 김원남 | system for aligning axis of beam with laser and method for aligning axis of beam with the same |
| JP2002237969A (en) * | 2001-02-09 | 2002-08-23 | Hitachi Ltd | In-vehicle camera and image processing system |
| KR100958369B1 (en) * | 2008-02-01 | 2010-05-17 | 유창산업기계(주) | Video recording device with image stabilization |
| JP2011082856A (en) * | 2009-10-08 | 2011-04-21 | Hoya Corp | Imaging apparatus |
-
2011
- 2011-12-13 KR KR1020110133390A patent/KR101313203B1/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20010038750A (en) * | 1999-10-27 | 2001-05-15 | 김원남 | system for aligning axis of beam with laser and method for aligning axis of beam with the same |
| JP2002237969A (en) * | 2001-02-09 | 2002-08-23 | Hitachi Ltd | In-vehicle camera and image processing system |
| KR100958369B1 (en) * | 2008-02-01 | 2010-05-17 | 유창산업기계(주) | Video recording device with image stabilization |
| JP2011082856A (en) * | 2009-10-08 | 2011-04-21 | Hoya Corp | Imaging apparatus |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102166636B1 (en) | 2019-07-05 | 2020-10-16 | 엘아이지넥스원 주식회사 | Optical axis alignment apparatus and method |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20130066759A (en) | 2013-06-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100869998B1 (en) | Remote Iris Image Acquisition System | |
| KR101207198B1 (en) | Board inspection apparatus | |
| CN100433043C (en) | Automatic tracking invasive iris image collection device | |
| KR100977499B1 (en) | Long Range Iris Image Acquisition System Using Panning and Tilting of Mirrors | |
| KR101313203B1 (en) | Apparatus and method for optical axis alignment of visible light sensor and infrared ray sensor | |
| JP4115801B2 (en) | 3D imaging device | |
| US20200210733A1 (en) | Enhanced video-based driver monitoring using phase detect sensors | |
| JP2017524968A5 (en) | ||
| JP2006018293A (en) | Method for determining projector pixel correlated with laser point on display surface by means of pinhole projection | |
| ATE480796T1 (en) | DEVICE FOR PANORAMIC PHOTOGRAPHY | |
| CN114945955B (en) | Iris image acquisition system for expanding iris recognition range | |
| CN102572249A (en) | Dual-mode imaging optical system for face and iris | |
| JP3818028B2 (en) | 3D image capturing apparatus and 3D image capturing method | |
| KR100958352B1 (en) | Surveillance method through surveillance camera system | |
| JP7236854B2 (en) | Shape information acquisition device, shape information acquisition method, program, and storage medium | |
| KR100447403B1 (en) | Focusing angle and distance display in iris recognition system | |
| JPH06105339A (en) | Stereoscopic camera device | |
| JP2009145654A (en) | Stereoscopic image forming apparatus | |
| KR101164208B1 (en) | Board inspection apparatus | |
| KR101969765B1 (en) | Apparatus and method for recognizing iris using one image sensor | |
| KR20170071010A (en) | Catadioptric Type Omnidirectional Optic Lens and Omni-directional Camera System Using the Same | |
| JP2007333525A (en) | Distance measuring device | |
| KR101714787B1 (en) | Camera module and system for controlling electronic device with the same | |
| KR102535300B1 (en) | Apparatus and method for acquiring reference points for calibration | |
| KR102262572B1 (en) | Camera module for dispenser needle inspection with wide field of view |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20111213 |
|
| PA0201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20130409 Patent event code: PE09021S01D |
|
| PG1501 | Laying open of application | ||
| E701 | Decision to grant or registration of patent right | ||
| PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20130916 |
|
| GRNT | Written decision to grant | ||
| PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20130924 Patent event code: PR07011E01D |
|
| PR1002 | Payment of registration fee |
Payment date: 20130924 End annual number: 3 Start annual number: 1 |
|
| PG1601 | Publication of registration | ||
| FPAY | Annual fee payment |
Payment date: 20160908 Year of fee payment: 4 |
|
| PR1001 | Payment of annual fee |
Payment date: 20160908 Start annual number: 4 End annual number: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20180627 Year of fee payment: 6 |
|
| PR1001 | Payment of annual fee |
Payment date: 20180627 Start annual number: 6 End annual number: 6 |
|
| PR1001 | Payment of annual fee |
Payment date: 20200720 Start annual number: 8 End annual number: 8 |
|
| PR1001 | Payment of annual fee |
Payment date: 20210810 Start annual number: 9 End annual number: 9 |
|
| PR1001 | Payment of annual fee |
Payment date: 20220705 Start annual number: 10 End annual number: 10 |
|
| PR1001 | Payment of annual fee |
Payment date: 20230621 Start annual number: 11 End annual number: 11 |
|
| PR1001 | Payment of annual fee |
Payment date: 20240624 Start annual number: 12 End annual number: 12 |
|
| PR1001 | Payment of annual fee |
Payment date: 20250624 Start annual number: 13 End annual number: 13 |