+

WO2019003361A1 - Imaging system and imaging device - Google Patents

Imaging system and imaging device Download PDF

Info

Publication number
WO2019003361A1
WO2019003361A1 PCT/JP2017/023821 JP2017023821W WO2019003361A1 WO 2019003361 A1 WO2019003361 A1 WO 2019003361A1 JP 2017023821 W JP2017023821 W JP 2017023821W WO 2019003361 A1 WO2019003361 A1 WO 2019003361A1
Authority
WO
WIPO (PCT)
Prior art keywords
imaging
illumination
unit
light
luminous flux
Prior art date
Application number
PCT/JP2017/023821
Other languages
French (fr)
Japanese (ja)
Inventor
嶋田 堅一
和良 山崎
Original Assignee
マクセル株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マクセル株式会社 filed Critical マクセル株式会社
Priority to PCT/JP2017/023821 priority Critical patent/WO2019003361A1/en
Publication of WO2019003361A1 publication Critical patent/WO2019003361A1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/24Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments for lighting other areas than only the way ahead
    • B60Q1/249Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments for lighting other areas than only the way ahead for illuminating the field of view of a sensor or camera
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • G03B15/03Combinations of cameras with lighting apparatus; Flash units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene

Definitions

  • the European new car assessment Euro NCAP is expected to further improve the detection performance of in-vehicle cameras in dark environments, such as adding a function to detect pedestrians at night as a target of collision avoidance by automatic braking in 2018 Be
  • an illumination technology for illuminating the front is required.
  • the vehicle lamp described in Patent Document 1 is described to realize high-intensity illumination as a configuration including a light emitting unit including a phosphor, a laser optical system including a laser light source, a projection lens, and the like. .
  • FIG. 1B is a block diagram showing the configuration of the imaging unit (imaging device) 2.
  • the imaging unit (imaging device) 2 outputs an imaged image data to the image processing unit 5, and a synchronization signal input terminal 2 b that inputs a synchronization signal of illumination light emission timing as a control signal from the control unit 4. And have. Thus, the imaging operation of the imaging unit 2 is performed in synchronization with the illumination light emission timing of the illumination unit 1.
  • the change width of the light flux amount when dimming the illumination light is temporally constant, but in the third embodiment, the case where the change width of the light flux amount can be temporally changeable will be described.
  • the change width of the luminous flux amount is also referred to as “light control width”.
  • FIG. 10 is a diagram showing an example in which the imaging system is applied to a monitoring camera system.
  • the monitoring camera system 12 includes, in addition to the imaging unit (monitoring camera) 2, an illumination unit 1, a light control unit 3 for controlling the illumination unit 1, and a control unit 4 for controlling these.

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

The imaging system (10) is provided with: an illumination unit 1 that emits illumination light on a photographic subject; a light adjustment unit 3 for adjusting the luminous flux quantity of the illumination light emitted by the illumination unit; an imaging unit 2 for capturing an image of the photographic subject using an image sensor and outputting an image signal; and a control unit 4 for controlling the light adjustment unit and the imaging unit. The control unit controls, via the light adjustment unit, the luminous flux quantity and/or emission duration of the illumination light emitted from the illumination unit in a synchronized manner with an imaging frame of the imaging unit. As an example, while using two consecutive imaging frames of the imaging unit as one cycle, the light adjustment unit adjusts the illumination unit such that luminous flux quantity L1 of the illumination light in a first frame of the imaging unit and luminous flux quantity L2 of the illumination light in a succeeding second frame are set to different values from each other.

Description

撮像システム及び撮像装置Imaging system and imaging apparatus
 本発明は、照明動作と連携して撮像動作を行う撮像システム及び撮像装置に関する。 The present invention relates to an imaging system and an imaging apparatus that perform an imaging operation in cooperation with a lighting operation.
 車載用カメラにおいては、より遠方の物体を精度良く認識し、解像度を落とさずに広い範囲の物体を認識する要求が高まっている。例えば欧州の新車アセスメントEuro NCAPでは、自動ブレーキによる衝突回避の対象として、夜間の歩行者を検知する機能を2018年に加点するなど、今後、暗環境における車載カメラの検出性能の向上がますます求められる。そのためには、カメラに搭載する撮像素子の高感度化だけでなく、暗環境において前方をできるだけ明るく照らす照明技術が必要となる。例えば特許文献1に記載の車両用灯具は、蛍光体を含む発光部と、レーザー光源を含むレーザー光学系と、投影レンズ等を備える構成として、高輝度の照明を実現することが述べられている。 In an on-vehicle camera, there is an increasing demand for accurately recognizing distant objects and recognizing a wide range of objects without reducing the resolution. For example, the European new car assessment Euro NCAP is expected to further improve the detection performance of in-vehicle cameras in dark environments, such as adding a function to detect pedestrians at night as a target of collision avoidance by automatic braking in 2018 Be For that purpose, not only the high sensitivity of the imaging device mounted on the camera but also an illumination technology for illuminating the front as brightly as possible in a dark environment is required. For example, the vehicle lamp described in Patent Document 1 is described to realize high-intensity illumination as a configuration including a light emitting unit including a phosphor, a laser optical system including a laser light source, a projection lens, and the like. .
特開2011-198560号公報JP, 2011-198560, A
 車載カメラに要求される検出性能として、暗環境における物体の認識性能だけでなく、高速走行時における物体の検出性能、すなわち検出速度も要求される。いずれの要求を優先するかは、カメラの使用条件である車外の明るさや車両速度によって異なってくる。よって、使用条件に応じて検出性能の内容を切り替えることが望ましい。 As the detection performance required of an on-vehicle camera, not only the recognition performance of an object in a dark environment, but also the detection performance of an object at high speed traveling, that is, the detection speed is required. Which one of the requirements is prioritized depends on the brightness of the outside of the vehicle and the speed of the vehicle, which is the use condition of the camera. Therefore, it is desirable to switch the contents of the detection performance according to the use conditions.
 特許文献1に示すようなレーザー光源を搭載した照明装置によれば、前者の暗環境における物体の認識性能の向上が期待できるが、レーザー光源はLED光源などの汎用光源に比べて高価であるという課題がある。また、特許文献1をはじめ従来技術では、カメラの使用条件に応じて検出性能や検出速度を向上させることは特に考慮されていなかった。 According to the illumination device equipped with the laser light source as shown in Patent Document 1, the improvement of the recognition performance of the object in the former dark environment can be expected, but the laser light source is more expensive than general-purpose light sources such as LED light sources. There is a problem. Further, in the prior art including Patent Document 1, it has not been particularly considered to improve the detection performance and the detection speed according to the use conditions of the camera.
 本発明の目的は、汎用の光源を使用しつつ、暗環境における検出性能の向上、および高速走行時の検出速度の向上を実現する撮像システムを提供することである。 An object of the present invention is to provide an imaging system which realizes improvement in detection performance in a dark environment and improvement in detection speed at high speed while using a general-purpose light source.
 本発明の撮像システムは、被写体に照明光を照射する照明部と、照明部から照射する照明光の光束量を調光する調光部と、撮像素子により被写体を撮像し画像信号を出力する撮像部と、調光部と撮像部を制御する制御部と、を備え、制御部は調光部を介し、撮像部の撮像フレームに同期して、照明部から照射する照明光の光束量および/又は照射時間を制御することを特徴とする。 The imaging system according to the present invention comprises an illumination unit for illuminating the subject with illumination light, a light control unit for controlling the amount of luminous flux of the illumination light emitted from the illumination unit, and imaging for imaging the subject with the imaging device and outputting an image signal. Unit, and a control unit for controlling the light control unit and the imaging unit, the control unit via the light control unit, and the luminous flux of the illumination light emitted from the illumination unit in synchronization with the imaging frame of the imaging unit; Alternatively, the irradiation time is controlled.
 その一例を挙げれば、調光部は照明部に対し、撮像部の連続する2つの撮像フレームを周期とし、撮像部の第1のフレームにおける照明光の光束量L1と、これに続く第2のフレームにおける照明光の光束量L2とを異なる値に調光する構成とした。 For example, the light control unit makes the illumination unit have two consecutive imaging frames of the imaging unit as a cycle, and the luminous flux amount L1 of the illumination light in the first frame of the imaging unit and the second following The light quantity L2 of the illumination light in the frame is adjusted to a different value.
 本発明によれば、汎用の光源を使用しつつ、暗環境における検出性能の向上、および高速走行時の検出速度の向上を実現する撮像システムを提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, the imaging system which implement | achieves the improvement of the detection performance in a dark environment, and the improvement of the detection speed at the time of high speed driving | running can be provided, using a general purpose light source.
実施例1において車両に搭載した撮像システムの構成を示すブロック図。1 is a block diagram showing a configuration of an imaging system mounted on a vehicle in Embodiment 1. FIG. 撮像部(撮像装置)の構成を示すブロック図。FIG. 2 is a block diagram showing a configuration of an imaging unit (imaging device). 撮像フレームと照明動作の関係を示す図。The figure which shows the relationship between an imaging frame and illumination operation. 実施例1による照明光の効果を模式的に説明する図。FIG. 7 schematically illustrates the effect of illumination light according to the first embodiment. 実施例2における照明光の照射状態を示す図。FIG. 7 is a view showing an irradiation state of illumination light in Example 2. 実施例3における撮像フレームと照明動作の関係を示す図。FIG. 14 is a diagram showing the relationship between an imaging frame and an illumination operation in Embodiment 3. 実施例4において車両に搭載した撮像システムの構成を示すブロック図。FIG. 14 is a block diagram showing the configuration of an imaging system mounted on a vehicle in a fourth embodiment. 撮像フレームと照明動作の関係を示す図。The figure which shows the relationship between an imaging frame and illumination operation. 撮像部2内の撮像素子の構成と動作を示す図。FIG. 3 is a diagram showing the configuration and operation of an imaging element in the imaging unit 2; 実施例4による撮像画像の例を示す図。FIG. 18 is a view showing an example of a captured image according to the fourth embodiment. 撮像システムを監視カメラシステムに適用した例を示す図。The figure which shows the example which applied the imaging system to the surveillance camera system.
 以下、本発明の撮像システムの実施形態について図面を用いて説明する。以下の説明は、撮像システムを車両に搭載する場合を例とするが、監視カメラシステムに適用することも可能である。 Hereinafter, embodiments of the imaging system of the present invention will be described using the drawings. Although the following description takes as an example the case where the imaging system is mounted on a vehicle, it is also possible to apply to a surveillance camera system.
 実施例1では、暗環境における検出性能の向上に適した撮像システムについて説明する。
  図1Aは、実施例1において車両に搭載した撮像システムの構成を示すブロック図である。車両20に搭載された撮像システム10は、照明光を照射する照明部1、被写体を撮像する撮像部(撮像装置)2、照明部1からの照明光を調光する調光部3、および撮像部2と調光部3を制御する制御部4を備えている。ここに照明部1は、車両20の前方を照明する灯具(ヘッドライト)であり、LED光源などの汎用光源を使用している。
In the first embodiment, an imaging system suitable for improving detection performance in a dark environment will be described.
FIG. 1A is a block diagram showing the configuration of an imaging system mounted on a vehicle in the first embodiment. An imaging system 10 mounted on a vehicle 20 includes an illumination unit 1 for emitting illumination light, an imaging unit (imaging device) 2 for imaging a subject, a light control unit 3 for dimming illumination light from the illumination unit 1, and imaging The control unit 4 controls the unit 2 and the light control unit 3. Here, the illumination unit 1 is a lamp (headlight) for illuminating the front of the vehicle 20, and uses a general-purpose light source such as an LED light source.
 照明部1から照射した照明光30によって車両20の前方領域を照明し、撮像部2により前方領域を撮像する。撮像部2にて撮像した画像データは画像処理部5に送られ、前方領域の物体(人物)を検出する。また、画像処理部5の処理結果に応じて、制御部4は撮像部2と調光部3を制御することも可能である。なお構成としては、画像処理部5の機能の一部または全てが、撮像システム10の中に組み込まれた構成でも良い。本実施例では、制御部4からの制御により、撮像部2の撮像動作と、調光部3による照明部1の照明動作を連携させている。 The front region of the vehicle 20 is illuminated by the illumination light 30 emitted from the illumination unit 1, and the front region is imaged by the imaging unit 2. Image data captured by the imaging unit 2 is sent to the image processing unit 5 to detect an object (person) in the front area. The control unit 4 can also control the imaging unit 2 and the light control unit 3 in accordance with the processing result of the image processing unit 5. As a configuration, a part or all of the functions of the image processing unit 5 may be incorporated in the imaging system 10. In the present embodiment, under the control of the control unit 4, the imaging operation of the imaging unit 2 and the illumination operation of the illumination unit 1 by the light control unit 3 are coordinated.
 図1Bは、撮像部(撮像装置)2の構成を示すブロック図である。撮像部(撮像装置)2は、撮像した画像データを画像処理部5に出力する撮像データ出力端子2aと、制御部4からの制御信号として照明発光タイミングの同期信号を入力する同期信号入力端子2bとを備えている。これにより、照明部1の照明発光タイミングに同期して撮像部2の撮像動作を行うようにしている。 FIG. 1B is a block diagram showing the configuration of the imaging unit (imaging device) 2. The imaging unit (imaging device) 2 outputs an imaged image data to the image processing unit 5, and a synchronization signal input terminal 2 b that inputs a synchronization signal of illumination light emission timing as a control signal from the control unit 4. And have. Thus, the imaging operation of the imaging unit 2 is performed in synchronization with the illumination light emission timing of the illumination unit 1.
 図2は、撮像フレームと照明動作の関係を示す図である。(a)は撮像部2による撮像フレーム列を、(b)は照明部1が照射する光束量の変化を、(c)は撮像部2から得られる出力信号のSN比を示したものである。(a)において、符号F1~F4は撮像フレームの番号を示しており、制御部4からの制御信号に従ってフレーム単位で撮像動作を行う。 FIG. 2 is a diagram showing the relationship between the imaging frame and the lighting operation. (A) shows the imaging frame sequence by the imaging unit 2, (b) shows the change of the luminous flux emitted by the illumination unit 1, and (c) shows the SN ratio of the output signal obtained from the imaging unit 2. . In (a), reference symbols F1 to F4 denote the numbers of imaging frames, and the imaging operation is performed in units of frames in accordance with the control signal from the control unit 4.
 (b)は、(a)の各フレームにおいて照明部1から照射する光束量(記号Lで示す)の変化を示している。なお、本実施例では、調光部3によって照明部1のLED光源をパルス幅制御することで各フレームの光束量(L)を変化させている。例えば、フレームF1では光束量を相対的に高く調光し(L=L1)、次のフレームF2では光束量を相対的に低く調光する(L=L2)。その際、撮像フレームの周期を人の目の応答時間より短くすることで、照明光の光束量がフレーム単位で変化しても人の目にはその明暗の変化を認識できない。すなわち、人の目にとっては平均的な光束量(L=Lav)となり、フリッカーを感じさせることはない。一方撮像部2では、高速な撮像素子を用いているため、照明光の明暗の変化に応じた撮像動作を行うことができる。 (B) shows a change in the amount of light flux (indicated by symbol L) emitted from the illumination unit 1 in each frame of (a). In the present embodiment, the light quantity (L) of each frame is changed by controlling the pulse width of the LED light source of the illumination unit 1 by the light control unit 3. For example, the light amount is relatively high in the frame F1 (L = L1), and the light amount is relatively low in the next frame F2 (L = L2). At this time, by making the cycle of the imaging frame shorter than the response time of the human eye, even if the luminous flux of the illumination light changes in frame units, the human eye can not recognize the change in the brightness. That is, it becomes an average luminous flux amount (L = Lav) for human eyes, and flicker is not felt. On the other hand, since the imaging unit 2 uses a high-speed imaging device, it is possible to perform an imaging operation according to the change in brightness of the illumination light.
 (c)は撮像部2から出力される撮像信号のSN比(記号Pで示す)を相対的に示している。フレームF1の期間では物体への照度が高いためSN比は高くなり(P=P1)、フレームF2の期間では物体への照度が低くなるためSN比が低くなる(P=P2)。これにより、フレームF1で得られるSN比(P1)は、平均的な光束量(Lav)で得られるSN比(Pav)よりも大きくなる。なお、フレームF2の期間ではSN比(P2)は平均的なSN比(Pav)よりも小さくなるが、画像処理部5においてはフレーム単位での検出処理を行うため、フレームF1での検出性能に支障を与えることはない。このようにして、撮像部2の出力信号のSN比が平均的なSN比よりも高くなる期間を設けることで、検出性能を向上することができる。 (C) relatively shows the SN ratio (indicated by symbol P) of the imaging signal output from the imaging unit 2. The SN ratio is high (P = P1) since the illuminance on the object is high in the period of frame F1 (P = P1), and the SN ratio is low (P = P2) since the illuminance on the object is low in the period of frame F2. Thereby, the SN ratio (P1) obtained in the frame F1 becomes larger than the SN ratio (Pav) obtained in the average luminous flux (Lav). Although the SN ratio (P2) is smaller than the average SN ratio (Pav) in the period of the frame F2, the image processing unit 5 performs detection processing on a frame basis, so detection performance in the frame F1 is There is no problem. Thus, by providing a period in which the SN ratio of the output signal of the imaging unit 2 is higher than the average SN ratio, detection performance can be improved.
 このように本実施例では、フレームF1,F3の期間では相対的に高い光束量(L1)に調光するのに対し、これに続くフレームF2,F4の期間では相対的に低い光束量(L2)に調光している。その理由は、光束量が高い期間と光束量が低い期間とを交互に設けることで、継続した照明動作期間にわたり、平均的な光束量(Lav)を略一定の値とするためである。これにより、人の目が感じる照明部1による本来の照明効果の変動をなくすとともに、照明部1の消費電力を従来とほぼ同等にすることができる。 As described above, in the present embodiment, light adjustment is performed to a relatively high light amount (L1) in the periods of the frames F1 and F3, while a relatively low light amount (L2) is performed in the subsequent periods of the frames F2 and F4. Dimmed to). The reason is that the average luminous flux amount (Lav) is made to be a substantially constant value over the continuous illumination operation period by alternately providing a period in which the luminous flux amount is high and a period in which the luminous flux amount is low. As a result, it is possible to eliminate the fluctuation of the original lighting effect by the lighting unit 1 felt by human eyes, and to make the power consumption of the lighting unit 1 substantially equal to that of the prior art.
 図2に示す例では、フレームF1,F3の期間では相対的に高い光束量(L1)に、これに続くフレームF2,F4の期間では相対的に低い光束量(L2)に調光したが(L1>L2)、光束量の大小関係を逆にしてL1<L2としても良いことは言うまでもない。すなわち、連続する2つのフレームを周期とし、先行する第1のフレームにおける光束量L1と、これに続く第2のフレームにおける光束量L2とを異なる値(L1≠L2)に調光すればよい。 In the example shown in FIG. 2, although light control was performed to a relatively high light amount (L1) in the periods of frames F1 and F3, and to a relatively low light amount (L2) in the periods of frames F2 and F4 following this ( It is needless to say that L1> L2) and L1 <L2 may be established by reversing the magnitude relationship of the luminous flux amounts. That is, with two consecutive frames as a cycle, the luminous flux amount L1 in the first preceding frame and the luminous flux amount L2 in the second frame following this may be dimmed to different values (L1 ≠ L2).
 また、光束量の変化の周期を2フレームとしたが、これに限定されず、人の目の応答時間に応じてもっと長い周期とすることができる。つまり、撮像素子の1フレーム期間がさらに短い場合には、光束量の変化の周期をNフレーム(Nは2以上)として、Nフレーム内に最大の光束量(L1)に調光するフレームと、最小の光束量(L2)に調光するフレームとを含ませ、Nフレーム期間内の光束量の平均値がLavとなるように調光すればよい。 In addition, although the period of change of luminous flux amount is set to two frames, it is not limited to this, and the period can be set to be longer according to the response time of human eyes. That is, when one frame period of the imaging device is further short, a frame in which the light flux amount change period is N frames (N is 2 or more) and the light control is performed to the maximum light flux amount (L1) in N frames; The light control frame may be included in the minimum light flux amount (L2), and light control may be performed so that the average value of the light flux amount in the N frame period becomes Lav.
 図3は、本実施例による照明光の効果を模式的に説明する図である。(a)は比較のために従来の照明状態を、(b)は本実施例における照明状態を示す。いずれも暗環境において、車両20から照明光30を照射し、車両20から比較的遠方に存在する歩行者21や標識22を検出する場合である。 FIG. 3 is a diagram schematically illustrating the effect of the illumination light according to the present embodiment. (A) shows the conventional illumination state for comparison, and (b) shows the illumination state in the present embodiment. In either case, the illumination light 30 is irradiated from the vehicle 20 in a dark environment, and the pedestrian 21 and the sign 22 relatively present from the vehicle 20 are detected.
 図3(a)は、図2における平均的な光束量L=Lavにて照明した場合で、検出対象物(歩行者21や標識22)に対する照度が十分でなく、得られる撮像信号のSN比が低く、検出対象物の識別が困難な状態となる。 FIG. 3A shows the case where illumination is performed with an average luminous flux amount L = Lav in FIG. 2 and the illuminance to the detection target (the pedestrian 21 and the sign 22) is not sufficient, and the SN ratio of the obtained imaging signal Is low and identification of the detection target is difficult.
 これに対し図3(b)は、図2における相対的に高い光束量L=L1にて照明した場合(フレームF1、F3の期間)で、検出対象物に対する照度が高まり、得られる撮像信号のSN比が向上し、検出対象物の識別が可能となる。つまり、ここで言う相対的に高い光束量L1とは、撮像部2からの出力信号のSN比が検出対象物の検出に十分となるように調光した状態である。 On the other hand, in FIG. 3B, when the illumination is performed with a relatively high luminous flux amount L = L1 in FIG. 2 (period of frames F1 and F3), the illuminance on the detection target is increased, and the obtained imaging signal is The signal-to-noise ratio is improved, which makes it possible to identify an object to be detected. That is, the relatively high luminous flux amount L1 referred to here is a state in which light control is performed so that the SN ratio of the output signal from the imaging unit 2 is sufficient for detection of the detection target.
 なお、ここには図示しないが、図2における相対的に低い光束量L=L2にて照射した場合(フレームF2、F4の期間)は、検出対象物に対する照度が図3(a)の場合よりも低下し、得られる撮像信号のSN比が劣化する。しかし画像処理部5では、この期間での検出対象物の識別は行わないので支障にはならない。 Although not shown here, when the irradiation is performed with a relatively low luminous flux L = L2 in FIG. 2 (period of frames F2 and F4), the illuminance on the object to be detected is greater than that in FIG. 3A. Also, the SN ratio of the obtained imaging signal is degraded. However, since the image processing unit 5 does not identify the detection target in this period, there is no problem.
 このように本実施例によれば、照明部1の消費電力を従来とほぼ同等としつつ撮像部2からの出力信号のSN比を高くして、暗環境における検出対象物の検出性能を向上することが可能となる。その際、LED光源などの汎用光源を使用できるので、コストアップを招くことはない。 As described above, according to the present embodiment, the SN ratio of the output signal from the imaging unit 2 is increased while making the power consumption of the illumination unit 1 substantially the same as the conventional, and the detection performance of the detection object in the dark environment is improved. It becomes possible. At that time, since a general-purpose light source such as an LED light source can be used, there is no increase in cost.
 実施例1では照明光の照射領域全体に対して光束量を調光したが、実施例2では、照射領域の一部領域のみを調光する場合について説明する。 In the first embodiment, the luminous flux amount is controlled with respect to the entire irradiation area of the illumination light, but in the second embodiment, a case where only a partial area of the irradiation area is subjected to the light control will be described.
 図4は、実施例2における照明光の照射状態を示す図である。車両20の前方の照射領域31のうち、符号32で示す領域のみを部分的に調光している。例えばこの領域32は車両20の走行方向であり、他よりも検出性能が要求される領域である。 FIG. 4 is a view showing the irradiation state of the illumination light in the second embodiment. Of the irradiation area 31 in front of the vehicle 20, only the area indicated by reference numeral 32 is partially dimmed. For example, this area 32 is the traveling direction of the vehicle 20, and is an area where detection performance is required more than the other.
 図4(a)は、例えば図2のフレームF1、F3において、照明部1からの光束量を領域32のみ相対的に高く調光した状態(L=L1’)である。他の領域31では、平均的な光束量(L=Lav)とする。 FIG. 4A shows, for example, a state (L = L1 ') in which the luminous flux amount from the illumination unit 1 is dimmed relatively high only in the region 32 in the frames F1 and F3 of FIG. In the other region 31, an average luminous flux amount (L = Lav) is set.
 一方図4(b)は、図2のフレームF2、F4において、領域32のみ低く調光した状態(L=L2’)である。他の領域31では、平均的な光束量(L=Lav)とする。その際の光束量の変化(L1’、L2’)の平均がLavとなるように設定することで、人の目には、一部の領域32と周囲の領域31とで照度の差を感じさせないようにできる。 On the other hand, FIG. 4B shows a state (L = L2 ') in which only the area 32 is dimmed in the frames F2 and F4 of FIG. In the other region 31, an average luminous flux amount (L = Lav) is set. By setting the average of the change (L1 ′, L2 ′) of the luminous flux at that time to be Lav, the human eye feels a difference in illuminance between the partial area 32 and the peripheral area 31. You can not let it go.
 なお、一部の領域32に対してのみ照明光の光束量を調光するには、照明部1に例えばLEDアレイ光源を使用することで部分領域の調光が可能である。あるいは、光ビームを走査する照明方式を採用することでも、部分領域の調光が可能である。 In addition, in order to control the luminous flux amount of the illumination light with respect to only a part of the area 32, the dimming of the partial area is possible by using, for example, an LED array light source in the illumination unit 1. Alternatively, dimming of a partial region is also possible by adopting an illumination method of scanning a light beam.
 本実施例によれば、照射領域のうち他よりも検出性能が要求される一部の領域について、撮像部2からの出力信号のSN比を高くして検出性能を向上することが可能となる。 According to the present embodiment, it is possible to improve the detection performance by raising the SN ratio of the output signal from the imaging unit 2 in a part of the irradiation areas where the detection performance is required more than others. .
 実施例1では、照明光を調光するときの光束量の変化幅は時間的に一定としたが、実施例3では、光束量の変化幅を時間的に変更可能とする場合について説明する。以下、光束量の変化幅を「調光幅」とも呼ぶ。 In the first embodiment, the change width of the light flux amount when dimming the illumination light is temporally constant, but in the third embodiment, the case where the change width of the light flux amount can be temporally changeable will be described. Hereinafter, the change width of the luminous flux amount is also referred to as “light control width”.
 図5は、実施例3における撮像フレームと照明動作の関係を示す図である。(a)は撮像部2による撮像フレーム列を、(b)は照明部1が照射する光束量の変化を示している。(a)において、符号T1~T3は撮像期間を示し、各撮像期間には複数の撮像フレーム(ここでは4フレーム)が含まれている。 FIG. 5 is a diagram showing the relationship between the imaging frame and the illumination operation in the third embodiment. (A) shows the change of the amount of luminous flux which the illumination part 1 irradiates, and (b) has shown the imaging frame row by the imaging part 2. As shown in FIG. In (a), reference symbols T1 to T3 denote imaging periods, and each imaging period includes a plurality of imaging frames (here, four frames).
 (b)で示すように、撮像期間T1では調光幅(光束量の変化幅)を小さくし、光束量をL1とL2の間で繰り返している。一方撮像期間T2では、調光幅を大きくし、光束量をL3とL4の間で繰り返している。実施例1でも述べたように、照明光による照度が高いほど撮像信号のSN比は高くなる。その結果、撮像期間T1のフレームF1,F3で得られるSN比よりも、撮像期間T2のフレームF5,F7で得られるSN比がより高くなる。 As shown in (b), in the imaging period T1, the light control width (the change width of the luminous flux amount) is reduced, and the luminous flux amount is repeated between L1 and L2. On the other hand, in the imaging period T2, the light control width is increased, and the luminous flux amount is repeated between L3 and L4. As described in the first embodiment, as the illuminance by the illumination light is higher, the SN ratio of the imaging signal is higher. As a result, the SN ratios obtained in the frames F5 and F7 of the imaging period T2 become higher than the SN ratios obtained in the frames F1 and F3 of the imaging period T1.
 このような照明制御は、撮像環境に応じて、撮像部2からの出力信号のSN比を変化させたい(更に高めたい)場合に有効である。つまり、検出対象物に対する照度が低下し、より高い照度を必要とする場合には、撮像期間T2のように、これに含まれるフレームF5,F7における光束量を更に増大させる(L=L3)。これにより、撮像信号のSN比を改善することができる。その際、現在の照度が十分かどうかは、制御部4において、撮像部2からの出力信号のSN比や画像処理部5での処理結果をモニタしたり、周囲の環境輝度をモニタしたりすることで、所定の基準値と比較して判断すればよい。 Such illumination control is effective when it is desired to change (or further increase) the SN ratio of the output signal from the imaging unit 2 according to the imaging environment. That is, when the illuminance on the object to be detected is lowered and a higher illuminance is required, as in the imaging period T2, the amount of luminous flux in the frames F5 and F7 included in this is further increased (L = L3). Thereby, the SN ratio of the imaging signal can be improved. At this time, the controller 4 monitors the SN ratio of the output signal from the imaging unit 2 and the processing result of the image processing unit 5 or monitors the ambient brightness in the control unit 4 to determine whether the current illuminance is sufficient. Therefore, the determination may be made in comparison with a predetermined reference value.
 なお、実施例1と同様に、継続した照明動作期間において人の目には照度の変化を感じさせないように、また照明部1の消費電力が従来とほぼ同等となるようにする。そのため、撮像期間T2における光束量L3,L4の平均値が撮像期間T1における光束量の平均値Lavと略等しくなるように、フレームF6,F8における光束量を更に減少させる(L=L4)。 As in the first embodiment, the power consumption of the lighting unit 1 is made to be substantially equal to that in the prior art so that the human eye does not feel a change in the illuminance during the continuous lighting operation period. Therefore, the luminous flux amounts in the frames F6 and F8 are further reduced (L = L4) so that the average value of the luminous flux amounts L3 and L4 in the imaging period T2 is substantially equal to the average value Lav of the luminous flux amounts in the imaging period T1.
 実施例4では、高速走行時に対応し検出速度の向上に適した撮像システムについて説明する。 In the fourth embodiment, an imaging system suitable for improvement in detection speed in response to high speed traveling will be described.
 図6は、実施例4において車両に搭載した撮像システムの構成を示すブロック図である。本実施例の撮像システム11は、2つの照明部1a,1bを備え、互いに異なるスペクトル成分の光を照射する。例えば、照明部1aは白色光を、照明部1bは近赤外光を照射する。2つの照明部1a,1bは別体である必要はなく、同一の筐体内に各々の光源を収納してもよい。調光部3は、2つの照明部1a,1bに対し調光を行う。他の構成は実施例1(図1A)と同様である。照明部1aから照射した照明光30aと、照明部1bから照射した照明光30bは、車両20の前方領域を照明する。この図では2つの照明光30a,30bの照射領域をずらして描いているが、実際には照射領域は一致している。本実施例でも、制御部4からの制御により、撮像部2の撮像動作と、照明部1a,1bを調光する調光部3の動作を連携させている。 FIG. 6 is a block diagram showing the configuration of an imaging system mounted on a vehicle in the fourth embodiment. The imaging system 11 of the present embodiment includes two illumination units 1a and 1b, and emits light of spectral components different from each other. For example, the illumination unit 1a emits white light, and the illumination unit 1b emits near infrared light. The two illumination units 1a and 1b do not have to be separate, and each light source may be housed in the same housing. The light control unit 3 performs light control on the two illumination units 1a and 1b. The other configuration is the same as that of the first embodiment (FIG. 1A). The illumination light 30a emitted from the illumination unit 1a and the illumination light 30b emitted from the illumination unit 1b illuminate the front area of the vehicle 20. Although the illumination areas of the two illumination lights 30a and 30b are drawn while being shifted in this figure, the illumination areas actually coincide. Also in this embodiment, under the control of the control unit 4, the imaging operation of the imaging unit 2 and the operation of the light control unit 3 for controlling the lighting units 1a and 1b are linked.
 図7は、撮像フレームと照明動作の関係を示す図である。(a)は撮像部2による撮像フレーム列を、(b)と(c)はそれぞれ照明部1aと照明部1bが照射する光束量の変化を示している。 FIG. 7 is a diagram showing the relationship between the imaging frame and the lighting operation. (A) shows the imaging frame row by the imaging unit 2, and (b) and (c) show changes in the amount of luminous flux emitted by the illumination unit 1a and the illumination unit 1b, respectively.
 (a)のように、各撮像フレームF1,F2,・・を時分割し、例えばフレームF1を前半期間F1aと後半期間F1bの2つの期間に分割する。そして(b)(c)に示すように、フレームF1の前半期間F1aは照明部1a(白色光)のみで照明し、フレームF1の後半期間F1bでは照明部1b(近赤外光)のみで照明する。その時の光束量La,Lbは、それぞれの期間F1a,F1bにおいて、撮像部2からの出力信号のSN比が検出対象物の検出に十分となるように設定している。その結果、前半期間F1aには照明部1a(白色光)による1枚の撮像信号が、後半期間F1bには照明部1b(近赤外光)による1枚の撮像信号を出力し、1つの撮像フレームF1の期間に2枚の画像を得ることができる。これにより、フレームレートが実効的に2倍となり、検出速度を向上させることができる。 As shown in (a), each imaging frame F1, F2,... Is time-divided, and for example, the frame F1 is divided into two periods, a first half period F1a and a second half period F1b. And as shown in (b) and (c), the first half period F1a of the frame F1 is illuminated only with the illumination portion 1a (white light), and the second half period F1b of the frame F1 is illuminated only with the illumination portion 1b (near infrared light) Do. The luminous flux amounts La and Lb at that time are set such that the SN ratio of the output signal from the imaging unit 2 is sufficient for detection of the detection target in the respective periods F1a and F1b. As a result, one imaging signal by the illumination unit 1a (white light) is output in the first half period F1a, and one imaging signal by the illumination portion 1b (near infrared light) is output in the second half period F1b. Two images can be obtained in the period of the frame F1. As a result, the frame rate is effectively doubled, and the detection speed can be improved.
 図8は、撮像部2内の撮像素子の構成と動作を示す図である。(a)は撮像素子の配置を示し、(b)は撮像処理動作を示す。 FIG. 8 is a diagram showing the configuration and operation of an imaging element in the imaging unit 2. (A) shows the arrangement of imaging elements, and (b) shows an imaging processing operation.
 (a)のように撮像素子40は、R(赤)、G(緑)、B(青)それぞれのカラーフィルタをアレイ状に配置した画素群に、近赤外光(IR)の検出に対応した画素を追加して2次元状に配列している。これにより、照明部1aの白色光照射に対してはR,G,Bの画素が、照明部1bの近赤外光照射に対してはIR画素が光電変換を行う。その結果、撮像素子40の各画素からは、R,G,BおよびIRのうち1つの画素信号のみが出力され、得られるデータはモザイクデータとなる。 As shown in (a), the imaging device 40 supports detection of near infrared light (IR) in a pixel group in which color filters of R (red), G (green) and B (blue) are arranged in an array. Pixels are added and arranged in a two-dimensional manner. Thus, R, G, and B pixels perform photoelectric conversion on white light irradiation of the illumination unit 1 a and IR pixels on near infrared light irradiation of the illumination unit 1 b. As a result, only one pixel signal of R, G, B and IR is output from each pixel of the imaging device 40, and the obtained data is mosaic data.
 (b)は撮像部2の撮像処理動作を示し、撮像素子40から出力されたモザイクデータをデモザイキング処理し、R画素データ群から補間処理された画像40a、G画素データ群から補間処理された画像40b、B画素データ群から補間処理された画像40c、およびIR画素データ群から補間処理された画像40dを生成する。そして、画像40a、40b、40cを組み合わせることでカラー画像を、また画像40dから近赤外画像を、同一フレーム内で取得することができる。 (B) shows the image pickup processing operation of the image pickup unit 2; the mosaic data output from the image pickup element 40 is demosaicing processed, and the image 40a interpolated from the R pixel data group and the interpolation processed from the G pixel data group The image 40b, the image 40c interpolated from the B pixel data group, and the image 40d interpolated from the IR pixel data group are generated. Then, by combining the images 40a, 40b, and 40c, it is possible to acquire a color image and a near infrared image from the image 40d in the same frame.
 前述したように、本実施例では1つのフレームを時分割して、互いにスペクトルが異なる照明光で照明している。また撮像部2に用いる撮像素子は、互いにスペクトルが異なる照明光に反応するように構成しているので、1フレーム期間に時間的にずれた2枚の画像を互いに干渉することなく生成できる。 As described above, in this embodiment, one frame is time-divided and illuminated with illumination light having different spectra. Further, since the imaging device used for the imaging unit 2 is configured to respond to illumination light having different spectra, it is possible to generate two images shifted in time in one frame period without interference with each other.
 図9は、本実施例による撮像画像の例を示す図である。(a)は撮像フレームを、(b)は撮像画像の時間変化の例を示す。撮像フレームF1の期間において、照明部1aの照射光(白色光)だけを照射している期間F1aの撮像画像51aと、照明部1bの照射光(近赤外光)だけを照射している期間F1bの撮像画像51bの2つの画像を生成できる。フレームF2の期間においても同様で、2つの撮像画像52a、52bを生成できる。このように1フレームを時分割して2枚の画像を生成することで、実効的にフレームレートを増大させ、高速に変化する検出対象に対する検出速度を向上させることができる。 FIG. 9 is a diagram showing an example of a captured image according to the present embodiment. (A) shows an image pick-up frame, (b) shows an example of time change of an image pick-up picture. During the imaging frame F1, the imaged image 51a of the period F1a in which only the irradiation light (white light) of the illumination unit 1a is irradiated and the period in which only the irradiation light (near infrared light) of the illumination unit 1b is irradiated Two images of the captured image 51b of F1b can be generated. The same applies to the period of the frame F2, and two captured images 52a and 52b can be generated. By thus time-dividing one frame to generate two images, it is possible to effectively increase the frame rate and to improve the detection speed for a rapidly changing detection target.
 上記の例では照明光を白色光と近赤外光の2つに分離したが、これに限定されず、互いにスペクトルが異なる照明光とし、かつ撮像素子がそれぞれの照明光に対応して別々の画像を生成する構成であれば、同様の効果が得られる。また、分離する数は2以上の任意の整数Mでも良い。例えば照明光をR、G、Bの3色に分離し(M=3)、1フレーム内を3つの期間に時分割してR、G、B光を順に照射する構成でも構わない。この場合、撮像部2の撮像素子には、R、G、Bそれぞれのカラーフィルタの画素をアレイ状に配置したものを用いる。R画素データ群から補間処理されたR画像と、G画素データ群から補間処理されたG画像、およびB画素データ群から補間処理されたB画像の3つの画像を順に生成することで、1フレームを3つに時分割した撮像画像を生成できる。これにより、実効的なフレームレートを3倍に向上させることができ、撮像システムの検出速度をさらに向上することができる。本実施例によれば、車両が高速で走行している場合などのように、動きの速い検出対象物の検出を高速に行う場合に効果がある。 In the above example, the illumination light is divided into two, white light and near infrared light, but the invention is not limited to this, and illumination light with different spectra is used as the illumination light, and the imaging device is separate for each illumination light. If it is the structure which produces | generates an image, the same effect will be acquired. Also, the number to be separated may be an arbitrary integer M of 2 or more. For example, the illumination light may be divided into three colors of R, G, and B (M = 3), and one frame may be time-divided into three periods to sequentially emit R, G, and B light. In this case, as the imaging element of the imaging unit 2, one in which pixels of color filters of R, G, and B are arranged in an array is used. By sequentially generating three images of an R image interpolated from the R pixel data group, a G image interpolated from the G pixel data group, and a B image interpolated from the B pixel data group Can generate a captured image time-divided into three. Thereby, the effective frame rate can be improved threefold, and the detection speed of the imaging system can be further improved. According to this embodiment, as in the case where the vehicle is traveling at a high speed, it is effective in the case where the detection target object having a fast movement is detected at a high speed.
 本発明は、上記した実施例に限定されるものではなく、様々な変形例が含まれる。上記した実施例は、本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されない。また、実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。例えば、撮像システムの使用条件(車両の走行速度)に応じて、実施例1の動作(検出性能の向上)と、実施例4の動作(検出速度の向上)を適宜切り替える構成も可能である。 The present invention is not limited to the embodiments described above, but includes various modifications. The above-described embodiments are described in detail to explain the present invention in an easy-to-understand manner, and are not necessarily limited to those having all the configurations described. In addition, with respect to a part of the configuration of the embodiment, it is possible to add, delete or replace other configurations. For example, a configuration is also possible in which the operation of the first embodiment (improvement of detection performance) and the operation of the fourth embodiment (improvement of detection speed) are switched as appropriate according to the use conditions of the imaging system (traveling speed of the vehicle).
 また、上記した各実施例では、本発明の撮像システムを車両に搭載した場合について説明したが、これに限定されるものではなく、撮像部と照明部を備えたシステム(例えば監視カメラやスマートフォン)にも適用できる。 Moreover, although the case where the imaging system of this invention was mounted in the vehicle was demonstrated in each above-mentioned Example, it is not limited to this, The system (for example, surveillance camera and smart phone) provided with the imaging part and the illumination part It can be applied to
 図10は、撮像システムを監視カメラシステムに適用した例を示す図である。監視カメラシステム12は、撮像部(監視カメラ)2の他に、照明部1と、照明部1を調光する調光部3、これらを制御する制御部4を備える。 FIG. 10 is a diagram showing an example in which the imaging system is applied to a monitoring camera system. The monitoring camera system 12 includes, in addition to the imaging unit (monitoring camera) 2, an illumination unit 1, a light control unit 3 for controlling the illumination unit 1, and a control unit 4 for controlling these.
 実施例1と同様に、調光部3は、照明部1による照明光が瞬間的に強くなる期間を設けて、この期間における撮像部2からの出力信号のSN比を改善させる。その際、照明光が瞬間的に弱くなる期間を設けて平均的な照度を一定に保ち、人の目には照度の変化を感じさせないようにする。これにより、暗環境における検出性能の向上を図ることができる。 As in the first embodiment, the light control unit 3 provides a period in which the illumination light by the illumination unit 1 is momentarily strong, and improves the SN ratio of the output signal from the imaging unit 2 in this period. At this time, a period in which the illumination light is momentarily weakened is provided to keep the average illuminance constant so that a human eye does not feel a change in the illuminance. Thereby, the detection performance in a dark environment can be improved.
 あるいは実施例4と同様に、照明部1からスペクトルが異なる2つの照明光で交互に照射する。そして撮像部2が、各照明光に対応して別々の画像を生成する構成とすることで、実効的に監視カメラのフレームレートを向上させ、検出速度の向上を図ることができる。 Alternatively, as in the fourth embodiment, two illumination lights having different spectra are alternately emitted from the illumination unit 1. Then, by configuring the imaging unit 2 to generate separate images corresponding to the respective illumination lights, it is possible to effectively improve the frame rate of the monitoring camera and to improve the detection speed.
 1,1a,1b:照明部、
 2:撮像部(撮像装置)、
 3:調光部、
 4:制御部、
 5:画像処理部、
 10,11:撮像システム、
 12:監視カメラシステム、
 20:車両、
 30,30a,30b:照明光、
 40:撮像素子、
 40a~40d:画像。
1, 1a, 1b: Lighting section,
2: Imaging unit (imaging device),
3: Light control section,
4: Control unit,
5: Image processing unit,
10, 11: Imaging system,
12: Surveillance camera system,
20: Vehicle,
30, 30a, 30b: illumination light,
40: Imaging device,
40a to 40d: Images.

Claims (9)

  1.  照明動作と連携して撮像動作を行う撮像システムにおいて、
     被写体に照明光を照射する照明部と、
     該照明部から照射する照明光の光束量を調光する調光部と、
     撮像素子により前記被写体を撮像し画像信号を出力する撮像部と、
     前記調光部と前記撮像部を制御する制御部と、を備え、
     前記制御部は前記調光部を介し、前記撮像部の撮像フレームに同期して、前記照明部から照射する照明光の光束量および/又は照射時間を制御することを特徴とする撮像システム。
    In an imaging system that performs an imaging operation in cooperation with a lighting operation,
    An illumination unit for illuminating the subject with illumination light;
    A light control unit for controlling a light flux amount of illumination light emitted from the illumination unit;
    An imaging unit that captures an image of the subject by an imaging element and outputs an image signal;
    And a control unit that controls the light adjustment unit and the imaging unit.
    The imaging system, wherein the control unit controls an amount of luminous flux and / or an irradiation time of illumination light emitted from the illumination unit in synchronization with an imaging frame of the imaging unit via the light adjustment unit.
  2.  請求項1記載の撮像システムにおいて、
     前記調光部は前記照明部に対し、前記撮像部の連続する2つの撮像フレームを周期とし、前記撮像部の第1のフレームにおける前記照明光の光束量L1と、これに続く第2のフレームにおける前記照明光の光束量L2とを異なる値(L1≠L2)に調光することを特徴とする撮像システム。
    In the imaging system according to claim 1,
    The light control unit has a period of two continuous imaging frames of the imaging unit with respect to the illumination unit, and a luminous flux amount L1 of the illumination light in the first frame of the imaging unit and a second frame following the illumination light An image pickup system characterized in that the luminous flux amount L2 of the illumination light in the light control is adjusted to a different value (L1 ≠ L2).
  3.  請求項2記載の撮像システムにおいて、
     前記照明光の光束量L1と光束量L2の平均値Lavは、前記照明部による継続した照明動作期間にわたり略一定の値とすることを特徴とする撮像システム。
    In the imaging system according to claim 2,
    An imaging system, wherein an average value Lav of the luminous flux amount L1 and the luminous flux amount L2 of the illumination light is a substantially constant value during a continuous illumination operation period by the illumination unit.
  4.  請求項2記載の撮像システムにおいて、
     前記調光部の行う光束量の調光動作は、前記照明部により照明光を照射する領域のうち一部の領域に対してのみ行うことを特徴とする撮像システム。
    In the imaging system according to claim 2,
    The image pickup system according to claim 1, wherein the light control operation of the light flux amount performed by the light control unit is performed only on a partial region of the region to which the illumination unit emits the illumination light.
  5.  請求項2記載の撮像システムにおいて、
     前記調光部は、前記撮像部による撮像期間に応じて、前記照明光の光束量L1と光束量L2の値を変更して調光することを特徴とする撮像システム。
    In the imaging system according to claim 2,
    The image pickup system according to claim 1, wherein the light control unit changes the values of the luminous flux amount L1 and the luminous flux amount L2 of the illumination light in accordance with an imaging period by the imaging unit.
  6.  請求項1記載の撮像システムにおいて、
     前記調光部は前記照明部に対し、前記撮像部の連続するN個(Nは2以上の整数)の撮像フレームを周期とし、同一の周期に含まれる第1のフレームにおける前記照明光の光束量が最大値L1となり、他の第2のフレームにおける前記照明光の光束量が最小値L2となるように調光し、同一の周期に含まれるN個の撮像フレームの各光束量の平均値Lavは、前記照明部による継続した照明動作期間にわたり略一定の値とすることを特徴とする撮像システム。
    In the imaging system according to claim 1,
    The light control unit has a cycle of N (N is an integer of 2 or more) consecutive imaging frames of the imaging unit with respect to the illumination unit, and the luminous flux of the illumination light in the first frame included in the same period. The light quantity is adjusted so that the quantity becomes the maximum value L1 and the luminous flux quantity of the illumination light in the other second frame becomes the minimum value L2, and the average value of the luminous flux quantities of N imaging frames included in the same cycle An imaging system characterized in that Lav is a substantially constant value during a continuous illumination operation period by the illumination unit.
  7.  請求項1記載の撮像システムにおいて、
     前記照明部は、第1のスペクトルを有する第1の照明光を照射する第1の照明部と、第1のスペクトルとは異なる第2のスペクトルを有する第2の照明光を照射する第2の照明部とを備え、
     前記撮像部の撮像素子は、前記第1のスペクトルの光に対し光電変換を行う第1の画素群と、前記第2のスペクトルの光に対し光電変換を行う第2の画素群とを有し、
     前記調光部は前記照明部に対し、前記撮像部の1つのフレーム内において、前記第1の照明光と前記第2の照明光を時分割にて照射させることにより、
     前記撮像部は1つのフレーム内において、前記第1の画素群から生成される第1の画像と前記第2の画素群から生成される第2の画像の信号を時分割にて出力することを特徴とする撮像システム。
    In the imaging system according to claim 1,
    The illumination unit emits a first illumination unit that emits a first illumination light having a first spectrum, and a second illumination unit that emits a second illumination light that has a second spectrum different from the first spectrum. Equipped with a lighting unit,
    The imaging element of the imaging unit has a first pixel group that performs photoelectric conversion on light of the first spectrum, and a second pixel group that performs photoelectric conversion on light of the second spectrum. ,
    The light control unit causes the illumination unit to emit the first illumination light and the second illumination light in a time division manner within one frame of the imaging unit.
    The imaging unit may output signals of a first image generated from the first pixel group and a second image generated from the second pixel group in a single frame in a time division manner. An imaging system characterized by
  8.  請求項1記載の撮像システムにおいて、
     前記照明部は互いにスペクトルが異なるM通り(Mは2以上の整数)の照明光を照射する構成であり、
     前記撮像部の撮像素子は、前記M通りのスペクトルの光に対し光電変換を行うM通りの画素群を有し、
     前記調光部は前記照明部に対し、前記撮像部の1つのフレーム内において、前記M通りの照明光を時分割にて照射することにより、
     前記撮像部は1つのフレーム内において、前記M通りの画素群から生成されるM通りの画像の信号を時分割にて出力することを特徴とする撮像システム。
    In the imaging system according to claim 1,
    The illumination unit is configured to emit illumination light of M ways (M is an integer of 2 or more) having mutually different spectra,
    The imaging device of the imaging unit has M groups of pixels for performing photoelectric conversion on the light of the M spectra,
    The light control unit irradiates the M illumination lights in a time division manner with respect to the illumination unit in one frame of the imaging unit.
    The imaging system, wherein the imaging unit outputs signals of M images generated from the M pixel groups in one frame in a time division manner.
  9.  照明装置の照明動作と連携して撮像動作を行う撮像装置であって、
     前記照明装置の照明発光タイミングの同期信号を入力する同期信号入力端子と、
     撮像した画像データを出力する撮像データ出力端子と、を備え、
     前記照明装置の照明発光タイミングに同期して撮像動作を行うことを特徴とする撮像装置。
    An imaging device that performs an imaging operation in cooperation with the illumination operation of the illumination device,
    A synchronization signal input terminal for inputting a synchronization signal of illumination light emission timing of the illumination device;
    An imaging data output terminal for outputting captured image data;
    An imaging device characterized by performing an imaging operation in synchronization with an illumination light emission timing of the illumination device.
PCT/JP2017/023821 2017-06-28 2017-06-28 Imaging system and imaging device WO2019003361A1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/023821 WO2019003361A1 (en) 2017-06-28 2017-06-28 Imaging system and imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/023821 WO2019003361A1 (en) 2017-06-28 2017-06-28 Imaging system and imaging device

Publications (1)

Publication Number Publication Date
WO2019003361A1 true WO2019003361A1 (en) 2019-01-03

Family

ID=64740494

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/023821 WO2019003361A1 (en) 2017-06-28 2017-06-28 Imaging system and imaging device

Country Status (1)

Country Link
WO (1) WO2019003361A1 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014049963A (en) * 2012-08-31 2014-03-17 Nikon Corp Moving image photographing system, camera, illumination apparatus, and illumination control device
WO2016084500A1 (en) * 2014-11-28 2016-06-02 オリンパス株式会社 Capsule endoscope, capsule endoscope activation system, and examination system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014049963A (en) * 2012-08-31 2014-03-17 Nikon Corp Moving image photographing system, camera, illumination apparatus, and illumination control device
WO2016084500A1 (en) * 2014-11-28 2016-06-02 オリンパス株式会社 Capsule endoscope, capsule endoscope activation system, and examination system

Similar Documents

Publication Publication Date Title
JP6471953B2 (en) Imaging apparatus, imaging system, and imaging method
US9516295B2 (en) Systems and methods for multi-channel imaging based on multiple exposure settings
CN107709096B (en) System and method for processing streaming video images to correct for flicker of amplitude modulated light
US9148581B2 (en) Multi-function control illumination device
JP4524985B2 (en) LIGHT CONTROL DEVICE, LIGHTING DEVICE, ITS CONTROL METHOD, AND PROJECTOR
JP2016096430A (en) Imaging apparatus and imaging method
WO2017110481A1 (en) Imaging element and driving method therefor, and imaging device
EP2476296B1 (en) Illumination system for enhancing the appearance of an object and method thereof
JP2012005054A (en) Camera adaptive to low luminance
WO2016076016A1 (en) Vehicle-mounted camera system
WO2005064922A1 (en) Imaging system
EP3605497A1 (en) Illumination image capture device
CN104811614B (en) The method of camera chain and the image information for seeking time pulse signal source for vehicle
WO2019003361A1 (en) Imaging system and imaging device
JP2014140117A (en) Camera apparatus and imaging method
KR101475468B1 (en) Infrared camera system with infrared LED
JP6594557B2 (en) Image processing apparatus and light distribution control system
WO2024135722A1 (en) Imaging device and image data generation method
JP5858070B2 (en) Projector and projector control method
CN112788311B (en) Information acquisition method and information acquisition device
JP2018113662A (en) Imaging apparatus
CN119729228A (en) Method and related device for processing image
TW202507660A (en) Background light subtraction for infra-red images
JP2017204389A (en) Light source device, display device, and head-up display device
CN118433555A (en) Backlight reduction for infrared images

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17916329

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17916329

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP

点击 这是indexloc提供的php浏览器服务,不要输入任何密码和下载