JP2005353014A - Imaging device - Google Patents
Imaging device Download PDFInfo
- Publication number
- JP2005353014A JP2005353014A JP2004195792A JP2004195792A JP2005353014A JP 2005353014 A JP2005353014 A JP 2005353014A JP 2004195792 A JP2004195792 A JP 2004195792A JP 2004195792 A JP2004195792 A JP 2004195792A JP 2005353014 A JP2005353014 A JP 2005353014A
- Authority
- JP
- Japan
- Prior art keywords
- image
- blood vessel
- finger
- imaging
- infrared light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 210
- 238000000605 extraction Methods 0.000 claims abstract description 43
- 239000000284 extract Substances 0.000 claims description 10
- 230000003287 optical effect Effects 0.000 claims description 10
- 230000001678 irradiating effect Effects 0.000 claims description 8
- 210000004204 blood vessel Anatomy 0.000 abstract description 196
- 230000007998 vessel formation Effects 0.000 abstract description 19
- 239000007787 solid Substances 0.000 abstract 2
- 230000000875 corresponding effect Effects 0.000 description 46
- 238000000034 method Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 20
- 238000006243 chemical reaction Methods 0.000 description 16
- 230000010287 polarization Effects 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 6
- 102000001554 Hemoglobins Human genes 0.000 description 5
- 108010054147 Hemoglobins Proteins 0.000 description 5
- 239000008280 blood Substances 0.000 description 5
- 210000004369 blood Anatomy 0.000 description 5
- 230000033115 angiogenesis Effects 0.000 description 4
- 230000002792 vascular Effects 0.000 description 4
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 230000035945 sensitivity Effects 0.000 description 3
- 210000001519 tissue Anatomy 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 210000000577 adipose tissue Anatomy 0.000 description 2
- 210000001367 artery Anatomy 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 210000000988 bone and bone Anatomy 0.000 description 2
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 244000309466 calf Species 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000010030 laminating Methods 0.000 description 2
- 210000003462 vein Anatomy 0.000 description 2
- 101100365087 Arabidopsis thaliana SCRA gene Proteins 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Image Input (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、撮像装置に関し、例えば生体認証する場合に適用して好適なものである。 The present invention relates to an imaging apparatus and is suitable for application to, for example, biometric authentication.
従来、生体認証で用いられる認証情報として、生体表面における指又は掌の指紋等の形成パターンが一般的に用いられているが、近年、生体内方における血管の形成パターン(以下、これを血管形成パターンと呼ぶ)も用いられ始めている。 Conventionally, as authentication information used in biometric authentication, a formation pattern such as a finger or palm fingerprint on the surface of a living body is generally used. However, in recent years, a blood vessel formation pattern (hereinafter referred to as blood vessel formation) in a living body. Called patterns) are also beginning to be used.
この場合、血管内の脱酸素化ヘモグロビン(静脈血)又は酸素化ヘモグロビン(動脈血)に近赤外線帯域の光(近赤外光)が特異的に吸収されるといった性質を利用して血管を撮像し、この撮像結果に基づいて血管形成パターンを生成する認証装置が提案されている。 In this case, the blood vessel is imaged using the property that light in the near infrared band (near infrared light) is specifically absorbed by deoxygenated hemoglobin (venous blood) or oxygenated hemoglobin (arterial blood) in the blood vessel. An authentication apparatus that generates an angiogenesis pattern based on the imaging result has been proposed.
例えば図25に示すように、認証装置200は、指挿入空間201の上部を屋根のように覆うようにして構成された光源部202と、当該指挿入空間201の下部を構成する撮像部203からなり、当該光源部202の光源202aから指挿入空間201に挿入された指に対して近赤外光を照射し、当該指を透過することにより得られる近赤外光を開口部204介して撮像部203に入射する。 For example, as illustrated in FIG. 25, the authentication device 200 includes a light source unit 202 configured to cover the upper part of the finger insertion space 201 like a roof, and an imaging unit 203 that configures the lower part of the finger insertion space 201. The near-infrared light obtained by irradiating the finger inserted into the finger insertion space 201 from the light source 202a of the light source unit 202 with the near-infrared light and passing through the finger is imaged through the opening 204. Incident on the portion 203.
そして撮像部203は、この近赤外光を、近赤外波長域のみを透過するフィルタ(図示せず)を介してカメラ206に導光し、当該カメラ206から得られる血管画像に基づいて抽出した血管形成パターンを認証情報として生成するようになされている(例えば特許文献1参照)。
ところでかかる撮像部203においては、指を透過することにより得られる近赤外光のみならず、指表面で反射する近赤外光をも入射するため、当該指表面で反射する近赤外光をノイズ成分として含む血管画像を生成してしまうことにより、当該血管画像の画質が低下するという問題があった。 By the way, in such an imaging unit 203, not only near infrared light obtained by transmitting through the finger but also near infrared light reflected on the finger surface is incident, so the near infrared light reflected on the finger surface is reflected. The generation of a blood vessel image including a noise component has a problem that the image quality of the blood vessel image is degraded.
また撮像部203においては、近赤外光と共に雰囲気中の可視光等の光を入射するため、当該近赤外光以外の光をノイズ成分として含む血管画像を生成してしまうことによっても画質の低下を招くという問題があった。 In addition, since the imaging unit 203 receives light such as visible light in the atmosphere together with near-infrared light, image quality can also be improved by generating a blood vessel image including light other than the near-infrared light as a noise component. There was a problem of causing a drop.
本発明は以上の点を考慮してなされたもので、画質を向上し得る撮像装置を提案しようとするものである。 The present invention has been made in view of the above points, and intends to propose an imaging apparatus capable of improving image quality.
かかる課題を解決するため本発明においては、生体の内方における固有の撮像対象を撮像する撮像装置において、生体に対して所定の照射方向から撮像対象に特異性の有する特定光を照射する照射手段と、当該照射手段から照射され、生体を経由して得られる特定光を固体撮像素子に導光する導光手段と、当該固体撮像素子から出力される画像信号に基づく画像を、照射方向に対応する方向の輝度値が滑らかとなるように再構成する画像再構成手段とを設けるようにした。 In order to solve this problem, in the present invention, in an imaging apparatus that images a specific imaging target inside a living body, an irradiation unit that irradiates the living body with specific light having specificity to the imaging target from a predetermined irradiation direction A light guide means for guiding the specific light emitted from the irradiation means and obtained through the living body to the solid-state image sensor, and an image based on the image signal output from the solid-state image sensor corresponding to the irradiation direction. Image reconstructing means for reconstructing the brightness value in the direction to be smoothed is provided.
従って、この撮像装置では、撮像対象の表面で反射する照射方向の特定光に基づくノイズ成分を分散することができるため、当該ノイズ成分による画像中の撮像対象への影響を低減することができ、かくして画質を向上することができる。 Therefore, in this imaging device, since the noise component based on the specific light in the irradiation direction reflected on the surface of the imaging target can be dispersed, the influence of the noise component on the imaging target in the image can be reduced, Thus, the image quality can be improved.
以下図面について本発明の一実施の形態を詳述する。 Hereinafter, an embodiment of the present invention will be described in detail with reference to the drawings.
(1)第1の実施の形態
(1−1)認証装置の全体構成
図1において、1は全体として第1の実施の形態による認証システムの全体構成を示し、この認証システム1全体の制御を司る制御装置2に対して、撮像装置3及び認証装置4が接続されることにより構成される。
(1) First Embodiment (1-1) Overall Configuration of Authentication Device In FIG. 1, 1 indicates the overall configuration of an authentication system according to the first embodiment as a whole, and controls the entire authentication system 1. It is configured by connecting an imaging device 3 and an authentication device 4 to a control device 2 that manages the device.
この制御装置2は、中央処理ユニット、ワークメモリ、情報記憶メモリを有し、当該情報記憶メモリには、複数種類のデータ及びプログラムが記憶されている。そして制御部2は、ワークメモリにロードしたプログラムに従って、情報記憶メモリに記憶された各種情報を適宜用いて各種処理を実行し、必要に応じて所定の制御信号を撮像装置3又は認証装置4に送出するようにして、この認証システム1全体を制御する。 The control device 2 includes a central processing unit, a work memory, and an information storage memory, and a plurality of types of data and programs are stored in the information storage memory. The control unit 2 executes various processes using the various information stored in the information storage memory as appropriate according to the program loaded in the work memory, and sends a predetermined control signal to the imaging device 3 or the authentication device 4 as necessary. The entire authentication system 1 is controlled so as to be transmitted.
撮像装置3は、血管内の脱酸素化ヘモグロビン(静脈血)又は酸素化ヘモグロビン(動脈血)に近赤外線帯域の光(近赤外光)が特異的に吸収されることを利用して生体における例えば指に内在する血管を撮像対象として撮像する。 The imaging device 3 uses, for example, in the living body by utilizing specific absorption of near-infrared light (near-infrared light) by deoxygenated hemoglobin (venous blood) or oxygenated hemoglobin (arterial blood) in blood vessels. A blood vessel in a finger is imaged as an imaging target.
そして撮像装置3は、この撮像結果として得られる血管画像に基づいて、このときの撮像対象者固有の血管形成パターンをデータ(以下、これを認証情報と呼ぶ)として生成し、これを認証装置4に送出する。 Based on the blood vessel image obtained as the imaging result, the imaging device 3 generates a blood vessel formation pattern specific to the imaging subject at this time as data (hereinafter referred to as authentication information), and this is generated as the authentication device 4. To send.
認証装置4は、所定の伝送路を介して登録データベースDBに接続されており、この登録データベースDBには、撮像装置3と同一部位における撮像結果に基づいて同一の処理が施されることにより生成された1又は2以上の血管形成パターンが登録者の血管形成パターン(以下、これを登録血管形成パターンと呼ぶ)として登録されている。 The authentication device 4 is connected to a registration database DB via a predetermined transmission path, and is generated by performing the same processing based on the imaging result in the same part as the imaging device 3 in the registration database DB. One or two or more angiogenesis patterns thus registered are registered as a registrant's angiogenesis pattern (hereinafter referred to as a registered angiogenesis pattern).
そして認証装置4は、制御装置2のモード信号に応じて登録モード又は認証モードを実行するようになされており、当該登録モード時には、撮像装置3から供給される認証情報の血管形成パターンを登録血管形成パターンとして登録データベースDBに登録する。 The authentication device 4 is configured to execute a registration mode or an authentication mode in accordance with the mode signal of the control device 2, and in the registration mode, the blood vessel formation pattern of the authentication information supplied from the imaging device 3 is registered as a registered blood vessel. Register as a formation pattern in the registration database DB.
これに対して認証装置4は、認証モード時には、撮像装置3から供給される認証情報の血管形成パターンと、登録データベースDBに登録された登録血管形成パターンとを照合する。 In contrast, in the authentication mode, the authentication device 4 collates the blood vessel formation pattern of the authentication information supplied from the imaging device 3 with the registered blood vessel formation pattern registered in the registration database DB.
ここで認証装置4は、この照合結果として所定の閾値以下となる合致率が得られた場合には、このとき撮像装置3で撮像した撮像対象者が登録データベースDBに登録された登録者ではないと判定し、これに対して所定の閾値よりも高い合致率が得られた場合には、当該撮像対象者が登録者本人であると判定するようになされている。 Here, when a matching rate that is equal to or lower than a predetermined threshold is obtained as a result of this collation, the authentication device 4 is not a registrant registered in the registration database DB. If a match rate higher than a predetermined threshold is obtained, it is determined that the person to be imaged is the registrant.
このようにこの認証システム1においては、生体固有の血管形成パターンを用いて認証することにより、当該生体表面に有する指紋等に比して生体からの直接的な盗用を防止できるのみならず、第三者による登録者への成りすましをも防止できるようになされている。 As described above, in this authentication system 1, by authenticating using a blood vessel formation pattern unique to the living body, it is possible not only to prevent direct theft from the living body as compared with a fingerprint or the like on the surface of the living body. It is designed to prevent impersonation of registrants by the three parties.
(1−2)撮像装置の具体的構成
この撮像装置3は、図2に示すように、撮像部10と、当該撮像部10を制御する撮像制御部20と、当該撮像部10で撮像された結果得られる血管画像に対して各種処理を施す画像処理部30とによって構成される。
(1-2) Specific Configuration of Imaging Device As shown in FIG. 2, the imaging device 3 is imaged by the imaging unit 10, the imaging control unit 20 that controls the imaging unit 10, and the imaging unit 10. The image processing unit 30 performs various processes on the blood vessel image obtained as a result.
(1−2−1)撮像部の構成
この撮像部10は、撮像装置3の筺体の所定位置に設けられた撮像開口部11を有し、当該筺体表面には、所定材質でなる無色透明の蓋部CVが撮像開口部11を覆うように設けられていると共に、当該撮像開口部11上に指FGをガイドするためのガイド溝12(12a及び12b)が設けられている。そしてこの撮像装置3の筺体内には、撮像開口部11下において、カメラ部14が収納されている。
(1-2-1) Configuration of Imaging Unit This imaging unit 10 has an imaging opening 11 provided at a predetermined position of the casing of the imaging device 3, and the surface of the casing is colorless and transparent made of a predetermined material. A lid CV is provided so as to cover the imaging opening 11, and a guide groove 12 (12 a and 12 b) for guiding the finger FG is provided on the imaging opening 11. A camera unit 14 is housed in the housing of the imaging device 3 below the imaging opening 11.
これによりこの撮像部10は、撮像開口部11から撮像装置3の筺体内への異物の流入を防止すると共に、ガイド溝12によってガイドされた指FGでカメラ部14を汚すといった事態を未然に防止することができるようになされている。 As a result, the imaging unit 10 prevents inflow of foreign matter from the imaging opening 11 into the housing of the imaging device 3 and prevents the camera unit 14 from being soiled with the finger FG guided by the guide groove 12. Has been made to be able to.
また撮像部10は、撮像開口部11上にガイドされた指FGに対して近赤外光を照射する近赤外光光源13(13a及び13b)が設けられている。この近赤外光光源13においては、図2及び図3に示すように、撮像開口部11上にガイドされた指FGの指差方向DX(図3)に直行する照射方向DY(図3)から指FGの腹部分(以下、これを指腹と呼ぶ)に近赤外光が照射されるようにその位置が選定されている。 The imaging unit 10 is provided with a near-infrared light source 13 (13a and 13b) that irradiates near-infrared light to the finger FG guided on the imaging opening 11. In the near-infrared light source 13, as shown in FIGS. 2 and 3, an irradiation direction DY (FIG. 3) perpendicular to the finger pointing direction DX (FIG. 3) of the finger FG guided on the imaging opening 11. The position is selected so that the near-infrared light is irradiated to the belly part of the finger FG (hereinafter referred to as the finger pad).
これにより撮像部10においては、近赤外光光源13から撮像開口部11上にガイドされた指FGの指腹に対して照射され、当該指FG内方の血管組織では内在するヘモグロビンに吸収されると共に血管組織以外の組織では散乱して当該指FG内方から得られる近赤外光を、撮像開口部11を介してカメラ部14に入射することができるようになされている(以下、指FG内方から得られる近赤外光を血管射影光と呼ぶ)。 Thereby, in the imaging part 10, it irradiates with respect to the finger pad of the finger FG guided on the imaging opening part 11 from the near-infrared light source 13, and is absorbed by the hemoglobin which exists in the blood vessel tissue inside the said finger FG. In addition, near-infrared light that is scattered from a tissue other than the blood vessel tissue and obtained from the inside of the finger FG can be incident on the camera unit 14 through the imaging aperture 11 (hereinafter referred to as a finger). Near infrared light obtained from the inside of the FG is called blood vessel projection light).
このカメラ部14は、撮像開口部11下の光路において、近赤外線帯域の波長(およそ700[nm]〜900[nm])に対応する光を透過するフィルタ(以下、これを近赤外光透過フィルタと呼ぶ)14a、レンズ14b及び固体撮像素子14cが順次配されてなり、当該撮像開口部11から入射される光のうち血管射影光を固体撮像素子14cに導光するようになされている。 The camera unit 14 is a filter that transmits light corresponding to a wavelength in the near-infrared band (approximately 700 [nm] to 900 [nm]) in the optical path below the imaging opening 11 (hereinafter referred to as near-infrared light transmission). (Referred to as a filter) 14a, a lens 14b, and a solid-state imaging device 14c are sequentially arranged so that blood vessel projection light out of the light incident from the imaging opening 11 is guided to the solid-state imaging device 14c.
かかる構成に加えてこのカメラ部14には、撮像開口部11及び近赤外光透過フィルタ14a間において、照射方向DYに対して直交する方向(即ち指差方向DXと同方向)に偏光軸を有する偏光板15が設けられている。 In addition to this configuration, the camera unit 14 has a polarization axis in a direction perpendicular to the irradiation direction DY (that is, the same direction as the finger pointing direction DX) between the imaging aperture 11 and the near infrared light transmission filter 14a. A polarizing plate 15 is provided.
この場合、このカメラ部14では、指差方向に垂直である方向から、人差指FGの内方を経由することなく反射した近赤外光(以下、これを指表面反射近赤外光と呼ぶ)は偏向板15により光路から逸れ、これに対して血管射影光は、人差指FGの内方で散乱した光であるため、偏向板15を通過することとなる。 In this case, in the camera unit 14, near infrared light reflected from the direction perpendicular to the finger pointing direction without passing through the inner side of the index finger FG (hereinafter referred to as finger surface reflected near infrared light). Is deviated from the optical path by the deflecting plate 15, whereas the blood vessel projection light passes through the deflecting plate 15 because it is scattered light inside the index finger FG.
従ってこのカメラ部14は、撮像開口部11から近赤外光透過フィルタ15を介して入射される血管射影光(散乱光)及び指表面反射近赤外光(表面反射光)のうち、当該血管射影光を選択的に固体撮像素子14cに導光することができるようになされている。 Therefore, the camera unit 14 includes the blood vessel of the blood vessel projection light (scattered light) and the finger surface reflected near infrared light (surface reflected light) incident from the imaging opening 11 via the near infrared light transmission filter 15. The projected light can be selectively guided to the solid-state imaging device 14c.
この固体撮像素子14cは、格子状に配された複数の光電変換素子を有し、これら光電変換素子において血管射影光を光電変換する。そして固体撮像素子14cは、この光電変換結果として各光電変換素子それぞれにチャージされる電荷を、撮像制御部20から供給される電荷読出パルス信号S1に従って読み出すと共に、電荷リセットパルス信号S2に従ってリセットし、当該読み出した電荷を血管画像信号S10として画像処理部30に出力するようになされている。 This solid-state imaging device 14c has a plurality of photoelectric conversion elements arranged in a lattice shape, and photoelectrically converts blood vessel projection light in these photoelectric conversion elements. Then, the solid-state imaging device 14c reads out the charge charged to each photoelectric conversion device as a result of this photoelectric conversion in accordance with the charge readout pulse signal S1 supplied from the imaging control unit 20, and resets in accordance with the charge reset pulse signal S2, The read charge is output to the image processing unit 30 as a blood vessel image signal S10.
このようにしてこの撮像部10は、撮像開口部11に対向させるように配置された指FG内方における血管を撮像対象として撮像することができるようになされている。 In this manner, the imaging unit 10 can capture an image of a blood vessel inside the finger FG disposed to face the imaging opening 11 as an imaging target.
(1−2−2)撮像制御部の構成
図4に示すように、撮像制御部20は、光源駆動部21、クロック発生部22及び電荷量調整部23によって構成される。
(1-2-2) Configuration of Imaging Control Unit As illustrated in FIG. 4, the imaging control unit 20 includes a light source driving unit 21, a clock generation unit 22, and a charge amount adjustment unit 23.
この光源駆動部21は、通常光の強度よりも近赤外光が大きくなるように予め設定された複数の電圧値のうち、例えば操作部(図示せず)から入力された電圧値に対応する電圧を生成する。そして光源駆動部21は、この電圧を光源駆動信号S3として近赤外光光源13(13a及び13b)に出力するようにして、当該近赤外光光源13を駆動するようになされている。 The light source driving unit 21 corresponds to, for example, a voltage value input from an operation unit (not shown) among a plurality of voltage values set in advance so that near infrared light is larger than the intensity of normal light. Generate voltage. The light source driving unit 21 drives the near-infrared light source 13 by outputting this voltage to the near-infrared light source 13 (13a and 13b) as a light source drive signal S3.
この結果、近赤外光光源13(13a及び13b)が点灯し、撮像開口部11上にガイドされた指FG(図1)には、通常光よりも大きい強度の近赤外光が照射されることとなる。 As a result, the near-infrared light source 13 (13a and 13b) is turned on, and the finger FG (FIG. 1) guided on the imaging opening 11 is irradiated with near-infrared light having intensity greater than that of normal light. The Rukoto.
クロック発生部22は、図5(A)に示すように、立ち下がり時点から次の立ち下がり時点までの単位期間PTとする所定のデューティー比の基準パルス信号S4を生成し、これを電荷量調整部23に送出する。 As shown in FIG. 5A, the clock generator 22 generates a reference pulse signal S4 having a predetermined duty ratio as a unit period PT from the falling point to the next falling point, and adjusts the charge amount. The data is sent to the unit 23.
電荷量調整部23は、クロック発生部21から供給される基準パルス信号S4をそのまま電荷読出パルス信号S1として固体撮像素子14cに送出する。この場合、この固体撮像素子14cでは、単位期間PT(図5(A))において各光電変換素子にチャージされる電荷が、立ち下がり時点を読出開始時点として周期的に読み出される。 The charge amount adjustment unit 23 sends the reference pulse signal S4 supplied from the clock generation unit 21 as it is to the solid-state imaging device 14c as a charge read pulse signal S1. In this case, in the solid-state imaging device 14c, the charges charged in the photoelectric conversion elements in the unit period PT (FIG. 5A) are periodically read out with the falling time as the reading start time.
しかしこの場合、図6(A)に示すように、近赤外光光源13から照射される近赤外光の強度が通常光よりも大きいことに起因して、固体撮像素子14cでは単位期間PT(図5(A))の途中で各光電変換素子にチャージされる電荷が飽和するといった事態が起こることとなる。 However, in this case, as shown in FIG. 6A, the solid-state imaging device 14c has a unit period PT due to the fact that the intensity of near-infrared light emitted from the near-infrared light source 13 is greater than that of normal light. In the middle of (FIG. 5A), a situation occurs in which the charge charged to each photoelectric conversion element is saturated.
そこでこの電荷量調整部23は、電子シャッタと呼ばれる露光時間制御処理を実行し、固体撮像素子14c(各光電変換素子)にチャージされる単位期間PT(図5(A))当たりの電荷量を制限するようになされている。 Therefore, the charge amount adjusting unit 23 executes an exposure time control process called an electronic shutter, and calculates the charge amount per unit period PT (FIG. 5A) charged in the solid-state image sensor 14c (each photoelectric conversion element). It has been made to limit.
実際上、電荷量調整部23は、図5(B)に示すように、電荷読出パルス信号S1(基準パルス信号S4)の単位期間PTから例えば中間時点を順次検出し、当該中間時点を固体撮像素子14c(各光電変換素子)にチャージされている電荷のリセット時点とする電荷リセットパルス信号S2を生成し、これを固体撮像素子14cに送出する。 In practice, as shown in FIG. 5B, the charge amount adjusting unit 23 sequentially detects, for example, intermediate time points from the unit period PT of the charge read pulse signal S1 (reference pulse signal S4), and the intermediate time points are solid-state imaged. A charge reset pulse signal S2 is generated as a reset point of the charge charged in the element 14c (each photoelectric conversion element), and is sent to the solid-state image sensor 14c.
この結果、固体撮像素子14cでは、図5(C)に示すように、単位期間PTにチャージされる電荷が、電荷リセットパルス信号S2のリセット時点から電荷読出パルス信号S1(基準パルス信号S4)の立ち下がり時点までの期間(以下、これを電荷蓄積期間と呼ぶ)ESTのみに制限されることとなる。 As a result, in the solid-state imaging device 14c, as shown in FIG. 5C, the charge charged in the unit period PT is changed from the charge reset pulse signal S2 to the charge read pulse signal S1 (reference pulse signal S4). The period until the falling point (hereinafter referred to as a charge accumulation period) is limited only to EST.
そして図6(B)に示すように、固体撮像素子14cでは、血管射影光と共に通常光が入射した場合であっても、当該血管射影光及び通常光に対する光電変換結果として各光電変換素子にチャージされる電荷量が相対的に減少することになるため、当該固体撮像素子14cにおける血管射影光に対する撮像感度は通常光による実質的な影響のない状態となる。 As shown in FIG. 6B, in the solid-state imaging device 14c, even when normal light is incident along with the blood vessel projection light, each photoelectric conversion element is charged as a photoelectric conversion result for the blood vessel projection light and the normal light. Therefore, the imaging sensitivity with respect to the blood vessel projection light in the solid-state imaging device 14c is not substantially affected by the normal light.
このようにして電荷量調整部23は、固体撮像素子14c(各光電変換素子)にチャージされる電荷量を制限することにより、通常光による実質的な影響のない状態となるように血管射影光に対する固体撮像素子14cでの撮像感度を調整することができるようになされている。 In this way, the charge amount adjusting unit 23 restricts the amount of charge charged to the solid-state imaging device 14c (each photoelectric conversion element), so that the blood vessel projection light is brought into a state in which there is no substantial influence by the normal light. Therefore, the imaging sensitivity of the solid-state imaging device 14c can be adjusted.
かかる構成に加えてこの電荷量調整部23は、生体に照射される近赤外光の強度に応じて、電荷蓄積期間ESTを可変するようになされている。 In addition to such a configuration, the charge amount adjusting unit 23 is configured to vary the charge accumulation period EST in accordance with the intensity of near infrared light applied to the living body.
この場合、電荷量調整部23は、光源駆動部21において設定される電圧値と、単位期間PT(図5(A))にリセットするリセット時点との対応付けとして、当該電圧値が大きいほどリセット時点を遅くするように対応付けられたテーブルを保持しており、このテーブルに基づいて、光源駆動部21で生成される電圧の電圧値が変わるごとに当該電圧値に対応するリセット時点を検出時点として設定する。そして電荷量調整部23は、この設定したリセット時点を順次検出するようにして電荷リセットパルス信号S2を生成するようになされている。 In this case, as the correspondence between the voltage value set in the light source driving unit 21 and the reset time point to be reset in the unit period PT (FIG. 5A), the charge amount adjusting unit 23 resets as the voltage value increases. A table correlated so as to delay the time is held, and based on this table, every time the voltage value of the voltage generated by the light source driving unit 21 changes, the reset time corresponding to the voltage value is detected. Set as. The charge amount adjusting unit 23 generates the charge reset pulse signal S2 by sequentially detecting the set reset time points.
これにより電荷量調整部23は、近赤外光光源13から指FGに照射される近赤外光の強度に応じて固体撮像素子14c(各光電変換素子)にチャージされる電荷の制限量を調整することができるため、当該強度にかかわらず血管射影光に対する固体撮像素子14cでの撮像感度を通常光による実質的な影響のない状態に調整することができるようになされている。 Thereby, the charge amount adjustment unit 23 sets the limit amount of the charge charged in the solid-state imaging device 14c (each photoelectric conversion element) according to the intensity of the near infrared light irradiated from the near infrared light source 13 to the finger FG. Therefore, the imaging sensitivity of the solid-state imaging device 14c with respect to the blood vessel projection light can be adjusted to a state where there is no substantial influence by the normal light regardless of the intensity.
このようにしてこの撮像制御部20は、近赤外光光源13及び固体撮像素子14をそれぞれ制御することができるようになされている。 In this way, the imaging control unit 20 can control the near-infrared light source 13 and the solid-state imaging device 14 respectively.
(1−2−3)画像処理部の構成
画像処理部30は、図4に示したように、画像再構成部31、2値化部32及びパターン抽出部33によって構成される。
(1-2-3) Configuration of Image Processing Unit As shown in FIG. 4, the image processing unit 30 includes an image reconstruction unit 31, a binarization unit 32, and a pattern extraction unit 33.
この画像再構成部31は、撮像部10から出力される血管画像信号S10に対して所定の周波数変換処理を施すようにして、当該血管画像信号S10に基づく血管画像を再構成する画像再構成処理を実行する。 The image reconstruction unit 31 performs a predetermined frequency conversion process on the blood vessel image signal S10 output from the imaging unit 10, and reconstructs a blood vessel image based on the blood vessel image signal S10. Execute.
ここで、上述した撮像部10では、偏光板15(図2)により指表面反射近赤外光が光路外に逸らされるが、当該指表面反射近赤外光の全てが照射方向DY(図3)に沿って指腹表面を反射することはないため、一部の指表面反射近赤外光は血管射影光と共に固体撮像素子14cに導光されることとなる。 Here, in the imaging unit 10 described above, the finger surface reflection near-infrared light is deflected out of the optical path by the polarizing plate 15 (FIG. 2), but all of the finger surface reflection near-infrared light is irradiated in the irradiation direction DY (FIG. 3). ) Along the finger pad surface, a part of the finger surface reflected near-infrared light is guided to the solid-state imaging device 14c together with the blood vessel projection light.
従って、例えば図7に示すように、この固体撮像素子14cから出力される血管画像信号S10に基づく血管画像BIMには、血管射影光に基づく血管成分と共に指表面反射近赤外光に基づくノイズ成分が含まれた状態となる。 Therefore, for example, as shown in FIG. 7, in the blood vessel image BIM based on the blood vessel image signal S10 output from the solid-state imaging device 14c, the noise component based on the finger surface reflection near infrared light together with the blood vessel component based on the blood vessel projection light. Will be included.
そしてこのノイズ成分は、照射方向DY(図3)に沿って反射した反射光(指表面反射近赤外光)に対する光電変換結果であるため、当該照射方向DYに対応する水平方向に出現する(以下、このノイズ成分を横縞ノイズ成分と呼ぶ)。 And since this noise component is a photoelectric conversion result with respect to the reflected light (finger surface reflection near-infrared light) reflected along the irradiation direction DY (FIG. 3), it appears in the horizontal direction corresponding to the said irradiation direction DY ( Hereinafter, this noise component is referred to as a horizontal stripe noise component).
従って、この画像再構成部31は、血管画像BIMにおける水平方向の輝度値が滑らかとなるように血管画像BIMを再構成するようになされている。 Accordingly, the image reconstruction unit 31 reconstructs the blood vessel image BIM so that the luminance value in the horizontal direction of the blood vessel image BIM is smooth.
具体的には画像再構成部31は、例えば図8(A)に示すように、例えば互いに隣接する縦5画素に相当する抽出範囲ARを血管画像BIMにおける左端に設定し、当該設定した抽出範囲ARにおける縦5画素を抽出する。そして画像再構成部31は、この縦5画素における輝度平均値を算出し、当該算出した輝度平均値を、このとき抽出した抽出範囲AR(縦5画素)の真ん中の画素(以下、これを中心画素と呼ぶ)に対応する再構成血管画像RIMの画素として生成する。 Specifically, as shown in FIG. 8A, for example, the image reconstruction unit 31 sets an extraction range AR corresponding to, for example, five adjacent vertical pixels at the left end in the blood vessel image BIM, and sets the extraction range thus set. Five vertical pixels in AR are extracted. Then, the image reconstruction unit 31 calculates a luminance average value in the five vertical pixels, and uses the calculated luminance average value as a pixel in the middle of the extraction range AR (vertical five pixels) extracted at this time (hereinafter, this is the center). This is generated as a pixel of the reconstructed blood vessel image RIM corresponding to the pixel).
次いで画像再構成部31は、図8(B)に示すように、抽出範囲ARを指差平行方向に1画素ずらして設定し、当該設定した抽出範囲ARにおける縦5画素を抽出した後、当該抽出した縦5画素の輝度平均値を、このとき抽出した抽出範囲ARの中心画素に対応する再構成血管画像RIMの画素として生成する。 Next, as shown in FIG. 8B, the image reconstruction unit 31 sets the extraction range AR by shifting one pixel in the finger parallel direction, extracts five vertical pixels in the set extraction range AR, The extracted luminance average value of the five vertical pixels is generated as a pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the extraction range AR extracted at this time.
以下同様にして画像再構成部31は、図8(C)に示すように、最左縦列において抽出範囲ARを1画素ずつシフトするようにして縦5画素を順次抽出し、当該抽出した縦5画素の輝度平均値を、このとき抽出した抽出範囲ARの中心画素に対応する再構成血管画像RIMの画素として生成する。 Similarly, as shown in FIG. 8C, the image reconstruction unit 31 sequentially extracts vertical 5 pixels so that the extraction range AR is shifted by 1 pixel at a time in the leftmost vertical column, and the extracted vertical 5 The average luminance value of the pixels is generated as a pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the extraction range AR extracted at this time.
なお画像再構成部31は、上2画素については、当該上2画素の輝度平均値を対応する再構成血管画像RIMの画素としてそれぞれ生成すると共に、下2画素についても同様に、当該下2画素の輝度平均値を対応する再構成血管画像RIMの画素としてそれぞれ生成するようになされている。 The image reconstruction unit 31 generates the luminance average value of the upper two pixels as the corresponding pixel of the reconstructed blood vessel image RIM for the upper two pixels, and similarly applies the lower two pixels to the lower two pixels. Are generated as pixels of the corresponding reconstructed blood vessel image RIM.
また画像再構成部31は、残りの縦列についても最左縦列と同様に、図9に示すように、ジグザグ状にシフトするようにして再構成血管画像RIMの画素を順次生成し、かくして再構成された再構成血管画像RIMの信号(以下、これを再構成血管画像信号と呼ぶ)S11を2値化部32に送出する。 The image reconstruction unit 31 also sequentially generates the pixels of the reconstructed blood vessel image RIM so as to shift in a zigzag manner for the remaining columns as in the leftmost column as shown in FIG. The reconstructed blood vessel image RIM signal (hereinafter referred to as a reconstructed blood vessel image signal) S11 is sent to the binarization unit 32.
このように画像再構成部31は、縦5画素の輝度平均値を当該縦5画素の中心画素に対応する再構成血管画像RIMの画素として順次生成するようにして、血管画像BIMにおける水平方向の輝度値が滑らかとなるように画像再構成処理を実行する。 As described above, the image reconstruction unit 31 sequentially generates the luminance average value of the vertical 5 pixels as the pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the vertical 5 pixels, and thus in the horizontal direction of the blood vessel image BIM. Image reconstruction processing is executed so that the luminance value is smooth.
これにより画像再構成部31は、図10に示す実験結果からも明らかなように、血管画像BIMに含まれた横縞ノイズ成分を分散することができ、かくして血管画像BIMの横縞ノイズ成分が平滑化されてなる再構成血管画像RIMを生成することができるようになされている。 As a result, the image reconstruction unit 31 can disperse the horizontal stripe noise component included in the blood vessel image BIM, as is apparent from the experimental results shown in FIG. 10, and thus the horizontal stripe noise component of the blood vessel image BIM is smoothed. Thus, the reconstructed blood vessel image RIM can be generated.
かかる構成に加えてこの画像再構成部31は、上述した画像再構成処理を実行する前処理として、撮像部10から出力される血管画像信号S10における輝度ヒストグラムの波形状態に応じて抽出範囲ARの画素数を決定するようになされている。 In addition to this configuration, the image reconstructing unit 31 performs pre-processing for executing the above-described image reconstructing process in accordance with the waveform state of the luminance histogram in the blood vessel image signal S10 output from the image capturing unit 10. The number of pixels is determined.
ここで、この輝度ヒストグラムにおける波形状態は、例えば図11に示すように、骨が細く体脂肪の多い生体(図11(A))、骨が太く体脂肪の少ない生体(図11(B)又は小児(図11(C))によってそれぞれ異なり、当該生体の性別、人種、年齢及び体質等の生体要素に応じてパターン(以下、これをヒストグラム波形パターンと呼ぶ)大別することができる。このことは、本出願人により既に確認されている。 Here, for example, as shown in FIG. 11, the waveform state in this luminance histogram is a living body with a thin bone and a large body fat (FIG. 11A), a living body with a thick bone and a small body fat (FIG. 11B) or It differs depending on the child (FIG. 11C), and can be broadly classified into patterns (hereinafter referred to as histogram waveform patterns) according to biological elements such as sex, race, age and constitution of the living body. This has already been confirmed by the applicant.
従って、血管画像BIMに占める横縞ノイズ成分の出現量は、ヒストグラム波形パターンに応じてある程度特定することができ、これに応じてヒストグラム波形パターンと、抽出範囲ARにおける縦列方向の画素数との対応関係も特定することができる。 Therefore, the appearance amount of the horizontal stripe noise component in the blood vessel image BIM can be specified to some extent according to the histogram waveform pattern, and the correspondence between the histogram waveform pattern and the number of pixels in the column direction in the extraction range AR accordingly. Can also be identified.
実際上、この画像再構成部31には、かかるヒストグラム波形パターンと、抽出範囲ARにおける画素数との対応付けがテーブルとして記憶された情報記憶メモリ34(図4)が接続されている。 In practice, the image reconstruction unit 31 is connected to an information storage memory 34 (FIG. 4) in which the correspondence between the histogram waveform pattern and the number of pixels in the extraction range AR is stored as a table.
そして画像再構成部31は、撮像部10から出力される血管画像信号S10における輝度値を画素ごとに順次検出し、当該検出結果に基づいて血管画像BIMにおける画素ごとの輝度値の分布を輝度ヒストグラムとして生成し、この輝度ヒストグラムのヒストグラム波形パターンに対応する抽出範囲ARにおける画素数を、情報記憶メモリ34が記憶されたテーブルを参照して決定するようになされている。 Then, the image reconstruction unit 31 sequentially detects the luminance value in the blood vessel image signal S10 output from the imaging unit 10 for each pixel, and based on the detection result, the distribution of the luminance value for each pixel in the blood vessel image BIM is a luminance histogram. The number of pixels in the extraction range AR corresponding to the histogram waveform pattern of the luminance histogram is determined with reference to a table stored in the information storage memory 34.
これにより画像再構成部31は、このとき撮像部10から出力された血管画像BIMに占める横縞ノイズ成分に応じた抽出範囲ARを決定することができ、この結果、血管画像BIMの横縞ノイズ成分がより平滑化されてなる再構成血管画像RIMを生成することができるようになされている。 Thereby, the image reconstruction unit 31 can determine the extraction range AR corresponding to the horizontal stripe noise component in the blood vessel image BIM output from the imaging unit 10 at this time, and as a result, the horizontal stripe noise component of the blood vessel image BIM is determined. A smoothed reconstructed blood vessel image RIM can be generated.
2値化部32は、血管画像再構成信号S11に対してA/D(Analog/Digital)変換処理及び2値化処理を順次施し、この結果得られる2値血管画像のデータ(以下、これを2値血管画像データと呼ぶ)D1を画像再構成部32に送出する。 The binarization unit 32 sequentially performs A / D (Analog / Digital) conversion processing and binarization processing on the blood vessel image reconstruction signal S11, and obtains binary blood vessel image data obtained as a result (hereinafter referred to as this). D1 (referred to as binary blood vessel image data) is sent to the image reconstruction unit 32.
パターン抽出部33は、2値血管画像データD1に対して所定の抽出処理を施し、当該2値血管画像に有する血管の血管形成パターンを抽出し、これを認証情報D2として認証装置4(図1)に送出するようになされている。 The pattern extraction unit 33 performs a predetermined extraction process on the binary blood vessel image data D1, extracts a blood vessel formation pattern of blood vessels included in the binary blood vessel image, and uses this as authentication information D2 for the authentication device 4 (FIG. 1). ).
このようにしてこの画像処理部30は、生体内方の血管における血管形成パターンを認証情報D2として生成することができるようになされている。 In this way, the image processing unit 30 can generate a blood vessel formation pattern in the blood vessel inside the living body as the authentication information D2.
かかる画像処理部30による画像処理は、図12に示す画像処理手順RT1に従って行われる。 The image processing by the image processing unit 30 is performed according to the image processing procedure RT1 shown in FIG.
すなわち画像処理部30は、撮像部10から出力される血管画像信号S11を取得すると、この画像処理手順RT1をステップSP0において開始し、続くステップSP1に進んで、当該血管画像信号S11におけるヒストグラム波形パターンに対応する抽出範囲AR(図8)の画素数として例えば縦5画素を決定する。 That is, when the image processing unit 30 acquires the blood vessel image signal S11 output from the imaging unit 10, the image processing procedure RT1 starts in step SP0, and proceeds to the subsequent step SP1, where the histogram waveform pattern in the blood vessel image signal S11 is obtained. For example, five vertical pixels are determined as the number of pixels in the extraction range AR (FIG. 8) corresponding to.
そして画像処理部30は、ステップSP2に進んで、決定した抽出範囲ARを血管画像BIM(図7)における左端に設定し(図8(A))、当該設定した抽出範囲ARの縦5画素を抽出し、次のステップSP3に進んで、当該抽出した縦5画素の輝度平均値を算出する。 Then, the image processing unit 30 proceeds to step SP2, sets the determined extraction range AR at the left end of the blood vessel image BIM (FIG. 7) (FIG. 8A), and sets the vertical 5 pixels of the set extraction range AR. Then, the process proceeds to the next step SP3, and the luminance average value of the extracted five vertical pixels is calculated.
続いて画像処理部30は、ステップSP4に進んで、算出した輝度平均値を、ステップSP2で抽出した縦5画素の中心画素に対応する再構成血管画像RIMの画素として生成した後、次のステップSP5において、血管画像BIMにおける全ての画素を抽出したか否かを判定する。 Subsequently, the image processing unit 30 proceeds to step SP4, generates the calculated luminance average value as a pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the five vertical pixels extracted in step SP2, and then performs the next step. In SP5, it is determined whether or not all the pixels in the blood vessel image BIM have been extracted.
ここで否定結果が得られた場合、このことは再構成血管画像RIMを生成している最中であることを意味し、このとき画像処理部30は、ステップSP6に進んで、抽出範囲ARを1画素ずらして設定し(図8(B))、ステップSP2に戻って上述の処理を繰り返す。 If a negative result is obtained here, this means that the reconstructed blood vessel image RIM is being generated. At this time, the image processing unit 30 proceeds to step SP6 and sets the extraction range AR. The setting is shifted by one pixel (FIG. 8B), and the process returns to step SP2 to repeat the above processing.
これに対して肯定結果が得られた場合、このことは再構成血管画像RIMを生成し終わったことを意味し、このとき画像処理部30は、ステップSP7に進んで、当該再構成血管画像RIMを2値化し、続くステップSP8において、当該2値血管画像から血管形成パターンを抽出し、これを認証情報D2として認証装置4(図1)に送出した後、次のステップSP9に進んで、この画像処理手順RT1を終了する。 If an affirmative result is obtained, this means that the reconstructed blood vessel image RIM has been generated. At this time, the image processing unit 30 proceeds to step SP7, and the reconstructed blood vessel image RIM. In step SP8, a blood vessel formation pattern is extracted from the binary blood vessel image and sent to the authentication device 4 (FIG. 1) as authentication information D2. Then, the process proceeds to the next step SP9. The image processing procedure RT1 is terminated.
このようにして画像処理部30は画像処理を実行するようになされている。 In this way, the image processing unit 30 performs image processing.
(1−3)動作及び効果
以上の構成において、この撮像装置3は、指差方向DXに対して直行する照射方向DYから近赤外光を指FGに照射し、当該指FGの内方で散乱して得られる血管射影光を固体撮像素子14cに導光する。そして撮像装置3は、この固体撮像素子14cから出力される血管画像信号S10に基づく血管画像を、照射方向DYに対応する水平方向の輝度値が滑らかとなるように再構成する。
(1-3) Operation and Effect In the above configuration, the imaging device 3 irradiates the finger FG with near-infrared light from the irradiation direction DY orthogonal to the finger difference direction DX, and the inside of the finger FG. Blood vessel projection light obtained by scattering is guided to the solid-state imaging device 14c. Then, the imaging device 3 reconstructs the blood vessel image based on the blood vessel image signal S10 output from the solid-state imaging device 14c so that the luminance value in the horizontal direction corresponding to the irradiation direction DY becomes smooth.
従ってこの撮像装置3では、指FGの表面で照射方向DYに沿って反射する近赤外光(指表面反射近赤外光)に基づく横縞ノイズ成分を分散することができるため、当該ノイズ成分による画像中の血管成分への影響を低減することができ、かくして画質を向上することができる。 Therefore, in this imaging device 3, the horizontal stripe noise component based on the near infrared light (finger surface reflection near infrared light) reflected along the irradiation direction DY on the surface of the finger FG can be dispersed. The influence on the blood vessel component in the image can be reduced, and thus the image quality can be improved.
この場合、撮像装置3は、照射方向DYに対して直交する方向(指差方向DX)に振動する偏光板15を設ける。従ってこの撮像装置3では、指FGから得られる血管射影光及び指表面反射近赤外光のうち血管射影光を選択的に固体撮像素子14cに導光することができるため、当該指表面反射近赤外光に基づく横縞ノイズ成分を制限することができ、かくして一段と画質を向上することができる。 In this case, the imaging device 3 includes a polarizing plate 15 that vibrates in a direction orthogonal to the irradiation direction DY (pointing direction DX). Therefore, in this imaging device 3, since the blood vessel projection light out of the blood vessel projection light and finger surface reflection near infrared light obtained from the finger FG can be selectively guided to the solid-state imaging device 14c, the finger surface reflection near The horizontal stripe noise component based on infrared light can be limited, and thus the image quality can be further improved.
また撮像装置3は、このようにして水平方向の輝度値が滑らかとなるように再構成された再構成血管画像RIMに基づいて血管形成パターンを抽出し、これを認証情報D2として生成することにより、指表面反射近赤外光に起因する血管形成パターンにおける抽出精度の低下を防止することができるため、信頼性の高い認証情報D2を生成することができ、この結果、認証時の信頼性を向上することができる。 Further, the imaging device 3 extracts a blood vessel formation pattern based on the reconstructed blood vessel image RIM reconstructed so that the luminance value in the horizontal direction becomes smooth in this way, and generates this as authentication information D2. Since the extraction accuracy in the blood vessel formation pattern caused by the finger surface reflection near infrared light can be prevented, the authentication information D2 with high reliability can be generated. As a result, the reliability at the time of authentication can be improved. Can be improved.
以上の構成によれば、指差方向DXに対して直行する照射方向DYから近赤外光を指FGに照射し、この指FGの内方で散乱して得られる血管射影光に基づく血管画像を、当該照射方向DYに対応する水平方向の輝度値が滑らかとなるように再構成するようにしたことにより、指FGの表面で照射方向DYに沿って反射する近赤外光に基づく横縞ノイズ成分による画像中の血管成分への影響を低減することができ、かくして画質を向上することができる。 According to the above configuration, the blood vessel image based on the blood vessel projection light obtained by irradiating the finger FG with near-infrared light from the irradiation direction DY orthogonal to the finger difference direction DX and scattering inside the finger FG. Is reconfigured so that the luminance value in the horizontal direction corresponding to the irradiation direction DY becomes smooth, so that the horizontal stripe noise based on near-infrared light reflected along the irradiation direction DY on the surface of the finger FG The influence of the component on the blood vessel component in the image can be reduced, and thus the image quality can be improved.
(1−4)他の実施の形態
なお上述の第1の実施の形態においては、生体の指FG内方における血管を撮像する撮像装置として、図1に示した構成の撮像部10を適用するようにした場合について述べたが、本発明はこれに限らず、この構成以外の構成でなる種々の撮像装置を適用するようにしても良い。
(1-4) Other Embodiments In the above-described first embodiment, the imaging unit 10 having the configuration shown in FIG. 1 is applied as an imaging apparatus that images blood vessels inside the living finger FG. Although the case where it did in this way was described, this invention is not restricted to this, You may make it apply the various imaging device which consists of structures other than this structure.
例えば図2との対応部分に同一符号を付した図13に示す撮像装置50を適用することもできる。この撮像装置50においては、近赤外光光源13(図2)の配置位置を変更してなる近赤外光光源51(51a及び51b)と、ガイド溝12(図2)の形状及び配置位置を変更してなるガイド溝52(52a及び52b)と、遮蔽部53a及び53bとが設けられている点で撮像装置10(図2)とは異なっている。 For example, it is possible to apply the imaging device 50 shown in FIG. In this imaging device 50, the near-infrared light source 51 (51a and 51b) obtained by changing the arrangement position of the near-infrared light source 13 (FIG. 2), and the shape and arrangement position of the guide groove 12 (FIG. 2). Is different from the imaging device 10 (FIG. 2) in that guide grooves 52 (52a and 52b) obtained by changing the above and shielding portions 53a and 53b are provided.
具体的には52(52a及び52b)を挟んで撮像開口部11とは反対側に近赤外光光源51(51a及び51b)が設けられ、当該ガイド溝52の表面を一部用いて、近赤外光光源13の照射方向DYを覆う遮蔽部53a及び53bが設けられている。 Specifically, a near infrared light source 51 (51a and 51b) is provided on the opposite side of the imaging opening 11 across 52 (52a and 52b), and a part of the surface of the guide groove 52 is used to Shielding portions 53a and 53b that cover the irradiation direction DY of the infrared light source 13 are provided.
この撮像装置50を適用すれば、この遮蔽部53、ガイド溝52及び当該ガイド溝52にガイドされた指FGによって撮像開口部11への通常光の入射を低減することができるため、指FGの表面で照射方向DYに沿って反射する近赤外光に基づく横縞ノイズ成分のみならず、通常光に基づくノイズ成分による画像中の血管成分への影響をも低下させることができる。 If this imaging device 50 is applied, the incidence of normal light on the imaging opening 11 can be reduced by the shielding portion 53, the guide groove 52, and the finger FG guided by the guide groove 52. Not only the horizontal stripe noise component based on the near infrared light reflected along the irradiation direction DY on the surface but also the influence on the blood vessel component in the image by the noise component based on the normal light can be reduced.
また図14に示す撮像装置60を適用することもできる。この撮像装置60は、指FGを透過することにより得られる近赤外光を対象とする点で、指FG内方を散乱することにより得られる近赤外光を対象とする撮像装置10とは本質的に異なる構成となっている。 Moreover, the imaging device 60 shown in FIG. 14 can also be applied. This imaging device 60 is intended for near-infrared light obtained by transmitting through the finger FG, and is different from the imaging device 10 intended for near-infrared light obtained by scattering inside the finger FG. The structure is essentially different.
具体的にこの撮像装置60は、近赤外光を照射する近赤外光光源61(61a〜61c)を有し、この近赤外光光源61から照射される近赤外光の光路上には、当該近赤外光のうち特定の近赤外線帯域の光を透過する第1のフィルタ62、当該第1のフィルタ62を介して得られる光のうち静脈血に吸収される近赤外線帯域とその付近との光を透過する第2のフィルタ63及び固体撮像素子64が順次配置される。 Specifically, the imaging device 60 includes a near-infrared light source 61 (61a to 61c) that irradiates near-infrared light, and is on the optical path of the near-infrared light emitted from the near-infrared light source 61. The first filter 62 that transmits light in a specific near-infrared band of the near-infrared light, the near-infrared band that is absorbed by venous blood among the light obtained through the first filter 62, and its A second filter 63 and a solid-state imaging device 64 that transmit light in the vicinity are sequentially arranged.
そしてこの撮像部60においては、第1のフィルタ62と第2のフィルタ63との間に指FGを介挿し、かつ介挿された指FGを固定することができるようになされている。これに加えてこの撮像部60においては、通常光の入射を遮蔽する遮蔽部65が設けられており、これにより指FG内方における血管の撮像時に遮蔽部65外における雰囲気中の光や紫外光による近赤外光への影響を低減することができるようになされている。 In the imaging unit 60, the finger FG is inserted between the first filter 62 and the second filter 63, and the inserted finger FG can be fixed. In addition to this, the imaging unit 60 is provided with a shielding unit 65 that shields the incidence of normal light, whereby light in the atmosphere outside the shielding unit 65 or ultraviolet light when imaging a blood vessel inside the finger FG. It is made possible to reduce the influence on the near-infrared light.
この撮像装置60を適用すれば、通常光よりも大きい強度の近赤外光を指に照射することなく、露光時間制御処理(電子シャッタ)を実行することなく血管を撮像することができるため、消費電力を抑えると共に処理負荷を低減することができる。これに加えて通常光に基づくノイズ成分による画像中の血管成分への影響を大幅に低下させることができる。なお、この撮像装置60は、例えば家庭用電子機器、パーソナルコンピュータ又は携帯電話機等の端末装置に搭載する場合ではなく、単体で用いる場合に有効である。 If this imaging device 60 is applied, blood vessels can be imaged without performing exposure time control processing (electronic shutter) without irradiating the finger with near infrared light having intensity greater than that of normal light. It is possible to reduce power consumption and processing load. In addition, the influence of the noise component based on normal light on the blood vessel component in the image can be greatly reduced. The imaging device 60 is effective when used alone, not when mounted on a terminal device such as a home electronic device, personal computer, or cellular phone.
さらに図14との対応部分に同一符号を付した図15に示すように、かかる撮像装置60の光路上において、近赤外光光源61及び第1のフィルタ62間に入射側偏光板70を設けると共に、第2のフィルタ63及び固体撮像素子64間に、入射側偏光板70の振動方向に対して直交する方向等の異なる方向に振動する受光側偏光板71を設けるようにしても良い。 Further, as shown in FIG. 15 in which the same reference numerals are assigned to the parts corresponding to those in FIG. 14, an incident-side polarizing plate 70 is provided between the near-infrared light source 61 and the first filter 62 on the optical path of the imaging device 60. In addition, a light-receiving side polarizing plate 71 that vibrates in different directions such as a direction orthogonal to the vibration direction of the incident-side polarizing plate 70 may be provided between the second filter 63 and the solid-state imaging device 64.
この場合、撮像装置60では、近赤外光光源61から入射側偏光板70を介して指FGを透過することにより得られる近赤外光については、当該入射側偏光板70による偏光が解除されるため、受光側偏光板71を介して固体撮像素子64に入射され、これに対して指FG表面を反射する近赤外光については、当該入射側偏光板70による偏光が解除されないため、受光側偏光板71によって固体撮像素子64とは異なる方向に偏光されることとなる。従って、この図15に示す撮像装置60では、通常光に基づくノイズ成分による画像中の血管成分への影響を低下させることに加え、指FGの表面反射した近赤外光に基づくノイズ成分による画像中の血管成分への影響をも低下させることができる。 In this case, in the imaging device 60, the near-infrared light obtained by transmitting the finger FG from the near-infrared light source 61 through the incident-side polarizing plate 70 is depolarized by the incident-side polarizing plate 70. Therefore, the near-infrared light that is incident on the solid-state imaging device 64 via the light-receiving side polarizing plate 71 and reflects the surface of the finger FG is not depolarized by the incident-side polarizing plate 70. The side polarizing plate 71 is polarized in a direction different from that of the solid-state imaging device 64. Therefore, in the imaging device 60 shown in FIG. 15, in addition to reducing the influence of the noise component based on the normal light on the blood vessel component in the image, the image based on the noise component based on the near-infrared light reflected from the surface of the finger FG. The influence on the vascular component inside can also be reduced.
また上述の第1の実施の形態においては、撮像対象として、指FG内方における血管を適用するようにしたが、本発明はこれに限らず、例えば眼球部分、掌部分、腕部分、脹脛部分又は足底部分等のこの他種々の生体部位又は生体全身における血管を撮像することができる。 In the first embodiment described above, a blood vessel inside the finger FG is applied as an imaging target. However, the present invention is not limited to this, and for example, an eyeball part, a palm part, an arm part, and a calf part. Alternatively, it is possible to image blood vessels in various other biological parts such as the plantar part or the whole body.
さらに上述の第1の実施の形態においては、生体に対して所定の照射方向から血管に特有の近赤外光を照射する照射手段として、照射方向DY(図3)から指FGの指腹に近赤外光を照射するようにした場合について述べたが、本発明はこれに限らず、この他種々の照射方向から近赤外光を照射することができる。またこの場合、血管のうち静脈のみ又は動脈のみに特異的な近赤外光を照射するようにしても良く、生体内方における血管以外の固有の構造物に特異的な光を照射するようにしても良い。 Furthermore, in the above-described first embodiment, as an irradiation unit that irradiates a living body with near infrared light peculiar to a blood vessel from a predetermined irradiation direction, the finger FG of the finger FG is irradiated from the irradiation direction DY (FIG. 3). Although the case where near infrared light is irradiated has been described, the present invention is not limited to this, and near infrared light can be irradiated from various other irradiation directions. In this case, specific near-infrared light may be applied only to veins or only arteries of blood vessels, and specific light other than blood vessels inside the living body may be irradiated with specific light. May be.
さらに上述の第1の実施の形態においては、照射手段から照射され、生体を経由して得られる近赤外光を固体撮像素子に導光する導光手段として、照射方向DYに対して直交する方向(即ち指差方向DXと同方向)に偏光軸を有する偏光板15を設けるようにした場合について述べたが、本発明はこれに限らず、要は、照射方向DYとは異なる方向に偏光軸を有するこの他種々の偏光板を設けることができる。 Further, in the above-described first embodiment, the light guide means that guides near-infrared light irradiated from the irradiation means and obtained through the living body to the solid-state imaging device is orthogonal to the irradiation direction DY. Although the case where the polarizing plate 15 having the polarization axis in the direction (that is, the same direction as the pointing direction DX) is described, the present invention is not limited to this, and the polarization is performed in a direction different from the irradiation direction DY. Various other polarizing plates having an axis can be provided.
またこの場合、通常光の入射方向とは異なる方向に偏光軸を有する通常光用の振動板を、偏光板15に張り合わせるようにしても良い。このようにすれば、指FGの表面で反射した近赤外光に基づく横縞ノイズ成分のみならず、当該表面で反射した通常光に基づくノイズ成分による画像中の血管成分への影響をも低下させることができる。 In this case, a vibration plate for normal light having a polarization axis in a direction different from the incident direction of normal light may be bonded to the polarizing plate 15. In this way, not only the horizontal stripe noise component based on the near infrared light reflected on the surface of the finger FG but also the influence on the blood vessel component in the image by the noise component based on the normal light reflected on the surface is reduced. be able to.
またかかる偏光版15を設けずに、近赤外光透過フィルタ14a及び又はその他の光学系レンズを導光手段として用いるようにしても良い。 Further, the near infrared light transmission filter 14a and / or other optical system lens may be used as the light guiding means without providing the polarizing plate 15.
さらに上述の第1の実施の形態においては、固体撮像素子から出力される画像信号に基づく画像を、照射方向に対応する方向の輝度値が滑らかとなるように再構成する画像再構成手段として、指差方向DX(図3)に直交する方向に対応する水平方向の輝度値が滑らかとなるように再構成するようにした場合について述べたが、本発明はこれに限らず、指差方向DXから近赤外光を照射し、当該指差方向DXに対応する垂直方向の輝度値が滑らかとなるように再構成するようにしても良く、これらを組み合わせるようにしても良い。 Furthermore, in the above-described first embodiment, as an image reconstruction unit that reconstructs an image based on the image signal output from the solid-state imaging device so that the luminance value in the direction corresponding to the irradiation direction becomes smooth. Although a case has been described where the luminance value in the horizontal direction corresponding to the direction orthogonal to the finger pointing direction DX (FIG. 3) is reconstructed, the present invention is not limited to this, and the finger pointing direction DX is not limited thereto. The near-infrared light may be irradiated to reconfigure so that the luminance value in the vertical direction corresponding to the finger pointing direction DX becomes smooth, or a combination thereof may be used.
またこの場合、具体的な再構成手法として、抽出範囲ARを1画素ずつジグザグ状(図
9)にシフトするようにして縦5画素を順次抽出し、当該抽出した縦5画素の輝度平均値を、このとき抽出した抽出範囲ARの中心画素に対応する再構成血管画像RIMの画素として生成するようにしたが、本発明はこれに限らず、例えば縦2列の互いに隣接する複数の画素を抽出範囲ARとするようにしても良く、また輝度平均値に代えて縦5画素に対して所定の周波数分析処理を施すことにより得られる値、あるいは抽出範囲ARの各画素をそれぞれ所定の割合で乗算し、当該乗算結果を加算することにより得られる値とするようにしても良い。
In this case, as a specific reconstruction method, vertical 5 pixels are sequentially extracted so that the extraction range AR is shifted in a zigzag pattern (FIG. 9) pixel by pixel, and the luminance average value of the extracted vertical 5 pixels is obtained. The pixel is generated as a pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the extraction range AR extracted at this time, but the present invention is not limited to this, and for example, a plurality of adjacent pixels in two vertical columns are extracted. The range AR may be used, and instead of the luminance average value, a value obtained by performing a predetermined frequency analysis process on five vertical pixels, or each pixel of the extraction range AR is multiplied by a predetermined ratio. Then, a value obtained by adding the multiplication results may be used.
さらに上述の第1の実施の形態においては、画像処理部30において1枚の血管画像信号S10から血管形成パターンを抽出するようにした場合について述べたが、本発明はこれに限らず、時間的に連続する複数の血管画像信号(動画像信号)から血管形成パターンを抽出するようにしても良い。 Further, in the above-described first embodiment, the case where the image processing unit 30 extracts the blood vessel formation pattern from one blood vessel image signal S10 has been described. However, the present invention is not limited to this, and is temporal. The blood vessel formation pattern may be extracted from a plurality of blood vessel image signals (moving image signals) that are continuous with each other.
この場合、画像処理部30は、画像再構成部31において、複数の血管画像信号それぞれに対して上述の画像再構成処理を行うことにより各再構成画像信号を生成するが、この場合、画像処理部30では、指FGの表面で照射方向DYに沿って反射する近赤外光に基づく横縞ノイズ成分のみならず、動画像信号特有の水平走査ノイズをも分散させることができる。 In this case, the image processing unit 30 generates each reconstructed image signal by performing the above-described image reconstruction processing on each of the plurality of blood vessel image signals in the image reconstruction unit 31. The unit 30 can disperse not only horizontal stripe noise components based on near-infrared light reflected along the irradiation direction DY on the surface of the finger FG but also horizontal scanning noise peculiar to a moving image signal.
そして画像処理部30は、これら再構成画像信号に基づく血管形成パターンの抽出手法として、例えば各再構成画像信号から対応する血管画像信号を減算することにより横縞ノイズ成分をそれぞれ抽出し、最少の横縞ノイズ成分の再構成画像信号に対して2値化処理及びパターン抽出処理を順次を施すことにより血管形成パターンを抽出する。このようにすれば、指表面反射近赤外光に起因する血管形成パターンにおける抽出精度の低下をより防止することができるため、より信頼性の高い認証情報D2を生成することができる。 Then, as an extraction method of the blood vessel formation pattern based on these reconstructed image signals, the image processing unit 30 extracts the horizontal stripe noise component by subtracting the corresponding blood vessel image signal from each reconstructed image signal, for example. A blood vessel formation pattern is extracted by sequentially performing binarization processing and pattern extraction processing on the reconstructed image signal of the noise component. In this way, it is possible to further prevent a reduction in extraction accuracy in the blood vessel formation pattern due to finger surface reflection near infrared light, and thus it is possible to generate authentication information D2 with higher reliability.
(2)第2の実施の形態
(2−1)認証装置の全体構成
図1との対応部分に同一符号を付した図16において、101は全体として第2の実施の形態による認証システムの全体構成を示し、撮像装置3(図1)に代えて撮像装置103が制御装置2に接続されている点で、第1の実施の形態による認証装置1(図1)とは異なっている。
(2) Second Embodiment (2-1) Overall Configuration of Authentication Device In FIG. 16, in which parts corresponding to those in FIG. 1 are assigned the same reference numerals, 101 is the overall authentication system according to the second embodiment. The configuration is different from the authentication device 1 (FIG. 1) according to the first embodiment in that the imaging device 103 is connected to the control device 2 instead of the imaging device 3 (FIG. 1).
(2−2)撮像装置の具体的構成
この撮像装置103は、図1との対応部分に同一符号を付した図17に示すように、撮像部110と、当該撮像部110を制御する撮像制御部120と、当該撮像部120で撮像された結果得られる血管画像に対して各種処理を施す画像処理部130とによって構成される。
(2-2) Specific Configuration of Imaging Device As shown in FIG. 17 in which the same reference numerals are given to the corresponding parts in FIG. 1, the imaging device 103 has an imaging unit 110 and imaging control for controlling the imaging unit 110. And an image processing unit 130 that performs various processes on a blood vessel image obtained as a result of being imaged by the imaging unit 120.
(2−2−1)撮像部の構成
この撮像部110においては、近赤外光光源13a及び13b(図2)に代えて、図17及び図18に示すように、2つの光源を組とする一対の近赤外光光源113a、113bと、近赤外光光源113c、113dとを設けた点で、第1の実施の形態による撮像部10(図2)とは異なっている。
(2-2-1) Configuration of Imaging Unit In this imaging unit 110, instead of the near infrared light sources 13a and 13b (FIG. 2), two light sources are combined as shown in FIGS. This is different from the imaging unit 10 (FIG. 2) according to the first embodiment in that a pair of near-infrared light sources 113a and 113b and near-infrared light sources 113c and 113d are provided.
これら近赤外光光源113a、113b及び近赤外光光源113c、113dは、この撮像装置60の筺体の表面において、固体撮像素子14cを中心として互いに180度対向する位置に設けられている。 The near-infrared light sources 113a and 113b and the near-infrared light sources 113c and 113d are provided on the surface of the housing of the imaging device 60 at positions that are opposed to each other by 180 degrees with the solid-state imaging element 14c as the center.
そして近赤外光光源113a、113bにおいては、図19に示すように、撮像開口部11上にガイドされた指FGの指差方向DXに直行する方向(以下、これを指差直交方向と呼ぶ)DY1から近赤外光が指腹に照射されるようにその位置が選定されており、また他方の近赤外光光源113c、113dにおいては、指差方向DXと同方向又は逆方向(以下、これを指差平行方向と呼ぶ)DY2から近赤外光が指腹に照射されるようにその位置が選定されている。 In the near-infrared light sources 113a and 113b, as shown in FIG. 19, a direction orthogonal to the finger pointing direction DX of the finger FG guided on the imaging opening 11 (hereinafter referred to as a finger difference orthogonal direction). ) The position is selected so that near infrared light is emitted from the DY 1 to the finger pad, and the other near infrared light sources 113c and 113d are in the same direction as or opposite to the finger direction DX ( hereinafter, this is referred to as pointing and parallel) its position as the near-infrared light from the DY 2 is irradiated on the finger pad is selected.
従って撮像部110においては、撮像開口部11上にガイドされた指FGの指腹に対して指差直交方向DY1から照射し、この指FG内方から得られる血管射影光(図21(A)において一点鎖線で示す)をカメラ部14に入射すると共に、当該ガイドされた指FGの指腹に対して指差平行方向DY2から照射し、この指FG内方から得られる血管射影光(図21(B)において一点鎖線で示す)をカメラ部14に入射することができるようになされている。 In the imaging unit 110 thus irradiates the pointing and the orthogonal direction DY 1 relative to finger pad of the finger FG, which is guided on the image pickup opening 11, the blood vessel projection light obtained from the inside the finger FG (Fig. 21 (A with incident is indicated by one-dot chain line) to the camera unit 14 in), the finger difference to finger pad guided finger FG is irradiated from a direction parallel DY 2, vessel projection light obtained from the inside the finger FG ( 21 (shown by a one-dot chain line in FIG. 21B) can be incident on the camera unit 14.
かかる構成に加えてこの撮像部110のカメラ部14では、偏光板15(図2)に代えて、指差平行方向DY2と同方向に偏光軸を有する偏光板115aと、指差直交方向DY1と同方向に偏光軸を有する偏光板115bとを張り合わせてなる偏光板115が設けられている。 In addition to this configuration, in the camera unit 14 of the imaging unit 110, instead of the polarizing plate 15 (FIG. 2), a polarizing plate 115a having a polarization axis in the same direction as the pointing parallel direction DY 2 and a pointing orthogonal direction DY. 1 is provided with a polarizing plate 115 formed by laminating a polarizing plate 115b having a polarization axis in the same direction as 1 .
この場合、カメラ部14(図17)では、近赤外光光源113a、113bから指差直交方向DY1に照射されている場合において、当該指差直交方向DY1に垂直である方向からの指表面反射近赤外光は偏向板115aにより光路から逸れ、これに対して血管射影光(散乱光)は散乱光であるため偏向板115a及び115bをそれぞれ通過することとなる。 In this case, the camera unit 14 (FIG. 17), when being irradiated near infrared light sources 113a, from 113b to pointing and orthogonal direction DY 1, finger from a direction which is perpendicular to the pointing and the orthogonal direction DY 1 The surface-reflected near-infrared light is deflected from the optical path by the deflecting plate 115a, whereas the blood vessel projection light (scattered light) is scattered light and thus passes through the deflecting plates 115a and 115b.
一方、近赤外光光源113c、113dから指差平行方向DY2に照射されている場合において、当該指差平行方向DY2に垂直である方向からの指表面反射近赤外光は偏向板115bにより光路から逸れ、これに対して血管射影光(散乱光)は散乱光であるため偏向板115a及び115bをそれぞれ通過することとなる。 On the other hand, the near-infrared light source 113c, when being irradiated to the finger difference parallel DY 2 from 113d, finger surface reflection near infrared light from the direction perpendicular to the pointing and parallel DY 2 deflection plate 115b The vascular projection light (scattered light) is scattered light and passes through the deflecting plates 115a and 115b.
従ってこのカメラ部14は、近赤外光光源113a、113b又は近赤外光光源113c、113dから指FGを経由して得られる血管射影光及び指表面反射近赤外光のうち、当該血管射影光を選択的に固体撮像素子14cに導光することができるようになされている。 Therefore, the camera unit 14 uses the blood vessel projection among the blood vessel projection light and finger surface reflection near infrared light obtained from the near infrared light sources 113a and 113b or the near infrared light sources 113c and 113d via the finger FG. The light can be selectively guided to the solid-state imaging device 14c.
かくしてこの撮像部110においては、指差直交方向DY1から指FGを経由して得られる血管射影光を固体撮像素子14cを介して血管画像信号S10aとして画像処理部130に送出し、一方、指差平行方向DY2から指FGを経由して得られる血管射影光を固体撮像素子14cを介して血管画像信号S10bとして画像処理部130に送出するようになされている。 Thus, in the imaging unit 110, the blood vessel projection light obtained from a finger difference orthogonal direction DY 1 through the finger FG through the solid-state imaging device 14c and sent to the image processing unit 130 as blood vessel image signals S10a, whereas, the finger the difference has been made from the direction parallel DY 2 vessels projection light obtained through the finger FG to deliver to the image processing unit 130 as a blood vessel image signal S10b through the solid-state imaging device 14c.
(2−2−2)撮像制御部の構成
撮像制御部120は、図18及び図4との対応部分に同一符号を付した図20に示すように、光源駆動部21(図4)に代えて、近赤外光光源113a、113bと近赤外光光源113c、113dとを交互に時分割制御する光源駆動部121が設けられた点で、撮像制御部20(図4)とは異なっている。
(2-2-2) Configuration of Imaging Control Unit The imaging control unit 120 replaces the light source driving unit 21 (FIG. 4) as shown in FIG. Thus, it differs from the imaging control unit 20 (FIG. 4) in that a light source driving unit 121 that alternately time-division-controls the near-infrared light sources 113a and 113b and the near-infrared light sources 113c and 113d is provided. Yes.
すなわち撮像制御部120は、通常光の強度よりも近赤外光が大きくなるように予め設定された電圧値に対応する光源駆動信号S3a及びS3bを、所定の期間ごとに対応する近赤外光光源113a、113b及び近赤外光光源113c、113dに出力するようにして、当該近赤外光光源113a、113bと近赤外光光源113c、113dとを時分割で交互に駆動するようになされている。 That is, the imaging control unit 120 uses the light source drive signals S3a and S3b corresponding to the voltage values set in advance so that the near infrared light is larger than the intensity of the normal light, and the near infrared light corresponding to each predetermined period. By outputting to the light sources 113a and 113b and the near infrared light sources 113c and 113d, the near infrared light sources 113a and 113b and the near infrared light sources 113c and 113d are alternately driven in a time division manner. ing.
この結果、近赤外光光源113a、113bと近赤外光光源113c、113dとが交互に点灯し、図21に示すように、撮像開口部11上にガイドされた指FGには、通常光よりも大きい強度の近赤外光が指差直交方向DY1(図21(A)において一点鎖線で示す)及び指差平行方向DY2(図21(B)において一点鎖線で示す)から交互に照射されることとなる。 As a result, the near-infrared light sources 113a and 113b and the near-infrared light sources 113c and 113d are alternately turned on, and the normal light is applied to the finger FG guided on the imaging opening 11, as shown in FIG. Near-infrared light of greater intensity is alternately alternated from the finger cross orthogonal direction DY 1 (indicated by the one-dot chain line in FIG. 21A) and the finger parallel direction DY 2 (indicated by the one-dot chain line in FIG. 21B). It will be irradiated.
この場合、上述した撮像部110では、偏光板115(図17)により指表面反射近赤外光が光路外に逸らされるが、当該指表面反射近赤外光の全てが指差直交方向DY1又は指差平行方向DY2に垂直である方向へ反射することはないため、一部の指表面反射近赤外光は血管射影光と共に固体撮像素子14cに導光されることとなる。 In this case, in the imaging unit 110 described above, the finger surface reflected near-infrared light is deflected out of the optical path by the polarizing plate 115 (FIG. 17), but all of the finger surface reflected near-infrared light is in the finger difference orthogonal direction DY 1. or because does not reflect the pointing and is perpendicular to the parallel direction DY 2 directions, a part of the finger surface reflection near infrared light is to be guided to the solid-state imaging device 14c with vascular projection light.
従って、この固体撮像素子14cから出力される血管画像信号S10aに基づく血管画像BIMaには、図21(C)にも示すように、血管射影光に基づく血管成分と共に指表面反射近赤外光に基づくノイズ成分が、指差直交方向DY1に対応する水平方向に出現することとなる(以下、この水平方向のノイズ成分を水平ノイズ成分と呼ぶ)。 Therefore, in the blood vessel image BIMa based on the blood vessel image signal S10a output from the solid-state imaging device 14c, as shown in FIG. 21C, the finger surface reflection near-infrared light together with the blood vessel component based on the blood vessel projection light is obtained. The base noise component appears in the horizontal direction corresponding to the finger difference orthogonal direction DY 1 (hereinafter, this horizontal noise component is referred to as a horizontal noise component).
一方、固体撮像素子14cから出力される血管画像信号S10bに基づく血管画像BIMbには、図21(D)にも示すように、血管射影光に基づく血管成分と共に指表面反射近赤外光に基づくノイズ成分が、指差平行方向DY2に対応する垂直方向に出現することとなる(以下、この垂直方向ノイズ成分を垂直ノイズ成分と呼ぶ)。 On the other hand, the blood vessel image BIMb based on the blood vessel image signal S10b output from the solid-state imaging device 14c is based on the finger surface reflection near infrared light together with the blood vessel component based on the blood vessel projection light as shown in FIG. The noise component appears in the vertical direction corresponding to the finger parallel direction DY 2 (hereinafter, this vertical noise component is referred to as a vertical noise component).
(2−2−3)画像処理部の構成
画像処理部130は、かかる水平ノイズ成分及び垂直ノイズ成分が滑らかとなるように対応する血管画像BIMa及び血管画像BIMbを再構成する画像再構成部131が画像再構成部31(図4)に代えて設けられた点、当該再構成された血管画像BIMa及びBIMbの2値血管画像から共通部分を抽出するパターン抽出部133がパターン抽出部33(図4)に代えて設けられた点で、画像処理部30(図4)とは異なっている。
(2-2-3) Configuration of Image Processing Unit The image processing unit 130 reconstructs the corresponding blood vessel image BIMa and blood vessel image BIMb so that the horizontal noise component and the vertical noise component become smooth. Is provided in place of the image reconstruction unit 31 (FIG. 4), and a pattern extraction unit 133 that extracts a common portion from the binary blood vessel images of the reconstructed blood vessel images BIMa and BIMb is a pattern extraction unit 33 (FIG. It differs from the image processing unit 30 (FIG. 4) in that it is provided in place of 4).
画像再構成部131は、固体撮像素子14cから出力される血管画像信号S10a及びS10b双方の輝度ヒストグラムを生成し、これら輝度ヒストグラムにおいて対応する輝度値ごとに画素数の差を算出する。 The image reconstruction unit 131 generates luminance histograms of both blood vessel image signals S10a and S10b output from the solid-state imaging device 14c, and calculates the difference in the number of pixels for each corresponding luminance value in these luminance histograms.
そして画像再構成部131は、各輝度値の画素数の差の合計(以下、これを画素数差合計と呼ぶ)が所定の閾値以上である場合に、血管画像信号S10a及びS10b双方に対して、画像再構成部31における画像処理(図12)と同様の処理を実行するようになされている。 Then, the image reconstructing unit 131 applies to both the blood vessel image signals S10a and S10b when the total difference in the number of pixels of each luminance value (hereinafter referred to as the total number of pixels difference) is equal to or greater than a predetermined threshold. The same processing as the image processing (FIG. 12) in the image reconstruction unit 31 is executed.
すなわち画像再構成部131は、血管画像信号S10aにおける輝度ヒストグラムのヒストグラム波形パターンに対応する抽出範囲ARにおける指差平行方向の画素数を、情報記憶メモリ34が記憶されたテーブルを参照して決定する。 In other words, the image reconstruction unit 131 determines the number of pixels in the finger parallel direction in the extraction range AR corresponding to the histogram waveform pattern of the luminance histogram in the blood vessel image signal S10a with reference to a table stored in the information storage memory 34. .
そして画像再構成部131は、図8及び図9で上述したように、このとき決定した例えば縦5画素の輝度平均値を当該縦5画素の中心画素に対応する再構成血管画像RIM(図8)の画素として順次生成し、かくして生成された再構成血管画像RIMの再構成血管画像信号S11aを2値化部32に送出する。 Then, as described above with reference to FIGS. 8 and 9, the image reconstruction unit 131 uses the reconstructed blood vessel image RIM (FIG. 8) corresponding to the central pixel of the vertical 5 pixels, for example, the luminance average value of the vertical 5 pixels determined at this time. ) Are sequentially generated, and the reconstructed blood vessel image signal S11a of the reconstructed blood vessel image RIM thus generated is sent to the binarization unit 32.
また、画像再構成部131は、血管画像信号S10bについても同様にして、当該血管画像信号S10bにおける輝度ヒストグラムのヒストグラム波形パターンから対応する抽出範囲ARにおける指差直交方向の画素数を決定した後、当該決定した例えば横5画素の輝度平均値を当該横5画素の中心画素に対応する再構成血管画像(図示せず)の画素として順次生成し、かくして生成された再構成血管画像の再構成血管画像信号S11bを2値化部32に送出する。 Similarly, the image reconstruction unit 131 determines the number of pixels in the finger cross orthogonal direction in the corresponding extraction range AR from the histogram waveform pattern of the luminance histogram in the blood vessel image signal S10b. The determined luminance average value of, for example, 5 horizontal pixels is sequentially generated as a pixel of a reconstructed blood vessel image (not shown) corresponding to the central pixel of the 5 horizontal pixels, and the reconstructed blood vessel of the reconstructed blood vessel image thus generated is generated. The image signal S11b is sent to the binarization unit 32.
このようにして画像再構成部131は、図10で示した実験結果と同様に、血管画像BIMaに含まれる水平ノイズ成分(図21(C))及び血管画像BIMbに含まれる垂直ノイズ成分(図21(D))を分散し、これにより水平ノイズ成分及び垂直ノイズ成分が滑らかとなるように対応する血管画像BIMa及び血管画像BIMbを再構成することができるようになされている。 In this way, the image reconstruction unit 131 performs the horizontal noise component (FIG. 21C) included in the blood vessel image BIMa and the vertical noise component (see FIG. 21) included in the blood vessel image BIIMb, similarly to the experimental result shown in FIG. 21 (D)) is distributed, and the corresponding blood vessel image BIMa and blood vessel image BIMb can be reconstructed so that the horizontal noise component and the vertical noise component become smooth.
なお、画像再構成部131は、かかる画像処理を実行しない場合には、固体撮像素子14cから出力される血管画像信号S10a、S10bをそのまま再構成血管画像信号S11a、S11bとして2値化部32に送出するようになされている。 When the image reconstruction unit 131 does not execute such image processing, the blood vessel image signals S10a and S10b output from the solid-state imaging device 14c are directly used as the reconstructed blood vessel image signals S11a and S11b to the binarization unit 32. It is made to send out.
この再構成血管画像信号S11a、S11bは、2値化部32により2値血管画像データD1a、D1bとして生成され、パターン抽出部133に送出される。 The reconstructed blood vessel image signals S11a and S11b are generated as binary blood vessel image data D1a and D1b by the binarizing unit 32 and sent to the pattern extracting unit 133.
パターン抽出部133は、図22に示すように、上述の画像再構成部131の画像再構成処理により分散しきれずに残った水平ノイズ成分及び血管に相当する血管成分からなる2値血管画像と、垂直ノイズ成分及び血管成分からなる2値血管画像とのうち、当該2値血管画像双方の共通部分となる血管成分を抽出する。 As shown in FIG. 22, the pattern extraction unit 133 includes a binary blood vessel image composed of horizontal noise components and blood vessel components corresponding to blood vessels that remain without being dispersed by the image reconstruction processing of the image reconstruction unit 131 described above, A blood vessel component that is a common part of both of the binary blood vessel images is extracted from the binary blood vessel image including the vertical noise component and the blood vessel component.
実際には、パターン抽出部133は、図23に示すように、2値血管画像データD1a、D1b双方の2値血管画像における対応する画素同士をそれぞれ加算し、この加算結果から、画素値が「2」となる共通部分の画素(以下、これを共通部分画素と呼ぶ)を抽出する。 In practice, as shown in FIG. 23, the pattern extraction unit 133 adds corresponding pixels in the binary blood vessel images of both the binary blood vessel image data D1a and D1b, and the pixel value is “ 2 ”is extracted (hereinafter referred to as a common partial pixel).
そしてパターン抽出部133は、このとき抽出した共通部分画素を認証情報D10として生成し、これを認証装置4(図16)に送出するようになされている。 Then, the pattern extraction unit 133 generates the common partial pixel extracted at this time as authentication information D10, and sends it to the authentication device 4 (FIG. 16).
(2−2−4)撮像処理手順
ここで、上述の撮像装置103(撮像部110、撮像制御部120及び画像処理部130)による撮像処理は、図24に示す撮像処理手順RT2に従って行われる。
(2-2-4) Imaging Process Procedure Here, the imaging process by the imaging device 103 (the imaging unit 110, the imaging control unit 120, and the image processing unit 130) is performed according to the imaging process procedure RT2 illustrated in FIG.
すなわち撮像装置103は、制御装置2(図16)から撮像命令を受けると、この撮像処理手順RT2をステップSP10において開始し、続くステップSP11に進んで、このときガイド溝12にガイドされた指FGに対して近赤外光光源113a、113bから指差直交方向DY1の近赤外光を照射することにより当該指FG内方の血管を撮像し、続くステップSP12に進んで、近赤外光光源113c、113dから指差平行方向DY2の近赤外光を照射することにより当該指FG内方の血管を撮像する。 That is, when receiving an imaging command from the control device 2 (FIG. 16), the imaging device 103 starts the imaging processing procedure RT2 at step SP10 and proceeds to the subsequent step SP11. At this time, the finger FG guided by the guide groove 12 near infrared light sources 113a, by irradiating near-infrared light of pointing and orthogonal direction DY 1 from 113b captures the finger FG inside the blood vessel, the process proceeds to the following step SP12 respect, near-infrared light light source 113c, captures the finger FG inside the vessel by irradiating near-infrared light of pointing and parallel DY 2 from 113d.
そして撮像装置103は、続くステップSP13に進んで、ステップSP11及びSP12での撮像結果として得られた血管画像信号S10a及びS10b双方の輝度ヒストグラムにおいて対応する輝度値ごとに画素数の差(画素数差合計)を算出し、この算出結果に基づいて、当該血管画像信号S10a及びS10bに対して画像処理(図12)を施すか否かを判定する。 Then, the imaging apparatus 103 proceeds to step SP13, and the pixel number difference (pixel number difference) for each corresponding luminance value in the luminance histograms of both blood vessel image signals S10a and S10b obtained as the imaging results in steps SP11 and SP12. Sum) is calculated, and based on the calculation result, it is determined whether or not to perform image processing (FIG. 12) on the blood vessel image signals S10a and S10b.
ここで肯定結果が得られた場合(画素数差合計が所定の閾値以上である場合)、このことは血管画像信号S10a及びS10b双方又はいずれか一方においてノイズ成分(水平ノイズ成分及び又は垂直ノイズ成分)が多く含まれていることを意味する。 If an affirmative result is obtained (when the total difference in the number of pixels is greater than or equal to a predetermined threshold), this means that noise components (horizontal noise component and / or vertical noise component) are present in blood vessel image signals S10a and S10b. ) Is included.
従ってこの場合、撮像装置103は、続くステップSP14に進んで、血管画像信号S10a、S10bに対して、図12におけるステップSP1〜ステップSP7までの画像処理を施して再構成血管画像信号S11a、S11bを生成した後、次のステップSP15に進む。 Therefore, in this case, the imaging apparatus 103 proceeds to step SP14, and performs image processing from step SP1 to step SP7 in FIG. 12 on the blood vessel image signals S10a and S10b to obtain reconstructed blood vessel image signals S11a and S11b. After the generation, the process proceeds to the next step SP15.
これに対して否定結果が得られた場合(画素数差合計が所定の閾値未満である場合)、撮像装置103は、ステップSP14で画像処理を施すことなく次のステップSP15に進む。 On the other hand, when a negative result is obtained (when the total difference in the number of pixels is less than a predetermined threshold), the imaging apparatus 103 proceeds to the next step SP15 without performing image processing in step SP14.
そして撮像装置103は、このステップSP15において、ステップSP14での画像処理結果として得られる再構成血管画像信号S11a、S11b(血管画像信号S10a、S10b)の2値血管画像双方における共通部分を認証情報D10として生成し、これを認証装置4(図16)に送出した後、次のステップSP16に進んで、この撮像処理手順RT2を終了する。 In step SP15, the imaging apparatus 103 recognizes the common part in the binary blood vessel images of the reconstructed blood vessel image signals S11a and S11b (blood vessel image signals S10a and S10b) obtained as the image processing result in step SP14 as authentication information D10. Are generated and sent to the authentication device 4 (FIG. 16), and then the process proceeds to the next step SP16 to end the imaging processing procedure RT2.
このようにして撮像装置103は撮像処理を実行するようになされている。 In this way, the imaging device 103 is configured to execute an imaging process.
(2−3)動作及び効果
以上の構成において、この撮像装置103は、指差方向DXに対して直行する指差直行方向DY1(図19)及び指差方向DXに平行な指差平行方向DY2(図19)の近赤外光を指FGに時分割で照射し、当該指FGの内方で散乱して得られる血管射影光を固体撮像素子14cに導光する。
(2-3) Operation and Effect In the above-described configuration, the imaging apparatus 103 includes the finger pointing orthogonal direction DY 1 (FIG. 19) orthogonal to the finger pointing direction DX and the finger pointing parallel direction parallel to the finger pointing direction DX. Near infrared light of DY 2 (FIG. 19) is irradiated onto the finger FG in a time-sharing manner, and blood vessel projection light obtained by scattering inside the finger FG is guided to the solid-state imaging device 14c.
そして撮像装置103は、この固体撮像素子14cから出力される血管画像信号S10a、S10b(図20)の2値血管画像から共通部分を抽出する。 Then, the imaging device 103 extracts a common part from the binary blood vessel images of the blood vessel image signals S10a and S10b (FIG. 20) output from the solid-state imaging device 14c.
従ってこの撮像装置103では、これら2血管画像(図22)のうち、指FGの表面で指差直行方向DY1及び指差平行方向DY2に沿って反射する近赤外光(指表面反射近赤外光)に基づく水平ノイズ成分及び垂直ノイズ成分だけを残して本来の血管成分を抽出することができるため、当該ノイズ成分による画像中の血管成分への影響を低減することができ、かくして画質を向上することができる。 Therefore, in the imaging apparatus 103, among these 2 blood vessel image (Fig. 22), near-infrared light reflected along the pointing and orthogonal direction DY 1 and pointing and parallel DY 2 on the surface of the finger FG (finger surface reflection near The original blood vessel component can be extracted leaving only the horizontal noise component and the vertical noise component based on (infrared light), so that the influence of the noise component on the blood vessel component in the image can be reduced, and thus the image quality Can be improved.
この場合、撮像装置103は、必要に応じて、血管画像信号S10a、S10b(図20)の2値血管画像を生成する前に、指差直行方向DY1に対応する水平方向の輝度値が滑らかとなるように血管画像信号S10aに基づく血管画像を再構成すると共に、指差平行方向DY2に対応する垂直方向の輝度値が滑らかとなるように血管画像信号S10bの血管画像を再構成し、これら再構成結果の2値血管画像から共通部分を抽出する。 In this case, the imaging device 103, as necessary, the blood vessel image signals S10a, S10b before generating the binary blood vessel image (Fig. 20), a smooth luminance value in the horizontal direction corresponding to the pointing and orthogonal direction DY 1 is together to reconstruct the blood vessel image based on the blood vessel image signal S10a so that reconstructs blood vessel image of the blood vessel image signals S10b as the luminance value in the vertical direction corresponding to the pointing and parallel DY 2 is smooth, A common part is extracted from the binary blood vessel images of the reconstruction results.
従ってこの撮像装置103では、本来の血管成分でないにもかかわらず、水平ノイズ成分に対応する画素と垂直ノイズ成分に対応する画素同士が共通部分となってしまう確率を、当該血管画像信号S10a、S10bの再構成により低減することができるようになるため、より適切に血管成分を抽出することができ、かくして画質を一段と向上することができる。 Therefore, in this imaging apparatus 103, the probability that the pixels corresponding to the horizontal noise component and the pixels corresponding to the vertical noise component become a common part even though they are not original blood vessel components is determined as the blood vessel image signals S10a and S10b. Therefore, the blood vessel component can be extracted more appropriately, and thus the image quality can be further improved.
また撮像装置103は、このようにして共通部分を抽出した血管成分を認証情報D10として生成することにより、信頼性の高い認証情報D10を生成することができ、この結果、認証時の信頼性を向上することができる。 Further, the imaging apparatus 103 can generate highly reliable authentication information D10 by generating the blood vessel component from which the common portion is extracted in this way as the authentication information D10. As a result, the reliability at the time of authentication can be improved. Can be improved.
以上の構成によれば、指差直行方向DY1及び指差平行方向DY2の近赤外光を指FGに時分割で照射し、当該指FGの内方で散乱して得られる血管射影光に基づく血管画像信号S10a、S10bの2値血管画像から共通部分を抽出するようにしたことにより、水平ノイズ成分及び垂直ノイズ成分だけを残して本来の血管成分を抽出することができるため、当該ノイズ成分による画像中の血管成分への影響を低減することができ、かくして画質を向上することができる。 According to the above configuration, the near-infrared light pointing and orthogonal direction DY 1 and pointing and parallel DY 2 was irradiated in a time-division finger FG, vascular projection light obtained by scattering at the inside of the finger FG Since the common part is extracted from the binary blood vessel images of the blood vessel image signals S10a and S10b based on the original blood vessel component, the original blood vessel component can be extracted leaving only the horizontal noise component and the vertical noise component. The influence of the component on the blood vessel component in the image can be reduced, and thus the image quality can be improved.
(2−4)他の実施の形態
なお上述の第2の実施の形態においては、撮像対象として、指FG内方における血管を適用するようにしたが、本発明はこれに限らず、例えば眼球部分、掌部分、腕部分、脹脛部分又は足底部分等のこの他種々の生体部位又は生体全身における血管を撮像することができる。
(2-4) Other Embodiments In the second embodiment described above, a blood vessel inside the finger FG is applied as an imaging target. However, the present invention is not limited to this, for example, an eyeball. Various other body parts such as a part, a palm part, an arm part, a calf part or a sole part, or blood vessels in the whole body can be imaged.
また上述の第2の実施の形態においては、生体に対して第1の照射方向及び第1の照射方向とは異なる第2の照射方向から特定光を時分割で照射する照射手段として、指差直行方向DY1及び指差平行方向DY2から指FGの指腹に近赤外光を照射するようにした場合について述べたが、本発明はこれに限らず、この他種々の照射方向から近赤外光を照射することができる。またこの場合、血管のうち静脈のみ又は動脈のみに特異的な近赤外光を照射するようにしても良く、生体内方における血管以外の固有の構造物に特異的な光を照射するようにしても良い。 Further, in the above-described second embodiment, the finger pointing is used as the irradiation unit that irradiates the living body with the specific light from the first irradiation direction and the second irradiation direction different from the first irradiation direction. Although the case where near infrared light is irradiated on the finger pad of the finger FG from the direct direction DY 1 and the finger difference parallel direction DY 2 has been described, the present invention is not limited to this, and the other near various irradiation directions. Infrared light can be irradiated. In this case, specific near-infrared light may be applied only to veins or only arteries of blood vessels, and specific light other than blood vessels inside the living body may be irradiated with specific light. May be.
さらに上述の第2の実施の形態においては、照射手段から照射され、生体を経由して得られる近赤外光を固体撮像素子に導光する導光手段として、指差平行方向DY2と同方向に偏光軸を有する偏光板115aと、指差直交方向DY1と同方向に偏光軸を有する偏光板115bとを張り合わせてなる偏光板115を設けるようにした場合について述べたが、本発明はこれに限らず、要は、指差直交方向DY1(第1の照射方向)及び指差平行方向DY2(第2の照射方向)に垂直な方向とは異なる方向に偏光軸を有するこの他種々の偏光板を設けることができる。 In a further second embodiment described above, is irradiated from the irradiation means, the near-infrared light obtained through the biometric as light guiding means for guiding the solid-state imaging device, a pointing and parallel DY 2 same and a polarizing plate 115a having a polarization axis in the direction, has been dealt with the case of providing the polarizing plate 115 formed by laminating a polarizing plate 115b having a pointing and orthogonal direction DY 1 and the polarization axis in the same direction, the present invention is Not limited to this, the main point is that the polarization axis is different in a direction different from the direction perpendicular to the finger differential direction DY 1 (first irradiation direction) and the finger differential direction DY 2 (second irradiation direction). Various polarizing plates can be provided.
またこの場合、通常光の入射方向とは異なる方向に偏光軸を有する通常光用の振動板を、偏光板115に張り合わせるようにしても良い。このようにすれば、指FGの表面で反射した通常光に基づくノイズ成分による画像中の血管成分への影響をも低下させることができるため、より画質を向上することができる。 In this case, a vibration plate for normal light having a polarization axis in a direction different from the incident direction of normal light may be attached to the polarizing plate 115. In this way, since the influence on the blood vessel component in the image by the noise component based on the normal light reflected by the surface of the finger FG can be reduced, the image quality can be further improved.
またかかる偏光版115を設けずに、近赤外光透過フィルタ14a及び又はその他の光学系レンズを導光手段として用いるようにしても良い。 Further, the near-infrared light transmission filter 14a and / or other optical lens may be used as the light guiding means without providing the polarizing plate 115.
さらに上述の第2の実施の形態においては、第1の照射方向に対応する方向の輝度値が滑らかとなるように第1の画像を再構成すると共に、第2の照射方向に対応する方向の輝度値が滑らかとなるように第2の画像を再構成する再構成手段として、抽出範囲ARを1画素ずつジグザグ状(図9)にシフトするようにして縦5画素を順次抽出し、当該抽出した縦5画素の輝度平均値を、このとき抽出した抽出範囲ARの中心画素に対応する再構成血管画像RIMの画素として生成するようにした場合について述べたが、本発明はこれに限らず、例えば縦2列の互いに隣接する複数の画素を抽出範囲ARとするようにしても良く、また輝度平均値に代えて縦5画素に対して所定の周波数分析処理を施すことにより得られる値、あるいは抽出範囲ARの各画素をそれぞれ所定の割合で乗算し、当該乗算結果を加算することにより得られる値とするようにしても良い。 Further, in the above-described second embodiment, the first image is reconstructed so that the luminance value in the direction corresponding to the first irradiation direction is smooth, and the direction in the direction corresponding to the second irradiation direction is set. As reconstruction means for reconstructing the second image so that the luminance value is smooth, 5 pixels in the vertical direction are sequentially extracted so that the extraction range AR is shifted in a zigzag shape (FIG. 9) pixel by pixel. The luminance average value of the five vertical pixels is described as being generated as the pixel of the reconstructed blood vessel image RIM corresponding to the central pixel of the extraction range AR extracted at this time, but the present invention is not limited to this. For example, a plurality of adjacent pixels in two vertical columns may be set as the extraction range AR, or a value obtained by performing a predetermined frequency analysis process on five vertical pixels instead of the luminance average value, or Extraction range A Each pixel of each multiplied by a predetermined ratio may be a value obtained by adding the multiplication results.
さらに上述の第2の実施の形態においては、2値化された第1の画像及び第2の画像の共通部分を抽出する抽出手段として、再構成血管画像信号S11a、S11bを2値化した2値血管画像(2値血管画像データD1a、D1b)を加算するようにした場合について述べたが、本発明はこれに限らず、例えば再構成血管画像信号S11a、S11bにおける所定の相互相関結果に対応する画素を共通部分(血管成分)として検出するようにしても良い。 Further, in the above-described second embodiment, the reconstructed blood vessel image signals S11a and S11b are binarized as extraction means for extracting the common part of the binarized first image and second image. Although the case where binary blood vessel images (binary blood vessel image data D1a and D1b) are added has been described, the present invention is not limited to this, and, for example, corresponds to a predetermined cross-correlation result in the reconstructed blood vessel image signals S11a and S11b. The pixels to be detected may be detected as a common part (blood vessel component).
本発明は、生体を撮像する場合や、当該撮像機能を搭載する家庭用電子機器、パーソナルコンピュータ又は携帯電話機等の端末装置において認証する場合等に利用可能である。 The present invention can be used when imaging a living body or when authenticating with a terminal device such as a home electronic device, personal computer, or mobile phone equipped with the imaging function.
1、101……認証システム、2……制御装置、3、50、60、103……撮像装置、4……認証装置、10、110……撮像部、11……撮像開口部、12a、12b……ガイド溝、13a、13b、61a、61b、61c、113a、113b、113c、113d……近赤外光光源、14……カメラ部、14c、64……固体撮像素子、15、70、71、115a、115b……偏光板、20、120……撮像制御部、30、130……画像処理部、21、121……光源駆動部、22……クロック発生部、23……電荷量調整部、31、131……画像再構成部、32……2値化部、33、133……パターン抽出部、34……情報記憶メモリ、53a、53b、65……遮蔽部、62……第1のフィルタ、63……第2のフィルタ、DX……指差方向、DY……照射方向、DY1……指差直交方向、DY2……指差平行方向、FG……指、RT1……画像処理手順、RT2……撮像処理手順。
DESCRIPTION OF SYMBOLS 1,101 ... Authentication system, 2 ... Control apparatus, 3, 50, 60, 103 ... Imaging apparatus, 4 ... Authentication apparatus, 10, 110 ... Imaging part, 11 ... Imaging opening part, 12a, 12b ... Guide grooves, 13a, 13b, 61a, 61b, 61c, 113a, 113b, 113c, 113d ... Near infrared light source, 14 ... Camera unit, 14c, 64 ... Solid-state imaging device 115a, 115b... Polarizing plate 20, 120... Imaging control unit 30, 130... Image processing unit 21, 121. , 31, 131... Image reconstruction unit, 32... Binarization unit, 33, 133... Pattern extraction unit, 34... Information storage memory, 53a, 53b, 65. No. 63, second filter Filter, DX ...... pointing and direction, DY ...... irradiation direction, DY 1 ...... pointing and orthogonal directions, DY 2 ...... pointing and parallel, FG ...... fingers, RT1 ...... image processing procedure, RT2 ...... imaging processing procedure.
Claims (5)
上記生体に対して所定の照射方向から上記撮像対象に特異性の有する特定光を照射する照射手段と、
上記照射手段から照射され、上記生体を経由して得られる上記特定光を固体撮像素子に導光する導光手段と、
上記固体撮像素子から出力される画像信号に基づく画像を、上記照射方向に対応する方向の輝度値が滑らかとなるように再構成する画像再構成手段と
を具えることを特徴とする撮像装置。 In an imaging device that images a specific imaging target inside the living body,
Irradiating means for irradiating the living body with specific light having specificity to the imaging target from a predetermined irradiation direction;
A light guide means for guiding the specific light emitted from the irradiation means and obtained through the living body to a solid-state imaging device;
An image reconstructing means for reconstructing an image based on an image signal output from the solid-state image sensor so that a luminance value in a direction corresponding to the irradiation direction becomes smooth.
上記画像信号に基づく画像を、上記照射方向に対応する方向の輝度値が滑らかとなるように当該照射方向における複数の画素を単位として再構成する
ことを特徴とする請求項1に記載の撮像装置。 The image reconstruction means includes
The image pickup apparatus according to claim 1, wherein an image based on the image signal is reconstructed in units of a plurality of pixels in the irradiation direction so that a luminance value in a direction corresponding to the irradiation direction is smooth. .
ことを特徴とする請求項1に記載の撮像装置。 2. Each image based on a plurality of image signals output from the solid-state imaging device is reconstructed so that a luminance value in a horizontal direction corresponding to the irradiation direction becomes smooth. Imaging device.
上記特定光の光路上に設けられ、上記照射方向とは異なる方向を軸とする偏光板を含む
ことを特徴とする請求項1に記載の撮像装置。 The light guiding means is
The imaging apparatus according to claim 1, further comprising a polarizing plate provided on an optical path of the specific light and having an axis different from the irradiation direction.
上記生体に対して第1の照射方向及び上記第1の照射方向とは異なる第2の照射方向から上記特定光を時分割で照射し、
上記画像再構成手段は、
上記固体撮像素子から出力される第1の画像信号に基づく第1の画像を、上記第1の照射方向に対応する方向の輝度値が滑らかとなるように再構成すると共に、上記固体撮像素子から出力される第2の画像信号に基づく第2の画像を、上記第2の照射方向に対応する方向の輝度値が滑らかとなるように再構成し、
上記画像再構成手段により再構成された上記第1の画像及び上記第2の画像を2値化する2値化手段と、
上記2値化手段により2値化された上記第1の画像及び上記第2の画像の共通部分を抽出する抽出手段とを具える
ことを特徴とする請求項1に記載の撮像装置。
The irradiation means is
Irradiating the living body with the specific light in a time-sharing manner from a first irradiation direction and a second irradiation direction different from the first irradiation direction;
The image reconstruction means includes
The first image based on the first image signal output from the solid-state image sensor is reconstructed so that the luminance value in the direction corresponding to the first irradiation direction is smooth, and from the solid-state image sensor. Reconstructing the second image based on the output second image signal so that the luminance value in the direction corresponding to the second irradiation direction is smooth,
Binarization means for binarizing the first image and the second image reconstructed by the image reconstruction means;
The imaging apparatus according to claim 1, further comprising an extraction unit that extracts a common part of the first image and the second image binarized by the binarization unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004195792A JP2005353014A (en) | 2004-05-14 | 2004-07-01 | Imaging device |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004145560 | 2004-05-14 | ||
JP2004195792A JP2005353014A (en) | 2004-05-14 | 2004-07-01 | Imaging device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010159921A Division JP5146497B2 (en) | 2004-05-14 | 2010-07-14 | Imaging device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005353014A true JP2005353014A (en) | 2005-12-22 |
Family
ID=35587422
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004195792A Pending JP2005353014A (en) | 2004-05-14 | 2004-07-01 | Imaging device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005353014A (en) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1816587A1 (en) * | 2006-02-02 | 2007-08-08 | Hitachi, Ltd. | Biometric information processing device and biometric information processing program |
WO2009008550A1 (en) | 2007-07-11 | 2009-01-15 | Sony Corporation | Registering apparatus, collaiting apparatus, data structure, and storage medium |
JP2010039912A (en) * | 2008-08-07 | 2010-02-18 | Sony Corp | Device and method for acquiring vein pattern, and vein template |
WO2012111664A1 (en) * | 2011-02-15 | 2012-08-23 | 富士通フロンテック株式会社 | Authentication device, authentication program, and authentication method |
JP2012212435A (en) * | 2012-05-11 | 2012-11-01 | Hitachi Ltd | Finger vein authentication device and information processor |
EP2562687A2 (en) | 2011-08-22 | 2013-02-27 | Fujitsu Limited | Biometric authentication device and method |
JP2015015051A (en) * | 2014-09-25 | 2015-01-22 | 株式会社 日立産業制御ソリューションズ | Blood vessel image imaging device |
JP5685272B2 (en) * | 2011-02-15 | 2015-03-18 | 富士通フロンテック株式会社 | Authentication apparatus, authentication program, and authentication method |
JP2015158947A (en) * | 2010-02-19 | 2015-09-03 | 株式会社半導体エネルギー研究所 | Electronic device |
WO2017073595A1 (en) * | 2015-10-29 | 2017-05-04 | バイオニクス株式会社 | Personal authentication device |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002092616A (en) * | 2000-09-20 | 2002-03-29 | Hitachi Ltd | Individual authentication device |
JP2003090713A (en) * | 2001-09-18 | 2003-03-28 | Tokyo Weld Co Ltd | Appearance inspection method and device for chip part |
JP2003331270A (en) * | 2002-05-09 | 2003-11-21 | Sony Corp | Bio-pattern detecting means, bio-pattern detecting device, biometrics method and biometrics device |
WO2004021884A1 (en) * | 2002-09-03 | 2004-03-18 | Fujitsu Limited | Individual identification device |
-
2004
- 2004-07-01 JP JP2004195792A patent/JP2005353014A/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002092616A (en) * | 2000-09-20 | 2002-03-29 | Hitachi Ltd | Individual authentication device |
JP2003090713A (en) * | 2001-09-18 | 2003-03-28 | Tokyo Weld Co Ltd | Appearance inspection method and device for chip part |
JP2003331270A (en) * | 2002-05-09 | 2003-11-21 | Sony Corp | Bio-pattern detecting means, bio-pattern detecting device, biometrics method and biometrics device |
WO2004021884A1 (en) * | 2002-09-03 | 2004-03-18 | Fujitsu Limited | Individual identification device |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007206991A (en) * | 2006-02-02 | 2007-08-16 | Hitachi Ltd | Bioinformation processor and bioinformation processing program |
EP1816587A1 (en) * | 2006-02-02 | 2007-08-08 | Hitachi, Ltd. | Biometric information processing device and biometric information processing program |
WO2009008550A1 (en) | 2007-07-11 | 2009-01-15 | Sony Corporation | Registering apparatus, collaiting apparatus, data structure, and storage medium |
JP2010039912A (en) * | 2008-08-07 | 2010-02-18 | Sony Corp | Device and method for acquiring vein pattern, and vein template |
US9484381B2 (en) | 2010-02-19 | 2016-11-01 | Semiconductor Energy Laboratory Co., Ltd. | Display device and method for driving display device |
JP2015158947A (en) * | 2010-02-19 | 2015-09-03 | 株式会社半導体エネルギー研究所 | Electronic device |
JP5685272B2 (en) * | 2011-02-15 | 2015-03-18 | 富士通フロンテック株式会社 | Authentication apparatus, authentication program, and authentication method |
WO2012111664A1 (en) * | 2011-02-15 | 2012-08-23 | 富士通フロンテック株式会社 | Authentication device, authentication program, and authentication method |
US9245168B2 (en) | 2011-02-15 | 2016-01-26 | Fujitsu Frontech Limited | Authentication apparatus, authentication program, and authentication method |
EP2562687A2 (en) | 2011-08-22 | 2013-02-27 | Fujitsu Limited | Biometric authentication device and method |
US8855378B2 (en) | 2011-08-22 | 2014-10-07 | Fujitsu Limited | Biometric authentication device and method |
JP2013045180A (en) * | 2011-08-22 | 2013-03-04 | Fujitsu Ltd | Biometrics authentication apparatus, biometrics authentication method and program |
JP2012212435A (en) * | 2012-05-11 | 2012-11-01 | Hitachi Ltd | Finger vein authentication device and information processor |
JP2015015051A (en) * | 2014-09-25 | 2015-01-22 | 株式会社 日立産業制御ソリューションズ | Blood vessel image imaging device |
WO2017073595A1 (en) * | 2015-10-29 | 2017-05-04 | バイオニクス株式会社 | Personal authentication device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4910923B2 (en) | Imaging apparatus, imaging method, and imaging program | |
EP3799785B1 (en) | Method for biometric recognition, fingerprint recognition apparatus, and electronic device | |
JP4182988B2 (en) | Image reading apparatus and image reading method | |
US10694982B2 (en) | Imaging apparatus, authentication processing apparatus, imaging method, authentication processing method | |
KR101106396B1 (en) | Imaging device and communication terminal device | |
JP4636140B2 (en) | Vein imaging device, vein imaging method, and vein authentication device | |
US8111878B2 (en) | Vein authentication device and vein authentication method | |
JP4745084B2 (en) | Imaging device | |
JP4815863B2 (en) | Imaging device | |
KR100944021B1 (en) | Apparatus for inputting biometrical feature | |
JP2006072764A (en) | Information processor | |
JP2007233282A (en) | Light guide body, illuminating device and imaging apparatus using the same | |
JP4708232B2 (en) | Imaging device | |
JP2005353014A (en) | Imaging device | |
JP2006098340A (en) | Interior portion detecting device | |
JP2007299084A (en) | Image reading apparatus | |
CN112674739B (en) | Detection device and detection method for biological characteristic information and electronic equipment | |
JP4466529B2 (en) | Biometric feature input device | |
CN108764055B (en) | Organism imaging device and organism imaging method | |
CN111095280A (en) | Biometric recognition device and electronic apparatus | |
JP5146497B2 (en) | Imaging device | |
JP4697283B2 (en) | Vein imaging device and thumbnail image production method | |
JP4487183B2 (en) | Imaging apparatus and information processing system | |
JP2009054095A (en) | Vein image reader and biological image reader | |
JP2018120383A (en) | Biological image processing system, biological image processing method, biological image processing program, storing medium for storing biological image processing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070625 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091105 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100325 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100520 |