Skip to main content
SUPERVISOR
Mohammad Reza Ahmadzadeh
محمدرضا احمدزاده (استاد راهنما)
 
STUDENT
Samaneh Shamsian jezeh
سمانه شمسیان جزه

FACULTY - DEPARTMENT

دانشکده مهندسی برق و کامپیوتر
DEGREE
Master of Science (MSc)
YEAR
1393

TITLE

Heterogeneous Face Recognition by Combination of Visible and Infrared Images
Lots of researches have been done for face recognition by using visible (VIS) spectrum images and great success has been achieved in this field. Despite the achievements, face recognition by VIS spectrum images in uncontrolled optical conditions is already a challenging issue. In such conditions, using different types of imaging specially infrared imaging sensors can help to improve the efficiency of face recognition system in VIS spectrum. Recently using near infrared (NIR) spectrum images has been considered as an important information source in uncontrolled optical conditions. The purpose of this thesis is to improve the efficiency of face recognition system in VIS spectrum by use of NIR spectrum images. Following the purpose a method based on deep learning algorithms named coupled convolutional autoencoder (CPCAE) has been suggested. In this method two convolutional autoencoder neural networks (CAE) have been used for learning compact representations of NIR and VIS spectrum images. As the CAE neural network can only learn compact representations of face images related to one domain, it can not model the relationships between NIR and VIS images. Thus a vector weight has been used to learn a mapping of compact representations of NIR spectrum images to compact representations of VIS spectrum images. The efficiency of the suggested method on CASIA NIR -VIS 2.0 database images has been examined and the accuracy of heterogeneous face images recognition by combination of VIS and NIR images has been studied. Laboratory results show that the average accuracy of recognizing NIR spectrum image is 61/52 percent that shows the advantage of the suggested method to the same method introduced in this field. The average accuracy of recognizing VIS spectrum images has been calculated 62/23 percent. Keywords: 1. Deep learning, 2. Heterogeneous face recognition 3. VIS spectrum, 4. NIR spectrum, 5. Matching.
تحقیقات بسیاری در زمینه بازشناسی چهره با استفاده از تصاویر طیف مرئی (VIS) انجام شده و موفقیت‌های بسیاری در این زمینه به‌دست آمده است. علی‌رغم موفقیت‌های به‌دست آمده، بازشناسی چهره با استفاده از تصاویر طیف VIS تحت شرایط نوری کنترل نشده مسئله‌ای چالش‌برانگیز است. در این شرایط، استفاده از گونه‌های مختلف تصویربرداری به‌خصوص سنسورهای تصویربرداری مادون قرمز می‌تواند به بهبود کارایی سیستم بازشناسی چهره در طیف VIS کمک کند. اخیراً استفاده از تصاویر طیف نزدیک مادون قرمز (NIR) به‌عنوان یک منبع اطلاعاتی مهم در شرایط نوری کنترل نشده مورد توجه قرار گرفته است. هدف از این تحقیق بهبود عملکرد سیستم بازشناسی چهره در طیف VIS با استفاده از تصاویر طیف NIR است. بدین منظور روشی بر مبنای الگوریتم‌های یادگیری عمیق با نام خودرمزگذار کانولوشن جفت شده (CPCAE) ارائه شده است. در این روش از دو شبکه عصبی خودرمزگذار کانولوشن (CAE) به‌منظور یادگیری بازنمایی‌های فشرده‌ای از تصاویر چهره طیف NIR و VIS استفاده شده است. از آنجایی‌که شبکه عصبی CAE تنها قادر به یادگیری بازنمایی‌های فشرده‌ای از تصاویر چهره یک حوزه است، مدل کردن روابط میان تصاویر NIR و VIS توسط آن امکان‌پذیر نیست. به همین علت از یک بردار وزن نیز به منظور یادگیری نگاشتی از بازنمایی‌های فشرده تصاویر طیف NIR به بازنمایی‌های فشرده تصاویر طیف VIS استفاده شده است. عملکرد روش پیشنهادی بر روی تصاویر پایگاه داده CASIA NIR-VIS 2.0 مورد ارزیابی قرار گرفته و دقت بازشناسی تصاویر چهره ناهمگن با کمک ترکیب تصاویر VIS و NIR بررسی شده است. نتایج آزمایشگاهی نشان می‌دهند که میانگین دقت بازشناسی تصاویر طیف NIR، 61/52 درصد است که این نتیجه برتری روش پیشنهادی را نسبت به روش مشابه در این زمینه نشان می‌دهد. میانگین دقت بازشناسی تصاویر طیف VIS نیز 62/23 درصد به‌دست آمده است. واژه‌های کلیدی : یادگیری عمیق، بازشناسی چهره ناهمگن، طیف VIS، طیف NIR، تطابق

ارتقاء امنیت وب با وف بومی