السبت, 26 أيلول/سبتمبر 2020 19:12

ترجمة إيماءات الصم والبكم بناءً على التعلم العميق

حصل طالب الدراسات العليا من قسم هندسة الحاسوب في الجامعة التكنولوجية (أزهر عطا الله فهد) على شهادة الماجستير عن دراسته الموسومة "ترجمة إيماءات الصم والبكم بناءً على التعلم العميق" “Deaf and Mute Gestures Translation based on Deep Learning” يوم الثلاثاء الموافق ٢٠٢٠/٩/٢٢  وعلى قاعة المؤتمرات في القسم.

الهدف من هذه الرسالة هو تصميم تطبيق قائم على رؤية الكمبيوتر Computer Vision مع مبدأ التعلم العميق  Deep Learningالذي يوفر ترجمة لغة الإشارة Sign Language  إلى النص والكلام ، وبالتالي تمكين الاتصال بين شخص ماهر في لغة الإشارة  Signerوشخص غير ماهر فيها Non-Signer .حيث يمكن لهذا التطبيق أن يوسع قدرات الاشخاص الصم على الاندماج في الحياة الاجتماعية. تأخذ المنهجية المقترحة تسلسلات الفيديو في الوقت الفعلي من كاميرا الأجهزة المحمولة وتستخرج الإطارات منها.  وقد تم إنشاء مجموعة البيانات المخصصة باستخدام إجراء معالجة الصورة بطريقة العتبة التكيفية حيث يتم استخدام نهج Otsu لعزل إيماءة اليد عن خلفية الإطار الملتقط. ويتم استخدام مجموعة البيانات المخصصة الممثلة بلغة الإشارة الأمريكية  American Sign Language في تدريب نموذج التعلم العميق المقترح. تُستخدم الشبكة العصبية التلافيفية Convolutional Neural Network  لاستخراج الميزات المكانية والتعرف عليها.

وتضمنت لجنة المناقشة :-

١- أ.م.د محمد على توفيق من الجامعة المستنصرية /كلية الهندسة قسم هندسة الحاسبات رئيساً.

٢- أ.م.د حسن اوحيد جياد من الجامعة التكنولوجية/قسم هندسة الحاسوب عضواً.

٣- م.د أحمد مظهر حسن من الجامعة التكنولوجية /قسم هندسة السيطرة والنظم عضواً.

٤- أ.م.د حسن جليل حسن من الجامعة التكنولوجية/قسم هندسة الحاسوب عضواًومشرفاً.

٥- م.د سلمى حميدي عبد الله من الجامعة التكنولوجية / قسم هندسة الحاسوب عضواً ومشرفاً.

 

Top