رسالة ماجستير في كلية العلوم بعنوان(تقدير حركات اللسان من حركة الوجه الكلامي باستخدام تقنية التعلم الآلي).

أجريت مناقشة علنية للطالبة صفا عماد صبري من قسم علوم الحاسوب في كلية العلوم عن رسالتها الموسومة (تقدير حركات اللسان من حركة الوجه الكلامي باستخدام تقنية التعلم الآلي) وأقيمت المناقشة في قاعة المناقشات في قسم علوم الحياة. تضمنت الرسالة دراسة تقدير حركات اللسان من حركة الوجه أثناء الكلام اهتمامًا كبيرًا مؤخرًا بسبب النمو الهائل في حركات المفصل ، وخاصة اللسان ، عبر مجالات متعددة مثل اللغويات وعلم الكلام وعلاج النطق والبلع وتقويم الأسنان والمزيد. وبالتالي، فإن تطوير تقنيات لقياس حركة اللسان بدقة من حركات الوجه أثناء الكلام لا يزال يشكل عقبة كبيرة في هذا المجال.في هذا السياق ، يمكن أن يوفر التعلم الآلي حلاً فعالًا. تعتمد تقنيات التعلم الآلي على تدريب نماذج قادرة على تقدير حركات اللسان من حركه الوجه اثناء الكلام ، من خلال استخدام مجموعات بيانات ضخمة تحتوي على اعداد كبيرة من صور الموجات فوق الصوتية لمجموعة من المتحدثين باللغة الإنكليزية. يمكن من خلالها التعرف على الخصائص الفريدة لحركات اللسان اثناء الكلام .تهدف هذه الرسالة الى تصميم نموذج ذكاء اصطناعي (AI) يمكنه استنتاج حركة لسان المتحدث بدقة من تعابير الوجه. وهذا يتطلب مقارنة نماذج متعددة يمكنها التنبؤ بشكل صحيح بمكان وجود اللسان وكيفية تحركه باستخدام أساليب التعلم الآلي والتعلم العميق. يعتمد البحث على إنشاء نماذج خوارزميات مدربة على مجموعات بيانات كبيرة تضم صور الموجات فوق الصوتية للسان ، مع التركيز على تحسين قدرة هذه النماذج للتعرف على الخصائص المميزة لحركات اللسان اثناء الكلام. من خلال هذه الأدوات المتقدمة، يمكن تحسين دقة تحديد حركات اللسان. أثبتت التجارب التي أجريت على مجموعة بيانات الموجات فوق الصوتية (TaL80) فعالية النموذج المقترح حيث يُظهِر أقصى مستوى من دقة التصنيف مقارنة بالأبحاث السابقة وهذا يؤكد فعالية النظام المقترح في تصنيف حركات اللسان بدقة.