Recognition of English Vocabulary to StudentswithSpecialNeeds Using Multimodal LanguageLearning: An AI-BasedApproach Presented and publiclydefended by

Abstract

This thesis examines the effectiveness of Artificial Intelligence (AI)-based interventions to improvestudents’ language acquisition and communication skills for studentswithSpecialEducationalNeeds (SEN). Considering the considerable communication barriersencountered by theselearners, thisstudy explores the possibilities of adaptive AI technologies (i.e., speech recognition tools, interactive digital platforms, and AI-enabledvirtuallearning assistants) in enablingpersonalized, flexible, and interactive pedagogicalpathways. The researchisgrounded in the current cognitive, linguistic and multimodal learningtheories and deals with the wider issues withinspecialeducationclassroomswhere the emotional, cognitive and behavioral challenges of SEN students are discussed. Ultimately, the findingsunderscore the trans-formativepotential of AI to foster an inclusive, comprehensive, and adaptive languagelearningenvironment. Concurrently, the studyaddressescritical structural challenges, emphasizing the necessity of digital accessibility, rigorous data ethics, and specializedprofessionaldevelopment for specialeducationteachers.

Le présent travail porte sur l’efficacité des interventions reposant sur l’intelligence artificielle (IA) dans le développement des compétences linguistiques chez les élèves à besoins éducatifs particuliers (EBEP / SEN). Cette recherche examine comment les technologies adaptatives de l’IA – telles que les logiciels de reconnaissance vocale, les environnements numériques interactifs et les agents d’apprentissage virtuels – peuvent proposer des parcours pédagogiques hautement personnalisés et flexibles, compte tenu des importantes barrières de communication auxquelles ces élèves font face en classe. En s'appuyant sur les théories cognitives, linguistiques et d'apprentissage multimodal, l'étude s'insère dans le champ de l'éducation spécialisée, en soulignant les difficultés émotionnelles, cognitives et comportementales propres à ce public. La partie pratique vise à mettre en place des activités enrichies par l'intelligence artificielle, intégrant des approches multi-sensorielles et des supports bilingues afin de développer les quatre grandes compétences langagières : l'écoute, l'expression orale, la lecture et l'écriture. Enfin, les résultats mettent en évidence le potentiel transformateur de l'IA pour promouvoir un environnement d'apprentissage inclusif et complet, tout en examinant les exigences liées à l'accessibilité numérique, à l'éthique des données et à la formation continue des enseignants spécialisés.

تتناول هذه الدراسة فعالية التدخلات التعليمية القائمة على الذكاء الاصطناعي في تنمية المهارات اللغوية لدى التلاميذ ذوي الاحتياجات التعليمية الخاصة. وتبحث هذه البحث في كيفية توظيف تقنيات الذكاء الاصطناعي التكيفية — مثل برامج التعرف على الصوت، البيئات الرقمية التفاعلية، والمرافقين الافتراضيين للتعلم — لتقديم مسارات بيداغوجية مخصصة ومرنة للغاية، تماشياً مع العوائق التواصلية الكبيرة التي يواجهها هؤلاء التلاميذ في الأقسام الدراسية. واستناداً إلى النظريات المعرفية واللغوية ومقاربات التعلم متعدد الوسائط، يندرج هذا العمل في سياق التربية الخاصة، مع تسليط الضوء على التحديات الانفعالية، المعرفية والسلوكية الخاصة بهذه الفئة. وقد خُصص الجانب التطبيقي من الدراسة لتنفيذ أنشطة تعليمية مدعومة بالذكاء الاصطناعي، تجمع بين الأساليب متعددة الحواس والدعائم ثنائية اللغة، بهدف تطوير المهارات اللغوية الأربع الكبرى: الاستماع، التحدث، القراءة، والكتابة. وفي الختام، تبرز النتائج القدرات التحولية للذكاء الاصطناعي في تعزيز بيئة تعليمية دامجة وشاملة، مع مناقشة المتطلبات المتعلقة بالولوج الرقمي، أخلاقيات البيانات، والتكوين المستمر للمعلمين المتخصصين