مدرّب تهجئة بالإشارة لمجموعة صغيرة: مشاريع تخرج ذكاء اصطناعي بالتشاور مع المجتمع المحلي

يريد متعلم جديد ممارسة أشكال يد محددة قبل لقاء مدرّس، لكنه لا يعرف هل زاوية الإبهام واضحة في المقطع الذي صوره. يمكن لفريق جامعي بناء تمرين محدود للتهجئة بالإشارة، يعرض إشارة يختارها أصحاب اللغة، ثم يقدم ملاحظة عن شكل اليد أو ثباتها. هذه فكرة من مشاريع تخرج الذكاء الاصطناعي، لكن نطاقها مهم: لا تدعي ترجمة الحديث، ولا تعمم إشارة شخص على لغة مجتمع كامل، ولا تعتبر درجة النموذج حكماً على مستوى المتعلم.

اتفق على المحتوى مع أهل اللغة

قبل بناء الكاميرا، ابحث عن مدرّس لغة إشارة أو جمعية محلية توافق على مجموعة حروف أو مفردات تعليمية. اسألهم إن كان التمرين مناسباً، وما الأخطاء التي يجوز وصفها، ومن يملك التسجيلات. قد تختلف أشكال الإشارات بين المناطق والعائلات، وبعض المعاني تعتمد على تعبير الوجه أو حركة الجسم لا شكل اليد فقط. ابدأ بقائمة صغيرة يراجعها شركاء اللغة، واذكر صراحة أي تنويعة محلية اختيرت.

ورقة WLASL تصف مجموعة بحثية للتعرف على مقاطع لغة الإشارة، وتوضح صعوبة بناء بيانات موسومة. لا تعدها مرجعاً لتنوع محلي لم تمثله. اقرأ الترخيص وشروط استعمال الوجوه والمقاطع، ولا تنسخ فيديوهات متعلمين إلى مستودع عام لأن الوصول إليها ممكن.

حوّل الفيديو إلى مؤشرات لا إلى هوية

يدعم MediaPipe Hand Landmarker تحديد نقاط اليد في صور أو مقاطع. يمكن أن تستخدمه لاستخراج إحداثيات مفاصل اليد في فيديو قصير ثم تمرير نافذة زمنية إلى مصنف صغير. احتفظ بالمقطع محلياً أثناء التطوير، واجعل المعالجة على الجهاز إذا أمكن. لا تخزن الوجه أو الصوت أو المعرف البيومتري؛ إذا لم تكن حركة الوجه جزءاً من المهمة المعتمدة، قص الإطار بحيث لا يظهر.

تحتاج الإشارات المتحركة إلى أكثر من لقطة ثابتة. سجل ترتيب النقاط عبر الزمن، وسرعة الحركة واتجاهها، مع تطبيع الحجم وموقع الكاميرا. لا تعتمد على التطبيع الذي يمحو فرقاً لغوياً حقيقياً. اعرض المؤشر المرئي أو الرسم الهيكلي للمدرس كي يشرح سبب الملاحظة بدلاً من إعطاء درجة غامضة مثل 82 بالمئة.

اجعل الدرس تمريناً لا مترجماً

يعرض التطبيق بطاقة إشارة اختارها الشريك اللغوي، وزر تسجيل لثانيتين، ثم اقتراحاً مثل «لم تظهر اليد كاملة» أو «أعد المقطع مع تثبيت الكاميرا». إذا كانت الإشارة غير واضحة، يقول التطبيق «لا أستطيع تقييمها» بدلاً من تخمين حرف. يمكن أن يعرض مقطعاً نموذجياً مرخصاً ويتيح للمستخدم مقارنة نقاط يده بالصورة، لكن لا ينشر فيديو المستخدم تلقائياً أو يرسله إلى خدمة بعيدة.

مثال افتراضي: بطاقة للحرف المختار من مجموعة متفق عليها، وكاميرا أمامية في موضع ثابت. يسجل الطالب مرتين؛ تظهر ملاحظة أن اليد خرجت من الإطار في المحاولة الأولى ثم رسالة إعادة التسجيل. هذا سيناريو تصميمي، وليس اختباراً مع متعلم. يجب أن يتمكن المدرس من تعديل الشرح أو إيقاف تمرين إذا كان غير دقيق أو غير ملائم ثقافياً.

التقييم يشمل فائدة الملاحظة وضررها

قسّم بيانات الاختبار بحسب المشاركين، وليس بحسب مقاطع متجاورة من الشخص نفسه. احصل على موافقة منفصلة للتسجيل والتخزين وإعادة الاستخدام، وحدد موعد حذف الملفات. قس دقة الإشارة على مجموعة محدودة، ومعدل الامتناع، والاختلاف بين ظروف الإضاءة والكاميرا. لكن لا تجعل الدقة وحدها معيار النجاح: راجع مع مدرسين إن كانت التغذية الراجعة مفهومة، وهل تعطي تصحيحاً خاطئاً قد يثبت حركة غير صحيحة.

اختبر إشارتين متشابهتين، ويداً خارج الإطار، وخلفية مزدحمة، ومستخدم أعسر، وحركة متقطعة، وكاميرا منخفضة الدقة. أضف خياراً لاختيار اليد، ولا تفترض أن أي خطأ سببه المتعلم؛ ربما كان موضع الكاميرا أو النموذج. قارن بالتمرين التقليدي مع المدرس، مع مهام بسيطة وبمشاركة طوعية، ولا تجمع فيديوهات لا حاجة لها.

ضع طريقة سحب الموافقة في التصميم

اتفق مع المشاركين على أين تخزن اللقطات وكم تبقى ومن يستطيع مشاهدة النسخ الخام، وقدم وسيلة لحذف مساهمة الشخص من مجموعة البحث إذا طلب ذلك ضمن الاتفاق. اجمع بيانات قليلة تكفي للدرس؛ اسم المستخدم وتاريخ ميلاده لا يساعدان في تصنيف حركة اليد. راجع الملاحظة التعليمية مع مدرّس لغة الإشارة قبل نشر نسخة جديدة، فالتعليق قد يكون مفهوماً تقنياً لكنه غير مناسب لغوياً أو تربوياً.

اعرض نطاق البيانات على الشاشة

يسلم الفريق قاموس الإشارات الذي وافق عليه الشركاء، ومصدر كل عينة وترخيصها، وسكربتاً يحول النقاط، وتجربة خارج المشاركين الذين ظهروا في التدريب، وسياسة حذف واضحة. اكتب أن الأداة تمرين تجريبي لمجموعة مختارة وليست ترجمة آلية أو بديلاً عن تعلم لغة الإشارة من مدرّس. اطلب من الشركاء مراجعة الواجهة والمخرجات قبل عرضها للجمهور.

إذا اخترت موضوعاً ضمن مشاريع تخرج الذكاء الاصطناعي، فابدأ بجلسات التصميم مع المجتمع قبل شراء كاميرا أو تدريب نموذج. صفحة مشاريع التخرج تساعد في وضع حدود نسخة الفصل، لكن قبول فكرة التمرين وشكل التصحيح ينبغي أن يظل بيد الممارسين والمتعلمين الذين تخدمهم الأداة.