مراجعة الجمل بلغة الإشارة العربية: مشاريع تخرج الذكاء الاصطناعي

ابدأ بدليل وسم يراه المراجعان بالطريقة نفسها

في مقاطع الإشارة المتصلة، التحدي الأول ليس اختيار الشبكة العصبية؛ بل تحديد ما الذي سيعده الفريق بداية إشارة ونهايتها، وكيف يدوّن حركة غير واضحة أو انتقالاً بين وحدتين. أعد ورقة تعليمات قصيرة تشرح الرمز، والحد الزمني، والحالات التي يسمح فيها بوسم «غير محسوم». اطلب من موقّعين أو مراجعين اثنين وسم مجموعة صغيرة دون الاطلاع على قرار بعضهما. الهدف قياس مواضع اختلاف التعريف قبل توسيع العمل، لا جعل كل اختلاف خطأ أحد الطرفين. هذا يجعل مشاريع تخرج الذكاء الاصطناعي أكثر قابلية للمراجعة من مجموعة فيديوهات عليها كلمات نهائية بلا سجل.

سجل ما تقوله ArabSign وما لا تقوله

تعرض صفحة ArabSign مجموعة مستمرة تضم 50 جملة و9,335 عينة من ستة موقّعين، مسجلة عبر Kinect V2 باللون والعمق ونقاط الهيكل. وتصف الورقة الأصلية إعداد benchmark للتعرف المستمر ومقياس WER. تشير الصفحة أيضاً إلى أن أكثر من 40% من الإشارات تظهر أقل من خمس مرات وأن الموقّعين الستة رجال؛ هذه قيود في التغطية وليست تفصيلاً ثانوياً. تنزيل البيانات يتطلب التواصل مع الباحث بحسب الموقع. احصل على الموافقات وشروط الاستخدام أولاً، ولا تستنتج من عينات قليلة أن النموذج يفهم لغة الإشارة العربية عموماً.

أنشئ عينة تحكيم قبل أي تدريب

خذ بضعة مقاطع متنوعة من الجمل المسجلة، واكتب دليل الوسم ثم درّب المراجعين عليه. يعرض التطبيق الفيديو ببطء مع timeline وإطار محدد، ويتيح وضع حدين أو التصريح بأن الحد غير واضح. بعد إخفاء هوية المراجع، قارن توافقهم على رمز الإشارة وعلى موقع الحد الزمني كلٌّ على حدة. راجع اختلافاتهم مع شخص ملم بلغة الإشارة، وسجل سبب القرار المعدل. لا تحسم النزاع بمجرد اختيار وسم الأكثرية؛ قد تكشف الحالة أن تعليمات الوسم نفسها ناقصة. احفظ النسخ السابقة من annotation، واسم الدليل وإصداره، ومن عدّل أي حد حتى تكون بيانات التدريب قابلة للتدقيق.

استخدم النمذجة بعد تثبيت تعريف البيانات

بعد الاتفاق على العلامات، جهز قناتين للمقارنة: الفيديو/اللون، ونقاط الهيكل العظمي، مع تثبيت fps وطريقة القص والتطبيع. يمكن البدء بخط أساس يصنف الإطارات ثم يدمج المقاطع المتجاورة، ومقارنته بنموذج تسلسلي مناسب للتعرف المستمر. دراسة مقارنة حديثة تصف تقسيمات تعتمد على الموقّعين لمجموعات إشارة مختلفة؛ راجع ورقة المقارنة للاستفادة من مبدأ فصل الأشخاص، لا لنقل أرقامها إلى ArabSign. اجعل مخرج النموذج تسلسلاً مرشحاً وتوقيتات تقريبية يعرضها المراجع، ولا تولد ترجمة عربية كاملة من مفردات محدودة.

احجز موقّعاً كاملاً قبل ضبط الإعدادات

أنشئ بروتوكولاً بثلاث مجموعات: موقّعون للتدريب، موقّع للتحقق، وموقّع مستقل للاختبار، بحسب ما يسمح حجم المصدر وموافقاته. لا تنقل مقاطع الشخص نفسه بين الأقسام؛ ذلك قد يسمح للنموذج بحفظ طريقته في الحركة والخلفية. ثبّت التقسيم قبل اختيار النموذج أو عتبة الثقة، وانشر معرفات الأقسام دون كشف معلومات شخصية. أبلغ عن WER وعدد العينات والجمل والموقّعين بكل جزء، وأضف نتائج لكل جملة إذا كان العدد صغيراً. إذا لم تسمح البيانات بحجز موقّع مستقل، صرّح بذلك واجعل التقييم وصفياً بدلاً من وصفه باختبار تعميم.

اجعل مراجعة الإنسان جزءاً من القياس

يمكن أن تقارن بين قائمة خام من أفضل التسلسلات وبين نسخة يراجعها شخص مؤهل. قس كم حداً زمنياً صحح المراجع، وكم رمزاً رفضه، وكم مرة اختار «خارج المفردات». التقرير يجب أن يفرق بين WER الآلي قبل التحرير والنتيجة بعد التحرير، وأن يحفظ الزمن الذي استغرقه الفحص. لا تحتسب التحرير البشري كأنه تحسن تلقائي في النموذج. اختبر مقطعاً مبتوراً، وإطاراً مفقوداً، وإضاءة مختلفة، وجملة غير موجودة في القاموس؛ ينبغي أن يعرض النظام عدم اليقين أو الرفض، لا يركب كلمات مألوفة على حركة غير مفهومة.

التسليم نتيجة بروتوكول قابل للإعادة

يضم التسليم دليل الوسم، وسجل التحكيم، ومخطط تقسيم الموقعين، وشيفرة التقييم، وواجهة مراجعة تعرض المصدر بجوار التنبؤ. لا تتوفر في هذا المقال نتائج تدريب جديدة أو وسم أنجزه فريق؛ يلزم على الطالب تنفيذها والإبلاغ عنها. طبيعة ArabSign المقيدة بالجمل والمشاركين المسجلين لا تمثل تنوع مستخدمي لغة الإشارة، ولا تثبت صلاحية أداة في التعليم أو الرعاية أو الترجمة العامة. شارك أشخاصاً من مجتمع الصم وخبراء لغويين في تصميم التقييم، وراجع صلاحية نشر المقاطع. يمكن ترتيب نطاق مشاريع التخرج مع المشرف قبل بناء أي ادعاء أوسع.