[ تعرٌف على ] الترجمة الآلية للغات الإشارة # اخر تحديث اليوم 2024-04-28

تم النشر اليوم 2024-04-28 | الترجمة الآلية للغات الإشارة

القيود

تقنيات ترجمة لغة الإشارة محدودة كما هو الحال في ترجمة اللغة المنطوقة. لا شيء يمكنه الترجمة بدقة 100٪. في الواقع، تتخلف تقنيات ترجمة لغة الإشارة كثيرًا عن نظيراتها في اللغة المنطوقة. وهذا بسبب حقيقة أن لغات الإشارة لها تعبيرات كثيرة. بينما اللغات المنطوقة تُمارس من خلال الصوت، يتم التعبير عن لغات الإشارة من خلال اليدين والذراعين والرأس والكتفين والجذع وأجزاء من الوجه. هذا التعبير متعدد القنوات يجعل ترجمة لغات الإشارة أمرًا صعبًا للغاية. كما أن التحدي الإضافي للترجمة الآلية للغة الإشارة هو حقيقة أنه لا يوجد تنسيق رسمي مكتوب للغات الإشارة. توجد أنظمة ترميز ولكن لم يتم اعتماد أي نظام كتابة على نطاق واسع من قبل مجتمع الصم الدولي، بحيث يمكن اعتباره «الشكل المكتوب» للغة إشارة معينة. لذلك، يتم تسجيل لغات الإشارة بتنسيقات فيديو مختلفة. على سبيل المثال، لا توجد مجموعة موازية قياسية ذهبية كبيرة بما يكفي لـ SMT.

تاريخ

بدأ تاريخ الترجمة الآلية للغة الإشارة مع تطوير أجهزة مثل الأيدي الروبوتية للتهجئة بالأصابع. في عام 1977، أنشأ مشروع يد لتهجئة الأصابع يسمى RALPH (اختصار لـ «الأبجدية الآلية») يدًا آلية يمكنها ترجمة الحروف الهجائية إلى تهجئة أصابع. في وقت لاحق، أصبح استخدام القفازات مع مستشعرات الحركة هو السائد، وولدت بعض المشاريع مثل CyberGlove و VPL Data Glove. مكنت الأجهزة القابلة للارتداء من التقاط أشكال وحركات يد المتحدث بلغة الإشارة بمساعدة برنامج الكمبيوتر. ومع تطور رؤية الكمبيوتر، تم استبدال الأجهزة القابلة للارتداء بكاميرات نظرًا لكفاءتها وتقليل القيود الجسدية على المتحدثين بلغة الإشارة. لهدف معالجة البيانات التي تم جمعها من خلال الأجهزة، طبق الباحثون شبكات عصبية مثل Stuttgart Neural Network Simulator للتعرف على الأنماط في مشاريع مثل CyberGlove. كما يستخدم الباحثون أيضًا العديد من الأساليب الأخرى للتعرف على العلامات. على سبيل المثال، تُستخدم نماذج ماركوف المخفية لتحليل البيانات إحصائيًا، وتستخدم GRASP وبرامج التعلم الآلي الأخرى مجموعات التدريب لتحسين دقة التعرف على العلامات. أظهر اندماج التقنيات غير القابلة للارتداء مثل الكاميرات وأجهزة التحكم Leap Motion أنه يزيد من قدرة التعرف التلقائي على لغة الإشارة وبرامج الترجمة.

التقنيات

فيزيكست
http://www.visicast.cmp.uea.ac.uk/Visicast_index.html مشروع eSIGN
http://www.visicast.cmp.uea.ac.uk/eSIGN/index.html مشروع الصورة الرمزية للغة الإشارة الأمريكية في جامعة ديبول
http://asl.cs.depaul.edu/ من الإسبانية إلى LSE
https://www.semanticscholar.org/paper/Methodology-for-developing-a-Speech-into-Sign-in-aL٪C3٪B3pez-Lude٪C3٪B1a-San-Segundo/496f8e35add9fad94a59156f473261ecd3175635 تقنية SignAloud
SignAloud هي تقنية تتضمن زوجًا من القفازات من صنع مجموعة من الطلاب في جامعة واشنطن يترجمون لغة الإشارة الأمريكية (ASL) إلى اللغة الإنجليزية. في شهر فبراير من عام 2015، ابتكر الطالب السمعي من جامعة واشنطن توماس بريور، أول نموذج أولي لهذا الجهاز في هاك أريزونا، والذي هو هاكاثون بجامعة أريزونا. واصل بريور تطوير الاختراع وفي شهر أكتوبر من عام 2015، أحضر بريور نافيد ازودي إلى مشروع SignAloud للتسويق والمساعدة في العلاقات العامة. يتمتع ازودي بخلفية غنية في إدارة الأعمال، بينما يتمتع بريور بثروة من الخبرة في مجال الهندسة. في شهر مايو من عام 2016، أخبر الثنائي NPR أنهما يعملان عن كثب مع الأشخاص الذين يستخدمون لغة الإشارة الأمريكية حتى يتمكنوا من فهم جمهورهم بشكل أفضل وتصميم منتجاتهم وفقًا لاحتياجاتهم بدلاً من الاحتياجات المفترضة. غير أنه لم يتم إصدار أي إصدارات أخرى منذ ذلك الحين. كان الاختراع واحدًا من سبعة اختراعات فازت بجائزة Lemelson-MIT للطلاب، والتي تسعى إلى مكافأة المخترعين الشباب، تشجيعهم. صُنِّفَ اختراعهم تحت فئة «استخدمه!» للجائزة التي تشمل التطورات التكنولوجية للمنتجات الموجودة. ومُنحوا 10000 دولار كجائزة لاختراعهم. تحتوي القفازات على مستشعرات تتعقب حركات اليد للمستخدمين ثم ترسل البيانات إلى نظام كمبيوتر عبر البلوتوث. يقوم نظام الكمبيوتر بتحليل البيانات ومطابقتها مع الكلمات الإنجليزية، والتي يتم نطقها بصوتٍ رقميٍّ عالٍ. لا تتمتع القفازات بالقدرة على إدخال اللغة الإنجليزية المكتوبة لإخراج حركة القفاز أو القدرة على سماع اللغة ثم ترجمتها إلى لغة إشارة إلى شخص أصم، مما يعني أنها لا توفر اتصالاً متبادلاً. لا يشتمل الجهاز أيضًا على تعبيرات الوجه وغيرها من العلامات غير اليدوية للغات الإشارة، والتي قد تغير الترجمة الفعلية من لغة الإشارة الأمريكية. برنامج ProDeaf
ProDeaf (WebLibras) هو برنامج كمبيوتر يمكنه ترجمة النص والصوت إلى اللغة البرتغالية Libras (لغة الإشارة البرتغالية) «بهدف تحسين التواصل بين الصم والسمع.» يوجد حاليًا إصدار تجريبي قيد الإنتاج للغة الإشارة الأمريكية أيضًا. بدأ الفريق الأصلي المشروع في عام 2010 بمجموعة من الخبراء بما في ذلك اللغويين والمصممين والمبرمجين والمترجمين السمعيين والصم. نشأ الفريق في جامعة بيرنامبوكو الفيدرالية (UFPE) من مجموعة من الطلاب المشاركين في مشروع علوم الكمبيوتر. كان لدى المجموعة عضواً أصمّاً في الفريق كان يواجه صعوبة في التواصل مع بقية المجموعة. أنشأت المجموعة Proativa Soluções من أجل إكمال المشروع ومساعدة زميلهم على التواصل، والتي تتقدم منذ ذلك الحين. النسخة التجريبية الحالية بلغة الإشارة الأمريكية محدودة للغاية. على سبيل المثال، يوجد قسم بالقاموس والكلمة الوحيدة الموجودة أسفل الحرف "j" هي "jump". إذا لم تتم برمجة الجهاز بالكلمة، فيجب على الشخصية الرقمية تهجئة الكلمة. كان آخر تحديث للتطبيق في يونيو 2016، ولكن ProDeaf كانت حديث الإعلام، حيث ظهرت في أكثر من 400 قصة عبر وسائل الإعلام الأكثر شعبية في البلاد. لا يمكن للتطبيق قراءة لغة الإشارة وتحويلها إلى كلمة أو نص، لذا فهي تعمل فقط كتواصل أحادي الاتجاه. بالإضافة إلى ذلك، لا يمكن للمستخدم تسجيل الدخول إلى التطبيق وتلقي ترجمة باللغة الإنجليزية بأي شكل من الأشكال، حيث لا تزال اللغة الإنجليزية في الإصدار التجريبي. مترجم لغة الإشارة كينكت
يتعاون باحثون من الأكاديمية الصينية للعلوم ومتخصصون في تعليم الصم من جامعة بيجين يونيون في الصين مع فريق أبحاث مايكروسوفت الآسيوي لإنشاء كينكت مترجم لغة الإشارة منذ عام 2012. يتكون المترجم من وضعين: وضع المترجم ووضع الاتصال. يستطيع وضع المترجم على ترجمة الكلمات المفردة من لغة الإشارة إلى كلمات مكتوبة والعكس أيضاً. أما وضع الاتصال فيمكنه أن يترجم جملاً كاملة بالإضافة إلى ترجمة المحادثة تلقائيًا باستخدام شخصيةٍ ثلاثية الأبعاد. يمكن أن يكتشف وضع المترجم أيضًا المواضع وأشكال اليد الخاصة بمتحدث لغة الإشارة بالإضافة إلى مسار الحركة باستخدام تقنيات التعلم الآلي والتعرف على الأنماط ورؤية الكمبيوتر. يسمح الجهاز أيضًا بالاتصال المتبادل لأن تقنية التعرف على الكلام تسمح بترجمة اللغة المنطوقة إلى لغة الإشارة بالإضافة إلى امكانية الشخصية ثلاثية الأبعاد من تجسيدها وتسجيلها مرة أخرى إلى الصم. بدأ المشروع الأصلي في الصين بناءً على ترجمة لغة الإشارة الصينية. في عام 2013، تم تقديم المشروع في مؤتمر Microsoft Research Faculty Summit واجتماع شركة مايكروسوفت. حاليًا، يعمل باحثون في الولايات المتحدة أيضًا على هذا المشروع لتنفيذ ترجمة لغة الإشارة الأمريكية. حتى الآن، لا يزال الجهاز نموذجًا أوليًا، ولا تزال دقة الترجمة في وضع الاتصال غير مثالية. نظام SignAll
SignAll هو نظام ترجمة تلقائي للغة الإشارة مقدم من دولفيو تكنولوجيز في المجر. يعد الفريق «رائدًا في حل أول ترجمة آلية للغة الإشارة، استنادًا إلى رؤية الكمبيوتر ومعالجة اللغة الطبيعية (NLP)، لتمكين التواصل اليومي بين الأفراد ذوي السمع الذين يستخدمون اللغة الإنجليزية المنطوقة والصم أو ضعاف السمع الذين يستخدمون لغة الإشارة». يستخدم نظام SignAll نظام كنيكت من مايكروسوفت وكاميرات الويب الأخرى المزودة بأجهزة استشعار للعمق متصلة بجهاز كمبيوتر. يمكن لتقنية رؤية الكمبيوتر التعرف على شكل اليد وحركة متحدث لغة الإشارة، ويقوم نظام معالجة اللغة الطبيعية بتحويل البيانات المجمّعة من رؤية الكمبيوتر إلى عبارة إنجليزية بسيطة. مطور الجهاز أصم وبقية فريق المشروع يتكون من العديد من المهندسين والمتخصصين اللغويين من مجتمعات الصم والسمع. تتمتع هذه التقنية بالقدرة على دمج جميع المؤشرات الخمسة لـ لغة الإشارة الأمريكية، والتي تساعد الجهاز على تفسير المتحدث بلغة الإشارة بدقة. تم اعتماد SignAll من قبل العديد من الشركات بما في ذلك ديلويت و LT-innovate وقد أُنشِئَت شراكات مع مايكروسوفت بيزسبارك وتجديد المجر. MotionSavvy
MotionSavvy هي أول لغة إشارة إلى نظام الصوت. تم إنشاء الجهاز في عام 2012 من قبل مجموعة من معهد روتشستر للتكنولوجيا / المعهد التقني الوطني للصم و «نشأ من مسرّع Leap Motion AXLR8R.» استخدم الفريق علبة الكمبيوتر اللوحي التي تستفيد من قوة وحدة التحكم Leap Motion. تم إنشاء الفريق المكون من ستة أشخاص بالكامل من قبل طلاب صم من فرع تعليم الصم في المدارس. يعد الجهاز حاليًا واحدًا من جهازي اتصال متبادلين فقط للغة الإشارة الأمريكية. يسمح للأفراد الصم بالإشارة على الجهاز الذي تتم ترجمته بعد ذلك أو العكس، مع أخذ اللغة الإنجليزية المنطوقة وترجمتها إلى لغة الإشارة الأمريكية.يُشحَن الجهاز إلى المالك بسعر 198 دولار. تتضمن بعض الميزات الأخرى القدرة على التفاعل، وردود الفعل المباشرة، ومنشئ الإشارات، والإشارات الجماعية. تمت مراجعة الجهاز من قبل الجميع من مجلات التكنولوجيا إلى تايم. قال وايرد، «لم يكن من الصعب أن نرى فقط كيف يمكن أن تكون تقنية تحويلية مثل [UNI]» كما قال «[UNI] صدمتني كنوع من السحر.» قالت كاتي شتاينميتز من TIME ، «هذه التكنولوجيا يمكن أن تغير الطريقة التي يعيش بها الصم.» ذكر شون باكلي من إنغادجيت، «يمكن أن تصبح UNI أداة اتصال رائعة.»

شرح مبسط

أصبحت الترجمة الآلية للغات الإشارة ممكنة، وإن كانت محدودة، منذ عام 1977. عندما نجح مشروع بحثي في مطابقة الأحرف الإنجليزية من لوحة المفاتيح إلى الحروف الأبجدية اليدوية ASL والتي تمت محاكاتها على يد آلية. تقوم هذه التقنيات بترجمة لغات الإشارة إلى لغة مكتوبة أو منطوقة، ومن اللغة المكتوبة أو المنطوقة إلى لغة الإشارة، دون استخدام مترجم بشري. تمتلك لغات الإشارة سمات صوتية مختلفة عن اللغات المنطوقة، مما خلق عقبات أمام المطورين. يستخدم المطورون رؤية الكمبيوتر والتعلم الآلي للتعرف على مؤشرات صوتية محددة بالإضافة إلى إقحام أصوات (وهي ظاهرة تقوم على إدراج صوت غير أصلي في الكلمة لدواعٍ صوتية مثل أصوات تشكيل الحروف في اللغة العربية) [1] فريدة من نوعها للغات الإشارة، والتعرف على الكلام ومعالجة اللغة الطبيعية والذي يسمح بالتواصل التفاعلي بين السمع والصم.