الترجمة الآلية للغات الإشارة
المحتويات
بدايةً، أصبحت الترجمة الآلية للغات الإشارة ممكنة، وإن كانت محدودة، منذ عام 1977. عندما نجح مشروع بحثي في مطابقة الأحرف الإنجليزية من لوحة المفاتيح إلى الحروف الأبجدية اليدوية ASL والتي تمت محاكاتها على يد آلية. تقوم هذه التقنيات بترجمة لغات الإشارة إلى لغة مكتوبة أو منطوقة، ومن اللغة المكتوبة أو المنطوقة إلى لغة الإشارة، دون استخدام مترجم بشري. تمتلك لغات الإشارة سمات صوتية مختلفة عن اللغات المنطوقة، مما خلق عقبات أمام المطورين. يستعمل المطورون رؤية الكمبيوتر والتعلم الآلي للتعرف على مؤشرات صوتية محددة إلى جانب إقحام أصوات (وهي ظاهرة تقوم على إدراج صوت غير أصلي في الكلمة لدواعٍ صوتية مثل أصوات تشكيل الحروف في اللغة العربية) فريدة من نوعها للغات الإشارة، والتعرف على الكلام ومعالجة اللغة الطبيعية والذي يسمح بالتواصل التفاعلي بين السمع والصم. وتعرض الأقسام التالية جوانب أخرى من الموضوع.
http://www.visicast.cmp.uea.ac.uk/eSIGN/index.html
http://asl.cs.depaul.edu/
مشروع الصورة الرمزية للغة الإشارة الأمريكية في جامعة ديبول
تاريخ
- التقنيات
- فيزيكست
- http://www.visicast.cmp.uea.ac.uk/Visicast_index.html
- مشروع eSIGN
وفي هذا السياق، بدأ تاريخ الترجمة الآلية للغة الإشارة مع تطوير أجهزة مثل الأيدي الروبوتية للتهجئة بالأصابع. في عام 1977، أنشأ مشروع يد لتهجئة الأصابع يسمى RALPH (اختصار لـ «الأبجدية الآلية») يدًا آلية يمكنها ترجمة الحروف الهجائية إلى تهجئة أصابع. في وقت لاحق، أصبح استخدام القفازات مع مستشعرات الحركة هو السائد، وولدت بعض المشاريع مثل CyberGlove و VPL Data Glove. مكنت الأجهزة القابلة للارتداء من التقاط أشكال وحركات يد المتحدث بلغة الإشارة بمساعدة برنامج الكمبيوتر. ومع تطور رؤية الكمبيوتر، تم استبدال الأجهزة القابلة للارتداء بكاميرات نظرًا لكفاءتها وتقليل القيود الجسدية على المتحدثين بلغة الإشارة. لهدف معالجة البيانات التي تم جمعها من خلال الأجهزة، طبق الباحثون شبكات عصبية مثل Stuttgart Neural Network Simulator للتعرف على الأنماط في مشاريع مثل CyberGlove. كما يستعمل الباحثون كذلك الكثير من الأساليب الأخرى للتعرف على العلامات. مثلًا، تُستعمل نماذج ماركوف المخفية لتحليل البيانات إحصائيًا، وتستعمل GRASP وبرامج التعلم الآلي الأخرى مجموعات التدريب لتحسين دقة التعرف على العلامات. أظهر اندماج التقنيات غير القابلة للارتداء مثل الكاميرات وأجهزة التحكم Leap Motion أنه يزيد من قدرة التعرف التلقائي على لغة الإشارة وبرامج الترجمة.
تقنية SignAloud
علاوةً على ذلك، SignAloud هي تقنية تتضمن زوجًا من القفازات من صنع مجموعة من الطلاب في جامعة واشنطن يترجمون لغة الإشارة الأمريكية (ASL) إلى اللغة الإنجليزية. في شهر فبراير من عام 2015، ابتكر الطالب السمعي من جامعة واشنطن توماس بريور، أول نموذج أولي لهذا الجهاز في هاك أريزونا، والذي هو هاكاثون بجامعة أريزونا. واصل بريور تطوير الاختراع وفي شهر أكتوبر من عام 2015، أحضر بريور نافيد ازودي إلى مشروع SignAloud للتسويق والمساعدة في العلاقات العامة. يتمتع ازودي بخلفية غنية في إدارة الأعمال، بينما يتمتع بريور بثروة من الخبرة في مجال الهندسة. في شهر مايو من عام 2016، أخبر الثنائي NPR أنهما يعملان عن كثب مع الأشخاص الذين يستعملون لغة الإشارة الأمريكية حتى يتمكنوا من فهم جمهورهم بشكل أفضل وتصميم منتجاتهم بحسب احتياجاتهم بدلاً من الاحتياجات المفترضة. غير أنه لم يتم إصدار أي إصدارات أخرى منذ ذلك الحين. كان الاختراع واحدًا من سبعة اختراعات فازت بجائزة Lemelson-MIT للطلاب، والتي تسعى إلى مكافأة المخترعين الشباب، تشجيعهم. صُنِّفَ اختراعهم تحت فئة «استعمله!» للجائزة التي تشمل التطورات التكنولوجية للمنتجات الموجودة. ومُنحوا 10000 دولار كجائزة لاختراعهم.
إضافةً إلى ذلك، تحتوي القفازات على مستشعرات تتعقب حركات اليد للمستعملين ثم ترسل البيانات إلى نظام كمبيوتر عبر البلوتوث. يقوم نظام الكمبيوتر بتحليل البيانات ومطابقتها مع الكلمات الإنجليزية، والتي يتم نطقها بصوتٍ رقميٍّ عالٍ. لا تتمتع القفازات بالقدرة على إدخال اللغة الإنجليزية المكتوبة لإخراج حركة القفاز أو القدرة على سماع اللغة ثم ترجمتها إلى لغة إشارة إلى شخص أصم، مما يعني أنها لا توفر اتصالاً متبادلاً. لا يشتمل الجهاز كذلك على تعبيرات الوجه وغيرها من العلامات غير اليدوية للغات الإشارة، والتي قد تغير الترجمة الفعلية من لغة الإشارة الأمريكية.
برنامج ProDeaf
وفي السياق ذاته، ProDeaf (WebLibras) هو برنامج كمبيوتر يمكنه ترجمة النص والصوت إلى اللغة البرتغالية Libras (لغة الإشارة البرتغالية) «بهدف تحسين التواصل بين الصم والسمع.» يوجد في الوقت الحالي إصدار تجريبي قيد الإنتاج للغة الإشارة الأمريكية كذلك. بدأ الفريق الأصلي المشروع في عام 2010 بمجموعة من الخبراء بما في ذلك اللغويين والمصممين والمبرمجين والمترجمين السمعيين والصم. نشأ الفريق في جامعة بيرنامبوكو الفيدرالية (UFPE) من مجموعة من الطلاب المشاركين في مشروع علوم الكمبيوتر. كان لدى المجموعة عضواً أصمّاً في الفريق كان يواجه صعوبة في التواصل مع بقية المجموعة. أنشأت المجموعة Proativa Soluções من أجل إكمال المشروع ومساعدة زميلهم على التواصل، والتي تتقدم منذ ذلك الحين. النسخة التجريبية الحالية بلغة الإشارة الأمريكية محدودة للغاية. مثلًا، يوجد قسم بالقاموس والكلمة الوحيدة الموجودة أسفل الحرف "j" هي "jump". إذا لم تتم برمجة الجهاز بالكلمة، فيجب على الشخصية الرقمية تهجئة الكلمة. كان آخر تحديث للتطبيق في يونيو 2016، ولكن ProDeaf كانت حديث الإعلام، حيث ظهرت في أكثر من 400 قصة عبر وسائل الإعلام الأكثر شعبية في البلاد.
وفي السياق ذاته، لا يمكن للتطبيق قراءة لغة الإشارة وتحويلها إلى كلمة أو نص، لذا فهي تعمل فقط كتواصل أحادي الاتجاه. فضلًا عن ذلك، لا يمكن للمستعمل تسجيل الدخول إلى التطبيق وتلقي ترجمة باللغة الإنجليزية بأي شكل من الأشكال، حيث لا تزال اللغة الإنجليزية في الإصدار التجريبي.
مترجم لغة الإشارة كينكت
وفي هذا السياق، بدأ المشروع الأصلي في الصين بناءً على ترجمة لغة الإشارة الصينية. في عام 2013، تم تقديم المشروع في مؤتمر Microsoft Research Faculty Summit واجتماع شركة مايكروسوفت. في الوقت الحالي، يعمل باحثون في الولايات المتحدة كذلك على هذا المشروع لتنفيذ ترجمة لغة الإشارة الأمريكية. حتى الآن، لا يزال الجهاز نموذجًا أوليًا، ولا تزال دقة الترجمة في وضع الاتصال غير مثالية.
وعلى صعيد آخر، يتعاون باحثون من الأكاديمية الصينية للعلوم ومتخصصون في تعليم الصم من جامعة بيجين يونيون في الصين مع فريق أبحاث مايكروسوفت الآسيوي لإنشاء كينكت مترجم لغة الإشارة منذ عام 2012. يتكون المترجم من وضعين: وضع المترجم ووضع الاتصال. يستطيع وضع المترجم على ترجمة الكلمات المفردة من لغة الإشارة إلى كلمات مكتوبة والعكس كذلك. أما وضع الاتصال فيمكنه أن يترجم جملاً كاملة إلى جانب ترجمة المحادثة تلقائيًا باستخدام شخصيةٍ ثلاثية الأبعاد. يمكن أن يكتشف وضع المترجم كذلك المواضع وأشكال اليد الخاصة بمتحدث لغة الإشارة إلى جانب مسار الحركة باستخدام تقنيات التعلم الآلي والتعرف على الأنماط ورؤية الكمبيوتر. يسمح الجهاز كذلك بالاتصال المتبادل لأن تقنية التعرف على الكلام تسمح بترجمة اللغة المنطوقة إلى لغة الإشارة فضلًا عن امكانية الشخصية ثلاثية الأبعاد من تجسيدها وتسجيلها مرة أخرى إلى الصم.
MotionSavvy
وفي هذا السياق، MotionSavvy هي أول لغة إشارة إلى نظام الصوت. تم إنشاء الجهاز في عام 2012 من قبل مجموعة من معهد روتشستر للتكنولوجيا / المعهد التقني الوطني للصم و «نشأ من مسرّع Leap Motion AXLR8R.» استعمل الفريق علبة الكمبيوتر اللوحي التي تستفيد من قوة وحدة التحكم Leap Motion. تم إنشاء الفريق المكون من ستة أشخاص بالكامل من قبل طلاب صم من فرع تعليم الصم في المدارس. يعد الجهاز في الوقت الحالي واحدًا من جهازي اتصال متبادلين فقط للغة الإشارة الأمريكية. يسمح للأفراد الصم بالإشارة على الجهاز الذي تتم ترجمته فيما بعد أو العكس، مع أخذ اللغة الإنجليزية المنطوقة وترجمتها إلى لغة الإشارة الأمريكية.يُشحَن الجهاز إلى المالك بسعر 198 دولار. تتضمن بعض الميزات الأخرى القدرة على التفاعل، وردود الفعل المباشرة، ومنشئ الإشارات، والإشارات الجماعية.
من جهة ثانية، تمت مراجعة الجهاز من قبل الجميع من مجلات التكنولوجيا إلى تايم. قال وايرد، «لم يكن من الصعب أن نرى فقط كيف يمكن أن تكون تقنية تحويلية مثل [UNI]» كما قال «[UNI] صدمتني كنوع من السحر.» قالت كاتي شتاينميتز من TIME ، «هذه التكنولوجيا يمكن أن تغير الطريقة التي يعيش بها الصم.» ذكر شون باكلي من إنغادجيت، «يمكن أن تصبح UNI أداة اتصال رائعة.»
القيود
إضافةً إلى ذلك، تقنيات ترجمة لغة الإشارة محدودة كما هو الحال في ترجمة اللغة المنطوقة. لا شيء يمكنه الترجمة بدقة 100٪. في الواقع، تتخلف تقنيات ترجمة لغة الإشارة كثيرًا عن نظيراتها في اللغة المنطوقة. وهذا بسبب حقيقة أن لغات الإشارة لها تعبيرات كثيرة. بينما اللغات المنطوقة تُمارس من خلال الصوت، يتم التعبير عن لغات الإشارة من خلال اليدين والذراعين والرأس والكتفين والجذع وأجزاء من الوجه. هذا التعبير متعدد القنوات يجعل ترجمة لغات الإشارة أمرًا صعبًا للغاية. كما أن التحدي الإضافي للترجمة الآلية للغة الإشارة هو حقيقة أنه لا يوجد تنسيق رسمي مكتوب للغات الإشارة. توجد أنظمة ترميز ولكن لم يتم اعتماد أي نظام كتابة على نطاق واسع من قبل مجتمع الصم الدولي، بحيث يمكن اعتباره «الشكل المكتوب» للغة إشارة معينة. لذلك، يتم تسجيل لغات الإشارة بتنسيقات فيديو مختلفة. مثلًا، لا توجد مجموعة موازية قياسية ذهبية كبيرة بما يكفي لـ SMT.
من الإسبانية إلى LSE
وفي هذا السياق، https://www.semanticscholar.org/paper/Methodology-for-developing-a-Speech-into-Sign-in-aL٪C3٪B3pez-Lude٪C3٪B1a-San-Segundo/496f8e35add9fad94a59156f473261ecd3175635
نظام SignAll
ومن ناحية أخرى، SignAll هو نظام ترجمة تلقائي للغة الإشارة مقدم من دولفيو تكنولوجيز في المجر. يعد الفريق «رائدًا في حل أول ترجمة آلية للغة الإشارة، استنادًا إلى رؤية الكمبيوتر ومعالجة اللغة الطبيعية (NLP)، لتمكين التواصل اليومي بين الأفراد ذوي السمع الذين يستعملون اللغة الإنجليزية المنطوقة والصم أو ضعاف السمع الذين يستعملون لغة الإشارة». يستعمل نظام SignAll نظام كنيكت من مايكروسوفت وكاميرات الويب الأخرى المزودة بأجهزة استشعار للعمق متصلة بجهاز كمبيوتر. يمكن لتقنية رؤية الكمبيوتر التعرف على شكل اليد وحركة متحدث لغة الإشارة، ويقوم نظام معالجة اللغة الطبيعية بتحويل البيانات المجمّعة من رؤية الكمبيوتر إلى عبارة إنجليزية بسيطة. مطور الجهاز أصم وبقية فريق المشروع يتكون من الكثير من المهندسين والمتخصصين اللغويين من مجتمعات الصم والسمع. تتمتع هذه التقنية بالقدرة على دمج جميع المؤشرات الخمسة لـ لغة الإشارة الأمريكية، والتي تساعد الجهاز على تفسير المتحدث بلغة الإشارة بدقة. تم اعتماد SignAll من قبل الكثير من الشركات بما في ذلك ديلويت و LT-innovate وقد أُنشِئَت شراكات مع مايكروسوفت بيزسبارك وتجديد المجر.
📝 هل في هذه المقالة خطأ؟
إذا وجدت معلومة تحتاج تصحيحاً أو إضافة، أو أردت حذف المقالة، أرسل لنا طلباً وسنراجعه.
ما رأيك في هذه المقالة؟