قفاز مبتكر يترجم “لغة الإشارة” للصُم بشكل فوري

ذكرت دورية “ Nature Electronics” العلمية، أنه تم ابتكار جهاز يشبه “القفاز”، يمكن من خلاله تحويل لغة الإشارة إلى اللغة الإنجليزية المنطوقة بشكل عام، ما يوفر لأصحاب الهمم من الصُم طريقة جديدة لتخطى الحواجز اللغوية.

يساهم القفاز الناطق، وفقاً لـ “نيتشر إلكترونيكس” على اكتشاف وترجمة الإيماءات اليدوية المستخدمة في لغة الإشارة الأميركية. وبمساعدة نظام الذكاء الاصطناعي المعروف باسم “التعلم الآلي”، يتم تحويل هذه الإشارات والإيماءات، عبر تطبيق على الهاتف الذكي، إلى كلمات وجمل باللغة الإنجليزية.

يقول الأستاذ المساعد فى قسم الهندسة الحيوية بجامعة كاليفورنيا “جون تشين”: “نأمل أن يفتح ذلك الابتكار الباب أمام طريقة سهلة للأشخاص الذين يحتاجون لاستخدام لغة الإشارة للتواصل مباشرة مع جميع من لا يعرفون لغة الإشارة، دون الحاجة إلى شخص آخر ليترجم لهم أو عنهم الإشارات. ومن المأمول أيضاً أن يساعد الجهاز الجديد المزيد من الأشخاص على تعلم لغة الإشارة بأنفسهم”.

يتألف الجهاز أو قفاز ترجمة لغة الإشارة من مستشعرات رقيقة ومطاطية تعمل على طول الأصابع. ويتم توظيف مستشعرات مصنوعة من خيوط موصلة للكهرباء للتمييز بين المئات من حركات اليد ومواضع الأصابع التي تمثل الأحرف والأرقام والكلمات والعبارات الفردية.

ترجمة بسرعة كلمة/ثانية

يتم تحويل حركات الأصابع إلى إشارات كهربائية يتم إرسالها إلى لوحة دائرية على شكل عملة معدنية، يتم ارتداؤها على الرسغ. وتقوم اللوحة الدائرية بنقل الإشارات لاسلكيًا إلى هاتف ذكي يترجمها إلى كلمات منطوقة بمعدل حوالي كلمة واحدة في الثانية.

وقع اختيار الباحثون على لغة الإشارة الأميركية ASL، التي ترجع جذورها إلى ما قبل قرنين، لأنها تدمج بعض اللغات الأخرى مثل الفرنسية إلى جانب الإنجليزية. قام الباحثون بوضع أجهزة استشعار لاصقة على وجوه المتطوعين الذين اختبروا النظام، بين حاجبيهم وعلى جانب واحد من أفواههم، لنقل بعض تعابير الوجه، والتي تعد أيضًا جزءاً من لغة الإشارة.

إشارات وإيماءات

تم تدريب خوارزمية ذكاء اصطناعي مخصصة لنظم “تعليم الآلة” للتعرف على الإيماءات والإشارات، ثم ترجمتها إلى الحروف والأرقام والكلمات التي تعبر عنها. تعرف النظام المبتكر على 660 إشارة، بما في ذلك كل حرف من حروف الأبجدية وكذلك الأرقام من 0 إلى 9.

ويوضح دكتور تشن أن الخطوات التالية للأبحاث ستشمل تحسين البرامج والأجهزة لجعل القفاز الناطق أكثر دقة وقوة عند الاستخدام على نطاق واسع خلال نحو خمس سنوات.