كتب – طارق محيي

في خطوة تعكس توظيف التكنولوجيا الحديثة لخدمة القضايا المجتمعية وتعزيز دمج ذوي الإعاقة السمعية، نجح فريق من طلاب قسم علوم الحاسب بالمعهد العالي للحاسبات وتكنولوجيا المعلومات بأكاديمية الشروق في تطوير مشروع تخرج مبتكر بعنوان «FREE TALK»، وهو نظام ذكي يعتمد على تقنيات الذكاء الاصطناعي لترجمة لغة الإشارة في الوقت الفعلي، بما يسهم في تسهيل التواصل بين الأشخاص الصم وضعاف السمع ومختلف فئات المجتمع.

ويأتي المشروع استجابةً لأحد التحديات اليومية التي تواجه الملايين من ذوي الإعاقة السمعية حول العالم، والمتمثل في صعوبة التواصل نتيجة محدودية توافر مترجمي لغة الإشارة، حيث يوفر النظام وسيلة رقمية متطورة تتيح ترجمة الإشارات إلى نصوص مكتوبة والعكس بصورة فورية وسهلة الاستخدام.

واعتمد فريق العمل على تطوير نماذج متقدمة للذكاء الاصطناعي باستخدام شبكات التعلم العميق من نوع الشبكات العصبية الالتفافية (Convolutional Neural Networks – CNN)، لتتمكن من تحليل إشارات اليد والتعرف عليها بدقة عالية. وأظهرت نتائج الاختبارات كفاءة متميزة للنظام، حيث حقق نسبة دقة بلغت 98.15% في التعرف على لغتي الإشارة الإنجليزية والفرنسية، بينما بلغت نسبة الدقة 94% في لغة الإشارة العربية.

ويدعم النظام ثلاث لغات رئيسية هي لغة الإشارة العربية (ArSL)، ولغة الإشارة الأمريكية (ASL)، ولغة الإشارة الفرنسية (FSL)، ما يجعله منصة متعددة اللغات قادرة على خدمة شريحة واسعة من المستخدمين.

ولا تقتصر إمكانات المشروع على الترجمة المباشرة فقط، بل يوفر مجموعة من المزايا الذكية التي تهدف إلى تحسين تجربة المستخدم وتعزيز سهولة التواصل، من بينها الترجمة الفورية من لغة الإشارة إلى نص باستخدام كاميرا الهاتف المحمول أو كاميرا الويب، وتحويل النصوص المكتوبة إلى إشارات مرئية تساعد على توصيل الرسائل بصورة أكثر وضوحًا.

كما يتيح النظام تحويل الصوت إلى نصوص وإشارات مرئية، الأمر الذي يساعد الأشخاص الصم وضعاف السمع على متابعة المحادثات والتفاعل معها بشكل أكثر فاعلية، إلى جانب توفير قاموس متعدد اللغات للبحث عن الإشارات ومعانيها، فضلًا عن دمج روبوت محادثة ذكي (AI Chatbot) للإجابة عن الاستفسارات المتعلقة بلغة الإشارة وتقديم الدعم للمستخدمين.

ويعتمد المشروع على منظومة تقنية متكاملة تضم عددًا من المكونات المترابطة التي تعمل معًا لتحقيق تجربة استخدام سلسة وسريعة. فقد تم تطوير نموذج الذكاء الاصطناعي باستخدام Python وTensorFlow وOpenCV للتعرف على الإشارات، بينما جرى بناء خدمة الذكاء الاصطناعي باستخدام FastAPI لربط نماذج التعلم العميق بالتطبيقات المختلفة وتوفير استجابة فورية لعمليات الترجمة.

كما تم تطوير الخادم الخلفي للنظام (Backend) باستخدام ASP.NET Core (.NET 8) لإدارة بيانات المستخدمين وسجلات الترجمة، إلى جانب تصميم تطبيق للهواتف الذكية باستخدام Flutter يعمل على نظام Android ويوفر جميع خدمات الترجمة للمستخدمين، بالإضافة إلى منصة ويب تفاعلية تم تطويرها باستخدام React.js وHTML وCSS وJavaScript تتيح استخدام النظام مباشرة عبر متصفحات الإنترنت.

ويتميز «FREE TALK» بسهولة الاستخدام وإمكانية الوصول إليه عبر الهواتف الذكية أو منصات الويب، بما يسهم في تعزيز استقلالية الأشخاص الصم وضعاف السمع وتوسيع فرص تفاعلهم مع المجتمع ومؤسساته المختلفة.

ويعكس المشروع التكامل بين مجموعة واسعة من التقنيات الحديثة، تشمل الذكاء الاصطناعي والتعلم العميق وتطوير تطبيقات الهواتف الذكية وتقنيات الويب الحديثة وقواعد البيانات، بما يجسد قدرة التكنولوجيا على تقديم حلول عملية للتحديات المجتمعية وتحسين جودة الحياة.

ويضم فريق المشروع الطلاب: نورهان محمود حسن، ومريم جرجس نجيب، وهشام عصام عبد العليم، ويوسف أشرف أحمد، ومعاوية فوزي محمد، وأحمد إبراهيم عبد المقصود، وميلاد جميل شنودة، وذلك تحت إشراف الدكتورة شيماء عثمان، وبمعاونة المهندسة بسنت سيد.

ويأتي هذا المشروع في إطار استراتيجية أكاديمية الشروق الرامية إلى تشجيع الابتكار والبحث التطبيقي بين الطلاب، ودعم تطوير حلول تقنية متقدمة تخدم المجتمع وتواكب أحدث الاتجاهات العالمية في مجالات الذكاء الاصطناعي والتطبيقات الذكية، بما يسهم في بناء مجتمع أكثر شمولًا وتواصلًا وتمكينًا لجميع أفراده.