دستکشی برای تبدیل زبان اشاره به گفتار / در آن واحد زبان اشاره را درک کنید

به گزارش خبرنگار فناوری خبرگزاری دانشجو، زیست مهندسان دانشگاه کالیفرنیا در لس‌آنجلس دستکشی ساخته‌اند که از طریق یک اپلیکیشن گوشی هوشمند، زبان اشاره آمریکایی را در آن واحد به گفتار انگلیسی تبدیل می‌کند.

محققان می‌گویند: امیدواریم دستکش‌مان راه جدیدی را برای افرادی باز کند که برای تعامل با دیگران از زبان اشاره استفاده می‌کنند. زیرا این افراد در تعامل با افراد سالم با مشکل ارتباطی مواجه می‌شوند و این دستکش می‌تواند این شکاف ارتباطی را به خوبی پر کند. البته این دستکش به افراد دیگر نیز کمک می‌کند که زبان اشاره یاد بگیرند.

این سیستم شامل یک جفت دستکش با سنسور‌های باریک و کششی است که از کف دست تا سر انگشت کشیده شده است و حرکات دست و انگشت‌ها را ردیابی و آن‌ها را به حروف، اعداد و عبارت تبدیل می‌کند. سپس سیستم حرکات انگشت را به سیگنال‌های الکتریکی تبدیل می‌کند که به یک تخته مداری به اندازه سکه ارسال می‌شود که روی مچ دست قرار می‌گیرد.

 

 

این تخته مداری سیگنال‌ها را به صورت بی‌سیم به تلفن هوشمند منتقل می‌کند. این سیگنال‌ها در گوشی هوشمند به کلمات گفتاری با سرعت یک کلمه در ثانیه تبدیل می‌شوند. حسگر‌های الکترونیکی که روی این دستگاه تعبیه شده‌اند از پلیمر‌های سبک و ارزان قیمت ساخته شده‌اند.

محققان این سیستم را روی چهار ناشنوا که از زبان اشاره آمریکایی استفاده می‌کنند، آزمایش کردند. آن‌ها هر ژست دست را ۱۵ بار تکرار کردند تا الگوریتم یادگیری ماشینی آن حرکات را به حروف، اعداد و کلمات تبدیل کنند. به گفته محققان، این سیستم ۶۶۰ علامت از جمله حروف الفبا و اعداد صفر تا ۹ را تشخیص می‌دهد.