مهندسین زیستی دانشگاه UCLA دستکشی طراحی کرده‌اند که می‌تواند در لحظه زبان اشاره را به زبان انگلیسی ترجمه کند. این تحقیقات در مجله Nature Electronics منتشر شده‌است.

جون چن، استادیار مهندسی زیست فناوری در دانشکده مهندسی دانشگاه UCLA و مدیر ارشد این پروژه گفته‌ است: «ما امیدواریم این دستکش به افرادی که از زبان اشاره استفاده می‌‌کنند کمک کند تا به آسانی و بدون نیاز به شخص دیگری و به‌طور مستقیم با افرادی که از زبان اشاره استفاده نمی‌کنند؛ ارتباط برقرار کنند.»

این سیستم شامل یک جفت دستکش با سنسورهای باریک و کششی است که در طول هر یک از پنج انگشت دست قرارگرفته‌اند. این سنسورها، که از نخ‌های رسانای الکتریکی ساخته‌شده‌اند حرکات دست و نحوه‌ی قرار گرفتن انگشتان که معرف حروف، اعداد، کلمات و عبارات خاص است را در نظر می‌‌‌گیرد. سپس دستگاه حرکات انگشتان را به سیگنال‌های الکتریکی تبدیل می‌کند و به یک مدار به اندازه یک سکه که روی مچ دست قرار دارد، ارسال می‌کند. سپس این سیگنال‌ها به صورت بی‌سیم به تلفن هوشمند ارسال می‌شوند و به گفتار با سرعت تقریبی یک کلمه در ثانیه ترجمه می‌شوند.

محققان همچنین برای ضبط حالت چهره، به صورت آزمایشی سنسورهای چسبنده‌ای طراحی کردند که بین ابروها و یک طرف دهان شخصی که با زبان اشاره صحبت می‌کند قرار می‌‌‌گیرد.

همچنین چن گفته‌ است: «سیستم‌های پوشیدنی که قبلاً برای ترجمه‌ٔ زبان اشاره ارائه شده‌بود حجیم و سنگین بودند و یا پوشیدن آن‌ها ناراحت‌کننده بود. دستگاه ساخته‌شده توسط تیم UCLA از پلیمرهای سبک و ارزان اما با عمر طولانی و کششی ساخته شده‌است. سنسورهای الکترونیکی نیز بسیار انعطاف‌پذیر و ارزان هستند.»

برای آزمایش دستگاه، محققان با چهار نفر که ناشنوا بودند و از زبان اشاره استفاده می‌کردند، کار کردند. آن‌ها هر ژست دست را ۱۵ بار تکرار کردند. یک الگوریتم یادگیری ماشین، این حرکات را به حروف، اعداد و کلمات تبدیل کرد. این سیستم توانست ۶۶۰ علامت که شامل حروف الفبا و اعداد ۰ تا ۹ بود را تشخیص دهد.

منبع: UCLA