Школяр з Росії виграв конкурс Google за розробку перекладача з мови жестів
Source:
чи Можна допомогти глухонімим людям висловити свої думки, автоматично переводячи , які вони показують, у слова? Таким питанням задався російський десятикласник Данило Казанцев з Викладачів ліцею. Рішення розібратися в цій проблемі призвело Данила до перемоги в одній з категорій конкурсу молодих вчених Science Fair 2019. Він розробив систему, яка може інтерпретувати мову жестів і замінювати сурдоперекладача.
Як зазначено , Казанцев пройшов відбір серед тисяч інших учасників конкурсу і став одним з 24 фіналістів з 14 країн світу. В результаті він отримав премію Lego Education Builder за розробку свого перекладача мови жестів.
Всі фіналісти конкурсу. Данило крайній зліва
Що таке електроміографія?
В основі розробки юного російського генія лежить технологія електроміографії, яка визначає електромеханічну активність м'язів з урахуванням мінливого стану руки і пальців. У цьому випадку кожен рух кінцівки створює крихітні електричні сигнали, які можна вважати, а потім перевести в зрозумілі для комп'ютера команди. Зокрема, ця технологія використовується для управління штучними протезами.
Читайте також:
Але російський школяр розробив на основі технології електроміографії систему, яка може переводити електричні сигнали м'язів у слова.
Синіми і білими хрестиками позначено місця розташування електродів, які зчитують електричні імпульси м'язів
Як працює перекладач мови жестів
Пристрій складається з манжетки, що надівається на передпліччі. На манжеті встановлені 24 електрода, кожен з яких прочитує певні електричні сигнали м'язів передпліччя. Крім того, тут використовується спеціальний датчик, який визначає положення передпліччя в просторі. На базі всіх цих сигналів формується унікальний «відбиток» положення кожної окремої частини кисті в просторі.
Всі зібрані сигнали посилюються і фільтруються від зайвого електромагнітного шуму, а потім по проводах передаються на зовнішній . Цей мікрокомп'ютер оцифровує сигнали з датчиків і електродів, після чого передає їх у потужний обчислювальний сервер зі спеціально навченою нейромережею. Саме з допомогою нейромережі проводиться інтерпретації (переклад слова) даних про електричні сигнали, що відповідають за кожен мовний жест.
Як проводилася перевірка перекладача жестів
Перевірку системи Данило проводив на собі і двох інших добровольцях. В якості основи для перекладу він використав 5 жестів і популярного жестової мови ASL (American Sign Language).
Hello (привіт); Yes (так); No (немає); Please (будь ласка); I love you (я люблю тебе)
Для перевірки ефективності системи для кожного розпізнавання жесту використовувалося 10 спроб. Як вказує автор розробки, система змогла показати 92,6-відсоткову точність при розпізнаванні.
В таблиці відзначені учасники експерименту, найменування жестів, які потрібно розпізнати системі, а також кількість вірних распознаваний
Відео перевірки технології можна подивитися нижче:
Данило зазначає, продовжить роботу над автономним сурдопереодчиком. Є кілька моментів, які поки не дозволяють використовувати його в якості готового рішення. Наприклад, зараз система може переводити тільки окремі жести. Але поки не здатна формувати з отриманих слів речення. Таким чином зараз систему не можна використовувати в якості повної заміни перекладача. Вирішення цього питання стане однією з майбутніх завдань юного вченого.
Читайте також:
Крім того, електронний сурдоперекладач вимагає постійного доступу до потужного обчислювального сервера з нейромережею, яка виробляє розпізнавання мовних сигналів жестів і переводить їх у слова. Проте автор зазначає, що сучасна швидкість передачі даних по мобільному інтернету дозволяє забезпечити постійний доступ до сервера, тим самим частково компенсуючи цей недолік. Автор також розглядає можливість зробити його більш компактним, зменшивши площу розташування електродів до 7 сантиметрів.
У цілому відзначається, що при доопрацюванні такої технології, її можна буде використовувати з будь-яким жестовим словником. При цьому від користувача не потрібно ніякої спеціальної підготовки для можливості використання такої системи.
Більш детально з розробкою Данила Казанцева можна ознайомитися на .
Якщо вам цікаві новини науки і технологій, підпишіться на наш канал . Там ви знайдете ексклюзивні матеріали, які не були опубліковані на сайті!
Більше:
Що таке дислексія і як її можна вилікувати?
Дислексія впливає на близько 10% населення світу Є багато захворювань у світі, які пов'язані з порушеннями головного і спинного мозку, а також різні групи нервів. Ці захворювання називаються неврологічними розладами і одним з найбільш поширених з них...
Перші відгуки: яка швидкість у супутникового інтернету Starlink від Ілона Маска?
В Інтернеті з'явилися перші відгуки на провайдера Starlink Американський підприємець Ілон Маск (Elon Musk) займається не тільки виробництвом електричних автомобілів і космічних кораблів. У 2015 році він створив компанію Starlink, мета якої полягає в ...
Як злочинці можуть використовувати штучний інтелект? Найнебезпечніший варіант
Штучний інтелект здатний на багато що. Наприклад, він може замінити особа Арнольда Шварценеггера на Сильвестра Сталлоне Останні 10 років ми щодня чуємо новини про те, як той чи інший штучний інтелект навчився новим навичкам. На сьогоднішній день комп...
Новини
Новий нейроинтерфейс від Facebook зчитує думки практично без затримок
На даний момент технології вже доросли до того моменту, коли комп'ютерні алгоритми разом з особливими датчиками можуть зчитувати мозкову активність і використовувати її в якості команд для управління. Простіше кажучи, вже є можлив...
Американські учені побудували «Сонце» в лабораторії
Сонце — це джерело існування всього живого на нашій планеті. Не будь Сонця, не існувало б і життя. Однак незважаючи на те, що астрофізики всього світу вже давно вивчають будову головної зірки нашої планетарної системи, безліч проц...
Tesla представила дуже потужні модульні батареї для зберігання сонячної енергії
У міру розвитку сфери виробництва так званої «зеленої енергії» (сонячної і вітряної), ринок починає потребувати нових рішеннях, що дозволяють зберігати цю енергію у великих обсягах. Близько двох років тому ми писали про те, як ком...
Дизайнери не потрібні? Нейромережа тепер може розставити меблі у вашій квартирі
Якщо раніше нейромережі вважалися чимось дивовижним, то зараз доступ до таких інструментів є у багатьох. Причому ця галузь розвивається неймовірними темпами: зовсім недавно нейромережі вчилися малювати картини, і вже зараз (і наві...
У Sony розробили індивідуальний міні-кондиціонер розміром менше смартфона
Як відчути прохолоду в жаркий день? На даний момент вихід лише один — зайти в прохолодне приміщення. Хоча технологічні компанії портативні пристрої, які дозволяли б підтримувати комфортну температуру тіла. Деякі створюють «р...
Електростимуляція м'язів може перетворити людину в супергероя
Дивлячись в дитинстві фільми про людину-павука або бетмена, чи хотіли б ви стати супергероєм? Знайти надлюдські можливості після укусу павука навряд чи вийде, але створити костюм, який і спритнішими звичайних людей, цілком реально...
Радіація і біологічну зброю знищило комарів в Китаї
Комарі, можливо, найбільш дратівливі комахи на планеті. Тільки згадайте їх мерзенний писк і укуси, на місці яких виникають почервоніння і нестерпний свербіж — все це легко може привести в сказ навіть самого спокійного людини. Насп...
Що таке «рідкий» жорсткий диск і як він працює?
Зовсім недавно ми розповідали вам про те, що . Однак це не єдиний спосіб «використовувати» молекули при створенні різних видів електронних пристроїв. Приміром, група дослідників з Браунівського університету (США) нещодав...
Можна полетіти в іншу країну на літаючому скейтборді?
Як ви думаєте, чи існує літаючий скейтборд (ховерборд) з фільму «Назад в майбутнє» насправді? Для багатьох це може стати відкриттям, але фантастичне засіб пересування вже давно створено і використовується для польотів. Воно назива...
Електробайк, який майже не потрібно заряджати. Як він працює?
Вираз «не треба » не варто сприймати надто буквально. Справа в тому, що, незважаючи на досить простий пристрій (кермо, педалі, ланцюг та пара коліс), багато розробники постійно вносять особливості стала класичною констру...
Facebook показали прототип VR-браслета із тактильним зворотним зв'язком
Сучасні або доповненої реальності вже цілком можуть продемонструвати нам досить пристойну якість графіки. Ну а про якісний звук і говорити не доводиться. Однак для того, щоб остаточно зануритися у віртуальні світи нам потрібен нов...
Зроблено серйозний крок на шляху до створення молекулярного комп'ютера
З моменту створення першого комп'ютера технології стали розвиватися так стрімко, як не розвивалася жодна інша галузь. Зараз обчислювальні машини в сучасному розумінні вже підійшли до піку свого розвитку, і якщо ми хочемо і далі ро...
Пасажирська капсула Hyperloop поставила новий рекорд швидкості
У 2013 році у глави компаній Tesla і SpaceX Ілона Маска виникла чергова смілива ідея. Він загорівся бажанням провести під містами вакуумні трубки, усередині яких, на швидкості понад 1000 кілометрів на годину, будуть переміщатися к...
Хто придумав комп'ютерні паролі?
Що ви бачите при включенні комп'ютера, ноутбука або смартфона? Якщо ви сімейна людина, або вам важлива збереження особистих даних, швидше за все, перед вами відкриється вікно з полем для введення пароля від комп'ютера. Це віконце ...
Вчені знайшли спосіб захиститися від землетрусів — він обійдеться в 6 мільярдів рублів
Хоча сейсмічна активність в Росії в основному проявляється тільки на півдні і сході країни, для решти держав проблема раптового виникнення землетрусів залишається дуже актуальною. Підземні поштовхи можуть становити велику небезпек...
Чи зможе ІІ зібрати кубик Рубіка швидше людини?
Кубик Рубіка є певною мірою унікальною головоломкою. З одного боку, зрозуміти принцип того, як збирати і розбирати кубик досить просто. З іншого ж, у збиранні цієї головоломки можна нескінченно. Люди у всьому світі збирають кубик ...
Американці проведуть повномасштабні випробування бойових роботів
Вже сьогодні різні види безпілотної і дистанційно керованої техніки успішно використовуються збройними силами в усьому світі. Поки ми говоримо переважно про розвідувальні літаки і дронах-безпілотниках. Але поява більш просунутих в...
Хочете дізнатися дату своєї смерті? Ці годинник підкажуть
Одні люди вважають за краще не замислюватися про тривалості власного життя, а інші , що навіть відвідують «ворожок» і ясновидців. Здебільшого подібні передбачення виявляються помилковими, оскільки заглядати в майбутнє поки ще ніхт...
Що буде, коли запрацює супутниковий інтернет від Ілона Маска
У травні цього року ракета, запущена SpaceX, компанією, заснованою Илоном Маском, вивела на орбіту дуже великий обсяг корисного вантажу. Було серед нього і 60 супутників, які ляжуть в основу глобальної інтернет-мережі . У найближч...
#відео | У США почали продавати вогнемет для дронов
Винайдені в 1901 році німецьким вченим Ріхардом Фидлером вогнемети сьогодні в основному використовуються в сільськогосподарській промисловості. Наприклад, за допомогою випускається ними вогню, фермери очищають величезні поля від б...
Примітка (0)
Ця стаття не має коментарів, будьте першим!