Gboard навчать розпізнавати мову жестів за допомогою камери телефону.

class=”ArticleImagestyles__ImageWrapper-sc-lvd8v9-0 cWMVnY”>

Google обрала гібридну схему роботиGoogle готує масштабне вдосконалення для своєї клавіатури Gboard, яке може стати значним досягненням у галузі інклюзивності. Корпорація розробляє функцію Sign-to-Text, що дозволить трансформувати рухи рук безпосередньо в письмовий текст, використовуючи камеру смартфона.Про це повідомляє видання Android Authority.

Магія штучного інтелекту в дії

Фахівці Google DeepMind тривалий час займалися створенням інструментів штучного інтелекту для інтерпретації жестової мови, і тепер ці розробки знайшли своє місце в найновішій бета-версії Gboard.Нова система базується на передовій моделі SignGemma, яку інженери представили минулого року. Вона поєднує можливості машинного зору та потужність нейромереж для розпізнавання складних жестів у режимі реального часу.

Конфіденційність та технічні особливості

Google застосувала гібридну схему роботи для забезпечення конфіденційності користувачів:

  • обробка відео відбувається безпосередньо на смартфоні, виділяючи лише “сирі” дані про рухи та жести;
  • потім ці координати передаються в хмару Google для остаточного аналізу та виділення слів.

Такий підхід гарантує, що фактичне відео з обличчям та оточенням людини не зберігається в пам’яті пристрою, що суттєво підвищує рівень захисту особистих даних.Під час аналізу програмного коду було виявлено службові підказки, які допоможуть оптимізувати процес: «відійдіть трохи далі», «перемістіться у більш освітлене місце» або «тримайте руки в полі зору для кращої видимості».Наразі залишається відкритим питання підтримки різних мов жестів, оскільки американська мова жестів (ASL) суттєво відрізняється від української, британської чи інших світових версій.Незважаючи на те, що функція ще знаходиться на етапі розробки, вона має потенціал стати найважливішим інструментом доступності в історії Gboard, відкриваючи нові можливості для вільної комунікації мільйонів людей.За матеріалами: Телеканал 24GoogleТехнологіїМісце для вашої реклами

Джерело

No votes yet.
Please wait...

Залишити відповідь

Ваша e-mail адреса не оприлюднюватиметься. Обов’язкові поля позначені *