Google обрала гібридну схему роботиGoogle готує суттєве оновлення для свого програмного забезпечення клавіатури Gboard, яке потенційно може стати революційним кроком у галузі доступності. Корпорація розробляє функцію Sign-to-Text, що дозволить трансформувати рухи рук безпосередньо в написаний текст за допомогою камери мобільного пристрою.Про це повідомляє видання Android Authority.
Сила штучного інтелекту
Інженери Google DeepMind протягом тривалого часу працювали над створенням інструментів на основі штучного інтелекту для інтерпретації мови жестів, і тепер ці розробки інтегровані в останню бета-версію Gboard.Новий механізм базується на вдосконаленій моделі SignGemma, яку фахівці представили минулого року. Вона комбінує можливості машинного зору та обчислювальну потужність нейронних мереж для розпізнавання складних жестів у режимі реального часу.
Безпека та технічні деталі
Google впровадила гібридну систему функціонування для забезпечення безпеки даних користувачів:
- обробка відео відбувається безпосередньо на смартфоні, виділяючи виключно “сирі” дані про рухи й жести;
- після цього, зазначені координати передаються в хмарні сервіси Google для остаточного аналізу та ідентифікації слів.
Такий підхід гарантує, що фактичне відео із зображенням обличчя та оточення людини не зберігається на пристрої, що суттєво підвищує рівень захисту особистої інформації.Під час аналізу програмного коду були виявлені системні повідомлення, які допоможуть оптимізувати процес: «відійдіть трохи далі», «перейдіть у більш освітлене місце» або «тримайте руки в полі зору для кращого розпізнавання».Наразі залишається невизначеним питання підтримки різних мов жестів, оскільки американська мова жестів (ASL) значно відрізняється від української, британської чи інших міжнародних варіацій.Незважаючи на те, що функція ще перебуває на етапі розробки, вона має потенціал стати найважливішим інструментом доступності в історії Gboard, відкриваючи нові можливості для вільного спілкування мільйонів людей.За матеріалами: Телеканал 24# Google# ТехнологіїМісце для вашої реклами