Google обрала гібридну схему роботиGoogle впроваджує суттєве оновлення для власної клавіатури Gboard, яке має потенціал кардинально змінити підхід до інклюзивності. Корпорація працює над функцією Sign-to-Text, що дасть змогу трансформувати рухи рук в письмовий текст за допомогою камери мобільного пристрою.Про це повідомляє ресурс Android Authority.
Штучний інтелект у дії
Спеціалісти Google DeepMind довгий час займалися розробкою засобів штучного інтелекту для інтерпретації мови жестів, і наразі ці досягнення інтегровані в актуальну бета-версію Gboard.Новітня система базується на передовій моделі SignGemma, представленій експертами минулого року. Вона інтегрує можливості машинного зору з потужністю нейронних мереж для ідентифікації складних жестів у реальному часі.
Аспекти приватності та технічні деталі
Google обрала гібридну схему роботи для забезпечення конфіденційності користувачів:
- мобільний пристрій обробляє відео безпосередньо локально, виділяючи лише первинні дані про рухи та жести;
- після цього ці координати передаються до хмарного сервісу Google для остаточного аналізу та виділення слів.
Цей підхід гарантує, що відео з обличчям та оточенням особи не зберігаються в пам’яті смартфона, що суттєво підвищує рівень захисту персональних даних.Під час аналізу програмного коду були виявлені службові повідомлення, які допоможуть оптимізувати процес: «відступіть трохи далі», «перемістіться у більш освітлене місце» або «тримайте руки в полі зору для кращої видимості».Наразі залишається невизначеним питання підтримки різних регіональних варіацій, адже американська жестова мова (ASL) суттєво відрізняється від української, британської або інших світових версій.Незважаючи на те, що функціонал ще перебуває на етапі розробки, він обіцяє стати ключовим інструментом доступності в історії Gboard, відкриваючи нові можливості для вільного спілкування мільйонів людей.За матеріалами: Телеканал 24# Google# ТехнологіїМісце для вашої реклами