Движение трамваев до Медгородка будет закрыто на четыре дня
сегодня, 21:16 Общество
Экс-чемпион мира по боксу готов построить свою школу в Челябинске, объявлены слушания
сегодня, 20:31 Общество
Отключения воды, газа и электричества в Челябинске 22 мая
сегодня, 19:38 Общество
Челябинка Комбарова взяла серебро Командного чемпионата России по легкой атлетике
сегодня, 19:25 Общество
Обладатель Кубка Стэнли Скотт Уилсон стал игроком магнитогорского «Металлурга»
сегодня, 19:09 Общество
Магнитогорский «Металлург» продлил контракты с американцем Джонсоном и шведом Прессом
сегодня, 18:58 Общество
В аэропорту Челябинска почти на 16 часов задерживается самолет в Новый Уренгой
сегодня, 18:32 Общество
На Южном Урале полицейским пришлось стрелять по машине пьяного лихача
сегодня, 17:59 Происшествия
Челябинка пыталась передать через таксиста шоколад с наркотиками
сегодня, 17:36 Происшествия
Челябинец отсудил 80 тыс. у авиакомпании за задержанный из-за снегопада рейс
сегодня, 17:19 Общество
Shaman и Вячеслав Бутусов выступят на 95-летнем юбилее Магнитогорска
сегодня, 16:52 Общество
В Челябинске запретили стоянки электросамокатов во дворах и перед соцучреждениями
сегодня, 16:30 Общество
Депутаты Челябинской гордумы повысили плату за содержание жилых домов на 5,5%
сегодня, 16:14 Общество
На Южном Урале семейную пару поздравили с бриллиантовой свадьбой
сегодня, 15:49 Общество
Депутат Госдумы от Челябинской области возглавит Комитет по национальностям
сегодня, 15:44 Политика
Вторая декада мая в Челябинской области была на 4-5 градусов холоднее обычного
сегодня, 15:33 Общество
Движение по улице Румянцева в Челябинске частично закрыто
сегодня, 15:18 Общество
Между Челябинском и Минском запустили прямые авиарейсы
сегодня, 15:13 Общество
Погоду на Урале сильно испортит надвигающийся с северо-запада холодный атмосферный фронт
сегодня, 14:49 Общество
Из Челябинска в Москву можно будет путешествовать в двухэтажных вагонах
сегодня, 14:22 Общество
На Южном Урале передали в суд дело о смертельном избиении мужчины в 1997 году
сегодня, 14:04 Происшествия
Спасатели все лето будут дежурить на 9 пляжах Челябинска
сегодня, 13:56 Общество
В Челябинске 8 июля проведут массовую регистрацию брака в Саду камней и на Колесе обозрения
сегодня, 13:41 Общество
Величайшую святыню – Казанскую икону Пресвятой Богородицы – доставят в Челябинск
сегодня, 13:06 Общество
Два года дали водителю, сбившему двух женщин и детскую коляску на северо-западе Челябинска
сегодня, 12:55 Общество
Школьник из Южноуральска передал свои накопления на помощь бойцам СВО
сегодня, 12:47 Общество
В челябинском Озерске зарегистрирован первый за последние 25 лет случай кори
сегодня, 12:35 Медицина
В Кыштыме огнем уничтожен Land Rover, предварительно – это был поджог
сегодня, 12:25 Происшествия
Рабочий из Челябинска лишился свыше 1 млн после звонка лжесиловика
сегодня, 12:20 Происшествия
Арктический фронт значительно понизит температуру воздуха в Челябинской области
сегодня, 12:11 Общество
В Челябинской области продавец получила срок за повторную продажу алкоголя подросткам
сегодня, 11:53 Общество
В Челябинске появится первый арт-объект для незрячих
сегодня, 11:24 Общество
Сезон работы летних кафе стартовал в Челябинске, всего их будет 60
сегодня, 11:09 Общество
Челябинца отдали под суд за продажу контрафактных сигарет на 3 млн
сегодня, 10:57 Общество
С начала года из Челябинской области выдворили 540 нелегальных мигрантов
сегодня, 10:48 Общество
Под Челябинском пассажирский поезд снес автомобиль, оставленный влюбленными на ж/д путях
сегодня, 10:20 Происшествия
В Златоусте 15-летняя мотоциклистка влетела под легковой автомобиль
сегодня, 10:08 Происшествия
Граффити к Году семьи появятся в семи муниципалитетах Челябинской области
сегодня, 09:56 Общество
В ночь на 21 мая в Челябинской области отмечено понижение температуры до минус 2
сегодня, 09:33 Общество
Бастрыкин взял на контроль ситуацию с подтоплением частных домов в Копейске
сегодня, 09:13 Общество

Ученые представили модели ИИ, способные распознавать русский жестовый язык

Общество
23 ноября 2023 года, 16:40
- T +

Сбер представил нейросетевые модели, позволяющие распознавать русский жестовый язык. Об этом на конференции AI Journey сообщил старший вице-президент, СTO, руководитель блока «Технологи» Сбербанка Андрей Белевцев, передает корреспондент Агентства новостей «Доступ».

Команда Vision RnD (из Управления экспериментальных систем машинного обучения) в SberDevices, разрабатывающая одно из таких решений, первой в мире представила прототип общения с генеративной языковой моделью при помощи жестового языка в открытом доступе. Это стало возможно благодаря использованию GigaChat API, программного интерфейса доступа к сервису GigaChat. Генеративная модель GigaChat сама, без дополнительных преобразований, понимает контекст распознанных жестов. Например, распознанные отдельные слова: «Я Идти Улица Гулять» сервис сам преобразовывает в корректную фразу: «Я пошел гулять на улицу», сохраняя контекст передачи информации.

Текущая версия модели позволяет распознавать более 2500 жестов, включая понимание дактиля (произношение слов по буквам) и возможность распознавать составные жесты. Кроме того, модель понимает терминологию по темам банковской сферы, транспорта, животных, и даже несколько слов из сферы медицины и образования. Этот объем покрывает существенную часть словаря русского жестового языка, позволяя создавать сервисы с нужным прикладным применением.

На базе этой модели были обучены нейросети для распознавания американского жестового языка, которые заняли первую строчку в публичном рейтинге WLASL-2000. Достичь такого результата позволило использование самого разнообразного и большого в мире датасета для распознавания русского жестового языка — Slovo. Датасет и обученная на нем модель выложены в открытый доступ.

Другая команда исследователей, из подразделения Sber AI во благо общества, разработала и опубликовала в открытом доступе легкую модель распознавания жестового языка, не требовательную к вычислительным ресурсам. Модель работает на CPU, что снижает себестоимость решений, создаваемых на ее основе. Это дает возможность широкому кругу разработчиков проектировать инклюзивное программное обеспечение, например, продукты и сервисы для коммуникации или инструменты для изучения жестового языка. На сегодняшний день алгоритм распознает 1600 жестов и преобразовывает в слова до трёх жестов в секунду на стандартных персональных компьютерах. В 2024 году планируется тестирование и внедрение модели распознавания русского жестового языка и решений на ее основе в ряде регионов России.

Андрей Белевцев, старший вице-президент, СTO, руководитель блока «Технологи» Сбербанка:

«Сервисы для распознавания русского жестового языка и созданная Сбером система искусственного интеллекта GigaChat позволят преодолеть коммуникационный разрыв и сделают мир доступнее для людей с нарушением слуха. Модели могут использоваться в рамках исследований, позволяющих развивать сервисы для пользователей с инвалидностью. Например, для создания доступной среды в многофункциональных центрах (МФЦ), в транспортной отрасли (аэропорты, вокзалы, метро), в больницах для общения пациента и врача, в банковских сервисах и адаптации онлайн и оффлайн-образования».

Фото: freepik.com

Общество / другие новости из раздела

Движение трамваев до Медгородка будет закрыто на четыре дня Экс-чемпион мира по боксу готов построить свою школу в Челябинске, объявлены слушания Отключения воды, газа и электричества в Челябинске 22 мая Челябинка Комбарова взяла серебро Командного чемпионата России по легкой атлетике Обладатель Кубка Стэнли Скотт Уилсон стал игроком магнитогорского «Металлурга» Магнитогорский «Металлург» продлил контракты с американцем Джонсоном и шведом Прессом В аэропорту Челябинска почти на 16 часов задерживается самолет в Новый Уренгой Челябинец отсудил 80 тыс. у авиакомпании за задержанный из-за снегопада рейс Shaman и Вячеслав Бутусов выступят на 95-летнем юбилее Магнитогорска В Челябинске запретили стоянки электросамокатов во дворах и перед соцучреждениями Депутаты Челябинской гордумы повысили плату за содержание жилых домов на 5,5% Руководители и специалисты ММК повысили квалификацию
Опрос

Какие у Вас планы на лето?

  • Выехать на природу, позагорать или искупаться
    28%
  • Ничего не делать, а просто расслабленно отдыхать
    11%
  • Поездка на автомобиле по разным городам
    7%
  • Дача, сад, огород
    45%
  • Еще не решил, подумаю позже
    9%

Всего проголосовало: 170

Все опросы