Исследовательская деятельность
Цифровизация якутского языка
Лаборатория ИИ РС(Я) совместно с лабораторией «Вычислительные технологии и искусственный интеллект» ФГАОУ ВО СВФУ им. М.К. Аммосова участвует в системной работе по внедрению якутского языка в цифровую среду и технологические решения.
Открытые датасеты якутского языка
| Датасет | Объем |
|---|---|
| sakha-corpus-mono | 2.06 GB |
| ru-to-sah-translate | 684 kB |
| sah-context-qa | 47,9 kB (11.5 тыс. строк) |
| sakha-russian-parallel | 151 MB |
Опубликованы для исследователей и разработчиков в целях популяризации использования якутского языка в цифровых платформах
Диалоговая модель
Обучена базовая диалоговая модель с поддержкой якутского языка на базе GigaChat-20B-A3B-instruct. Использовались блочное обучение, mixture of experts, bf16, Flash Attention 2, AdamW и gradient checkpointing.
GigaChat 3.1 от ПАО СБЕР
Модели GigaChat встречают пополнение в лице GigaChat Ultra Preview и GigaChat Lightning. Это первая отечественная модель с 702B параметрами, обученная с нуля без использования зарубежных весов с возможностью локального развертывания.
Переданные датасеты якутского языка дали возможность выйти на один технологический уровень с глобальными языками расширяя возможности цифровых сервисов, образования, культуры и межпоколенческой коммуникации
Оценка LLM на владение якутским языком
Для оценки языковых моделей по грамматической корректности, орфографической точности и семантической адекватности составлена экспертная оценка на основе слепой проверки профессиональными лингвистами СВФУ.
Интеллектуальный переводчик нормативно-правовых актов
Якутский язык признан государственным языком в Республике Саха (Якутия) наравне с русским. Все законы республики и официальные нормативно-правовые акты обязательны к переводу и публикуются на государственных языках — русском и якутском. Кроме того, госучреждения и муниципальные органы зачастую ведут официальную переписку на якутском языке и вынуждены обрабатывать обращения на обоих языках. В целях ускорения данного процесса и облегчения восприятия языка государственными гражданскими служащими создан специализированный сервис перевода – https://translate.lab14.ru