Казахский чат-бот в сфере ИИ появится до конца года

4268
Гульмира Кунапия
корреспондент

Как отмечают авторы проекта, для каждой высокоразвитой страны важно поставить свою языковую модель, так как это дает независимость от корпораций и от других стран

Фото: Kazpravda.kz / Адильбек Тауекелов

Институт умных систем и искусственного интеллекта (ISSAI) при NU к концу года презентует отечественный чат-бот на казахском языке. Об этом стало известно сегодня на брифинге в Астане, передает корреспондент Kazpravda.kz 

Аналитик данных Мадина Абдрахманова ISSAI отметила, что в основе чат-бота лежит KAZ-LLM – национальная языковая модель. Работа над ней началась в апреле. Существует также LLAMA 3 от Meta – это современная модель и архитектура LLM с открытым исходным кодом. Она была хорошей отправной точкой для развития KAZ-LLM.

Поскольку языковые модели используются как государственным, так и частным сектором в качестве технологии общего назначения, использование услуг LLM крупных технологических компаний через облако сопряжено со множеством рисков. Они связаны с национальной и информационной безопасностью – от действия санкций до культурной идентичности и утечки данных.

Как рассказали ученые, в сфере создания национальных языковых моделей идет большая конкуренция в Южной Корее, там в этом соревнуются много корпоративных структур, и их версии на корейском языке гораздо сильнее, чем Gemini. Французы тоже работают на своей версии.

«Для каждой высокоразвитой страны важно поставить свою языковую модель, потому что это дает независимость от корпораций, а также от других стран. Мы хотим сохранить казахский язык, необходимо создавать инструменты для этого», – заявила Мадина Абдрахманова.

В ходе брифинга разработчики продемонстрировали demo-версию одного из проектов – виртуальный аватар Umay.

По словам ученых, Umay способна не только распознавать пользователей, но также определять их возраст, пол и даже эмоциональное состояние. Потенциально такую модель можно использовать в образовании – в качестве репетиторов, поисковиков. В основе этой системы лежит ChatGPT от OpenAI, хотя он известен своей неоптимальной работой на казахском языке. Чтобы преодолеть это ограничение, Umay использует усовершенствованную модель нейронного машинного перевода Tilmash, также созданного Институтом умных систем и искусственного интеллекта.

Как отметили разработчики, Tilmash по нескольким стандартным показателям конкурирует с системами перевода таких гигантов отрасли, как Google Translate и Yandex Translate. Именно отечественная модель машинного перевода, созданная ISSAI, позволила переводить данные из открытых источников для другого проекта – языковой модели.

Для бесперебойной работы модель должна содержать много информации. Учитывая, что интернет-контента на казахском языке всего 0,2%, онлайн-переводчик призван переводить высококачественную информацию о мире с английского на казахский язык.

«Языковая модель – это продукт, который нацелен на поддержание запросов казахстанцев. Мы делаем не просто модель ради исследования, но также создаем полноценную платформу, где вы можете с ней общаться. Для того, чтобы конечный пользователь мог ее использовать, мы создаем интерфейс, очень похожий на ChatGPT, благодаря чему казахстанцы смогут заходить на сайт и задавать вопросы на казахском языке. Наша задача - натренировать модель на четырех языках (казахский, английский, русский, турецкий). Сейчас она тренируется на казахском языке», – пояснила аналитик.

В планах стоит задача интегрировать в модель другие тюркские языки: татарский, узбекский, кыргызский.

Существует огромное количество областей применения языковой модели, с помощью которой можно создавать репетиторов, ассистентов, связанных с законотворческой деятельностью, то есть в любой области, где важно оптимизировать работу, быстро генерировать и понимать текст, отвечать на запросы.

В институте обещают, что окончательная версия модели будет готова к декабрю. Предполагается, что модель будет очень похожа на ChatGPT по дизайну и доступна по подписке обычным пользователям, а также в специальном формате – для стартапов.

 

Популярное

Все
Токаев произвел кадровое назначение
Казахстан отмечает Всемирный День охраны труда
Для лесхозов Восточного Казахстана закупят больше 100 единиц техники
Более 600 млн кубометров воды направит Кыргызстан в поливной период этого года
Возврат активов: Более 1 млрд тенге выделили на водоснабжение в Акмолинской области
В Иране объявили День траура по жертвам взрыва в порту
Стартовал десятый юбилейный проект Virtuosos с участием Димаша
Пособия ко Дню защитника Отечества получат ветераны боевых действий из Жетысу
В Туркестанской области построят музыкальную школу за счет возвращенных активов
Свыше 200 тысяч мешкотар заготовлено силами военнослужащих Нацгвардии в СКО
Семейство краснокнижных бурых медведей заметили в Алматинской области
Новое землетрясение зафиксировали в Турции
Китайскую компанию оштрафовали за экологические нарушения в ВКО
Кто из казахстанских спортсменов взял медали в международных соревнованиях
Имущество на 181 млн тенге арестовали у продавцов песка в области Абай
Известный румынский хор впервые выступит в Казахстане
Кашаган зовет
На озере Балхаш задержали браконьеров с уловом почти в 200 кг
В Жамбылской области построят две крупные ветряные электростанции
Буллинг в школе из-за видео: блогер извинилась перед мальчиком
Начато возведение крупного металлургического завода
Почему огородик в Шымкенте стал дороже сайрамского гектара?
Гвардеец мечтает озвучить Парад в Астане
Инвесторы предлагают построить несколько линий ЛРТ между Алматы и областью
Президент назначил новых послов в Монголии, Дании и Шри-Ланке
Токаев освободил от должности посла в Монголии
Удивительная судьба Масима Якубова
Гурбангулы Бердымухамедов прибыл с визитом в Казахстан
Токаев и Бердымухамедов посетили мавзолей Ходжи Ахмеда Яссауи
Акимат выделит деньги на дорогу к туркомплексу в Жамбылской области - прокуратура
Автоледи, не пропустившая машину скорой помощи в Алматы, наказана
Школьное меню: прокуратура ЗКО отменила госзакупки на сумму на 70 млн тенге
«Краткая история Шынгыз-хана» издана на русском и английском языках
Цифровизация учета газа в Шымкенте: объявлены первые результаты
Новая гробница найдена в Египте
Трижды обманувший смерть
Грамот на 450 миллионов тенге хотел закупить отдел образования в Талдыкоргане
Дом на стенах держится
Результаты исследования «Тюркский Барометр 2024» представили в Азербайджане
Трагикомедия «Кызыл дамбал» вышла в общереспубликанский прокат
Как отдохнут казахстанцы на майские праздники
В хаосе городской застройки Уральска разбирался Антикор
Жительница Карагандинской области отсудила 10 млн тенге за проданный ей автомобиль с дефектом
Самый отдаленный район Жамбылской области получит новый импульс развития
В Уральске трое неизвестных украли деньги из терминала
Qarmet подключится, и газ подешевеет
Улицы в честь ветеранов Великой Отечественной войны планируют назвать в Шымкенте
Акимат Алматинской области ответил на жалобу автомобилистов
Инновационный завод в Мангистауской области: от науки к практике
В Талдыкоргане 15 человек уже год ждут купленные «по предзаказу» телефоны
Нацгвардия отдала дань памяти военнослужащим Казбата
Ерлан Суттибаев назначен заместителем Управляющего делами Президента РК
Ответственность за «овербукинг» вводят в Казахстане
Педагоги из СКО достойно представили регион на республиканской олимпиаде
США хотят получить контроль над природными ресурсами Украины без гарантий её безопасности
Формула успеха для Казахстана
Личный состав Нацгвардии перешел на летнюю форму одежды
Пятитомник «Каныш» – академическое собрание трудов первого президента Академии наук Казахстана
В Казахстане стартовало профилактическое мероприятие «Безопасная дорога»
Бойцы Нацгвардии задержали около 5 000 правонарушителей

Читайте также

Самый длинный в мире подводный туннель построят из Дании в …
В Китае создали крупнейший в мире самолет-амфибию
Во Франции отклонили закон о шифровании сообщений в мессенд…
Первую сеть стандарта 10G запустили в Китае

Архив

  • [[year]]
  • [[month.label]]
  • [[day]]