Казахский чат-бот в сфере ИИ появится до конца года

3968
Гульмира Кунапия
корреспондент

Как отмечают авторы проекта, для каждой высокоразвитой страны важно поставить свою языковую модель, так как это дает независимость от корпораций и от других стран

Фото: Kazpravda.kz / Адильбек Тауекелов

Институт умных систем и искусственного интеллекта (ISSAI) при NU к концу года презентует отечественный чат-бот на казахском языке. Об этом стало известно сегодня на брифинге в Астане, передает корреспондент Kazpravda.kz 

Аналитик данных Мадина Абдрахманова ISSAI отметила, что в основе чат-бота лежит KAZ-LLM – национальная языковая модель. Работа над ней началась в апреле. Существует также LLAMA 3 от Meta – это современная модель и архитектура LLM с открытым исходным кодом. Она была хорошей отправной точкой для развития KAZ-LLM.

Поскольку языковые модели используются как государственным, так и частным сектором в качестве технологии общего назначения, использование услуг LLM крупных технологических компаний через облако сопряжено со множеством рисков. Они связаны с национальной и информационной безопасностью – от действия санкций до культурной идентичности и утечки данных.

Как рассказали ученые, в сфере создания национальных языковых моделей идет большая конкуренция в Южной Корее, там в этом соревнуются много корпоративных структур, и их версии на корейском языке гораздо сильнее, чем Gemini. Французы тоже работают на своей версии.

«Для каждой высокоразвитой страны важно поставить свою языковую модель, потому что это дает независимость от корпораций, а также от других стран. Мы хотим сохранить казахский язык, необходимо создавать инструменты для этого», – заявила Мадина Абдрахманова.

В ходе брифинга разработчики продемонстрировали demo-версию одного из проектов – виртуальный аватар Umay.

По словам ученых, Umay способна не только распознавать пользователей, но также определять их возраст, пол и даже эмоциональное состояние. Потенциально такую модель можно использовать в образовании – в качестве репетиторов, поисковиков. В основе этой системы лежит ChatGPT от OpenAI, хотя он известен своей неоптимальной работой на казахском языке. Чтобы преодолеть это ограничение, Umay использует усовершенствованную модель нейронного машинного перевода Tilmash, также созданного Институтом умных систем и искусственного интеллекта.

Как отметили разработчики, Tilmash по нескольким стандартным показателям конкурирует с системами перевода таких гигантов отрасли, как Google Translate и Yandex Translate. Именно отечественная модель машинного перевода, созданная ISSAI, позволила переводить данные из открытых источников для другого проекта – языковой модели.

Для бесперебойной работы модель должна содержать много информации. Учитывая, что интернет-контента на казахском языке всего 0,2%, онлайн-переводчик призван переводить высококачественную информацию о мире с английского на казахский язык.

«Языковая модель – это продукт, который нацелен на поддержание запросов казахстанцев. Мы делаем не просто модель ради исследования, но также создаем полноценную платформу, где вы можете с ней общаться. Для того, чтобы конечный пользователь мог ее использовать, мы создаем интерфейс, очень похожий на ChatGPT, благодаря чему казахстанцы смогут заходить на сайт и задавать вопросы на казахском языке. Наша задача - натренировать модель на четырех языках (казахский, английский, русский, турецкий). Сейчас она тренируется на казахском языке», – пояснила аналитик.

В планах стоит задача интегрировать в модель другие тюркские языки: татарский, узбекский, кыргызский.

Существует огромное количество областей применения языковой модели, с помощью которой можно создавать репетиторов, ассистентов, связанных с законотворческой деятельностью, то есть в любой области, где важно оптимизировать работу, быстро генерировать и понимать текст, отвечать на запросы.

В институте обещают, что окончательная версия модели будет готова к декабрю. Предполагается, что модель будет очень похожа на ChatGPT по дизайну и доступна по подписке обычным пользователям, а также в специальном формате – для стартапов.

 

Популярное

Все
Назад в будущее
Олжас Бектенов: Мы должны видеть практические результаты научных исследований
Криминал уходит в «цифру»
Как нам трансформировать АПК
Главный ориентир – эффективное правосудие
Дорога к знаниям открыта!
В межгосударственных отношениях все вопросы важны
Экологическое «нездоровье» подтверждено наукой
В добрый путь, «Айналайын»!
Рыбная среда
Проблему нехватки пастбищ решает возврат земель
Подиум для равных
Жителей Темиртау напугало видео с разгуливающим тигром
Триумфальный «Экспромт» и неудержимый «Тумар»
Офтейк-контракты повышают конкурентоспособность
Дмитрий набирает форму
Переход на единый часовой пояс основан на множестве факторов
Из незаконного оборота изъято более пяти тонн запрещенных веществ
Тридцать детей с аутизмом будут заниматься велоспортом
Деньги любят счет
К дальнейшему усилению гарантий независимости судей
Студентов, пенсионеров и домохозяек в РК освободят от обязательного декларирования доходов
Какие изменения в области дорожного движения хотят ввести в Казахстане
Какой будет погода этой зимой в Казахстане
Арест, штрафы и лишение прав: участников беспредельного кортежа наказали в Конаеве
Люксовые авто, элитная недвижимость – главу благотворительного фонда подозревают в хищении 1,5 млрд тенге
Экологическая акция «Сдавай пакет – спасай планету!» прошла в Петропавловске
Нерадивых недропользователей лишат лицензий в Туркестанской области
Чем будут кормить в школьных столовых?
14-летняя тяжелоатлетка из Талдыкоргана стала чемпионкой РК среди взрослых
Казахстан присоединился к декларации о трехкратном увеличении атомной энергетики к 2050 году
Зачем конкурсы, если победитель заранее известен?
Глава государства посетил выставку сельхозтоваропроизводителей
Кызылординский рис: от поля до стола
Общественный контроль не помешает
Дружба – мотив серьезный
Эволюционирует «ныряющая» нить
Год большой работы и серьезных наград
Приоритеты и возможности казахско-корейского взаимодействия
С чего начинается «Родина»
Казахской государственности – 12 веков, 12 столетий
Водителя арестовали из-за стикера на госномере в Жамбылской области
Второе рождение трассы
Продукцию из четырех областей везут на очередную ярмарку в Астану
Премий для госслужащих больше не будет
Реконструкция близится к завершению
Пассажир в Шымкенте – «заяц» поневоле?
Директоров школ и завучей в Караганде лишили доплаты
Чеченка с казахской душой
Ставки по депозитам населения снижаются – аналитики
Этот день изменил судьбу
Какой должна быть новая концепция национальной истории
Восстановить утраченную популяцию куланов в Костанайской области пытаются ученые
В Казахстане утвердили нормы потребления тепловой энергии
До золота рукой подать
Метель и гололед прогнозируются в Казахстане до пятницы
Последняя в этом году сельскохозяйственная ярмарка проводится в Астане
Больничный теперь не подделаешь
Резкое похолодание ожидается в Казахстане в эти выходные
Президент прибыл с рабочим визитом в Казань

Читайте также

Карьерный эксперт прокомментировал запрет на смартфоны в шк…
Новый сервис появился в мобильном приложении eGov Mobile
Отследить свою кредитную и страховую историю казахстанцы мо…
Kaspi.kz получил разрешение турецких властей на покупку Hep…

Архив

  • [[year]]
  • [[month.label]]
  • [[day]]