Искусственный интеллект МТС научился писать на татарском языке

Компания МТС представила разработанную MTS AI новую версию большой языковой модели Cotype Lite для работы с текстами на татарском языке. Она получила название Rehmet — что в переводе означает спасибо.
MTS AI, один из ведущих центров компетенций по искусственному интеллекту в России, показал новую версию своей большой языковой модели Cotype на форуме Kazan Digital Week. LLM способна обрабатывать документы объёмом до 8 тысяч токенов (примерно 5 листов A4), извлекать и суммаризировать данные за несколько секунд.
Cotype Rehmet можно использовать в архивах, библиотеках, в государственных и частных организациях — везде, где есть потребность в обработке информации и анализе документов на татарском. Например, с помощью большой языковой модели можно ускорить обработку заявлений в государственные органы. Cotype извлечёт ключевую информацию, такую как тематика запроса, местоположение и личные данные заявителя, и передаст их в соответствующую базу данных. Как и другие модели семейства Cotype, эту версию можно устанавливать в контуре организации, что позволяет исключить утечки информации.
— Создавая большую языковую модель на татарском, разработчики MTS AI преследовали несколько целей, — рассказал исполнительный директор MTS AI Дмитрий Марков. — Во-первых, мы хотели поддержать многообразие языков, существующих в России, помочь им развиваться и быть востребованными в цифровую эпоху. Во-вторых, этот проект показал, что мы умеем адаптировать наши модели под любые научные и бизнес-задачи, в том числе и такие нетривиальные как обработка информации на языках народов России.
Чтобы модель Cotype Rehmet смогла понимать незнакомый язык, разработчики собрали датасет и перевели его с русского на татарский. После этого все данные и ответы модели проверили специалисты-тюркологи и носители языка.
По словам разработчиков, Cotype Rehmet входит в число лучших LLM в своём классе: она содержит 8 миллиардов параметров. При необходимости MTS AI может создать LLM на татарском с большим количеством параметров — до 70 миллиардов параметров, а также большим контекстным окном до 32 тысяч токенов, — чтобы модель умела выполнять такие задачи как перевод и генерация длинных текстов. Также компания MTS AI готова адаптировать модели семейства Cotype для других региональных языков России.
MTS AI — дочерняя структура ПАО «МТС» и один из крупнейших в России центров компетенций в сфере искусственного интеллекта. Компания разрабатывает продукты и решения на базе генеративного ИИ, технологии обработки естественного языка, синтеза и распознавания речи, а также компьютерного зрения. MTS AI также проводит научные и прикладные исследования, консультирует корпорации по вопросам внедрения искусственного интеллекта в бизнес-процессы. В структуре компании есть венчурный фонд, который инвестирует в перспективные разработки.
Ранее стало известно, что искусственный интеллект от МТС начнёт анализировать звонки и чаты с клиентами экосистемы.
Лента новостей
Россельхознадзор не пустил в Челябинскую область 10 тонн сала из Казахстана
Челябинские травматологи помогли соцработнице восстановиться после сложного перелома
Трассы превратятся в каток: синоптики выпустили экстренное предупреждение для Челябинской области
Ни за что не делайте этого 20 ноября: главный запрет Федотова дня, который убережёт от бед
В управлении ФСБ по Челябинской области сменился руководитель
Получили ли челябинцы дорогие подарки на Международный мужской день, выяснили аналитики
Сотрудники челябинского зоопарка сняли на видео обед пушистых альпак, уплетающих сосновую хвою
На западе Челябинской области значительно ускорили интернет
В Челябинской области перечислили 13 профессий с хорошими зарплатами и перспективой роста
На строительство ледового городка в центре Челябинска выделили почти 29 млн рублей
В Минэкологии объяснили, нужно ли спасать оставшихся на водоёмах Челябинской области лебедей
Из Челябинска до «Солнечной долины» с 28 ноября запустят мультимодальный поезд с автобусом
В Челябинск съехалась трудовая молодёжь со всей страны
В Челябинской области ночью на объездной дороге насмерть сбили 51-летнего пешехода
Водителям Челябинской области объяснили, как не купить опасную незамерзайку перед морозами
В Челябинской области при столкновении двух «Лад» погибла женщина-водитель