Как с вами связаться

Введите сообщение

Как с вами связаться

Введите сообщение

Лаборатория T-Bank AI Research создала новый метод обучения больших языковых моделей

8 617

    Учёные из T-Bank AI Research улучшили точность и безопасность ИИ-ответов на 15%. Исследователи из лаборатории T-Bank AI Research разработали новую методику обучения больших языковых моделей (LLM), основанную на методах Trust Region, широко используемых в ИИ. Этот подход позволил значительно повысить качество ответов искусственного интеллекта, улучшив их на 15% по пяти ключевым параметрам. Результаты работы были высоко оценены научным сообществом и представлены на конференции ICRL в Сингапуре с 24 по 28 апреля 2025 года. Это одно из ведущих мероприятий в области машинного обучения и ИИ уровня А. Основная идея Современные языковые модели, обучаясь на больших объемах данных, со временем теряют качество из-за долгой тренировки. Исследователи предложили использовать усовершенствованные методы Trust Region, которые позволяют моделям оставаться в заданных рамках и избегать избыточной оптимизации. В экспериментах новый метод был протестирован на метриках Alpaca Eval 2.0 и Arena Hard, оценивающих вежливость, решение сложных задач и обобщение знаний. Результаты показали, что модель с Trust Region улучшила качество ответов с 2.3 до 15.1 процентных пунктов по сравнению с традиционными подходами. Это означает, что виртуальные ассистенты и чат-боты станут более точными и эффективными. При обучении языковых моделей существует риск «заблуждения» из-за избыточной оптимизации. Модель может начать генерировать только вежливые фразы без содержания или сосредоточиться на случайных ошибках. Чтобы избежать этого, учёные предложили периодически обновлять «настройки по умолчанию». Trust Region позволяет моделям отмечать ключевые ориентиры на пути к оптимизации. Это помогает избежать отклонений и быстрее достигать целевой точки. В отличие от стандартных методов, где используются фиксированные параметры, Trust Region применяет два подхода: 1. Мягкое обновление: небольшие изменения на каждом шаге обучения. 2. Жёсткое обновление: полное обновление модели с определённой периодичностью. Эксперименты показали, что эти обновления делают ответы моделей более понятными и безопасными. Например, модели, обученные с Trust Region, сокращали тексты на 10–15% лучше, чем традиционные методы. Они реже путались в сложных задачах и точнее следовали инструкциям пользователей. Метод Trust Region можно применять в различных областях, таких как образование, медицина и другие сферы, где используются виртуальные ассистенты и чат-боты. Это позволит снизить количество непонятных ответов и улучшить качество рекомендаций. Основные преимущества метода: 1. Улучшение качества: тексты, сгенерированные с Trust Region, превосходят традиционные методы по пяти параметрам: точность, связность, стиль, логика и информативность. 2. Снижение эффекта избыточной оптимизации: модели меньше «зацикливаются» на случайных ошибках. 3. Простота реализации: метод легко интегрируется в существующие алгоритмы. В будущем Trust Region станет основой для более эффективных языковых моделей и новой парадигмы в развитии ИИ. Борис Шапошников, руководитель научной группы AI Alignment, лаборатория исследований искусственного интеллекта T-Bank AI Research: «Наш новый подход позволяет сохранять баланс между способностями модели решать новую узкую задачу и общим пониманием картины мира, что открывает возможности для создания более гибких и адаптивных моделей. Это направление еще далеко не исчерпано — у ученых остается большое пространство для дальнейших исследований ИИ и улучшений, которые могут привести к новым прорывам в оптимизации языковых моделей и их применении в реальном мире». Источник: www.tbank.ru*

    Пост взят с международного финтех-медиа ресурса


    Другие новости сообщества / Т-ТЕХНОЛОГИИ: последние новости сегодня

    EXPRESS NEWS

    • Президент Бангладеш Шахабуддин Чуппу намерен в пятницу подать в отставку. Об этом со ссылкой на источники сообщил Reuters

    • Сергей Лавров прибыл в Киргизию. 24 июля он примет участие в совещании глав МИД стран ШОС
      Сергей Лавров прибыл в Киргизию. 24 июля он примет участие в совещании глав МИД стран ШОС
    • Рубио заявил, что у него был «хороший, честный разговор» с Лавровым. Также он добавил, что США готовы сыграть конструктивную роль

    • Рубио сообщил, что обсудил с Лавровым отношения между США и РФ
      Рубио сообщил, что обсудил с Лавровым отношения между США и РФ
    • Трамп считает, что Иран очень скоро будет готов к заключению сделки с США. «Каждый раз, когда они согласовывают сделку, они хотят изменить ее. Они не готовы, но очень скоро они будут готовы», — заявил американский лидер

    • Авиаперевозки пассажиров между Россией и Китаем в этом году выросли почти на 50%. Как сообщили РИА Новости в Минтрансе России, в январе-мае они превысили 900 000 человек

    • Встреча с Рубио согласована и состоится 23 июля в первой половине дня. Лавров сообщил, что он поинтересуется у Рубио о словах Трампа относительно возможности скорого урегулирования конфликта на Украине
      Встреча с Рубио согласована и состоится 23 июля в первой половине дня. Лавров сообщил, что он поинтересуется у Рубио о словах Трампа относительно возможности скорого урегулирования конфликта на Украине
    • Тегеран обращался к Вашингтону по поводу переговоров для урегулирования вооруженного конфликта, но США не считают, что Иран настроен серьезно. Об этом заявил американский госсекретарь Марко Рубио

    • Защита и обвинение по делу Мадуро предложили начать суд по существу в июне 2027 года. Об этом говорится в электронной базе суда Нью-Йорка
      Защита и обвинение по делу Мадуро предложили начать суд по существу в июне 2027 года. Об этом говорится в электронной базе суда Нью-Йорка
    • Изоляции РФ на мировой арене нет и даже не предвидится. В «двадцатке» и АТЭС спрос на встречи с Лавровым всегда огромный. Об этом заявил в интервью ТАСС посол по особым поручениям российского МИД Марат Бердыев

    • США транслируют сигнал, что хотят видеть Путина на саммите «двадцатки» в Майами. Об этом заявил в интервью ТАСС посол по особым поручениям МИД РФ. По мнению Марата Бердыева, «это не политический реверанс, а рациональная логика»

    • Затраты США на военную операцию против Ирана составляют к настоящему моменту порядка $37,5 млрд. Об этом заявил американский военный министр Пит Хегсет

    • Трамп утверждает, что Иран стремится к проведению новой встречи с США: «Они отчаянно хотят встретиться. Но пока они не будут готовы значимым образом, у нас даже нет заинтересованности в этом»

    • «Если что-то подобное произойдет, мы об этом позаботимся». США примут меры, если хуситы введут морскую блокаду Саудовской Аравии, заявил Трамп
      «Если что-то подобное произойдет, мы об этом позаботимся». США примут меры, если хуситы введут морскую блокаду Саудовской Аравии, заявил Трамп
    • США могут ввести новые пошлины на импорт из Канады из-за лесных пожаров, сообщил Трамп. Он добавил, что в американском штате Мичиган ранее из-за загрязнения воздуха была нарушена работа некоторых компаний

    • Путин продлил безвизовый въезд для граждан Китая до конца 2027 года
      Путин продлил безвизовый въезд для граждан Китая до конца 2027 года
    • Энди Бернэм вступил в должность премьера Великобритании, получив от Карла III мандат на формирование правительства, сообщает Букингемский дворец
      Энди Бернэм вступил в должность премьера Великобритании, получив от Карла III мандат на формирование правительства, сообщает Букингемский дворец
    • Король Карл III принял отставку Стармера с поста премьера Британии, сообщила королевская пресс-служба
      Король Карл III принял отставку Стармера с поста премьера Британии, сообщила королевская пресс-служба
    • Германия не делала практических шагов для возобновления диалога с Россией, заявил Песков. Он отметил, что Россия остается открытой к диалогу с Европой и никогда не была инициатором сворачивания отношений

    • Россия готова содействовать мирному урегулированию разногласий как между США и Ираном, так и между иранцами и арабами. Об этом замглавы МИД РФ Александр Алимов заявил «Известиям»
      Россия готова содействовать мирному урегулированию разногласий как между США и Ираном, так и между иранцами и арабами. Об этом замглавы МИД РФ Александр Алимов заявил «Известиям»
    • Трамп заявил о поддержке планов Бернэма по наращиванию добычи нефти в Северном море. Нефть "превратит Соединенное Королевство из нищей страны в одно из самых богатых в мире государств", отметил американский президент

    • Дональд Трамп заявил, что его совершенно не волнует приостановка властями Ирана выполнения обязательств по меморандуму о взаимопонимании с США

    • Артистов и спортсменов России ни у кого отменить не получится, заявил в интервью ТАСС американский продюсер Стивен Мао. Он убежден, что «русская культура, русское искусство и русский спорт принадлежат миру»

    • Трамп пригрозил Канаде увеличением таможенных пошлин из-за лесных пожаров, дым от которых окутал несколько крупных городов США
      Трамп пригрозил Канаде увеличением таможенных пошлин из-за лесных пожаров, дым от которых окутал несколько крупных городов США
    • Венесуэла получила доступ к собственным средствам в МВФ в размере $346 млн, которые будут направлены на ликвидацию последствий землетрясения. Об этом сообщила уполномоченный президент боливарианской республики Делси Родригес

    • Глава FIFA и Белый дом обсудят риски проведения финала чемпионата мира по футболу. Об этом сообщил корреспондент Sky News Роб Харрис. Риски связаны с дымом от лесных пожаров в районе Нью-Йорка и Нью-Джерси

    • Apple меньше суток пробыла самой дорогостоящей компанией в мире. Ее обошла Nvidia, свидетельствуют данные торгов

    • Трамп пригрозил Канаде увеличением таможенных пошлин из-за лесных пожаров, дым от которых окутал несколько крупных городов США

    • Энди Бернэм объявлен новым лидером Лейбористской партии и 20 июля займет пост премьер-министра Великобритании
      Энди Бернэм объявлен новым лидером Лейбористской партии и 20 июля займет пост премьер-министра Великобритании
    • Россия никогда не вмешивалась во внутренние дела других стран и рассчитывает, что никто не будет вмешиваться в ее, заявил Песков

    • Аналитики продолжают повышать прогнозы по STOXX 600 на конец этого года. Самые большие быки — UBS и Deutsche
      Аналитики продолжают повышать прогнозы по STOXX 600 на конец этого года. Самые большие быки — UBS и Deutsche
    • Журналист Карлсон заявил о риске народной революции в США: «Мы имеем дело с лидерами [страны], которые презирают нас, принимают нас за нечто само собой разумеющееся, которые используют нас, лгут нам, которым в действительности нет дела до нас»

    • Разведка США считала, что Меркель не хотела переизбрания Трампа в 2020 году. Об этом говорится в докладе, рассекреченном Белым домом

    • Ситуация в Мали расценивается как относительно стабильная, заявил ТАСС замминистра иностранных дел РФ Георгий Борисенко

    • Власти США выявили около 278 000 неграждан, зарегистрированных для голосования на федеральных выборах, их может быть еще больше, заявил Трамп
      Власти США выявили около 278 000 неграждан, зарегистрированных для голосования на федеральных выборах, их может быть еще больше, заявил Трамп
    • Трамп заявил, что рассекречивает данные о шокирующей уязвимости систем голосования в США. Он утверждает, что КНР в 2020 году получила несанкционированный доступ к данным 220 млн избирателей в США

    • Причиной введения пошлин США на импорт из Бразилии стали ультимативные требования о беспрепятственном доступе на внутренние рынки южноамериканской республики. Об этом заявил глава МИД Бразилии Мауро Виэйра. «Иными словами, американские власти потребовали от нас капитуляции», — добавил Виэйра

    • Трамп даст прием в честь FIFA в Нью-Йорке и будет присутствовать на финале ЧМ по футболу, заявила пресс-секретарь Белого дома Кэролайн Ливитт
      Трамп даст прием в честь FIFA в Нью-Йорке и будет присутствовать на финале ЧМ по футболу, заявила пресс-секретарь Белого дома Кэролайн Ливитт
    • Мировые акции сильно снижаются на азиатской сессии. В Азии продолжается распродажа акций техов, акции SoftBank падают на 10%, TSMC падает на 5%, несмотря на сильный отчет
      Мировые акции сильно снижаются на азиатской сессии. В Азии продолжается распродажа акций техов, акции SoftBank падают на 10%, TSMC падает на 5%, несмотря на сильный отчет
    • США и Иран продолжают обмениваться ударами. Трамп в обращении к нации заявил, что США скоро начнут получать выгоду от конфликта с Ираном так же, как они уже получают выгоду от Венесуэлы

    Вы уверены, что хотите выйти из аккаунта?