Китайский гигант Baidu представил новую языковую модель Ernie 5.1. Несмотря на то, что затраты на её претрейн составили всего 6% от типичного бюджета моделей такого класса, новинка показала феноменальные результаты в тестах. Меньше параметров — больше эффективности Ernie 5.1 — это «облегченная», но более умная версия предыдущего флагмана Ernie 5.0. Мировое признание и бенчмарки В глобальном рейтинге Arena Search Leaderboard Ernie 5.1 заняла: По заявлениям разработчиков, в агентских задачах (выполнение сложных цепочек действий) модель обходит DeepSeek-V4-Pro, а в математике и логических рассуждениях идет вровень с Gemini 3.1 Pro. Магия методики Once-For-All Как Baidu удалось так сильно сэкономить на обучении? Секрет в подходе Once-For-All (OFA). Суть метода в том, что целое семейство моделей обучается за один проход. Все они делят общие веса, но различаются глубиной и количеством активных блоков MoE (Mixture of Experts). По сути, основной претрейн был сделан еще для Ernie 5.0, а для версии 5.1 инженеры просто «извлекли» из общего массива весов самую оптимальную конфигурацию. Борьба с «эффектом качелей» Часто при улучшении логики у моделей страдает креативность (так называемый эффект качелей). Чтобы этого избежать, Baidu применила сложный четырехэтапный файнтюнинг: Мнение редакции: Ernie 5.1 — это важный сигнал рынку. Эпоха бездумного наращивания параметров подходит к концу. Теперь побеждает тот, кто умеет максимально эффективно распоряжаться уже обученными весами и архитектурой MoE.