ShinkaEvolve: новая эра эволюционных алгоритмов от Sakana AI
Sakana AI представила ShinkaEvolve — новый open-source фреймворк на основе LLM, способный значительно ускорить научные открытия. В отличие от традиционных эволюционных систем, работающих методом перебора, ShinkaEvolve достигает впечатляющих результатов всего за сотни итераций.
Фреймворк, название которого происходит от японского слова «эволюция», вдохновлен принципами естественного отбора и адаптации. В задаче упаковки кругов ShinkaEvolve нашел новое оптимальное решение за 150 выборок, в то время как другим методам требовались тысячи.
Система успешно применяется в математических задачах AIME, где она генерирует новые шаблоны, превосходящие существующие, а также в соревновательном программировании ALE-Bench, где улучшила результаты и заняла второе место. Кроме того, ShinkaEvolve обнаружил новую функцию потерь для MoE-моделей, повысив эффективность их специализации.
Эффективность ShinkaEvolve основана на умном отборе родителей, фильтрации по новизне и использовании ансамбля из нескольких LLM, выбираемых с помощью bandit-алгоритма в реальном времени.
ShinkaEvolve доступен для сообщества и призван ускорить научные исследования и сделать их более доступными.
В общем, если ученым и инженерам нечего делать, теперь у них есть с чем поиграть. Наверняка, это приведет к каким-нибудь выдающимся результатам, или хотя бы к интересным презентациям.
- Комментарии