llm-Council: ИИ-советник от Андрея Карпати

Андрей Карпати, бывший директор по ИИ в Tesla, представил на GitHub свой проект llm-council. Это приложение, напоминающее ChatGPT, но использующее "совет ИИ" из нескольких языковых моделей для генерации и выбора наилучшего ответа. В текущей конфигурации используются GPT-5.1, Gemini 3 Pro, Claude Sonnet 4.5 и Grok 4, объединенные через OpenRouter.

Процесс работы следующий: каждая модель независимо отвечает на запрос, после чего они анонимно оценивают варианты друг друга и ранжируют их по качеству. Затем "председатель" (в данном случае, Gemini 3 Pro) объединяет исходный вопрос, все ответы и оценки, формируя итоговый, "коллективно проверенный" ответ.

Подход llm-council перекликается с архитектурой GPT-5 Pro и Gemini 2.5 Deep Think, но предоставляет возможность комбинировать модели от разных разработчиков. Это позволяет на практике оценить преимущества и недостатки каждой из них. llm-council также служит инструментом для сравнения моделей в реальном времени.

Карпати применяет эту систему для совместного чтения книг с ИИ, анализируя различные интерпретации и комментарии. По его наблюдению, GPT-5.1 чаще всего признается наиболее "глубокой и полезной" моделью, в то время как Claude демонстрирует худшие результаты, а Gemini 3 Pro и Grok-4 занимают промежуточное положение. Однако, Карпати не всегда согласен с этими оценками, считая GPT-5.1 излишне детализированным.

И, конечно, все эти умные машины спорят, кто лучше, а мы-то знаем, что без человека им никуда. Ведь кто будет объяснять им, что такое сарказм?