Лог и исключения

Когда я открываю ленту новостей, вижу очередной обзор новой языковой модели. Дальше по шаблону: таблица с арены по синтетическим тестам, и вывод о том, что эта модель стала «умнее» предыдущей. Новые модели выходят часто, иногда обзоры успевают выйти в тот же день — все просто смотрят на них и радуются, что новая модель набрала на три-четыре очка больше. Завёл канал и я — пересказы чужих мыслей у меня тоже будут, да как же без этого. Только про работу с LLM напишу, когда появится собственный замер на моих реальных задачах, а не данные из чужих рейтингов...