известный математик Теренс Тао (смотрит на тебя с осуждением) отбомбился в мастодоне (это такой опенсорсный аналог твиттера) на тему того, что LLM-ки на самом деле не побеждают в математических олимпиадах; если сжать его пламенную речь, то LLM поставлены в тепличные условия, в которые людей никогда не ставят; на мой взгляд, это утверждение показывает, что товарищ Тао не понимает, как работает процесс улучшения качества в ИИ: начинаем с простых задачек, потом переходим к более сложным, но в упрощенных условиях, а потом уже, глядишь, и Ли Седоля победили
в этой связи стоит упомянуть про забавный issue в репе Gemini, там человек жалуется, что у него Gemini случайно протерял важные файлы (судя по названию папки - по работе с Claude; совпадение? не думаю!); этот случай, на мой взгляд, - проявление того же процесса, мы уже доверяем агентам важные действия, а они еще не выросли из своего sandbox'a
в качестве вывода возьму русскую народную пословицу "доверяй, но проверяй", в том числе LLM; такие дела
