Когда речь заходит о прогрессе в искусственном интеллекте, разговор почти неизбежно сворачивает в сторону вычислительных ресурсов: сколько чипов задействовано в ИИ, сколько стоит обучение, насколько выросло число параметров по сравнению с предыдущим поколением. Это понятная логика, за очевидностью которой скрывается вопрос, который математики задают уже несколько десятилетий: а нет ли способа получать сопоставимое качество модели, не удваивая каждый раз расходы на вычисления? Иван Оселедец — доктор...