Илон Маск присоединился к мнению других экспертов в области искусственного интеллекта о том, что реальных данных для обучения ИИ-моделей практически не осталось.
Американский миллиардер Илон Маск в четверг, 9 января 2025 года, в интервью с председателем Stagwell Марком Пенном заявил, что человечество исчерпало запас знаний для тренировки моделей искусственного интеллекта (ИИ).
«Мы исчерпали практически весь накопленный объём человеческих знаний для обучения ИИ. Это произошло фактически в прошлом году», — заявил Маск во время трансляции беседы с председателем Stagwell Марком Пенном на платформе X.
Маск считает, что для дальнейшего развития искусственного интеллекта необходимо использовать "синтезированную информацию" генерируемых самими ИИ-моделями, таким образом это создаст процесс "самообучения".
Крупные технологические компании, включая Microsoft, OpenAI и Anthropic, уже используют синтетические данные для обучения своих флагманских ИИ-моделей. По оценкам Gartner, 60% данных, используемых для проектов в области ИИ и аналитики в 2024 году, были сгенерированы синтетически. Модель Microsoft Phi-4, открытый код которой был опубликован на этой неделе, обучалась на комбинации синтетических и реальных данных. Аналогичный подход использовался при создании моделей Google Gemma. Anthropic применила синтетические данные при разработке одной из своих самых эффективных систем — Claude 3.5 Sonnet.
Обучение на синтетических данных имеет ряд преимуществ, включая экономическую эффективность. Стартап Writer утверждает, что их модель Palmyra X 004, разработанная почти полностью на синтетических источниках, обошлась всего в $700 000 — по сравнению с оценочной стоимостью в $4,6 миллиона за сопоставимую модель OpenAI.
Однако существуют и недостатки. Некоторые исследования показывают, что синтетические данные могут привести к «коллапсу модели», когда ИИ становится менее «креативным» и более предвзятым в своих результатах, что в конечном итоге может серьёзно нарушить его функциональность. Поскольку модели создают синтетические данные на основе уже существующих, любые предубеждения и ограничения в исходных данных будут воспроизводиться в их результатах.
Маск считает все более вероятным, что уже к концу 2025 года искусственный интеллект превзойдет способности человека. В декабре 2024-го в Х он пояснил, что "ИИ превзойдет интеллект любого человека к концу 2025 года и, возможно, всех людей к 2027/2028 году". При этом "вероятность того, что ИИ превзойдет интеллект всех людей, вместе взятых, к 2030 году, составляет 100%", утверждает бизнесмен.
Многие эксперты в области разработки ИИ предполагают, что человечеству в конечном итоге удастся создать компьютерную систему, которая приобретет способность мыслить и осознавать себя как личность. Подобные машины смогут совершенствовать себя при решении любого рода задач, что в перспективе резко ускорит научно-технологический прогресс и приведет к так называемой технологической сингулярности - взрывообразному и неуправляемому технологическому развитию цивилизации.
Спасибо, что прочитали данную статью! Ставьте лайк и пишите своё мнение в комментариях. Предлагайте свои темы для следующей статьи.