Американская компания Anthropic анонсировала созыв представителей политических кругов, исследователей и гражданского общества для выработки ответов на риски ускоряющегося прогресса ИИ. В том же заявлении компания поставила вопрос о возможности временной паузы в развитии технологии. Заявление вышло одновременно с публикацией отчета о продвижении модели Claude в направлении рекурсивного самоулучшения — способности ИИ-систем самостоятельно создавать более мощные версии самих себя — и на той же неделе, что Anthropic подала заявку на IPO с потенциальной оценкой компании в $1 трлн. В опубликованном материале Anthropic зафиксировала тенденцию роста возможностей Claude, которая при достаточных вычислительных ресурсах может, по оценке компании, привести к созданию системы, способной автономно проектировать собственного преемника. Такой сценарий квалифицируется как потенциальная угроза утраты людьми контроля над ИИ-системами. Читайте также Anthropic тайно подала заявку на IPO, опередив OpenAI Па