Amazon Web Services (AWS) и Hugging Face объявили о расширении сотрудничества для ускорения обучения и развертывания моделей для генеративных приложений ИИ.
Миссия компании Hugging Face заключается в том, чтобы "демократизировать хорошее машинное обучение, по одному коммиту за раз". Компания наиболее известна своей библиотекой Transformers для PyTorch, TensorFlow и JAX, которая может поддерживать задачи от обработки естественного языка, компьютерного зрения до аудио.
На Hugging Face представлено более 100 000 бесплатных и доступных моделей машинного обучения, которые в общей сложности загружаются более миллиона раз в день исследователями, специалистами по обработке данных и инженерами машинного обучения.
В рамках партнерства AWS станет предпочтительным облачным провайдером для Hugging Face, что означает, что разработчики смогут получить доступ к инструментам от Amazon SageMaker, до AWS Trainium, до AWS Inferentia, и оптимизировать производительность своих моделей для конкретных случаев использования по более низкой цене.
Как отметили обе компании, в основе этого объявления лежит необходимость сделать ИИ открытым и доступным для всех. Hugging Face заявила, что обе компании будут "предоставлять модели нового поколения мировому сообществу ИИ и демократизировать машинное обучение".
"Создание, обучение и развертывание больших моделей языка и зрения - это дорогой и трудоемкий процесс, требующий глубоких знаний в области машинного обучения", - отмечается в блоге AWS. "Поскольку модели очень сложны и могут содержать сотни миллиардов параметров, генеративный ИИ в значительной степени недоступен для многих разработчиков".
"Будущее ИИ уже наступило, но оно неравномерно распределено", - сказал Клемент Деланг, генеральный директор Hugging Face, в блоге компании. "Доступность и прозрачность - это ключи к обмену информацией о прогрессе и созданию инструментов для разумного и ответственного использования этих новых возможностей".
Читатели AI News знают о демократизации машинного обучения с точки зрения AWS. Выступая в сентябре, Фелипе Чиес изложил суть предложения: "Многие из наших API-сервисов не требуют машинного обучения для клиентов, а в некоторых случаях конечные пользователи могут даже не подозревать о том, что машинное обучение используется для создания новых возможностей. Эти сервисы позволяют легко внедрять ИИ в приложения без необходимости создания и обучения алгоритмов ML.
"Если мы хотим, чтобы машинное обучение получило такое широкое распространение, как мы того хотим, нам нужно сделать его гораздо более доступным для людей, которые не являются специалистами в области машинного обучения. Поэтому, когда мы создали [например] Amazon SageMaker, мы разработали его как полностью управляемую услугу, которая устраняет тяжесть, сложность и догадки с каждого этапа процесса машинного обучения, позволяя обычным разработчикам и ученым успешно использовать машинное обучение".
Это объявление можно рассматривать не только в контексте демократизации технологии, но и с точки зрения конкуренции. Продвижение Microsoft на рынке с помощью OpenAI и ее Bing под влиянием ChatGPT - хотя и с некоторыми заминками - вызвало волну; то же самое можно сказать и о Google с Bard, опять же не совсем безошибочно. В любом случае, ставки для крупнейших представителей больших технологий возросли, а поле битвы в "войнах ИИ" обострилось. Компания Hugging Face уже сотрудничает с Microsoft, анонсировав в мае услугу конечных точек для безопасного развертывания и масштабирования моделей Transformer на Azure.