35 подписчиков
✈️ Всё об ИИ – новый подкаст от Андрея Карпаты, сооснователя OpenAI и разработчика автопилота для Tesla.
Топовый эксперт расскажет обо всех стадиях обучения LLM. Лекция особенно будет полезна тем, кто знаком с популярными большими языковыми моделями и терминами.
За 3.5 часа Карпаты расскажет про:
🧠 Прентрейнинг: как обрабатываются данные, как проходит токенизация и строятся архитектуры типа Transformer – реальные примеры из практики.
🧠 Файнтюнинг: психология LLM, почему они иногда «галлюцинируют»: ошибки в орфографии и другие примеры.
🧠 RLHF (обучение с подкреплением): подробный разбор на примере DeepSeek R1 – одной из самых обсуждаемых моделей последних месяцев.
Лекция на английском языке, но есть возможность включить автоматические субтитры на русском. Если всё хотите выжимку из лекции – посмотрите последние 10 минут лекции.
Около минуты
23 февраля 2025