Let's reproduce GPT-2 (124M)-part_9
🖥️ Когда «домашний ПК» начинает конкурировать с лабораториями: как энтузиаст обучил GPT-2 с нуля за 48 часов
В 2019-м тренировка GPT-2 была подвигом: огромные кластеры, закрытые датасеты, секретные оптимизации. В 2025-м всё резко меняется — и блогер Giles демонстрирует это буквально на своём столе. На обычном ПК с RTX 3090 он обучает GPT-2-small на 163 млн параметров с нуля, следуя рекомендациям Chinchilla и используя 3,2 млрд токенов FineWeb. Итог — модель, которая хоть и уступает оригинальной, но качественно работает, улавливает структуру языка и готова к fine-tuning. Это не просто эксперимент. Это — поворотный момент...
Тренинг для родителей «Гибкое сознание»: как выйти из придуманной концепции «мне не дано»?
Тренинг не только для родителей, но и для тех, кому надоели абстрактные советы "саморазвития". Здесь практика, которая меняет мышление и помогает не сойти с ума от безысходности. Часть 2. Ищете просветительские мероприятия для родителей, которые дают не теорию, а реальные инструменты? Наш тренинг для родителей «Гибкое сознание» — это воркшоп, построенный на знаменитой теории Кэрол Дуэк. Мы помогаем разорвать порочный круг установки «мне не дано» и научиться видеть возможности для роста — в себе и в своих детях...