1 прочтение · 6 месяцев назад
Как возникла модель GPT
Трансформеры возникли из видео карт и кубитах. Теперь кубиты можно делать даже из атомов и молекул.. Одним из ключевых элементов, предложенных в этой статье, является механизм внимания, который позволяет модели фокусироваться на различных частях входных данных в зависимости от их значимости для текущей задачи. Это позволяет трансформерам обрабатывать последовательности данных любой длины, сохраняя контекст и учитывая взаимодействия между элементами последовательности. Основной принцип работы...
8 прочтений · 5 месяцев назад
Наследие Алексея Червоненкиса: вклад в машинное обучение и развитие теории VC-размерности
Алексей Яковлевич Червоненкис был выдающимся ученым в области теории вероятностей и статистики, его вклад в машинное обучение и развитие концепции VC-размерности заслуживает отдельного внимания. Алексей Яковлевич Червоненкис родился в 1938 году. Он вырос в Москве, в семье ученых, что с самого детства определило его интерес к науке и математике. С юных лет Алексей проявлял выдающиеся математические способности, активно участвуя и побеждая в школьных и городских математических олимпиадах. После окончания...