Машинное обучение
Первый пост Дженсена Хуанга в X - и сразу про открытый ИИ
Дженсен Хуанг наконец завёл X, и свой первый пост посвятил открытым моделям. NVIDIA вместе с Meta, Microsoft, Mistral, Hugging Face, IBM, Mozilla, Palantir и другими компаниями подписала письмо в их поддержку. Открытые модели позволяют компаниям и государствам скачивать, изучать, изменять и запускать ИИ на собственной инфраструктуре. Это даёт: - меньше зависимости от нескольких крупных AI-провайдеров; - больше контроля над данными и моделями; - возможность создавать дешёвые специализированные...
👣 У этого мужика в разделе «Портфолио» буквально стоит Go
Вот это уровень ауры. Лг годами определял, каким будет Go На фото - Russ Cox, одна из ключевых фигур в истории Go. Ещё до Google он работал с наследием Plan 9, занимался операционными системами, компиляторами и распределёнными системами. Позже Cox стал техническим лидером проекта Go в Google и много лет влиял на развитие языка, стандартной библиотеки и инструментов...
📌Подстраивается ли модель под того, кто её оценивает
? OpenAI и лаборатория Apollo Research представили совместную работу с описанием метода Contrastive SDF (Contrastive Synthetic Document Finetuning). Он отвечает на вопрос, следует ли языковая модель заданным правилам или подстраивается под то, что, по её мнению, поощряет проверяющая система. Измерять такую склонность до сих пор было почти нечем - пока оценщик награждает ровно то, что задумано, честная модель и модель, играющая на балл, ведут себя одинаково. 🟡 Схема эксперимента Две копии одной модели дообучают на выдуманных текстах, которые описывают несуществующий мир...
## Бесконечное дерево, из которого растёт парадокс Банаха–Тарского
Возьмём свободную группу F₂ = ⟨a, b⟩ Каждое её слово строится из a, a⁻¹, b, b⁻¹. После сокращения вроде aa⁻¹ каждому слову соответствует единственная вершина и единственный путь от начала. Получается бесконечное 4-регулярное дерево: из каждой вершины выходят четыре ребра. Циклов нет, потому что никакое непустое сокращённое слово в свободной группе не равно единице. Это граф Кэли группы F₂. Именно структура свободной...
