Промптология 5.3.2 Параметр top-p Ядерная выборка (или nucleus sampling) — это метод, применяемый в языковых моделях для контроля над разнообразием и случайностью генерируемых текстов. Она работает следующим образом: при генерации ответа модель предсказывает вероятности различных слов (токенов), которые могут быть следующими в тексте. Эти вероятности формируют распределение, и вместо того, чтобы выбирать одно наиболее вероятное слово, ядерная выборка ограничивает выбор до группы слов, которые совместно охватывают определенный процент этой вероятности, скажем, 90% или 50%...
Paging: Introduction
Иногда говорят, что операционная система использует один из двух подходов при решении большинства проблем управления пространством. Первый подход состоит в том, чтобы нарезать сущности на кусочки разного размера, как мы видели с сегментацией в виртуальной памяти...