2110 подписчиков
Подумал будет полезно - табличку сделал - сколько токенов у ИИ для каждого языка на 1000 символов (или иными словами - сколько токенов у ИИ дают 1000 символов русского, анг. и т.п.).
Если читаете, что размер контекста у ИИ 32к токенов, можно легко прикинуть сколько это символов каждого языка. См. картинку.
Около минуты
23 декабря 2024
544 читали