Найти в Дзене
Торчирование трансформера: пособие для начинающих изготовителей чудовищных Франкенштейнов
Чтобы продать что-нибудь ненужное, нужно сначала купить что-нибудь ненужное, а у нас денег нет. (C) Дядя Фёдор. У меня есть полученная с нуля языковая модель преобразователя типа кодер-декодер. Благодаря набору библиотек OpenNMT всё что для этого было нужно — создать файл конфигурации и собрать наборы данных. Теперь благоприятное время для обдумывания, что с ней можно делать и к чему пристроить. Но для начала, всё-таки как она устроена? Ответ на этот вопрос важен, если мы хотим научиться использовать подобные модели за рамками стандартного применения...
5 месяцев назад
О создании мультизадачной языковой модели ИИ с чистого листа
Если раньше на овладение чем-то уходили тысячи лет, потом сотни, десятки, годы, то сейчас — дни. Прогресс происходит очень быстро и унизительно. Техника настолько мощная, что создает подделки лучше, чем оригиналы. (С) Татьяна Черниговская Основная цель создания языковых моделей — выявление закономерностей в тексте, позволяющих строить связи между словами, похожие на такие, которые складывают между словами люди при написании этих текстов. Имея хорошую модель можно выполнять с текстом преобразования, результаты которых будут выглядеть осмысленно и разумно для человека...
5 месяцев назад
Получение краткой русской статьи из английской с помощью ИИ Requestor0
"Более ста лет назад Козьма Прутков высказал самую короткую в мире философскую мысль: -" Бди!". С той поры сколько бы писательская братия ни рассуждала о краткости и о таланте, никто не взял на себя смелость побить этот мировой рекорд. (C) Владимир Ерашов" Мировая паутина - это кладезь идей и знаний, порождаемых человечеством и русскоязычный сегмент - только небольшая их часть. Чтобы не пропустить что-то интересное в необъятном потоке байтов на иностранных языках хорошо бы иметь помощника, который...
6 месяцев назад
Русско-английская модель ИИ для распределённого выполнения и слабых ПК (анонс)
Игорь Ашманов: Умная нейросеть – это бредогенератор нового поколения, но очень гладкий и изощренный. С одной стороны, это гигантский прорыв в технологиях генерации текстов и картинок. С другой – искусственный интеллект имеет свойство ухудшать все, до чего он дотрагивается. Недавно завершился третий раунд обучения моей языковой модели, предназначенной для обработки запросов пользователя на естественном языке - Requestor0. Данная модель — первая в планируемой серии (из трёх) и её основная специализация...
6 месяцев назад
Слова в векторном пространстве
Мироздания огромная сфера, Бесконечный пространства пузырь, Здесь материи сущность – пространство, Из неё соткан весь этот мир. (C) Н. Штирман Не так давно на просторах ресурса «Малоизвестное интересное», я прочитал комментарий одного посетителя о том, что представление слов векторами не вполне соответствует даже чисто словесно-логической форме мышления, не говоря о том, что никак не связано с образным мышлением, на которое словесное всегда опирается. Процитирую: «В пространстве единиц речи бессмысленны...
1 год назад
Если нравится — подпишитесь
Так вы не пропустите новые публикации этого канала