Amazon Rufus, встроенный в приложение и сайт Amazon ИИ-помощник для покупок, оказался уязвим к простым «джейлбрейкам». Пользователи подбирают промпты, после которых Rufus начинает отвечать на посторонние вопросы и фактически выходит за рамки роли шопинг-консультанта. Ситуация выглядит не как редкая экзотика, а как повторяемый сценарий: достаточно пары точных формулировок, и чат-бот переключается с рекомендаций товаров на обсуждение техники, науки и даже общих тем. Два года назад Amazon объявила Rufus как помощника, который работает прямо внутри экосистемы магазина. Идея простая: вместо сухого поиска по карточкам товаров пользователь общается с «экспертом» и получает рекомендации и сделки в разговорном формате. ❗️ ПОДПИСЫВАЙСЯ НА НАШ КАНАЛ В ДЗЕНЕ И ЧИТАЙ КРУТЫЕ СТАТЬИ БЕСПЛАТНО Но у Rufus есть слабое место: его «ограждения» (guardrails), которые должны удерживать диалог в рамках покупок, иногда сползают. В результате бот отвечает на вопросы, которые не связаны с выбором товаров. В одно
Amazon Rufus взламывают промптами: бот уходит от покупок
9 марта9 мар
1
2 мин