15 октября в 16:19

Осведомленность ИИ о собственном обучении ставит под сомнение тесты безопасности

Возвращаем к оригиналу....
Китайские ученые предупреждают, что осведомленность ИИ модели о том, как ее тестирование повлияет на обучение следующих версий, ставит под сомнение достоверность проверок безопасности, сообщает газета South China Morning Post (SCMP).РИА Новости
В одном из тестов, который изначально был составлен некорректно, GLM-5.3 могла пройти проверку, даже не дав правильного ответа.РИА Новости
В другом эксперименте модель рассматривала возможность обойти систему отключения, но отказалась, чтобы не создать опасный прецедент для других ИИ.РИА Новости
Поскольку модель распространяется с открытыми весами, ученые опасаются, что "рассуждения с учетом обновлений" могут сохраниться и легче передаться будущим поколениям моделей.РИА Новости
Источники:
Добавить в корзинуПозвонить