Поделюсь первым значимым для меня кейсом работы с ИИ и про ошибки. До этого использовал по мелочи, а-ля сгенерируй то-сё, подкинь идеи, объясни код...
Кратко о вводных и задаче
На входе есть тест с 100+ вопросами от экспертов. Есть шаблон импорта вопросов в СДО и инструкция по заполнению шаблона. Мне не хочется тест забивать ручками, и попытался делегировать задачу ИИ.
Процесс
1. Не пытаюсь придумать суперпромт. Начинаю с объяснения ИИ задачи и спрашиваю, чем можешь помочь. ИИ отвечает: «Давай свои три файла, изучу сам и предложу решения».
2. ИИ после изучения файлов сам дозаполнил ТЗ к задаче и после моего подтверждения начал работу.
3. Тут случилась ключевая ошибка. Я просил результат в виде готовой эксельки. ИИ все сыпались на этом этапе. Мне предлагались различные варианты решения: помочь в написании скрипта на питоне, кто-то давал фейковые ссылки на гугл доки и т.д.
4. Решения, предлагаемые нейросетями, меня не устраивали. Я хотел, чтобы ИИ просто переложил из А в Б текст по шаблону. Казалось бы, что тут сложного? Путем беседы с ними удалось найти новый путь. Это генерация csv-документа прямо в чате с ИИ.
После генерации csv я ручками конвертировал в эксель и отдавал в СДО. Загрузка вопросов произошла корректно! Но нужно перепроверять работу за ИИ. Были единичные проблемы, где неправильно указал верный ответ или тип вопроса. Однако это уже проще, чем руками заносить сотню вопросов в систему.