Я уже довольно давно использую сервис Мои Звонки для записи всех звонков подряд (кроме звонков от родных) и периодически это меня выручает. Время от времени я выборочно делаю транскрибацию звонков или переслушиваю их. Это как видеокамера, которая пишет 24/7, но иногда нужно пересмотреть записи.
А как быть в случае, когда принял звонок где то в дороге и пока добрался до компьютера напрочь забыл о том, что пообещал клиенту или коллеге. Так я дошел до идеи транскрибации звонка и отправка уведомлений в Телеграм. И раз уж я решил использовать OpenAI для транскрибации то почему бы нейросети не поработать и секретарем. Выделить самое главное в звонке, сформулировать задачи и при необходимости, дату следующего созвона.
Сказано - сделано. Техническая реализация была сделана в сервисе Make.
Не обращайте внимания на две нижние ветки, я их пока отключил. Рабочая только верхняя. У сервиса Мои Звонки настроена интеграция с почтой. Звонки попадают на почтовый ящик яндекса, и раз в чаc Make подключается к почте и если видит письма с определенным заголовком, запускает цепочку. Чаще всего в интернете мы видим примеры интеграции с почтой Gmail, но учитывая политику Google, будем стараться реже использовать сервисы этой компании.
Первым отрабатывает модуль OpenAI с моделью Whisper-1. Далее полученный текст проходит через другой блок OpenAI но уже с другой задачей - сделать выжимку из текста (Summary). Полученный результат записываем в Google Sheets, отправляем в телеграм бот и вишенка на торте, создаем задачу в Битрикс24. Таким образом, вероятность потери информации или ее поздней обработки сводится к минимуму.
В принципе, это все что я хотел донести. Сервис Make можно заменить на скрипт на Python, который будет работать на удаленном сервере, чтобы не пристанавливать его выполнение.