Я научил искусственный интеллект читать рентгеновские снимки и ставить диагнозы на русском языке. И вот что из этого вышло 🩻🤖
Знакомая ситуация: вы выходите из кабинета рентгенолога со снимком легких в руках. Смотрите на это черно-белое изображение ребер и теней, но видите лишь непонятную абстракцию. А в заключении написаны пугающие термины вроде «консолидация», «эффузия» или «кальцинаты». Тревожно, правда?
В мире больших технологий (таких как у Google или OpenAI) уже существуют нейросети, способные анализировать медицинские снимки. Но у них есть одна проблема — они почти все «говорят» исключительно на английском языке.
Я решил исправить эту несправедливость и с нуля создал Русского Нейро-Радиолога — искусственный интеллект, который умеет смотреть на рентген грудной клетки и самостоятельно писать медицинское заключение на понятном русском языке.
И самое главное — вы можете протестировать его сами прямо сейчас (ссылка будет в конце статьи).
Как заставить компьютер "видеть" болезни?
Создание такого ИИ похоже на сборку конструктора из двух разных «мозгов»:
- «Глаза» (Компьютерное зрение): Я использовал технологию распознавания изображений. Нейросеть буквально сканирует каждый пиксель снимка в поисках аномалий (затемнений, смещений, подозрительных пятен).
- «Голос» (Языковая модель): К глазам я «пришил» нейросеть от Сбера (ruGPT-3) — младшего брата всем известного ChatGPT.
Чтобы этот «Франкенштейн» заработал, его нужно было обучить. Я взял серьезную медицинскую базу клиники Индианского университета (США) — это более 7000 реальных рентгеновских снимков настоящих пациентов. Описания к ним делали профессиональные американские врачи.
С помощью алгоритмов я перевел этот гигантский архив на русский язык и заставил мощные видеокарты несколько часов подряд искать связи. Иными словами, нейросеть тысячекратно смотрела на картинку легких больного человека, читала диагноз и запоминала: "Ага, вот это белое пятно в левом нижнем углу врачи называют пневмонией".
Зачем вообще нужны такие нейросети?
Многие боятся, что ИИ заменит людей. Но в медицине нейросеть — это не замена врачу, это его цифровой ассистент.
- Для пациентов (Второе мнение): Это возможность быстро, еще до приема у врача, загрузить свой снимок и получить предварительное понимание того, всё ли в порядке или есть повод для беспокойства. Это сильно снижает тревожность.
- Для врачей (Спасение от рутины): Рентгенологи описывают десятки снимков здоровых людей каждый день. ИИ может взять рутину на себя: писать шаблонные отчеты для здоровых легких, оставляя врачу время на сложные и спорные случаи.
- Для отдаленных регионов: Там, где не хватает узких специалистов, такая программа в фельдшерском пункте может стать первичным фильтром, подсказывающим, кого нужно срочно везти в городскую больницу.
🧪 Протестируйте нейросеть сами!
Я выложил свою модель в открытый доступ. Это абсолютно бесплатно.
👉 Ссылка на нейросеть: https://huggingface.co/spaces/livadies/AI-Radiologist-RU
Как пользоваться:
- Найдите в интернете любой рентгеновский снимок грудной клетки (просто вбейте в Яндекс Картинки "рентген легких пневмония" или "рентген здорового человека").
- Сохраните картинку и загрузите её на сайт по ссылке выше.
- Нажмите кнопку «Submit» и подождите пару секунд.
- ИИ выдаст вам свое медицинское заключение!
(Важное предупреждение: Модель обучалась в исследовательских целях. Она может ошибаться и ни в коем случае не заменяет поход к реальному специалисту!)
👨💻 Для программистов и тех, кто хочет так же
Если вы IT-специалист, студент или просто родитель, который хочет показать ребенку, что за компьютером можно не только играть в игры, но и создавать технологии будущего — весь исходный код проекта открыт.
Я выложил его на GitHub с подробным описанием архитектуры и процесса обучения:
👉 Ссылка на код (GitHub): [https://github.com/livadies-collab/Multimodal-XRay-Analyzer-RU]
За искусственным интеллектом — будущее медицины и технологий. И создавать это будущее можно прямо сейчас, сидя за домашним компьютером.
А как вы считаете, готовы ли мы доверить первичный анализ нашего здоровья нейросетям? Делитесь в комментариях!
