Сегодня беспроводные сети воспринимаются нами как «воздух» — фон, в котором работают ноутбуки и смартфоны. Но исследователи всё чаще показывают: в этих волнах скрыта информация, которую можно буквально превратить в картину движения. Свежий open-source проект WiFi-3D-Fusion — шаг к тому, чтобы использовать Wi-Fi не только для связи, но и для пространственного восприятия.
⚙️ Как это устроено
Основой системы служат CSI-данные (Channel State Information) — метрики, показывающие, как конкретный Wi-Fi-сигнал проходит через пространство. Любое движение тела влияет на фазу и амплитуду волн, и именно эти изменения система превращает в «сырьё» для нейросети.
🚀 Возможности WiFi-3D-Fusion:
- 🧍♂️ Реальная 3D-оценка позы человека (скелет визуализируется в браузере).
- 👥 Отслеживание сразу нескольких людей и re-ID (узнавание того же человека при повторном появлении).
- 🔄 Непрерывное самообучение: модель подстраивается под помещение и шумы среды.
- 🌐 Интеграция с другими проектами (Person-in-WiFi-3D, NeRF², Wi-Fi 3D Scanner).
🛠️ Технические детали
- 📡 Поддержка двух способов захвата: через ESP32 с прошивкой CSI и через Nexmon на Broadcom-адаптерах в режиме monitor.
- 🎮 Визуализация: Web-интерфейс на Three.js, запускается простым python run_js_visualizer.py → http://localhost:5000.
- 🧠 Обработка: CNN для распознавания движения + модули для скелетной модели. GPU можно подключить для ускорения обучения.
- 🧩 Архитектура: многопоточный конвейер (сбор данных → обработка → визуализация), адаптивные пороги и непрерывный тренинг прямо во время работы.
🔬 Почему это важно
Мы стоим на границе перехода от «интернет вещей» к «интернету чувств». Камеры имеют очевидные ограничения: свет, тени, приватность. Радары дороже и сложнее. А Wi-Fi уже есть почти везде — и его волны способны «видеть» сквозь стены и в темноте.
💡 Возможные сценарии применения:
- 🚑 Поиск людей в задымлённых зданиях или завалах.
- 🏡 Умный дом с бесконтактным мониторингом пожилых людей (падения, внезапная неактивность).
- 🎮 Игровые интерфейсы без камер и сенсоров.
- 🔐 Безопасность и аутентификация — идентификация человека по характеру движений.
🧠 Моё мнение
Этот проект — не просто «хак для энтузиастов», а иллюстрация того, куда движется sensing-технология. Меня особенно впечатляет идея непрерывного обучения: система адаптируется к конкретному дому или офису, фильтрует шумы и становится точнее со временем. Это похоже на то, как автономные автомобили учатся на миллионах километров пробега.
Конечно, остаются вопросы приватности. Автор прямо отмечает: это не инструмент для шпионажа. Но я уверен, что такие технологии неизбежно будут регулироваться, ведь Wi-Fi-«рентген» способен работать незаметно. Баланс между пользой и контролем станет ключевым вызовом ближайших лет.
⚡ Итог
WiFi-3D-Fusion — доказательство того, что «невидимое пространство» можно оцифровать и превратить в новый канал взаимодействия. Через несколько лет подобные системы могут стать стандартом — как когда-то камеры в телефонах.
🔗 Источники:
- GitHub проекта: https://github.com/MaliosDark/wifi-3d-fusion