Тепловизор на базе ESP32-S3 с функцией распознавания объектов
Краткое резюме
Тепловизор на базе ESP32-S3 и MLX90640 транслирует тепловые изображения и распознаёт объекты в реальном времени. Свёрточная нейронная сеть классифицирует кошку, человека или их отсутствие, используя TensorFlow Lite-модель на микроконтроллере.
Сегодня будет представлена информация о том, как можно использовать тепловизионную матрицу MLX90640, подключённую к ESP32-S3, для запуска веб-сервера. Этот сервер позволяет транслировать тепловые изображения и в реальном времени определять, какие объекты попали в поле зрения тепловизора.
Для классификации объектов в инфракрасном спектре была обучена свёрточная нейронная сеть. Она способна распознавать три типа сущностей: кошку, человека или отсутствие этих двух объектов.
Важно отметить, что система работает автономно, а анализ данных TensorFlow Lite-модели выполняется непосредственно на микроконтроллере.