Звичайні системи розумного освітлення керуються кнопками або мобільним застосунком із фіксованими командами. Завдання: зібрати прототип, де світлом можна керувати кількома природними способами: через Telegram-бота текстом і голосом, жестами перед камерою, за емоцією користувача і через веб-інтерфейс, а команди доходять до контролерів ESP32 і ESP8266 у реальному часі.
Ми спроєктували архітектуру і зібрали прототип із кількома каналами введення. Telegram-бот приймає текст або голосове; голос переводиться в текст через Speech-to-Text, далі AI-логіка на базі OpenAI визначає команду для світла. Команда публікується в MQTT-топік, контролер ESP32 або ESP8266 отримує її, вмикає чи вимикає LED-освітлення і повертає статус у зворотний топік. Окремо працює веб-сервер із HTTP-керуванням: увімкнути, вимкнути, оновити стан пристрою. Модуль компʼютерного зору відстежує 32 точки тіла і 21 точку руки за моделями BlazePose і MediaPipe, тож піднята рука або певне положення пальців стають командою. Є і емоційний шар: користувач обирає емоцію емодзі або надсилає фото, і AI класифікує емоцію.
Робочий прототип показує, як AI розширює звичайну IoT-систему: одне рішення обʼєднує Telegram-бота, розпізнавання мови, MQTT і HTTP, вбудовані контролери і компʼютерний зір. Керування освітленням виходить за межі кнопок і мобільних застосунків і стає природним: голосом, жестом або з урахуванням настрою. Стек: Python, Telegram Bot API, AI-логіка на OpenAI, Speech-to-Text, протоколи MQTT і HTTP, ESP32 і ESP8266, розпізнавання поз і рук на BlazePose і MediaPipe, веб-сервер для керування пристроєм.