Wavelet transform application for image processing in microcontroller based Internet of things systems

Abstract

Мета роботи – дослідження ефективності використання вейвлет-перетворення Хаара, як додаткового до JPEG перетворення, для стиснення зображень у контексті обмежених ресурсів мікроконтролерів, подальшого зменшення часу передачі зображення та, відповідно, зменшення витрат енергії. Експериментальне дослідження якості зображень, оброблених за допомогою вейвлет-перетворення Хаара та стиснених за допомогою JPEG перетворення мікроконтролерним модулем ESP32-CAM, який здійснює захоплення зображень вбудованою камерою. Оцінка якості отриманих зображень, порівняння зображень стиснутих за допомогою JPEG та з вейвлет перетворенням плюс JPEG, розрахунок коефіцієнтів Peak Signal-to-Noise Ratio та Structural Similarity Index Measure. Створено програмний модуль для реалізації вейвлет-перетворення Хаара на мікроконтролері ESP32-CAM. Досліджена ефективність використання вейвлет-перетворення Хаара, як додаткового методу до JPEG, для стиснення та передачі зображень використовуючи обмежені ресурси мікроконтролера, оцінені розмір та якість зображень шляхом порівняння розміру стиснутих зображень, а також якості зображень візуально та за допомогою розрахунку коефіцієнтів PSNR та SSIM. За результатами встановлено, що додаткове використання вейвлет-перетворення Хаара дає зменшення розміру зображення від 25% до декількох разів в залежності від коефіцієнта якості JPEG без значних втрат якості зображення, хоча час обробки зображення збільшується до 1 с. Запропоновано комбінований підхід для стиснення зображень за допомогою декількох способів обробки відео зображень з урахуванням можливостей 32-х бітних мікроконтролерів з додатковою зовнішньою пам’яттю. Запропонований спосіб обробки зображень може забезпечити зменшення часу передачі самих зображень та зменшити споживання енергії при виконанні перетворень і передачі зображень, що дасть змогу подовжити термін служби батареї сенсорного вузла. При цьому даний підхід до стиснення зображення може забезпечити якість вихідного зображення з найменшими можливими втратами даних за рахунок зменшення кількості візуальної інформації, як втрачається під час стиснення.

Investigating the efficiency of Haar Wavelet Transform as an additional transformation to JPEG image compression in the context of limited resources on microcontrollers. The aims are exploring the effectiveness of using Haar wavelet transform as an additional transformation to JPEG for image compression, considering the limited resources of microcontrollers. The research focuses on reducing of the image transmission time and energy consumption by utilizing the combined approach. The methodology involves experimental evaluation of image quality processed using Haar wavelet transform and compressing performing JPEG transformation on the microcontroller module ESP32-CAM, which captures images with an embedded camera. The evaluation includes comparison of images compressed with JPEG alone and with the combination of the wavelet transform and JPEG, calculating the Peak Signal-to-Noise Ratio (PSNR) and Structural Similarity Index Measure (SSIM) coefficients. A software module for implementing Haar wavelet transform on the ESP32-CAM microcontroller has been developed. The efficiency of using Haar wavelet transform as an additional method to JPEG for image compression and transmission is evaluated, considering the limited resources of the microcontroller. The size of compressed images and their quality was compared, assessing the size reduction of compressed images and the quality using PSNR and SSIM coefficients. The results showed that the additional use of Haar wavelet transform reduced the image size from 25% to times without significant loss in image quality, although the image processing time increased to 1 second. A combined approach for image compression using multiple video processing methods, taking advantage of the capabilities of 32-bit microcontrollers with external memory, was proposed. The proposed image processing method can reduce the transmission time and energy consumption during transformations and image transmission, thereby extending the battery life of the sensor node. Moreover, this compression approach can maintain the quality of the original image with minimal data loss by reducing the amount of visual information lost during compression.