A Visual Attention Model Based Image Fusion
- 1. Vellore Institute of Technology University
- 2. SASTRA University
Description
To develop an efficient image fusion algorithm based on visual attention model for images with distinct objects.Image fusion is a process of combining complementary information from multiple images of the same scene into an image, so that the resultant image contains a more accurate description of the scene than any of the individual source images.The two basic fusion techniques are pixel level and region level fusion.Pixel level fusion deals with the operations on each and every pixel separately.The various pixel level techniques are averaging, stationary wavelet transforms, discrete wavelet transforms, Principal Component Analysis (PCA).But because of less sensitivity to noise and mis-registration, the region level image fusion is an emerging approach in the field of multifocus image fusion.The most appreciated approaches in region-based methods are multifocus image fusion using the concept of focal connectivity and spatial frequency.These two methods works well on still images as well as on video frames as inputs.A new region based technique is been proposed for the multifocus images having distinct objects.The method is based on the visual attention models and results obtained are appreciating for the distinct objects input images.The Proposed method results are highlighted using tenengrade and extended spatial frequency as performance parameters by taking several pairs of multi-focus input images like microscopic images, forensic images and video frames.
Translated Descriptions
Translated Description (Arabic)
لتطوير خوارزمية دمج الصور الفعالة بناءً على نموذج الانتباه البصري للصور ذات الكائنات المتميزة. إن دمج الصور هو عملية دمج معلومات تكميلية من صور متعددة لنفس المشهد في صورة، بحيث تحتوي الصورة الناتجة على وصف أكثر دقة للمشهد من أي من صور المصدر الفردية. تقنيتا الدمج الأساسيتان هما مستوى البكسل والانصهار على مستوى المنطقة. يتعامل الدمج على مستوى البكسل مع العمليات على كل بكسل على حدة. تقنيات مستوى البكسل المختلفة هي المتوسط، تحويلات الموجات الثابتة، تحويلات الموجات المنفصلة، تحليل المكونات الرئيسية (PCA). ولكن بسبب انخفاض الحساسية للضوضاء وسوء التسجيل، فإن دمج الصور على مستوى المنطقة هو نهج ناشئ في مجال دمج الصور متعددة البؤر. النهج الأكثر تقديرًا في الأساليب القائمة على المنطقة هي دمج الصور متعددة البؤر باستخدام مفهوم الاتصال البؤري والتردد المكاني. تعمل هاتان الطريقتان بشكل جيد على الصور الثابتة وكذلك على إطارات الفيديو كمدخلات. تم اقتراح تقنية جديدة قائمة على المنطقة للصور متعددة البؤر التي تحتوي على كائنات مميزة. تعتمد الطريقة على يتم تقدير نماذج الانتباه البصري والنتائج التي تم الحصول عليها بالنسبة لصور إدخال الكائنات المتميزة. يتم تمييز نتائج الطريقة المقترحة باستخدام tenengrade والتردد المكاني الممتد كمعلمات أداء من خلال أخذ عدة أزواج من صور الإدخال متعددة البؤر مثل الصور المجهرية وصور الطب الشرعي وإطارات الفيديو.Translated Description (French)
Développer un algorithme de fusion d'images efficace basé sur un modèle d'attention visuelle pour les images avec des objets distincts. La fusion d'images est un processus de combinaison d'informations complémentaires à partir de plusieurs images de la même scène en une image, de sorte que l'image résultante contienne une description plus précise de la scène que n'importe laquelle des images sources individuelles. Les deux techniques de fusion de base sont la fusion au niveau des pixels et au niveau de la région. La fusion au niveau des pixels traite des opérations sur chaque pixel séparément. Les différentes techniques au niveau des pixels sont la moyenne, les transformées d'ondelettes stationnaires, transformées d'ondelettes discrètes, analyse en composantes principales (ACP).Mais en raison de la moins grande sensibilité au bruit et au mauvais enregistrement, la fusion d'images au niveau de la région est une approche émergente dans le domaine de la fusion d'images multifocales.Les approches les plus appréciées dans les méthodes basées sur la région sont la fusion d'images multifocales utilisant le concept de connectivité focale et de fréquence spatiale.Ces deux méthodes fonctionnent bien sur les images fixes ainsi que sur les images vidéo en tant qu'entrées.Une nouvelle technique basée sur la région est proposée pour les images multifocales ayant des objets distincts.La méthode est basée sur les modèles d'attention visuelle et les résultats obtenus sont appréciés pour les images d'entrée d'objets distincts. Les résultats de la méthode proposée sont mis en évidence en utilisant tenengrade et la fréquence spatiale étendue comme paramètres de performance en prenant plusieurs paires d'images d'entrée multifocales comme des images microscopiques, des images médico-légales et des images vidéo.Translated Description (Spanish)
Desarrollar un algoritmo de fusión de imágenes eficiente basado en un modelo de atención visual para imágenes con objetos distintos. La fusión de imágenes es un proceso de combinación de información complementaria de múltiples imágenes de la misma escena en una imagen, de modo que la imagen resultante contenga una descripción más precisa de la escena que cualquiera de las imágenes de origen individuales. Las dos técnicas de fusión básicas son la fusión a nivel de píxel y a nivel de región. La fusión a nivel de píxel se ocupa de las operaciones en todos y cada uno de los píxeles por separado. Las diversas técnicas a nivel de píxel son promedios, transformaciones de ondículas estacionarias, transformadas de wavelet discretas, análisis de componentes principales (PCA). Pero debido a la menor sensibilidad al ruido y al registro erróneo, la fusión de imágenes a nivel de región es un enfoque emergente en el campo de la fusión de imágenes multifocales. Los enfoques más apreciados en los métodos basados en regiones son la fusión de imágenes multifocales utilizando el concepto de conectividad focal y frecuencia espacial. Estos dos métodos funcionan bien en imágenes fijas y en fotogramas de video como entradas. Se ha propuesto una nueva técnica basada en regiones para las imágenes multifocales que tienen objetos distintos. El método se basa en los modelos de atención visual y los resultados obtenidos se aprecian para las distintas imágenes de entrada de objetos. Los resultados del método propuesto se resaltan utilizando la frecuencia espacial de grado y extendida como parámetros de rendimiento al tomar varios pares de imágenes de entrada de enfoque múltiple, como imágenes microscópicas, imágenes forenses y fotogramas de video.Files
6-4602-4606.pdf.pdf
Files
(226 Bytes)
Name | Size | Download all |
---|---|---|
md5:5360980bad11bf9723da89687501effc
|
226 Bytes | Preview Download |
Additional details
Additional titles
- Translated title (Arabic)
- دمج الصور القائمة على نموذج الانتباه البصري
- Translated title (French)
- Une fusion d'images basée sur un modèle d'attention visuelle
- Translated title (Spanish)
- Fusión de imágenes basada en un modelo de atención visual
Identifiers
- Other
- https://openalex.org/W2188086656
- DOI
- 10.19026/rjaset.6.3474
References
- https://openalex.org/W1985972181
- https://openalex.org/W2028555274
- https://openalex.org/W2059111949
- https://openalex.org/W2170458153