Interactive Public Displays: A Gesture-Based Proposal Using Kinect
Description
The use of interactive public displays in urban spaces is increasing very fast, and new setups to support these displays are still being explored. In this paper we introduce a gesture based input technique to allow the interaction with public displays avoiding the use of any device attached to the user body. The gestures supported provide navigation, selection and manipulation of objects, as well as panning and zooming on the screen. In order to evaluate how robust the system is in a real public scenario, criteria that could interfere on the interactive task are evaluated, as the amount of brightness in the environment, and the presence of other persons. The setup used to support the tests include a 55" LED TV, a Kinect for gestures capture, and a new algorithm to allow the identification of closing and opening hands. Three test scenarios are described in this paper: the interactive visualization of a graph representing the academic genealogical tree of our University; the selection and manipulation of simple objects; and the free interaction with the map of a building. Given the results of the performed tasks, we conclude that the system, although not behaving very accurately in all situations, has potential to be used on many applications.
Translated Descriptions
Translated Description (Arabic)
يتزايد استخدام شاشات العرض العامة التفاعلية في المساحات الحضرية بسرعة كبيرة، ولا يزال يتم استكشاف إعدادات جديدة لدعم هذه الشاشات. في هذه الورقة، نقدم تقنية إدخال قائمة على الإيماءات للسماح بالتفاعل مع الشاشات العامة لتجنب استخدام أي جهاز متصل بجسم المستخدم. توفر الإيماءات المدعومة التنقل والاختيار والتلاعب بالأشياء، بالإضافة إلى التحريك والتكبير على الشاشة. من أجل تقييم مدى قوة النظام في سيناريو عام حقيقي، يتم تقييم المعايير التي يمكن أن تتداخل مع المهمة التفاعلية، مثل مقدار السطوع في البيئة، ووجود أشخاص آخرين. يتضمن الإعداد المستخدم لدعم الاختبارات تلفزيون LED مقاس 55بوصة، وKinect لالتقاط الإيماءات، وخوارزمية جديدة للسماح بتحديد الإغلاق وفتح اليدين. تم وصف ثلاثة سيناريوهات اختبار في هذه الورقة: التصور التفاعلي لرسم بياني يمثل شجرة الأنساب الأكاديمية لجامعتنا ؛ واختيار الأشياء البسيطة والتلاعب بها ؛ والتفاعل الحر مع خريطة المبنى. بالنظر إلى نتائج المهام المنجزة، نستنتج أن النظام، على الرغم من أنه لا يتصرف بدقة كبيرة في جميع الحالات، لديه القدرة على استخدامه في العديد من التطبيقات.Translated Description (French)
L'utilisation d'affichages publics interactifs dans les espaces urbains augmente très rapidement, et de nouvelles configurations pour prendre en charge ces affichages sont toujours à l'étude. Dans cet article, nous introduisons une technique de saisie basée sur les gestes pour permettre l'interaction avec les affichages publics en évitant l'utilisation de tout appareil attaché au corps de l'utilisateur. Les gestes pris en charge permettent la navigation, la sélection et la manipulation d'objets, ainsi que le panoramique et le zoom sur l'écran. Afin d'évaluer la robustesse du système dans un scénario public réel, les critères qui pourraient interférer sur la tâche interactive sont évalués, comme la quantité de luminosité dans l'environnement et la présence d'autres personnes. La configuration utilisée pour prendre en charge les tests comprend un téléviseur LED de 55", un Kinect pour la capture de gestes et un nouvel algorithme pour permettre l'identification des mains qui se ferment et s'ouvrent. Trois scénarios de test sont décrits dans cet article : la visualisation interactive d'un graphique représentant l'arbre généalogique académique de notre Université ; la sélection et la manipulation d'objets simples ; et l'interaction libre avec la carte d'un bâtiment. Compte tenu des résultats des tâches effectuées, nous concluons que le système, bien que ne se comportant pas très précisément dans toutes les situations, a le potentiel d'être utilisé dans de nombreuses applications.Translated Description (Spanish)
El uso de pantallas públicas interactivas en espacios urbanos está aumentando muy rápidamente, y todavía se están explorando nuevas configuraciones para apoyar estas pantallas. En este artículo presentamos una técnica de entrada basada en gestos para permitir la interacción con pantallas públicas evitando el uso de cualquier dispositivo conectado al cuerpo del usuario. Los gestos soportados proporcionan navegación, selección y manipulación de objetos, así como panorámica y zoom en la pantalla. Para evaluar qué tan robusto es el sistema en un escenario público real, se evalúan criterios que podrían interferir en la tarea interactiva, como la cantidad de brillo en el entorno y la presencia de otras personas. La configuración utilizada para respaldar las pruebas incluye un televisor LED de 55", un Kinect para la captura de gestos y un nuevo algoritmo para permitir la identificación de las manos que se cierran y abren. En este trabajo se describen tres escenarios de prueba: la visualización interactiva de un gráfico que representa el árbol genealógico académico de nuestra Universidad; la selección y manipulación de objetos simples; y la interacción libre con el mapa de un edificio. Dados los resultados de las tareas realizadas, concluimos que el sistema, aunque no se comporta con mucha precisión en todas las situaciones, tiene potencial para ser utilizado en muchas aplicaciones.Files
629.pdf
Files
(3.1 MB)
| Name | Size | Download all |
|---|---|---|
|
md5:22d5378a7c78f1095d5f151e2cb4279f
|
3.1 MB | Preview Download |
Additional details
Additional titles
- Translated title (Arabic)
- العروض العامة التفاعلية: اقتراح قائم على الإيماءات باستخدام Kinect
- Translated title (French)
- Affichages publics interactifs : une proposition basée sur des gestes utilisant Kinect
- Translated title (Spanish)
- Pantallas públicas interactivas: una propuesta basada en gestos con Kinect
Identifiers
- Other
- https://openalex.org/W2247172869
- DOI
- 10.5753/jis.2013.634
References
- https://openalex.org/W1987312032
- https://openalex.org/W2008550072
- https://openalex.org/W2009792072
- https://openalex.org/W2009840077
- https://openalex.org/W2030815099
- https://openalex.org/W2059353807
- https://openalex.org/W2070862522
- https://openalex.org/W2084510352
- https://openalex.org/W2086800051
- https://openalex.org/W2101675623
- https://openalex.org/W2106223989
- https://openalex.org/W2122179585
- https://openalex.org/W2124670211
- https://openalex.org/W2127055658
- https://openalex.org/W2132985428
- https://openalex.org/W2133124393
- https://openalex.org/W2145859667
- https://openalex.org/W2148877839
- https://openalex.org/W2163499848
- https://openalex.org/W2165500877