Published January 1, 2019 | Version v1
Publication Open

Instant Rephotography

  • 1. Universidade Federal do Rio Grande do Sul

Description

When traveling, a very common issue is to ask for the help of a stranger to take a photo on a touristic spot. Indeed, often the results of this short collaboration are not as previously imagined. In this paper, we introduce the concept of instant rephotography, a technique based on a simple and intuitive user interface, and in an efficient and low cost algorithm that finds the matching between two images. The user interface guides the photographer to position the camera in the right place that was once imagined by the camera owner, automatically taking the new photo. To correctly choose the new photo, we propose an algorithm based on ORB (Oriented FAST and Rotated BRIEF) feature points acquired from the reference and current photos, and on inertial sensors embedded in the photo device, a smartphone. To validate the concepts introduced, we implemented an Android App called Smart-Tourist Camera, conceived to help tourists to take good pictures during travels. Three different user studies involving 124 volunteers were conducted and results have shown that the photographs taken with the application are perceived as better than otherwise, and that users would use the App during their travels.

⚠️ This is an automatic machine translation with an accuracy of 90-95%

Translated Description (Arabic)

عند السفر، هناك مشكلة شائعة جدًا وهي طلب مساعدة شخص غريب لالتقاط صورة في مكان سياحي. في الواقع، غالبًا ما لا تكون نتائج هذا التعاون القصير كما كان متصورًا سابقًا. في هذه الورقة، نقدم مفهوم إعادة التصوير الفوري، وهي تقنية تعتمد على واجهة مستخدم بسيطة وبديهية، وفي خوارزمية فعالة ومنخفضة التكلفة تجد التطابق بين صورتين. توجه واجهة المستخدم المصور لوضع الكاميرا في المكان الصحيح الذي تخيله مالك الكاميرا ذات مرة، والتقاط الصورة الجديدة تلقائيًا. لاختيار الصورة الجديدة بشكل صحيح، نقترح خوارزمية تعتمد على نقاط ميزة ORB (الموجز السريع والموجه) التي تم الحصول عليها من الصور المرجعية والحالية، وعلى أجهزة الاستشعار بالقصور الذاتي المضمنة في جهاز الصورة، وهو هاتف ذكي. للتحقق من صحة المفاهيم المقدمة، قمنا بتنفيذ تطبيق Android يسمى Smart - Tourism Camera، تم تصميمه لمساعدة السياح على التقاط صور جيدة أثناء الرحلات. تم إجراء ثلاث دراسات مستخدمين مختلفة شملت 124 متطوعًا وأظهرت النتائج أن الصور التي تم التقاطها مع التطبيق يُنظر إليها على أنها أفضل من غيرها، وأن المستخدمين سيستخدمون التطبيق أثناء رحلاتهم.

Translated Description (French)

Lorsque vous voyagez, un problème très courant est de demander l'aide d'un étranger pour prendre une photo sur un lieu touristique. En effet, souvent les résultats de cette courte collaboration ne sont pas comme on l'avait imaginé auparavant. Dans cet article, nous introduisons le concept de rephotographie instantanée, une technique basée sur une interface utilisateur simple et intuitive, et dans un algorithme efficace et peu coûteux qui trouve la correspondance entre deux images. L'interface utilisateur guide le photographe pour positionner l'appareil photo au bon endroit qui a été imaginé par le propriétaire de l'appareil photo, en prenant automatiquement la nouvelle photo. Pour bien choisir la nouvelle photo, nous proposons un algorithme basé sur des points caractéristiques ORB (Oriented FAST and Rotated BRIEF) acquis à partir des photos de référence et actuelles, et sur des capteurs inertiels embarqués dans l'appareil photo, un smartphone. Pour valider les concepts introduits, nous avons mis en place une application Android appelée Smart-Tourist Camera, conçue pour aider les touristes à prendre de bonnes photos lors de leurs voyages. Trois études d'utilisateurs différentes impliquant 124 volontaires ont été menées et les résultats ont montré que les photos prises avec l'application sont perçues comme meilleures qu'autrement, et que les utilisateurs utiliseraient l'application pendant leurs voyages.

Translated Description (Spanish)

Cuando viajas, un problema muy común es pedir la ayuda de un extraño para tomar una foto en un lugar turístico. De hecho, a menudo los resultados de esta breve colaboración no son como se imaginaba anteriormente. En este artículo, presentamos el concepto de refotografía instantánea, una técnica basada en una interfaz de usuario simple e intuitiva, y en un algoritmo eficiente y de bajo costo que encuentra la coincidencia entre dos imágenes. La interfaz de usuario guía al fotógrafo para colocar la cámara en el lugar correcto que una vez fue imaginado por el propietario de la cámara, tomando automáticamente la nueva foto. Para elegir correctamente la nueva foto, proponemos un algoritmo basado en puntos de función ORB (Oriented FAST and Rotated BRIEF) adquiridos de las fotos de referencia y actuales, y en sensores inerciales integrados en el dispositivo fotográfico, un teléfono inteligente. Para validar los conceptos introducidos, implementamos una aplicación para Android llamada Smart-Tourist Camera, concebida para ayudar a los turistas a tomar buenas fotos durante los viajes. Se realizaron tres estudios de usuarios diferentes con 124 voluntarios y los resultados han demostrado que las fotografías tomadas con la aplicación se perciben como mejores que de otra manera, y que los usuarios usarían la aplicación durante sus viajes.

Files

document.pdf

Files (15.0 MB)

⚠️ Please wait a few minutes before your translated files are ready ⚠️ Note: Some files might be protected thus translations might not work.
Name Size Download all
md5:9ae32530ed36aca94c638831e3ffb64b
15.0 MB
Preview Download

Additional details

Additional titles

Translated title (Arabic)
إعادة تصوير فورية
Translated title (French)
Rephotographie instantanée
Translated title (Spanish)
Refotografía instantánea

Identifiers

Other
https://openalex.org/W4211136295
DOI
10.1007/978-3-030-29387-1_12

GreSIS Basics Section

Is Global South Knowledge
Yes
Country
Brazil

References

  • https://openalex.org/W1491719799
  • https://openalex.org/W1532362218
  • https://openalex.org/W1971147492
  • https://openalex.org/W2045475876
  • https://openalex.org/W2048647542
  • https://openalex.org/W2064857609
  • https://openalex.org/W2069639113
  • https://openalex.org/W2085948715
  • https://openalex.org/W2117228865
  • https://openalex.org/W2119605622
  • https://openalex.org/W2124386111
  • https://openalex.org/W2124849494
  • https://openalex.org/W2135589662
  • https://openalex.org/W2143051655
  • https://openalex.org/W2162888612
  • https://openalex.org/W2177274842
  • https://openalex.org/W2247030035
  • https://openalex.org/W2273470494
  • https://openalex.org/W2292978787
  • https://openalex.org/W2518309125
  • https://openalex.org/W4244730588
  • https://openalex.org/W4251178070