Modulare Visuelle Mobile Suche (MoViMoS)

Die enorme Verbreitung von multimedialen Inhalten, sei es auf großen Foto- und Videoportalen wie Flickr und YouTube oder im privaten Bereich, schafft völlig neue Herausforderungen an die Benutzung, Verwaltung und Archivierung dieser Daten. Ganz besonders das Auffinden spezieller Inhalte in solchen Multimedia-Sammlungen erweist sich oft als problematisch und zeitaufwendig. Mögliche Ansätze dazu sind die textuelle Annotation der visuellen Daten (Bilder/Videos) für die Suche, als auch Verfahren mit denen der visuelle Inhalt von Multimedia-Daten direkt verglichen werden kann.

In der Forschung haben sich zu beiden Ansätzen in der jüngeren Vergangenheit neue Erkenntnisse ergeben, die in MoViMoS umgesetzt werden. Dabei stehen vor allem eine hohe Skalierbarkeit des Systems auf große Datenmengen, eine hohe Adaptivität an spezielle Anwendungsszenarien und natürlich die Qualität der Such-Ergebnisse im Vordergrund.

MoViMoS ist als kommerziell nutzbare Systemlösung konzipiert, welche jedoch, aufgrund ihrer Modularität und leichten Erweiterbarkeit, auch zu Forschungszwecken eingesetzt werden kann. Ein konkretes Szenario ist z.B. die Verwendung vom MoViMoS mittels eines Mobiltelefons (siehe Anwendungsszenario) um zusätzliche Informationen zu erhalten.

Schwerpunkt der Forschungs- und Entwicklungsarbeit von MoViMoS ist der Entwurf und die Realisierung eines modularen, effzienten und skalierbaren Retrieval-Systems. Hierbei werden sowohl existierende Verfahren der inhaltsbasierten Suche, als auch neue entwickelte Verfahren zur Merkmalsextraktion und zur effzienten Ähnlichkeitsbasierten Suche in Form einzelner Module in einer einfach skalier- und konfigurierbaren System-Architektur integriert. Als “Proof-of-Concept” wird eine prototypische Anwendung im Bereich der mobilen touristischen Informationssysteme mit der Funktionalität des realisierten Bild-Retrieval-Systems entwickelt.

• Ermittlung adäquater Merkmale für die Bildextraktion
• Erforschung effzienter und skalierbarer Retrieval-Verfahren
• Untersuchung der Benutzerinteraktion auf mobilen Endgeräten
• Ausarbeitung einer modularen System-Architektur

Die anwendungsnahe Implementierung von MoViMoS konzentriert sich auf ein Anwendungsszenario, in dem man als Tourist mit seinem Mobiltelefon Informationen erhalten möchte. Hierbei kann eine Anfrage bspw. in Form einer MMS erfolgen und die gewünschte Information per SMS Übertragen werden:

Ein Tourist nimmt ein Bild einer Sehenswürdigkeit mit der Kamera seines Mobiltelefons auf und schickt es an einen dedizierten Server.

Der Server vergleicht das Bild mit seinem Datenbestand und gibt eine Auswahl der in Frage kommenden Sehenswürdigkeiten in Form von Bildern an den Benutzer zurück. Der Benutzer wählt nun das richtige Objekt aus und erhält Zusatzinformationen zu dem von ihm gerade besuchten Ort.