Neues Suchen in Bilddatenbanken: Skizze von Hand genügt

Viele Zeitgenossen werden nicht nur im Privatleben, sondern auch im Berufsalltag mehr und mehr mit grossen Sammlungen von Fotos und Videos konfrontiert, in denen sie sich zurechtzufinden müssen. Während sich im Internet mittels Suchmaschinen wie Google oder Bing einfach und effizient mit Suchbegriffen nach Dokumenten und Webseiten suchen lässt, sind die Möglichkeiten der Suche in Sammlungen mit Multimedia-Objekten bisher noch sehr stark eingeschränkt.

Weit gefasster Ähnlichkeitsbegriff

Forschende am Departement Mathematik und Informatik der Universität Basel haben nun ein System namens «vitrivr» entwickelt, mit dem sich Bilder und Videos mittels Skizzen suchen lassen. Die Benutzer erstellen dafür eine Skizze des gesuchten Objekts – auf einem Tablet, einem Smartphone oder auf interaktivem Papier –,  worauf das Programm Bilder und Videosequenzen liefert, die der Skizze am ähnlichsten sind. Bei Videos können die Benutzer in der Skizze sogar angeben, in welche Richtung sich ein Objekt in der gesuchten Sequenz bewegen soll. 

Für das System haben die Forscher den Ähnlichkeitsbegriff bewusst sehr weit gefasst und ihn an die Art der Skizze angepasst, so etwa über ähnliche Farben, Formen oder Bewegungsrichtungen.

Durch zahlreiche weitere Anfragearten – mittels Begriffen, Beispielbildern und -videos sowie Kombinationen davon – kann die Suche individuell angepasst werden. Ein wichtiger Aspekt des neuen Systems ist seine Skalierbarkeit, also seine Eigenschaft, auch für sehr grosse Multimedia-Sammlungen zur Verfügung zu stehen.

System frei zugänglich

Das komplette System vitrivr ist für die internationale Forschungsgemeinschaft als «Open Source» frei zugänglich. Es wird bereits für verschiedene Anwendungen eingesetzt: etwa für die Suche nach Bewegungsmustern in Sportvideos – zusammen mit dem schweizerischen Bundesamt für Sport – sowie für die Suche in Sammlungen von Bildern digitaler Wasserzeichen in einer Kooperation mit der Basler Papiermühle.