TIB auf der European Conference on Information Retrieval

Vortrag: „Is this an example image? – Predicting the Relative Abstractness Level of Image and Text“

Christian Otto aus der Forschungsgruppe Visual Analytics an der TIB – Leibniz-Informationszentrum Technik und Naturwissenschaften hält auf der European Conference on Information Retrieval (ECIR2019) am 17. April 2019 um 14 Uhr den Vortrag „Is this an example image? – Predicting the Relative Abstractness Level of Image and Text“.

Der Vortrag zu dem gemeinsam mit Prof. Dr. Ralph Ewerth und Sebastian Holzki entstandenen Paper beschäftigt sich mit dem relativen Abstraktionsgrad zwischen Bild- und Textinformationen. Dabei geht es um die Frage, ob sich Bild und Text auf dem gleichen Abstraktionslevel befinden oder nicht: Beispielsweise definiert ein Text „Säugetier“ und das dazugehörige Bild zeigt einen Elefanten – in diesem Fall ist das Bild konkreter als der Text. Umgekehrt wäre es etwa bei einem schematischen Bild, das eine Fahrradgangschaltung zeigt, und einem dazugehörigen Text, der  die Funktionsweise am Beispiel einer Mountainbikeschaltung erklärt. In diesem Fall wäre das Bild abstrakter als der Text. Selbstverständlich können  Bild und Text auf dem gleichen Abstraktionsniveau sein. Diese drei Ausprägungen haben die Mitarbeiter der Forschungsgruppe Visual Analytics definiert und gemessen und stellen nun ein System vor, das den relativen Abstraktionsgrad von Bild und Text mit tiefen neuronalen Netzen automatisch bestimmt.

Wann? 17. April 2019, 14.00-15.30 Uhr
Wo? ECIR 2019 in Köln