iART - Eine Suchmaschine zur Unterstützung von bildorientierten Forschungsprozessen

Schneider, Stefanie ; Springstein, Matthias; Rahnama, Javad; Kohle, Hubertus ; Ewerth, Ralph ; Hüllermeier, Eyke (March 2022): iART - Eine Suchmaschine zur Unterstützung von bildorientierten Forschungsprozessen. DHd 2022 Kulturen des digitalen Gedächtnisses. 8. Tagung des Verbands "Digital Humanities im deutschsprachigen Raum", 7. - 11. März 2022, Potsdam.

Abstract

Mit iART wird eine offene Web-Plattform zur Suche in kunst- und kulturwissenschaftlichen Bildinventaren präsentiert, die von in den Geistes­wissenschaften etablierten Methoden wie dem Vergleichenden Sehen inspiriert ist. Das System integriert verschiedene maschinelle Lerntechniken für das schlagwort- und inhaltsgesteuerte Retrieval sowie die Kategorienbildung über Clustering. Mithilfe eines multimodalen Deep-Learning-Ansatzes ist es zudem möglich, text- und bildbasiert nach Konzepten zu suchen, die von trainierten Klassifikationsmodellen zuvor nicht erkannt wurden. Unterstützt von einer intuitiven Benutzeroberfläche, die die Untersuchung der Ergebnisse durch modifizierbare Objektansichten erlaubt, können Nutzer:innen circa eine Millionen Objekte aus kunsthistorisch relevanten Bilddatenbanken, etwa des niederländischen Rijksmuseums, explorieren. Ebenso können eigene Bestände importiert werden.

• Item Type: Conference or Workshop Item (Paper)
• Faculties: History and Art History > Department of Art History > Art History; Mathematics, Computer Science and Statistics > Computer Science > Artificial Intelligence and Machine Learning
• Subjects: 000 Computer science, information and general works > 000 Computer science, knowledge, and systems; 700 Arts and recreation > 700 Arts
• Language: German