• Phone +123-456-7890
  • Mail@Fortuneteam.com
  • Apple St, New York, NY 10012, USA

Wie das Material ins Bild kam (KIKI)

image


  • Projektlaufzeit : 26. September 2022 – 25. Dezember 2024
  • Projektleitung : Isabella Nicka
  • Projektmitarbeiterin (IMAREAL) : Miriam Landkammer
  • Kooperationspartner : FB Artificial Intelligence and Human Interfaces, Univ. Salzburg (Leitung des Projektteils am AIHI: Andreas Uhl)

Wie das Material ins Bild kam

Kulturelle Innovationen interdisziplinär mit Methoden der Künstlichen Intelligenz und der DH erforschen (KIKI)

In der spätmittelalterlichen Malerei und Grafik ist in weiten Teilen Europas eine vermehrte Integration von dargestellten Materialien (z.B. Holz) als innovative Neuerung zu beobachten. In dem vom Land Salzburg geförderten Projekt KIKI wird mit Methoden aus der Kunstgeschichte, den Digital Humanities und der Computer Vision eine Basis dafür geschaffen, den konkreten Verlauf dieser Entwicklung nachvollziehen zu können und anhand des Vergleichs von vielen Bildern (im Sinne eines Distant Viewing) zu analysieren, wie Materialien in den visuellen Medien reflektiert bzw. künstlerisch verarbeitet werden und welche Funktionen sie erfüllen.



Welche Rolle spielte die Darstellung von Materialeigenschaften und Oberflächenqualitäten in den visuellen Kommunikationsstrategien des 14. und 15. Jahrhunderts? Welche Materialien kommen bei bestimmten Bildthemen häufiger vor und welche Veränderungen und Tendenzen zeigen sich während des 15. Jahrhunderts? Um Entwicklungsverläufe und Muster hinsichtlich der Repräsentation von Materialien in mittelalterlicher Malerei und Graphik auf einer breiten Quellenbasis untersuchen und Einzelphänomene detektieren zu können, braucht es Annotationsdaten. Nachdem eine manuelle Erstellung dieser Daten sehr aufwendig und zeitintensiv ist, werden im KIKI-Teilprojekt am Fachbereich Artificial Intelligence and Human Interfaces Computer-Vision-Verfahren mit und ohne Deep Learning für die automatische Erkennung von dargestelltem Material getestet und weiterentwickelt. Ziel ist es, künftig größere Annotations-Datenpools für Untersuchungen in der digitalen Kunstgeschichte zu schaffen.

Damit können auch Faktoren wie die Position und der Bildflächenanteil der Materialien oder Texturvergleiche berücksichtigt werden und Korrelationen zu bestimmten Bildthemen oder geografischen, gattungs- oder kontextspezifischen Charakteristika untersucht werden. Es lassen sich aber auch Beziehungen zu Bildannotationsdaten, wie sie etwa in REALonline zu Personen, Dingen, Handlungen etc. vorliegen, herausstellen.

Einhergehend mit kunsthistorischen qualitativen Untersuchungen – unter anderem zu den Concordantiae Caritatis (Lilienfeld, Stiftsbibliothek, cod. 151) und zum Salzburger Missale (München, BSB, Clm 15708–15712) – wird in KIKI erarbeitet, wie und mit welchen Kategorien gemalte Oberflächeneigenschaften und Materialtexturen für kunsthistorische Analysen am besten erfasst werden können. In einem weiteren Schritt wird ein Normierungsprozess für eine Datenerhebung mit diesen entwickelten Kategorien in Form eines Leitfadens erstellt, um möglichst konsistente Ergebnisse zu ermöglichen. Im nächsten Arbeitspaket wird die manuelle Annotation eines ausgewählten Korpus durchgeführt und geprüft. Diese Bildannotationsdaten bilden einerseits die Ground Truth für die Untersuchungen der Computer Vision. Andererseits werden sie mit quantitativen Methoden aus den Digital Humanities im Sinne eines Distant Viewings ausgewertet, das den Vergleich dieser Bildelemente in vielen visuellen Quellen ermöglicht. Die letztgenannten Erkenntnisse, die aufgefundenen Muster und Spezifika im Datenmaterial, bilden wiederum den Ausgangspunkt für weitere qualitative Untersuchungen seitens der Kunstgeschichte.

Meister von Laufen, Kreuzauffindung durch die Hl. Helena (Detail), um 1440/45, Graz, Universalmuseum Joanneum, REALonline 000671.

Finanziell gefördert durch

Aktuelles
KIKI @ Salzburg Heute
Auf Salzburg Heute wurde am 3.3.2025 ein Beitrag über das Projekt KIKI gesendet. In der Mediathek kann er noch bis 2.4.2025 abgerufen werden.
KIKI-Beitrag auf Salzburg Heute
Aktuelles
KIKI @ Lange Nacht der Forschung
Am 24. Mai 2024 gibt es die Möglichkeit, bei der Langen Nacht der Forschung in Salzburg das Projekt KIKI kennenzulernen und bei der Klassifikation von gemalten Holztexturen mitzumachen.
langenachtderforschung.at
Aktuelles
KIKI @ darthist in Salzburg
Projektvorstellung beim 27. Vernetzungstreffen von darthist - Netzwerk für digitale Kunstgeschichte in Österreich.
Informationen auf darthist.at
Aktuelles / Neues Video
KIKI @ Ringvorlesung Dazzling Data
Ein Vortrag der Ringvorlesung "Dazzling Data. Digital Humanities in der Mediävistik und Frühneuzeitforschung" widmet sich dem Projekt KIKI. Wer am 27.11. 2023 nicht Zeit hatte, vor Ort oder via Stream teilzunehmen, kann nun die Aufzeichnung auf dem Uni TV der PLUS anschauen.
Link zur Aufzeichnung
Aktuelles
KIKI @ IMC Leeds
Beim International Medieval Congress IMC in Leeds (1.-4. Juli 2024) stellen wir im Vortrag "Cross-Examination: Distant and Close Viewing of the Textures of the Wood of the Cross" Ergebnisse aus dem Projekt vor.
IMC Leeds
Neue Publikation
Out now: Neue KIKI-Publikation
Im Springer Verlag ist ein Beitrag von KIKI erschienen: Johannes Schuiki, Miriam Landkammer, Michael Linortner, Isabella Nicka, Andreas Uhl: Towards Using Natural Images of Wood to Retrieve Painterly Depictions of the Wood of Christ’s Cross. In: Gian Luca Foresti, Andrea Fusiello, Edwin Hancock (Hg.): Image Analysis and Processing - ICIAP 2023 Workshops. ICIAP 2023. Lecture Notes in Computer Science, vol 14366. Cham 2024. doi: 10.1007/978-3-031-51026-7_31
Link zur Publikation
Aktuelles / neue Publikation
KIKI @ DH 2023 Graz
KIKI wird im Juli auf der DH 2023 in Graz vorgestellt. Der Abstract zum Vortrag kann auf Zenodo eingesehen werden: Isabella Nicka, Andreas Uhl, Miriam Landkammer, Michael Linortner, Johannes Schuiki: Towards a distant viewing of depicted materials in medieval paintings, in: Digital Humanities 2023. Collaboration as Opportunity (DH2023), Graz, 1–2, doi: 10.5281/zenodo.8107639
Abstract auf Zenodo

Publikationen

* Isabella Nicka, Miriam Landkammer, Andreas Uhl, Michael Linortner, Johannes Schuiki, Annotating images. A prerequisite for interdisciplinary research in Medieval Studies, in: Das Mittelalter 1/2025 (= Luise Borek, Katharina Zeppezauer-Wachauer, Karoline Döring [Hgg.], Schnittstelle Mediävistik. Kollaborationen der Mittelalterforschung im digitalen Zeitalter.) (im Druck)

* Johannes Schuiki, Miriam Landkammer, Michael Linortner, Isabella Nicka, Andreas Uhl, Towards Using Natural Images of Wood to Retrieve Painterly Depictions of the Wood of Christ‘s Cross, in: Foresti, G.L., Fusiello, A., Hancock, E. (Hg.): Image Analysis and Processing – ICIAP 2023 Workshops. Cham 2024 (Lecture Notes in Computer Science, vol 14366), 359–371. https://doi.org/10.1007/978-3-031-51026-7_31.

* Isabella Nicka: Stein und Erde gestalten. Die Concordantiae Caritatis als Experimentierfeld eines Distant Viewings zur Materialdarstellung im 14. Jahrhundert. In: MEMO 10 (2023): Material aspektivieren, doi: 10.25536/20231005.

*  Isabella Nicka, Andreas Uhl, Miriam Landkammer, Michael Linortner, Johannes Schuiki: Towards a distant viewing of depicted materials in medieval paintings, in: Digital Humanities 2023. Collaboration as Opportunity (DH2023), Graz, 1–2. https://doi.org/10.5281/zenodo.8107639

Vorträge

Miriam Landkammer, Isabella Nicka, Forschung zu Materialdarstellungen in der spätmittelalterlichen Malerei: Interfaces, Materialisierungen, Virtualisierungen?, Vortrag im Rahmen des Workshops „Körper und Räume des Virtuellen“, Krems a. d. Donau, 12.7.2024

Miriam Landkammer, Isabella Nicka, Cross-Examination. Distant and Close Viewing of Textures of the Wood of the Cross, Vortrag im Rahmen des International Medieval Congress IMC Leeds (UK), 2.7.2024

Isabella Nicka, Andreas Uhl, Projektpräsentation: Wie das Material ins Bild kam: Kulturelle Innovationen interdisziplinär mit Künstlicher Intelligenz und DH erforschen (KIKI), Digital im Geist – Innovative Projekte an der PLUS, Salzburg, 6.6.2024

Isabella Nicka, Projektpräsentation KIKI: Wie das Material ins Bild kam. Kulturelle Innovationen interdisziplinär mit KI und DH erforschen, Vernetzungstreffen des Netzwerks für Digitale Kunstgeschichte in Österreich (dArthist.at), 21.2.2024.

Isabella Nicka, Miriam Landkammer, Andreas Uhl, Michael Linortner, Distant Viewing. Darstellungen von Material in mittelalterlicher Malerei mit Digital Humanities- und Computer Vision-Methoden untersuchen, Vortrag im Rahmen der Ringvorlesung des IZMF der Universität Salzburg “Dazzling Data: Digital Humanities in der Mediävistik und Frühneuzeitforschung”, 27.11.2023

Isabella Nicka, Miriam Landkammer, Michael Linortner, Towards a distant viewing of depicted materials in medieval paintings, Vortrag bei der Konferenz Digital Humanities 2023. Collaboration as Opportunity (DH2023), Graz, 10. –14.7.2023

Isabella Nicka, Vorstellung der Zwischenergebnisse von “Wie das Material ins Bild kam. Kulturelle Innovationen interdisziplinär mit Künstlicher Intelligenz erforschen, KIKI“ beim IZMF-Treffen, 2.10.2023, Universität Salzburg

Science-to-Public

Isabella Nicka, Miriam Landkammer, Johannes Schuiki, Andreas Uhl: Was hat KI mit Holzkreuzen zu tun? Lange Nacht der Forschung, Salzburg, 24.5.2024

Bericht über KIKI auf Salzburg Heute, gesendet am 3.3.2025, online bis 2.4.2025 abrufbar.