Visual Heritage

Visual Analytics und Computer Vision treffen auf Kulturerbe.

Hintergrund

Die Digitalisierung kultureller Bestände und Sammlungen wurde in den vergangenen Jahrzehnten stark vorangetrieben. Die Palette reicht dabei von Archivdaten wie Taufregistern und Katastern über Kunstwerke wie Fotografien oder Amateurfilme bis hin zu ganzen Stadtvierteln. Um solche Bestände über interaktive Systeme erschließen zu können, sind benutzer*innenfreundliche Schnittstellen für Expert*innen wie auch für die breite Öffentlichkeit unerlässlich.

Eine hohe Benutzer*innenfreundlichkeit verlangt nach anschaulichen Datenvisualisierungen mit einem breiten Anwendungsbereich, die es den Nutzer*innen erleichtern, Daten effizient zu durchsuchen, Muster und Zusammenhänge zu erkennen und Schlüsse zu ziehen. Darüber hinaus braucht es automatische Analysemethoden mit denen die komplexen und vielfältigen Inhalte erfasst werden können.

Projektinhalt

In dem vorliegenden kooperativen Doktoratsprogramm erforschen wir den Einsatz von interaktiven Anwendungen für zwei Szenarien: In Szenario Eins untersuchen wir, wie das Zusammenspiel von Expert*innenwissen und automatischer, KI-gestützte Inhaltsanalyse zu neuen Erkenntnissen führen kann und wie man daraus den größtmöglichen Nutzen zieht. In Szenario Zwei beschäftigen wir uns mit der Vermittlung der gewonnenen Erkenntnisse an die breite Öffentlichkeit über interaktive Narrative (Storytelling).

Das Projekt ist in zweierlei Hinsicht interdisziplinär. Zum einen schlägt es eine Brücke zwischen den Fachbereichen Informatik und Geisteswissenschaften. Zum anderen vertiefen die Informatikdisziplinen Visual Analytics  und Computer Vision/Machine Learning ihre Zusammenarbeit. Die beiden beteiligten Institutionen (USTP und TU Wien) stellen jeweils etwa die Hälfte der Fakultätsmitglieder des Doktoratsprogramms. Jeder Doktorand und jede Doktorandin erhält die Gelegenheit, an beiden Institutionen zu forschen, alle involvierten Fachbereiche näher kennenzulernen und wertvolle Kontakte für zukünftige Kooperationen zu knüpfen.

Ziele und Arbeitsschritte

Die übergeordneten, inhaltlichen Ziele werden in fünf Dissertationsprojekten abgearbeitet, die sich in drei konzeptuelle Ebenen gliedern lassen: (1) die Generierung von Metadaten, (2) die Exploration von Daten und (3) die Vermittlung von Daten. Das Hauptaugenmerk der Untersuchungen liegt auf historischen Archivbeständen, insbesondere Fotografie und Film, sowie auf der Erprobung neuer Ansätze und Methoden. Diese umfassen:

  • Die automatische inhaltsbasierte Analyse von historischem Filmmaterial.
  • Automatisierte Methoden mit denen die für historische Aufnahmen verwendeten Kamera- und Objektivtypen  bestimmt werden können. Grundlage dafür bilden die zu dem Fotomaterial verfügbare Informationen (z.B., Ort, Zeit, historische Einordnung) aber auch das Fotomaterial selbst.
  • Explorative Analysen historischer Bildbestände zu denen wenig bis gar keine Metadaten vorliegen.
  • Visuelle Analyse, um Netzwerke von Kulturgütern zu untersuchen. Räumliche und zeitliche Verbindungen zwischen Kulturgüter werden sichtbar gemacht und damit Möglichkeiten erschlossen historische Entwicklungen und Zusammenhänge in einem neuen Licht zu betrachten.
  • Entwicklung neuer Ansätze des Situated Storytellings, um die Inhalte des Projektes einem breiten Publikum näherzubringen. Digitale Inhalte werden dabei mit physischen Räumen in Beziehung gesetzt und auf die Interessen und Handlungen der Benutzer*innen abgestimmt.

Sie wollen mehr wissen? Fragen Sie nach!

Stellvertretender Leiter Fakultät für Technik und Wirtschaft
Arbeitsplatz: B - Campus-Platz 1
M: +43/676/847 228 611

Publikationen

Passecker, M. (2026, February 20). Die Vergangenheit umgibt uns Digitalisiertes Kulturerbe vor Ort durch situierte Visualisierung erlebbar machen. Book of Abstracts - DHd 2026. Digital Humanities im deutschsprachigen Raum, Vienna, Austria. https://doi.org/10.5281/zenodo.18696148
Wintersberger, M., Nagl, A., Spet, C., Rotschopf, R., Passecker, M., & Bešlić-Gál, B. (2025, December 17). "Heavenly Riders – GP≭FF[1914]" - IMPULSE in der Hofburgkapelle [Präsentation, Konzert, Vortrag, Projektion]. IMPULSE in der Hofburgkapelle. https://www.hofmusikkapelle.gv.at/programm/programm-detail/impulse-in-der-hofburgkapelle-31
Wintersberger, M., Nagl, A., Munk, C., Moser, S., Hoth, J., & Passecker, M. (2025). Lucid Dreams ECHO [Ausstellung, Installation, Performance, Interaktion]. https://www.ustp.at/de/stories/news/immersive-medienkunst-im-haus-der-digitalisierung
Wintersberger, M., Nagl, A., Spet, C., Passecker, M., Bešlić-Gál, B., & Rotschopf, R. (2025, November 18). K1_ARt.bridges {Wien-Sarajevo}. Kunst, Erinnerung und Öffentlichkeit im Virtuellen. K1_ARt.bridges {Wien-Sarajevo}. Kunst, Erinnerung und Öffentlichkeit im Virtuellen. https://www.kultureins.at/talk-im-kuenstlerhaus-am-18-11-2025-k1_art-bridges-%e2%88%86wien%e2%86%94sarajevo/
Aigner, W., Stoiber, C., Passecker, M., Wu, H.-Y., Boucher, M., Rind, A., & Größbacher, S. (2025, November 5). Research Area Data Visualization. Austrian Showroom @ IEEE VIS.
Aigner, W., Mayr, E., Möller, T., & Windhager, F. (2025, November 4). ISOTYPE Exhibition [Exhibition]. IEEE VIS. https://sites.google.com/view/isotype/exhibition-at-vis?authuser=0
Tekaya, N., Waldner, M., & Zeppelzauer, M. (2025). A Matter of Time: Revealing the Structure of Time in Vision-Language Models. Proceedings of the 33rd ACM International Conference on Multimedia, 12371–12380. https://doi.org/10.1145/3746027.3758163
Wintersberger, M., Nagl, A., Spet, C., Passecker, M., Bešlić-Gál, B., & Rotschopf, R. (2025). K1_ARt.bridges {Wien-Sarajevo}. Eröffnung der 3. Edition von K1_ARt. Zacherlfabrik Wien [Ausstellung, Installation, Performance, Interaktion - XR / VR / AR]. https://www.kultureins.at/eroeffnung-wien-k1_art-bridges-%e2%88%86wien%e2%86%94sarajevo-30-09-2025
Wintersberger, M., Nagl, A., Spet, C., Passecker, M., Bešlić-Gál, B., & Rotschopf, R. (2025). K1_ARt.bridges {Wien-Sarajevo}. Eröffnung der 3. Edition von K1_ARt. Rathaus Sarajevo [Ausstellung, Installation, Performance, Interaktion - XR / VR / AR]. https://www.kultureins.at/eroeffnung-k1_art-bridges-%e2%88%86wien%e2%86%94sarajevo-14-09-2025
Wintersberger, M., Spet, C., Passecker, M., & Schürrer, D. (2025, January 7). Vdonaukanal - Guided Tour [Vortrag and Präsentation]. Vdonaukanal - Guided Tour. https://www.kultureins.at/veranstaltung-guided-tour-01-07-2025
Wintersberger, M., Nagl, A., Munk, C., Kirmaier, C., Betzenbichler, F., & Passecker, M. (2025). Lucid Dreams STONEAGE [Ausstellung, Installation, Performance, Interaktion - XR / VR / AR]. https://www.lucid-dreams.at
Wintersberger, M., Nagl, A., Munk, C., Kirmaier, C., Betzenbichler, F., & Passecker, M. (2025). ADNA Werkschau. Welche Rolle spielt Design in der neuen Realität? [Ausstellung, Installation, Performance, Interaktion - XR / VR / AR]. https://www.designmonat.at/event/adna-academic-design-network-austria-werkschau
Rind, A., Boucher, M., De Jesus Oliveira, V. A., Grassinger, F., Stoiber, C., Tekaya, N., & Zauchinger, M. (2025, May 22). Daten erlebbar machen [Demo & Poster]. E3UDRES2 Science Festival. https://eudres.eu/scifest-stp-2025
Aigner, W., Miksch, S., Proksa, F., Sablatnig, R., Seidl, M., Waldner, M., & Zeppelzauer, M. (2025). Visual Heritage: Visual Analytics and Computer Vision Meet Cultural Heritage (doc.funds.connect). Abstractband: 18. Forschungsforum Der Österreichischen Fachhochschulen : 7. - 8. Mai 2025, 558–559. https://doi.org/10.34895/hcw.0027
Wintersberger, M., Nagl, A., Spet, C., Schoiswohl, P., Schürrer, D., Passecker, M., & Tüz, K. A. (2025). Flow into 2025. Vernissage / Konzert / Get-Together [Ausstellung, Installation, Interaktion - XR / VR / AR]. https://www.vdonaukanal.eu/veranstaltung-flow-into-2025-am-27-01-2025
Aigner, W. (2025, January 13). Wintergraph 2025 - Research Area - Data Visualization. 18th Visual Computing Winter Workshop Austria (Wintergraph 2025).
Aigner, W., Mayr, E., Möller, T., Prantl, V., & Windhager, F. (2025). ``Words Divide, Pictures Unite"" – Revisiting Otto Neurath"s ISOTYPE at 100. IEEE VIS 2025 - Panels.
Dadras, A., Lin, T., Sablatnig, R., & Seidl, M. (2025). Rule-of-Thirds Detection with Interpretable Geometric Features. Proceedings of the 7th International Workshop on analySis, Understanding and proMotion of heritAge Contents (SUMAC ´25). ACM Multimedia 2025. https://doi.org/10.1145/3746273.3760202
Tuscher, M., Filipov, V., Kamencek, T., Rosenberg, R., & Miksch, S. (2025). Nodes, edges, and artistic wedges: a survey on network visualization in art history. Computer Graphics Forum, 44(3). https://doi.org/10.1111/cgf.70154
Lin, T., Dadras, A., Kleber, F., & Sablatnig, R. (2025). DGME-t: Directional grid motion encoding for transformer-based historical camera movement classification. SUMAC "25: Proceedings of the 7th International Workshop on analySis, Understanding and proMotion of heritAge Contents, 13–21. https://doi.org/10.1145/3746273.3760209
Lin, T., & Sablatnig, R. (2025). Enhancing historical image retrieval with compositional cues. In B. Nessler, J. Piater, & P. M. Roth (Eds.), Austrian Symposium on AI, Robotics, and Vision (AIRoV) (pp. 169–178). innsbruck university press.
Baumgartl, T., Filipov, V., Rajendran, S., Miksch, S., Archambault, D., Arleo, A., & von Landesberger, T. (2025). Layers of doubt: Typology of temporal uncertainty in dynamic diffusion networks. IEEE VIS 2025 Workshop Uncertainty Visualization: Unraveling Relationships of Uncertainty, AI, and Decision-Making.
Lin, T., Stippel, C., Kleber, F., & Sablatnig, R. (2025). A robust and efficient framework for inferring mutual gaze in historical video data. 28th Computer Vision Winter Workshop.
Tuscher, M., Rauchenberger, L., Kamencek, T., Rosenberg, R., Miksch, S., & Filipov, V. (2025). A kaleidoscopic view of artist co-exhibition networks. Poster at IEEE VIS 2025. https://doi.org/10.34726/11631
Passecker, M., Oliveira, V. A. de. J., Buono, P., Miksch, S., & Aigner, W. (2025). Reconnecting Artifacts and Place: A Review of Situated Visualization in Cultural Heritage. 2025 IEEE Workshop on Visualization for the Digital Humanities (VIS4DH), 7–13. https://doi.org/10.1109/VIS4DH69385.2025.00006
Passecker, M., Miksch, S., Proksa, F., & Aigner, W. (2025). The past is all around you: Augmenting cultural heritage on-site. In A. Diehl, K. Kucher, & N. Médoc (Eds.), EuroVis 2025 - Posters. The Eurographics Association. https://doi.org/10.2312/evp.20251143
Aigner, W. (2024, December 6). Visualization and Multimodal Exploration of Time-Oriented Data. SFB-TRR 161 "Quantitative Methods for Visual Computing."
Wintersberger, M., Bešlić-Gál, B., Schürrer, D., Tüz, K. A., Schoiswohl, P., Maron, N., Passecker, M., Spet, C., & Nagl, A. (2024). Vdonaukanal - Klimabiennale Wien [WWW, Extended Reality, Tanz, Performance, 3D Druck, Kunst im öffentlichen Raum]. https://www.biennale.wien/projekte/vdonaukanal
Ciccio, C. D., Miksch, S., Soffer, P., Weber, B., & Meroni, G. (2024). Human in the (process) mines. Dagstuhl Reports, 13(7). https://doi.org/10.4230/DagRep.13.7.1
Tuscher, M., Filipov, V., Kamencek, T., Rosenberg, R., & Miksch, S. (2024). Mapping the avantgarde: Visualizing modern artists" exhibition activity. Proceedings of EuroVis 2024 Short Papers. https://doi.org/10.2312/evs.20241063
Miksch, S., Ciccio, C. D., Soffer, P., & Weber, B. (2024). Visual analytics meets process mining: Challenges and opportunities. IEEE Computer Graphics and Applications, 44(6), 132–141. https://doi.org/10.1109/MCG.2024.3456916
Tuscher, M., Filipov, V., Kamencek, T., Rosenberg, R., & Miksch, S. (2024). Mapping the avantgarde: Visualizing modern artists’ exhibition activity. EuroVis 2024.
Externe Projektleitung
Univ.Prof.in Mag.a rer.soc.oec. Dr.in rer.soc.oec. Silvia Miksch
Externe MitarbeiterInnen
Univ.Prof.in Mag.a rer.soc.oec. Dr.in rer.soc.oec. Silvia Miksch
Ao.Univ.Prof. Dipl.-Ing. Dr.techn. Robert Sablatnig
PartnerInnen
  • Technische Universität Wien, Institute of Visual Computing and Human-Centered Technology​
  • Österreichisches Filmmuseum
  • Stift Klosterneuburg
  • ÖAW
  • Photoinstitut Bonartes
  • Time Machine Organisation (TMO)
  • VGA, Geschichte der ArbeiterInnenbewegung
  • Stadt Wien, Wienbibliothek im Rathaus
  • MUK Musik und Kunst Privatuniversität der Stadt Wien
  • University of Bari Aldo Moro [Italien]
  • City St George's University of London [England]
  • SDU University of Southern Denmark [Dänemark]
  • Universität Stuttgart [Deutschland]
  • Linköping University [Schweden]
  • Universität Leipzig [Deutschland]
  • FAU Friedrich-Alexander Universität Erlangen-Nürnberg [Deutschland]
Finanzierung
FWF (doc.funds.connect)
Laufzeit
02.10.2023 – 30.09.2027
Projektstatus
laufend
Beteiligte Institute, Gruppen und Zentren
Forschungsgruppe Media Computing
Forschungsgruppe Media Creation
Institut für Creative\Media/Technologies