Machine Perception and Cognition Group

«KI ist DIE Schlüsseltechnologie des digitalen Wandels in allen Branchen und Sektoren und sie hat starke Auswirkungen auf unsere Gesellschaften. Darum leistet unsere Forschung wichtige Beiträge zu robusten und vertrauenswürdigen KI-Methoden, und wir vermitteln mit Begeisterung deren sichere Umsetzung und Anwendung.»
Expertise

- Mustererkennung mit Deep Learning
- Maschinelle Wahrnehmung, Computer Vision und Sprechererkennung
- Entwicklung neuronaler Systeme
Die Machine Perception and Cognition-Gruppe forscht über Mustererkennung und arbeitet an einer Vielzahl von Aufgaben mit Bild-, Ton- oder allgemein Signaldaten. Wir befassen uns mit der Methodik der tiefen neuronalen Netze (Deep Neural Networks) und des Reinforcement Learning, inspiriert durch biologisches Lernen. Jede unserer Aufgaben hat ihr eigenes Lernziel (z. B. Erkennung, Klassifizierung, Clustering, Segmentierung, Novelty Detection, Steuerung) und ihren eigenen Anwendungsfall (z. B. vorausschauende Instandhaltung (Predictive Maintenance), Sprechererkennung für Multimedia-Indizierung, Dokumentanalyse, optische Notenerkennung, Computer Vision für industrielle Qualitätskontrolle, automatisiertes maschinelles Lernen, Deep Reinforcement Learning für automatisierte Spiele oder Gebäudeleittechnik). Diese werfen ihrerseits ein Licht auf verschiedene Aspekte des Lernprozesses. Wir nutzen diese Erfahrungen, um allgemeinere KI-Systeme zu kreieren, die auf neuronalen Architekturen basieren.
Angebote
- Einblick: Keynotes, Trainings
- KI-Beratung: Workshops, Expertenunterstützung, Beratung, Technikfolgenabschätzung
- Forschung und Entwicklung: kleine bis grosse Gemeinschaftsprojekte, Drittmittelforschung, studentische Projekte, praxiserprobte Prototypen
Team
Projekte
-
dAIrector – Automatisierte Mehrkamera-Liveproduktion für Veranstaltungen (dAIrector)
Der dAIrector automatisiert Multicam-Liveproduktionen von Konzerten, Theater, Comedy und Musicals durch kreative KI-Regie, die der Dramaturgie auf der Bühne folgt. Er wird via YourStage.live kleinen Bühnen, Events, Festivals und Künstler einen Zugang zu einem weltweiten Publikum bieten.
laufend, 01/2025 - 12/2027
-
Studie zur semiautomatischen Plakaterschliessung an der Schweizerischen Nationalbibliothek (SemPla)
Täglich bekommt die Schweizerische Nationalbibliothek neue physische Plakate und Poster zur Aufnahme in ihren Katalog. Wie kann der Prozess zur Plakaterschliessung durch aktuelle KI Systeme verbessert werden?
abgeschlossen, 05/2024 - 11/2024
-
Deep Dive ML on Simulated Enzyme-Electrolysis Performance
abgeschlossen, 11/2023 - 03/2024
-
AI for REAL-world NETwork operation (AI4REALNET)
laufend, 10/2023 - 03/2027
-
Stability of self-organizing net fragments as inductive bias for next-generation deep learning
laufend, 09/2023 - 08/2025
-
Machine Learning für Body Composition Analysis (ML-BCA)
laufend, 04/2023 - 03/2025
-
3D-Master for a Digitized Manufacturing Platform
laufend, 12/2022 - 05/2025
-
certAInty – A Certification Scheme for AI systems (certAInty)
abgeschlossen, 11/2022 - 12/2024
-
DISTRAL: Industrial Process Monitoring for Injection Molding with Distributed Transfer Learning
laufend, 10/2022 - 03/2025
-
AI powered CBCT for improved Combination Cancer Therapy (AC3T)
laufend, 05/2022 - 02/2025
-
AUTODIDACT – Automated Video Data Annotation to Empower the ICU Cockpit Platform for Clinical Decision Support
abgeschlossen, 02/2022 - 12/2022
-
Good practices for responsible development of AI-based applications in healthcare
abgeschlossen, 09/2021 - 08/2023
-
Pilot study machine learning for injection molding processes
abgeschlossen, 09/2021 - 03/2022
-
Accessible Scientific PDFs for All
laufend, 04/2021 - 05/2025
-
Synthetic data generation of CoVID-19 CT/X-rays images for enabling fast triage of healthy vs. unhealthy patients
abgeschlossen, 05/2020 - 07/2020
-
Standardized Data and Modeling for AI-based CoVID-19 Diagnosis Support on CT Scans (SDMCT) (SDMCT)
abgeschlossen, 05/2020 - 10/2020
-
DIR3CT: Deep Image Reconstruction through X-Ray Projection-based 3D Learning of Computed Tomography Volumes
abgeschlossen, 02/2020 - 05/2022
-
TAILOR – Foundations of Trustworthy AI - Integrating Reasoning, Learning and Optimization
abgeschlossen, 01/2020 - 12/2021
-
RealScore – Scanning of Real-World Sheet Music for a Digital Music Stand
abgeschlossen, 09/2019 - 05/2022
-
Visual Food Waste Analysis for Sustainable Kitchens (FWA)
abgeschlossen, 07/2019 - 09/2021
Publikationen
-
Prabhu Siddhartha, Guptara, Hrsg.,
2025.
Global Resilience White Paper
; 2.
Global Resilience Publishing.
Verfügbar unter: https://doi.org/10.21256/zhaw-32180
-
Bolt, Peter; Ziebart, Volker; Jaeger, Christian; Schmid, Nicolas; Stadelmann, Thilo; Füchslin, Rudolf Marcel,
2024.
A simulation study on energy optimization in building control with reinforcement learning [Paper].
In:
11th IAPR TC 3 Workshop on Artificial Neural Networks for Pattern Recognition (ANNPR'24), Montreal, Canada, 10-12 October 2024.
ZHAW Zürcher Hochschule für Angewandte Wissenschaften.
Verfügbar unter: https://doi.org/10.21256/zhaw-31129
-
Ali, Waqar; Vascon, Sebastiano; Stadelmann, Thilo; Pelillo, Marcello,
2024.
Hierarchical glocal attention pooling for graph classification.
Pattern Recognition Letters.
186, S. 71-77.
Verfügbar unter: https://doi.org/10.1016/j.patrec.2024.09.009
-
Yan, Peng; Abdulkadir, Ahmed; Aguzzi, Giulia; Schatte, Gerrit A.; Grewe, Benjamin F.; Stadelmann, Thilo,
2024.
In:
2024 11th IEEE Swiss Conference on Data Science (SDS).
11th IEEE Swiss Conference on Data Science (SDS), Zurich, Switzerland, 30-31 May 2024.
IEEE.
S. 138-145.
Verfügbar unter: https://doi.org/10.1109/SDS60720.2024.00027
-
Meyer, Benjamin; Stadelmann, Thilo; Lüthi, Marcel,
2024.
ScalaGrad : a statically typed automatic differentiation library for safer data science [Paper].
In:
2024 11th IEEE Swiss Conference on Data Science (SDS).
11th IEEE Swiss Conference on Data Science (SDS), Zurich, Switzerland, 30-31 May 2024.
IEEE.
S. 229-232.
Verfügbar unter: https://doi.org/10.1109/SDS60720.2024.00040
Sonstige Veröffentlichungen
Wann | Art | Titel |
---|---|---|
2023 | Extended Abstract | Thilo Stadelmann. KI als Chance für die angewandten Wissenschaften im Wettbewerb der Hochschulen. Workshop (“Atelier”) at the Bürgenstock-Konferenz der Schweizer Fachhochschulen und Pädagogischen Hochschulen 2023, Luzern, Schweiz, 20. Januar 2023 |
2022 | Extended Abstract | Christoph von der Malsburg, Benjamin F. Grewe, and Thilo Stadelmann. Making Sense of the Natural Environment. Proceedings of the KogWis 2022 - Understanding Minds Biannual Conference of the German Cognitive Science Society, Freiburg, Germany, September 5-7, 2022. |
2022 | Open Research Data | Felix M. Schmitt-Koopmann, Elaine M. Huang, Hans-Peter Hutter, Thilo Stadelmann, und Alireza Darvishy. FormulaNet: Ein Benchmark-Datensatz für die Erkennung mathematischer Formeln. Eine ungelöste Teilaufgabe der Dokumentenanalyse ist die Erkennung mathematischer Formeln (MFD). Forschungen von uns und anderen haben gezeigt, dass bestehende MFD-Datensätze mit Inline- und Display-Formel-Etiketten klein sind und eine unzureichende Etikettierungsqualität aufweisen. Es besteht daher ein dringender Bedarf an Datensätzen mit besserer Beschriftungsqualität für die zukünftige Forschung im Bereich MFD, da diese einen großen Einfluss auf die Leistung der darauf trainierten Modelle haben. Wir stellen eine fortschrittliche Etikettierungspipeline und einen neuen Datensatz namens FormulaNet vor. Mit über 45.000 Seiten ist FormulaNet unserer Meinung nach der größte MFD-Datensatz mit Inline-Formelbeschriftungen. Unser Datensatz soll bei der Bewältigung der MFD-Aufgabe helfen und kann die Entwicklung neuer Anwendungen ermöglichen, wie z. B. die Zugänglichkeit mathematischer Formeln in PDFs für sehbehinderte Benutzer von Bildschirmlesegeräten. |
2020 | Open Research Data | Lukas Tuggener, Yvan Putra Satyawan, Alexander Pacha, Jürgen Schmidhuber, and Thilo Stadelmann, DeepScoresV2. The DeepScoresV2 Dataset for Music Object Detection contains digitally rendered images of written sheet music, together with the corresponding ground truth to fit various types of machine learning models. A total of 151 Million different instances of music symbols, belonging to 135 different classes are annotated. The total Dataset contains 255,385 Images. For most researches, the dense version, containing 1714 of the most diverse and interesting images, is a good starting point. |