AREA Perception

Wir gestalten Wahrnehmung: Von kleinen Datensätzen bis hin zum Einsatz eingebetteter KI – für eine leistungsstarke Wahrnehmung von Mensch und Maschine in der Industrie

Die doppelte Bedeutung von Wahrnehmung – sowohl das Erfassen als auch das Erleichtern des Verstehens – ist das, was kognitive, nachhaltige und menschenzentrierte Systeme ermöglicht. Wir sind auf die Entwicklung dieser Fähigkeit spezialisiert: Wir bringen robuste Lösungen in die Industrie. Durch die Nutzung unseres Fachwissens in den Bereichen kleine Datensätze und eingebettete KI-Bereitstellung stellen wir sicher, dass ausgefeilte maschinelle Wahrnehmung (Echtzeitverständnis von Prozessen, Umgebung und menschlichen Absichten) und menschliche Wahrnehmung (objektives Bewusstsein für kognitive Belastung und Zustand) praktisch und einsetzbar sind. Wir gehen über die reine Automatisierung hinaus, die einzelne Ziele nicht verbessert oder nur optimiert. Das von uns eingesetzte einheitliche Bewusstsein gewährleistet Sicherheit am Arbeitsplatz, ermöglicht eine adaptive Automatisierung, die eine Überlastung der Mitarbeiter verhindert, unterstützt eine nachhaltige Ressourcennutzung, ermöglicht eine präzise Fehlererkennung und Prozessverbesserung und erleichtert die Entwicklung vertrauenswürdiger symbiotischer Systeme. Die Wahrnehmung, die durch effiziente Algorithmen auf dedizierter Hardware gesteuert wird, ist die Grundlage für die Umwandlung von Sensordaten in verwertbares Wissen für Menschen und Maschinen und stellt sicher, dass die Integration einen enormen Mehrwert in modernen Fertigungsumgebungen und für neuartige Produkte schafft.

Forschungsansatz

Unsere Forschung konzentriert sich auf die Gestaltung der Wahrnehmung in und für industrielle Systeme. Unser Ansatz basiert auf Grundlagenforschung zur menschlichen Wahrnehmung und maschinellen Wahrnehmung, wobei wir uns darauf konzentrieren, die kritischen Wahrnehmungslücken zwischen beiden zu schließen. Wir entwickeln industrielle Lösungen, die auf neurokognitiven Architekturen und Prinzipien bauen. Diese werden anhand einer metrikbasierten Bewertung validiert und iterativ optimiert, die quantitative Leistungsziele (z. B. Durchsatz, Genauigkeit) mit kritischen qualitativen menschlichen Faktoren (z. B. Vertrauen der Bediener, reduzierte kognitive Belastung und Systemtransparenz) verbindet. Unsere Lösungen gehen über einfache KI-Modelle hinaus, da wir uns auch auf die Bereicherung der menschlichen und maschinellen Wahrnehmung konzentrieren, insbesondere in kollaborativen oder verteilten Umgebungen.

Technologien und Innovationen
  • Energieeffiziente und in Echtzeit fähige eingebettete KI
  • Industrielles Internet der Dinge und föderierte KI-Lösungen
  • Entwurf und Bewertung von (grafischen) Mensch-Maschine-Schnittstellen und -Umgebungen
  • Prozess- und Umgebungsverständnis-Pipelines
  • Physikalische KI-Systeme, die digitale Zwillinge und Schatten von Umgebungen nutzen
  • Erklärbares, vertrauenswürdiges, interpretierbares, empirisch evaluiertes maschinelles Lernen
  • Fortschrittliche multimodale Sensorfusionsarchitekturen
  • Physiologische und kognitive Zustandserfassung für Arbeiter in der Schwerindustrie.
  • Autonome kollaborative Systeme (Roboter, Drohnen, AGVs)
  • Neuromorphe KI-Bausteine für Echtzeit- und Niedrigenergiesysteme.
Anwendungsfelder und Branchen
  • Unterstützung und Automatisierung von Montagevorgängen
  • Vorausschauende Wartung und Wartungsunterstützung
  • Qualitätssicherung und Inspektionsaufgaben
  • Integration von KI-Hardware und Betrieb von Kognitionssystemen
  • Kollaborative Produktionsökosysteme (im Mikro- bis Makrobereich)
  • Mensch-Maschine-Teaming

Themenbereiche

Maschinelle Wahrnehmung

Im Bereich der maschinellen Wahrnehmung konzentrieren wir uns auf rechnergestützte Systeme, die ein grundlegendes Echtzeitverständnis von industriellen Prozessen, Menschen und der Umwelt erwerben. Dieser Pfeiler bildet die Grundlage für das Verständnis der Welt unter Verwendung aller Formen des maschinellen Lernens (überwachtes, unüberwachtes, halbüberwachtes und verstärkendes Lernen), typischerweise unter Verwendung von Deep Learning und eingebetteter, sogar neuromorpher Hardware. Die Forschung bewegt sich von der grundlegenden Erkennung hin zur multimodalen Entitätsverfolgung und zum Echtzeit-Prozessverständnis. Unsere Lösungen adressieren industrielle Schlüsselprobleme, das Fehlen großer Datensätze, nur kleine oder schlecht gekennzeichnete Daten, cloudlose Edge-Deployments sowie Echtzeit- und Energieanforderungen.

Menschliche Wahrnehmung

Im Bereich der menschlichen Wahrnehmung konzentrieren wir uns darauf, Menschen zu befähigen, indem wir ihre kognitiven, physischen und psychosozialen Zustände in komplexen Arbeitsumgebungen verstehen. Diese Säule bildet die Grundlage für personalisierte Unterstützung, bei der spezielle Sensoren (z. B. IMUs, EEG, Eye-Tracking) eingesetzt werden, um Aufmerksamkeit, Belastung und Fähigkeiten oder menschliches Verhalten zu quantifizieren. Die Forschung bewegt sich weg von subjektiven Bewertungen hin zu objektiver Echtzeit-Zustandserkennung, um selbstoptimierende Benutzeroberflächen oder adaptive Umgebungen zu schaffen. Unsere bisherigen Lösungen konzentrierten sich auf zentrale Probleme in der Industrie: Unterstützung des komplexen Prozessmanagements bei gleichzeitiger Vermeidung kognitiver Überlastung und Gewährleistung von Sicherheit und Wissenstransfer durch hochgradig individualisierte und kontextbezogene Anleitung bei Bedarf.

Föderierte Wahrnehmung

Bei der föderierten Wahrnehmung konzentrieren wir uns auf Strategien für verteilte KI-Systeme, die kooperieren und gemeinsam lernen, während die individuelle Datenhoheit gewahrt bleibt. Diese Säule bildet die Grundlage für die Skalierung von Intelligenz über gesamte Industrie- oder Maschinenökosysteme hinweg, wobei föderierte und Transfer-Lernansätze zum Austausch von Modellen oder Teilen davon verwendet werden, nicht jedoch proprietäre bzw. Rohdaten. Die Forschung bewegt sich vom Lernen in Einzelsystemen hin zur kollektiven Wissensverbreitung. Unsere bisherigen Lösungen konzentrierten sich auf wichtige industrielle Probleme: Aufbrechen von Datensilos, Koordination von KI-Ensembles, Ermöglichung einer hochgradigen kollektiven Kognition und Sicherstellung einer energieeffizienten Modellaggregation über heterogene Edge-Geräte hinweg.

Symbiotische Wahrnehmung

Mit symbiotischer Wahrnehmung konzentrieren wir uns darauf, eine mühelose und vertrauenswürdige Zusammenarbeit zu ermöglichen, indem wir das Verständnis und die Absichten von Menschen und Maschine synchronisieren. Diese Säule ist die Grundlage für eine echte Mensch-Maschine-Ko-Wahrnehmung, die ein ganzheitliches Verständnis der Situation und ein gewisses Maß an maschineller Handlungsfähigkeit erfordert. Die Forschung bewegt sich weg von begrenzter Interaktion hin zu Umgebungen, in denen KI-Handlungen für Menschen verständlich und sich die Maschine an den Menschen anpasst. Unsere bisherigen Lösungen konzentrierten sich auf wichtige industrielle Probleme, den Aufbau von gegenseitigem Vertrauen und Sicherheit in gemeinsamen Arbeitsbereichen, die Minimierung unvorhersehbarer und erklärbarer Verhaltensweisen physischer oder digitaler KI und die Möglichkeit für Benutzer, die Wahrnehmung der Maschine durch direktes Feedback oder indirekt durch Verhaltenshinweise und die Befolgung sozialer Normen zu erreichen.

Projekte

Inhalte sind nur auf Englisch verfügbar.

KInd
PerceptionnonCOMET

KInd

Kognifizierte Industrie

Austrian Small and Medium-sized Enterprises (SMEs) exhibit a mid-range performance within the European Union regarding product and process innovations. This…

Zum Projekt
Fischer4You
Perception

Fischer4You

Cognitive Skiing Prodcuts

Fischer4you will study skier’s behavior to find their skill level of skiing, therefore provide them with an appropriate range of…

Zum Projekt
GAP
Perception

GAP

Cognitive Guidance for Assembly Processes

Human Activity Recognition (HAR) holds immense significance in computer vision, offering benefits in diverse scenarios. In industrial settings, manufacturing assembly…

Zum Projekt
SeeIT
Perception

SeeIT

Augmented Work Processes

Harsh industrial environments, where workers interact with machines, tools or other entities (such as robots or other workers) provide a…

Zum Projekt
AI2Human
Perception

AI2Human

Using AI for occupational safety and accident prevention

The technological revolution is rapidly transforming the work environment, subjecting workers to new challenges, such as collaborating with highly efficient…

Zum Projekt
TUNSPEKT
PerceptionnonCOMET

TUNSPEKT

Innovative Straßen-Tunnelinspektion mit Hilfe von KI-Ansätzen

In the D.A.CH Transport Infrastructure Call 2024, topic 2 “Automated condition recording and damage detection in road tunnels” will be…

Zum Projekt
WorkIT
Perception

WorkIT

Workflow and Tool Process Modelling

The vision of WorkIT is to establish cognitive capabilities in today’s conventional products (e.g. power tools or machines). To achieve…

Zum Projekt
EBRAIN Ensembles
Perception

EBRAIN Ensembles

Holistic and Sustainable AI Development for Global Changes

Neuroscience provides a rich source of inspiration for new types of algorithms and architectures, independent of and/or complementary to the…

Zum Projekt
StreamingAI
PerceptionnonCOMET

StreamingAI

Föderierte Geräte-AI für die Digitale Transformation in der Industrie

StreamingAI is a basic research project with the aim of raising “perception” in the sense of artificial intelligence in federated…

Zum Projekt
GUIDE
Perception

GUIDE

Guidance and Assistance

GUIDE will investigate novel worker context recognition, assistance and guidance technologies for use in the manufacturing- and production setting. The…

Zum Projekt
APECGR
Perception

APECGR

Artificial Personality for Cognitive Guidance and Recommendation Systems

This project researched user experience design based on contextual triggers in the welding domain. Usually in industries, good user experience…

Zum Projekt
RTEAS
Perception

RTEAS

Cognitive Rail Track Error Analysis Support

RTEAS will provide support in rail track error analysis based on the data from rail track machines. Along with company…

Zum Projekt
DERELE
Perception

DERELE

Deep Learning Based Reconstruction for Linear Edifices

Machine learning-based detection of geometric shapes has emerged as a rapidly expanding research field, with significant attention currently directed towards…

Zum Projekt
RTEL
Perception

RTEL

Cognitive Rail Track Error Learning

RTEL is an innovative Rail Track Error Learning AI system where in collaboration with System 7, we will analyze railroad…

Zum Projekt
3D-RECON I
Perception

3D-RECON I

Cognitive Assistance

The aim of 3D-Recon is the research and development of methods for high quality 3D reconstruction from images in two…

Zum Projekt
3D-Recon VI
Perception

3D-Recon VI

Novel methods for 3D models from camera shoots

The primary focus of this research project is deeply rooted in the domain of Structure from Motion (SfM). SfM is…

Zum Projekt
3D-RECON III
Perception

3D-RECON III

Novel methods for 3D models from camera shoots

The focus of this research initiative is to advance the field of multi-view stereo (MVS) by addressing key challenges and…

Zum Projekt
Fischer4You2
Perception

Fischer4You2

Active Learning for Cognitive Skiing Products

Fischer4You2 aims to assess recreational alpine skiers to find their skill level of skiing, therefore providing them with an appropriate…

Zum Projekt
HumanAI
Perception

HumanAI

Human Focused AI for occupational safety and accident prevention

Work environments, particularly within the industrial sector, are undergoing swift and dynamic technological transformations. Employees are increasingly confronted with new…

Zum Projekt
GenCon
Perception

GenCon

Gender and Diversity Considerations for Responsible Research beyond AI Technology

The strategic project “Gender and Diversity Considerations for Responsible Research beyond AI Technology”, in short “GenCon” was intended to raise…

Zum Projekt
AssE
Perception

AssE

Opportunistic Awareness in Assistive Environments

The purpose of "Opportunistic Awareness in Assistive Environments" was to support scientific work on the following topics: – Feedback and…

Zum Projekt