Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion...

22
www.its-owl.de Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation GmbH & Co. KG) 10/11. Oktober 2017 | Lemgo

Transcript of Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion...

Page 1: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

www.its-owl.de

Session: Mensch-Maschine-Interaktion

Multi-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

(ISI Automation GmbH & Co. KG)10/11. Oktober 2017 | Lemgo

Page 2: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 2

Einführung

Zielsetzung

Ergebnisse

Agenda

Abschlusspräsentation

Resümee und Ausblick

Page 3: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 3

Einführung - Vorstellung des Transfernehmers

ISI Automation GmbH & Co. KG

ISI Automation GmbH & Co. KG, Lemgo

• Schlüsselfertige

Automatisierungslösungen

für Produktion und Intralogistik

• Gegründet 1985

• ca. 40 Mitarbeiter

• Jahresumsatz ca. 4 Mio

• Weltweite Projekte aus OWL

Page 4: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 4

Einführung - Vorstellung des Transfernehmers

ISI Automation GmbH & Co. KG

ISI Automation

• Produktion und Intralogistik

• Schlüsselfertige Systeme

• Multilinguale Software

• 300 Projekte mit über 120 Kunden

• Projekte von 30TEUR – 1500TEUR

3 Monate – 2 Jahre

Page 5: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 5

inIT – Institut für industrielle Informationstechnik

▪ Gegründet 2007

▪ 7 Professoren, mehr als 70 Beschäftigte

▪ Angewandte Grundlagenforschung und exzellente Aus- und Weiterbildung

▪ Über 3,0 Mio. Euro Drittmittel pro Jahr

▪ Eine der führenden Forschungseinrichtungen im BMBF-Spitzencluster it's

OWL

▪ Kompetenzbereiche: Industrielle Kommunikation, Industrielle

Bildverarbeitung/Mustererkennung, Intelligente Analyseverfahren in der

Automation

CIIT – CENTRUM INDUSTRIAL IT

▪ Weltweit erstes Forschungs- und Entwicklungszentrum im Bereich der

industriellen Automation

▪ Forschungsinstitute und Technologieunternehmen unter einem Dach

▪ Gemeinsamer Forschungskern: Verknüpfung von Informations- und

Automatisierungswelt in technischen Systemen

Einführung - Vorstellung der Transfergeber

Standort Lemgo - Expertise für Intelligente Automation

Page 6: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 6

Einführung - Vorstellung der Transfergeber

Fraunhofer IOSB-INA

• Lemgo

▪ Institutsteil für industrielle Automation des Fraunhofer IOSB

▪ MitarbeiterInnen (Stand Sept. 2017): 64

▪ Partner im Centrum Industrial IT (CIIT)

▪ Betrieb der SmartFactoryOWL, gemeinsam mit Hochschule

OWL

▪ IKT –Lösungen für die Fabrik der Zukunft

▪ Geschäftsbereiche:

▪ Industrielles Internet (IoT)

▪ Intelligente Automation

▪ Assistenzsysteme

▪ Cybersicherheit in der Produktion

Page 7: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 7

Einführung

Motivation/ Ausgangssituation für das Transferprojekt

Page 8: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 8

Einführung

Motivation/ Ausgangssituation für das Transferprojekt

Page 9: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 9

Einführung

Motivation/ Ausgangssituation für das Transferprojekt

▪ Die steigende Komplexität industrieller und vernetzter

Anlagen im Zuge von Industrie 4.0 erfordert intelligente

Benutzerschnittstellen

▪ Verbesserung der Adaptivität von Benutzerschnittstellen

durch die sensorische Erfassung des Nutzungskontextes

Nutzungskontext:

– Identität des Nutzers

– Aufgaben/Aufträge

– Technische Ausrüstung

– Umgebung

▪ Betrachtung ethischer, rechtlicher und sozialer Aspekte für

die Lokalisierung von Personen

– Datenschutzrichtlinien

– Nutzerakzeptanz

Steigende Komplexität

industrieller Anlagen

Adaptivität von

Benutzerschnittstellen

Ethische, rechtliche

und soziale

Fragestellungen

Page 10: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 10

Einführung

Zielsetzung

Ergebnisse

Resümee und Ausblick

Agenda

Abschlusspräsentation

Page 11: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 11

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Anforderungserhebung

& -Abstimmung

Konzepterstellung

Implementierung der

Lokalisierung

Implementierung einer

IUIEvaluation

Installation des

Gesamtsystems

Verwertung der

Ergebnisse

AP 2 AP 4 AP 6AP 1 AP 3 AP 5 AP 7

Page 12: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 12

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Level 1RFID-Zugangskontrolle

Erfassung der Anwesenheit

durch An- und Abmeldung

beim Betreten und Verlassen

des Fertigungsbereichs

Level 2Ultra-Breitband-Lokalisierung

Erfassung der

dezimetergenauen Position

einer Person im

Fertigungsbereich

Level 33D-Kamera/Face-Tracking

Erfassung der

zentimetergenauen Position

und Blickrichtung von

Personen in einzelnen

Bereichen

Page 13: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 13

Level 1RFID-Zugangskontrolle

Erfassung der Anwesenheit

durch An- und Abmeldung

beim Betreten und Verlassen

des Fertigungsbereichs

▪ Anmeldung am System beim Betreten des

Fertigungsbereiches mittels RFID-Zugangskarte am

Kartenlesegerät

▪ Information über Anwesenheit/Abwesenheit

▪ Keine direkte Lokalisierung im Fertigungsbereich

▪ Zuweisung einer Karte zu einzelnen Personen

oder Nutzergruppen

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Page 14: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 14

▪ Anmeldung am System durch tragen eines UWB-Senders

im Fertigungsbereich

▪ Information über dezimetergenaue Position im

Bereich der Sensoren

▪ Keine Erfassung der Blickrichtung

▪ Zuweisung einer Karte zu einzelnen Personen oder

Nutzergruppen

Level 2Ultra-Breitband-Lokalisierung

Erfassung der

dezimetergenauen Position

einer Person im

Fertigungsbereich

3.1.2 Aluminiumplatten

Direkt unter diesen Stahlplatten sollen die Ubisense Sensoren, sowie WLAN AP und weitere

Geräte montiert werden. Dazu wurden Aluminiumplatten entworfen, welche mittels Magneten an

der Unterseite der Stahlplatten haften sollen. Unter diesen Aluminiumplatten können die jeweiligen

Geräte montiert werden.

Abbildung 12: Platte von der Seite

Die Aluminiumplatten sind 590mm x 590mm groß, haben eine Stärke von 5mm und sind in der

Farbe staubgrau RAL 7037 pulverbeschichtet. In den vier Ecken der Aluminiumplatte befindet sich

jeweils ein M6 Gewinde. Mit diesem Gewinde soll der Magnet auf der nicht magnetischen

Aluminiumplatte befestigt werden. Die Topfmagneten besitzen in der Mitte eine Bohrung, durch

welche die Schraube durchgeführt werden kann. Zum Festschrauben kommen M6 innensechskant

Stahlschrauben der Länge 15mm zum Einsatz. Die Magneten haben eine Höhe von 8mm,

Durchmesser von 42mm und eine Tragkraft von 52.5kg. Weitere Daten sind dem Datenblatt zu

entnehmen [21].

Zusätzlich besitzen die Aluminiumplatten in der Mitte ein 40mm großes Loch. Durch dieses sind

die Kabel der montierten Geräte zu führen. Nach Anbringung der Aluminiumplatte an der

Stahlplatte, können die Kabel mit den Anschlüssen auf den Stahlplatten verbunden werden.

Abbildung 13: Montierter Sensor

45

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Page 15: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 15

▪ Automatische Erfassung der Position und

Blickrichtung in relevanten Bereichen mittels einer

Tiefenbildkamera und Face-Tracking

▪ Information über zentimetergenaue Position

und Blickrichtung im Bereich der Sensoren

▪ Abgleich der Positionsdaten mit Level 2 zur

Beschränkung auf registrierte PersonenLevel 3

3D-Kamera/Face-Tracking

Erfassung der

zentimetergenauen Position

und Blickrichtung von

Personen in einzelnen

Bereichen

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Page 16: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 16

Anbindung an ISIPlus®

- Definierte Bereiche an der CPS

- Ansicht der anwesenden Personen

VorgehensweiseMulti-Level-Lokalisierung von Nutzern für intelligente

Benutzerschnittstellen

Page 17: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 17

Einführung

Zielsetzung

Ergebnisse

Resümee und Ausblick

Agenda

Abschlusspräsentation

Page 18: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 18

▪ Ein funktionsfähiger Demonstrator des Lokalisierungssystems wurde entwickelt

und in der SmartFactoryOWL installiert

▪ Nutzbarkeit des Systems durch den Transfernehmer im Anschluss an das Projekt

wurde sichergestellt

▪ Der Transfernehmer hat neues Wissen über die Basis-Technologien sowie

Methodenwissen aufgebaut und kann dieses im Unternehmen gewinnbringend

einsetzen

Ergebnisse

Ergebnisse

Page 19: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 19

Einführung

Zielsetzung

Ergebnisse

Resümee und Ausblick

Agenda

Abschlusspräsentation

Page 20: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 20

▪ Das prototypische Lokalisierungssystem wurde erfolgreich in

der SmartFactory OWL installiert

▪ Dem Transfernehmer wurde Wissen zu den verschiedenen

Sensortechnologien vermittelt

▪ Die Durchführung einer Nutzerstudie zur Nutzerakzeptanz

steht noch aus, wird aber in Kürze durchgeführt

▪ Änderung zur Projektskizze: Als Alternative zu den nicht

länger vorhandenen Deckenkameras wurde ein

prototypisches 3D-Kamerasystem zur Erfassung der

Blickrichtung entwickelt und installiert

Resümee und Ausblick

Resümee

Page 21: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

© it‘s OWL Clustermanagement GmbH | 17.10.2017 21

▪ Erweiterung der Lokalisierungsmöglichkeiten durch die

Integration zusätzlicher Systeme

▪ Erweiterung der IUI durch Implementierung weiterer

Interaktionsmöglichkeiten (z.B. Zeigegesten) und die

Anbindung an weitere Systeme

▪ Wissenschaftliche Veröffentlichungen zur technischen

Umsetzung und Nutzerakzeptanz des Systems

▪ Durchführung weiterer Projekte zur Lokalisierung von

Entitäten auf Basis des vorhandenen Systems

Resümee und Ausblick

Ausblick

Page 22: Session: Mensch-Maschine-Interaktion Multi-Level ... · Session: Mensch-Maschine-Interaktion Multi-Level-Lokalisierung von Nutzern für intelligente Benutzerschnittstellen (ISI Automation

www.its-owl.de

Vielen Dank für Ihre Aufmerksamkeit!