Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5....

19
Offene Daten und offene Software Schweizer Statistiktage 2018 27. August 2018 Michael Grüebler

Transcript of Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5....

Page 1: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software

Schweizer Statistiktage 201827. August 2018Michael Grüebler

Page 2: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 2

Stadt ZürichStatistik

Agenda

– Prinzip Offenheit– Linked Open Data– Open Source Software– Erfahrungen

Page 3: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 3

Stadt ZürichStatistik

Prinzip der Offenheit

– Prinzipien der offenen Wissenschaft bzw. Open Science– Open Access (Wissenschaftliche) Literatur– Open Methodology Methodik– Open Source Programme– Open Data Daten– Open Peer Review Begutachtung– Open Educational Resources Lern- und Lehrmaterialien

– Ziele: Bessere Qualität, Nachvollziehbarkeit, Allgemeingut, grössere Wirkung, höhere Komplexität

Quellen:https://de.wikipedia.org/wiki/Offene_Wissenschafthttps://en.wikipedia.org/wiki/Open_science

Page 4: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 4

Stadt ZürichStatistik

Beispiele von Statistik Stadt Zürich

Open AccessOpen Methodology

Open SourceOpen Data

Page 5: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 5

Stadt ZürichStatistik

Linked Open Data

– Semantic Web Web of Data

– Wie müssen Daten gespeichert werden?– Offen und im Web– Als Links mit Objekt, Prädikat und Subjekt– Mit eindeutigen Identifikatoren

– Abfragen mittels SPARQL– Erlaubt in einer Abfrage den Zugriff auf mehrere verteilte Datenbanken

Page 6: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 6

Stadt ZürichStatistik

Fünf Sterne offener Daten

– Tim Berners-Lee, der Erfinder des World Wide Web und Initiator von LinkedData, schlug 2006 ein 5-Sterne-Modell für offene Daten vor.

– Open Data der Stadt Zürich erreichtebisher drei Sterne

– Mit dem Projekt LOSD sind wirauf dem Weg zu fünf Sternen

Page 7: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 7

Stadt ZürichStatistik

Datenpunkte beschreiben

Page 8: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 8

Stadt ZürichStatistik

Datenpunkte beschreiben

Kennzahl

Raum Zeit

Dimensionen

Quelle Meta-information

Page 9: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 9

Stadt ZürichStatistik

SPARQL Abfrage http://ld.stadt-zuerich.ch/sparql

Page 10: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 10

Stadt ZürichStatistik

Google «enge» am 1.7.2018

Page 11: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 11

Stadt ZürichStatistik

Google «enge» am 19.7.2018

Page 12: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 12

Stadt ZürichStatistik

Datenfluss von Statistik Stadt Zürich zu Google

Linked OpenStatistical

DataWikidata

Wikipedia

Google

Linked DataSPARQL

Page 13: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 13

Stadt ZürichStatistik

Eine Abfrage: Kanton Basel-Stadt & Stadt Zürich

Page 14: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 14

Stadt ZürichStatistik

Open Source Software

– Software deren Quelltext öffentlich und von Dritten eingesehen, geändert und genutzt werden kann.

– Open Source Software kann meistens kostenlos genutzt werden.– Open Source kann für jegliche Art von Code und Skripten verwendet werden: R,

SAS, Python, HTML, JavaScript, SPARQL, usw.

– GitHub ist ein Onlinedienst um Software gemeinsam zu entwickeln, zu teilen und zu versionieren.

Page 15: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 15

Stadt ZürichStatistik

Offene Architektur

Web Portal Kundschaft

Visualisierungen z.B. Medien

Abfragen z.B. Apps

Daten z.B. Analystinnen,Analysten

LinkedOpen Data

OffeneRESTful

APIs

Open Source

Open Source

Page 16: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 16

Stadt ZürichStatistik

Projekt «Interaktive Datenvisualisierungen» SSZVIS

– Die Visualisierungsbibliothek von SSZ steht allen zur freien Weiterverwendung zur Verfügung

– Github: https://github.com/statistikstadtzuerich/sszvis– Styleguide: https://statistikstadtzuerich.github.io/sszvis/#/

Page 17: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 17

Stadt ZürichStatistik

Rechtliche Abklärungen

– Durch die Veröffentlichung von Software kann eine Amtsstelle unzulässig in das Marktgeschehen eingreifen

– SSZ hat die Rechtslage abklären lassen

Page 18: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 18

Stadt ZürichStatistik

Rechtliche Abklärungen

– Diese Aktennotiz kann bei SSZ bezogen werden.

Page 19: Offene Daten und offene Software - statistiktage.ch · Offene Daten und offene Software 5. September 2018, Seite 2 Stadt Zürich Statistik Agenda – Prinzip Offenheit – Linked

Offene Daten und offene Software5. September 2018, Seite 19

Stadt ZürichStatistik

Erfahrungen

– Open Data ist für SSZ ein Erfolgsmodell– Linked Data erfordert viel Grundlagenarbeit: Datenharmonisierung und

Datenbeschreibung– Dank Open Source können wir (die Statistikgilde) direkt von einander profitieren– Das Veröffentlichen von Open Source durch eine Verwaltung stellt nicht

grundsätzlich ein Problem dar– Das Open Science Modell sollte für uns als Leitstern dienen