Download - Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Transcript
Page 1: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Ist Ihr DWH noch zu retten?DWH-Sanierung als risikoarme Alternative zum kompletten Neubaup

Jens Diekmann, Senior Manager BI

18.11.2014 DW2014, Zürich

Page 2: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

AgendaAgenda

PPI im Kurzprofil

DWH-Sanierung – Ausgangssituation & Motivation

DWH Sanierung vs DWH NeubauDWH-Sanierung vs. DWH-Neubau

DWH-Sanierung – Strukturiertes Vorgehen mittels 3-Phasenmodell von PPI

DWH-Sanierung – Zusammenfassung

118.11.2014 DW2014, Zürich© PPI AG

Page 3: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Seit 30 Jahren Spezialist für die FinanzbrancheSeit 30 Jahren Spezialist für die Finanzbranche

PPI Aktiengesellschaft

Vorstand: Uwe Prieß (Vorsitz), Thomas Reher, Andreas AchnerGrundkapital: 2 Mio. €, Aktienbesitz: Familie Pape, Vorstand, MitarbeiterStandorte: Hamburg, Kiel, Frankfurt, Düsseldorf, Paris

Stabilität und 20082007 2009 2010 2011 2012 2013

Kontinuität:

G äf f

280240Mitarbeiter

36,130,5Leistung [Mio €]

311

27,0*

340

37,5

350

42,9

358

42,4

372

47,3

Geschäftsfelder:

Banken

Consulting Software Factory Produkte

Versicherungen

218.11.2014 DW2014, Zürich© PPI AG

* Rumpfgeschäftsjahr Januar bis September 2009

Page 4: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Wir sind die BI-Spezialisten mit dem Blick fürs Ganze

Ih A f d

Wir sind die BI-Spezialisten mit dem Blick fürs Ganze

Geschäftsvorteile sichernIhre Anforderungen Geschäftsvorteile sichernKomplexität beherrschenRisiken verringernGesetzesvorgaben erfüllen

Wir sorgen für Bedarfsgerechte InformationsnutzungPassgenaue Informationsaufbereitung

g

Performante DatenbereitstellungQuellenübergreifende Datenveredelung

Unsere LeistungenUnsere Leistungen Strategie & GovernanceKonzeption & DesignEntwicklung & Test

Unsere Partner:

Betrieb & Support

3© PPI AG 17.10.2014

Page 5: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Leistungsüberblick – Data Warehouse (DWH)Leistungsüberblick – Data Warehouse (DWH)

Wir sind die DWH-Experten mit dem Blick fürs Ganze!

Spezielle Leistungsangebote: DWH-Sanierung –

der risikoarme Weg zuDatenqualität

der risikoarme Weg zu reduzierten Betriebskosten, höherer Qualität und Flexibilität

DWH-Optimierung –maximale Performance fürmaximale Performance für Datenbank und ETL-Prozesse

Planung und Validierung von Datenbank- und ETL-Tool-Mi i

DWH

Daten-bewirtschaftung

Migrationen –damit Ihre BI-Anwendungen auch hinterher noch das tun, was sie vorher getan haben

bewirtschaftung

418.11.2014 DW2014, Zürich© PPI AG

Architektur

Page 6: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Ausgangsituation & MotivationDWH-Sanierung – Ausgangsituation & Motivation

Der theoretische Aufbau eines Datawarehouse fordert klare Trennung der Schichten, eine gute Datenmodellierung und transparente Datenflüsse mit dem Ziel einer hohen Datenqualität und Performance.

OLAP FinanzenOLAP Marketing Vertriebs-Reporting Reporting FinanzenVertrieb-Ad-hoc-A l

OLAP Vertrieb Finanzen-Ad-hoc-A l

Meldewesen Datenextrakte (PE Bil t )Analysen Analysen (PE., Bilanz, etc.)

DM Marketing

DM Abschluss

DM Vers.tech.

DM Finanzen

DMMeldew.

DM Vertrieb

DM Anpassung

Vertriebs-DWH DatenpoolAd-hoc

Finanzen-DWHDatenpoolAd-hoc

Staging Area

5© PPI AG 18.11.2014 DW2014, Zürich

Page 7: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Ausgangsituation & MotivationDWH-Sanierung – Ausgangsituation & Motivation

Steigende Weiterentwicklungs- und Betriebskosten, Unzufriedenheit der Anwender und mangelndes Vertrauen in die Daten sind das Ergebnis von organisch gewachsenen DWH-Landschaften.

OLAP FinanzenOLAP Vertrieb Vertriebs-Reporting Reporting Finanzen OLAPVertrieb-Ad-hoc-A l

OLAP Marketing Finanzen-Ad-hoc-A l

Meldewesen Datenextrakte (PE Bil t )Analysen Analysen (PE., Bilanz, etc.)

DM Marketing

DMVertrieb

neu

DM Bestand

DM Abschluss

DM Vers.tech.

DM Finanzen

DMAnpassung

DM Vertrieb

Kern-DWH DWH Post Merger DatenpoolAd-hoc

Staging Area

6© PPI AG 18.11.2014 DW2014, Zürich

Page 8: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Ausgangsituation & MotivationDWH-Sanierung – Ausgangsituation & Motivation

DWH-Sanierung ist kein neues Thema, aber: Das Vorgehen ist häufig unstrukturiert. Maßnahmen werden unkoordiniert und punktuell durchgeführt.

OLAP FinanzenOLAP Vertrieb Vertriebs-Reporting Reporting Finanzen OLAPVertrieb-Ad-hoc-A l

OLAP Marketing Finanzen-Ad-hoc-A l

Meldewesen Datenextrakte (PE Bil t )Analysen Analysen (PE., Bilanz, etc.)

DM Marketing

DMVertrieb

neu

DM Bestand

DM Abschluss

DM Vers.tech.

DM Finanzen

DMAnpassung

DM Vertrieb

Kern-DWH DWH Post Merger DatenpoolAd-hoc

Staging Area

7© PPI AG 18.11.2014 DW2014, Zürich

Page 9: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung vs DWH-NeubauDWH-Sanierung vs. DWH-Neubau

DWH-Sanierung DWH-Neubau

Argumente, die für eine DWH-Sanierung sprechen: Minimierung des operativen und betriebswirtschaftlichen Risikos Betrieb und fachliche Weiterentwicklung nur in einem System

8

Betrieb und fachliche Weiterentwicklung nur in einem System höherer bzw. schnellerer ROI

18.11.2014 DW2014, Zürich© PPI AG

Page 10: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

AgendaAgenda

PPI im Kurzprofil

DWH-Sanierung – Ausgangssituation & Motivation

DWH Sanierung vs DWH NeubauDWH-Sanierung vs. DWH-Neubau

DWH-Sanierung – Strukturiertes Vorgehen mittels 3-Phasenmodell von PPI

DWH-Sanierung – Zusammenfassung

918.11.2014 DW2014, Zürich© PPI AG

Page 11: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Klärung der ZieleDWH-Sanierung – Klärung der Ziele

Im Vorfeld sind die Ziele herauszuarbeiten, die durch die DWH-Sanierung erreicht werden sollen.

Mögliche Ziele können u.a. sein:

Niedrigere B t i b k t Niedrigere Betriebskosten ed ge e

Entwicklungs-kosten

SLA-konforme Antwortzeiten für Niedrigeres

Höhere Qualität der Informations t o t e te ü

Reports / Analysen

Schnellere Reaktionszeit Höhere Flexibilität bei R kti f t

Niedrigeres operatives Risiko

der Informations-versorgung

Einhaltung von (SLA )Fristen für

Mehr verfügbare Ressourcen für Kürzere Dauer

auf Markt- und Kundenanforderungen

Reaktionen auf externe Veränderungen

1018.11.2014 DW2014, Zürich© PPI AG

(SLA-)Fristen für Datenaktualisierung

Ressourcen für Changes

Kürzere Dauer für Changes …

Page 12: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Identifikation von SchwachstellenDWH-Sanierung – Identifikation von Schwachstellen

Im Rahmen einer Ist-Analyse sind die Schwachstellen in der DWH-Landschaft zu identifizieren und die genauen Ursachen für existierende Probleme herauszuarbeiten.

Mögliche Schwachstellen können u.a. sein:

Performance?Effektivität? Effizienz?

Ladeläufe/ ETL-Prozesse

Datenmodell(e) Schnittstelle zwischen Fachbereich und IT

Abfragen

DatenqualitätDatenbank-

Design

Fachbereich und IT

(Schichten-) Architektur Reports

Tools

H d

Personelle Ressourcen (Verfügbarkeit, Skill) Schnittstelle zum

IT(-Dienstleister)Metadaten/

Dokumentation

Prozesse

Hardware-ausstattung …IT-/BI

GovernanceFachliche

Zielbebauung

1118.11.2014 DW2014, Zürich© PPI AG

Stabilität?Transparenz? Komplexität?

Page 13: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Klärung der RahmenbedingungenDWH-Sanierung – Klärung der Rahmenbedingungen

Die spezifischen Rahmenbedingungen sind herauszuarbeiten, die für die DWH-Sanierung gelten.

Zu berücksichtigende Aspekte können u.a. sein:

Verfügbarkeit von internen Fach-

b IT E t

Budget(für Externe)

parallel laufende Projekte

bzw. IT-Experten

ComplianceStabilität der BI-AnwendungenNot endigkeit für

fachliche Zielbebauung

Compliance-Vorgaben

Anwendungen (keine Anpassung)

IT-Governance bzw. IT-Management Prozesse

Notwendigkeit für fachliche

Weiterentwicklungen

fachliche

IT InfrastrukturSLA

Management-Prozesse (ggf. auch Outsourcing)

IT-/BI-Richtlinien, Architekturstandards

Anforderungen/ Vorgaben

1218.11.2014 DW2014, Zürich© PPI AG

IT-InfrastrukturSLA …

Page 14: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Ableitung von MaßnahmenDWH-Sanierung – Ableitung von Maßnahmen

Die Maßnahmen zur Beseitigung der Schwachstellen und Erreichung der gesteckten Ziele werden ermittelt.

Maßnahmen können u.a. sein:

SQL-Statements R toptimieren Reports

bereinigen

Schichtenarchitektur üb b it Tests

Datenmodell für Analysen überarbeiten

Datenmodell auf ETL-spalten-orientierte

Tests automatisieren

Analysen anpassen

ETL-Prozesse Standard-SW für ETL Prozesse

Datenmodell auf ETL-Prozesse optimieren

pSpeicherung einführen

1318.11.2014 DW2014, Zürich© PPI AG

standardisierenETL-Prozesse einführen

Indizes setzen…

Page 15: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Bewertung der Maßnahmen

Die ermittelten Maßnahmen sind gemäß dem 3-Phasen-Modell von PPI zu bewerten

DWH-Sanierung – Bewertung der Maßnahmen

und einzuordnen.

Phase 1Handlungsfähigkeit

Phase 2Zukunftsfähigkeit

Phase 3InvestitionenHandlungsfähigkeit

wiederherstellenZukunftsfähigkeit

gewährleistenInvestitionen

schützen

kurzfristig mittelfristig langfristigzeitlicher FokusFokus

h h kt ll b it itt lb itt lb Wi k

Performance Stabilität

Komplexität Effektivität

Effizienz Transparenz

inhaltlicher Fokus

hohe punktuelle, unmittelbare Wirkung

schnelle Umsetzbarkeit

i /k i

breite, unmittelbare Wirkung

Abhängigkeit zu anderen Maßnahmen (V t )

mittelbare Wirkung hohe Abhängigkeit zu

anderen Maßnahmen …

typische Eigen-

schaften geringe/keine

Abhängigkeiten(Voraussetzungen)

SQL-Statements optimieren

Datenmodell anpassen

Tests automatisieren ETL-ProzesseB i i l

1418.11.2014 DW2014, Zürich© PPI AG

optimieren Indizes setzen Reports bereinigen

anpassen Schichtenarchitektur

überarbeiten

ETL Prozesse standardisierenBeispiele

Page 16: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Prämissen / Good PracticesDWH-Sanierung – Prämissen / Good Practices

Die DWH-Sanierung erfolgt in mehreren Stufen, nicht „an

Prämissen

einem Stück“. Jede Stufe endet mit mindestens einem „nach außen

sichtbaren Ergebnis“, das der Erfüllung der DWH-Sanierungsziele dientPrämissen Sanierungsziele dient. Nach jeder Stufe wird der Erfüllungsgrad der DWH-

Sanierungsziele geprüft. Nach jeder Stufe wird eine Entscheidung über die

Fortsetzung der DWH-Sanierung getroffen.

Hohe Flexibilität: fachliche Projekte können planmäßig bzw. b i B d f d i h h b d

Konsequenzen

bei Bedarf dazwischen geschoben werden Schnellere Reaktionsfähigkeit bei Anforderungen/Einflüssen

von außen Kosten-/Zeitersparnis bei vorzeitiger Erreichung der DWH-Kosten /Zeitersparnis bei vorzeitiger Erreichung der DWH

Sanierungsziele Höhere Anwenderakzeptanz, Risikominimierung: Erfolg der

DWH-Sanierung zeigt sich sukzessive, nicht erst am Schluss

1518.11.2014 DW2014, Zürich© PPI AG

Page 17: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Stufenweise Umsetzung und ihre VorteileDWH-Sanierung – Stufenweise Umsetzung und ihre Vorteile

Stufenweise Umsetzung

DWH-Sanierung

Stufe 1

DWH-Sanierung

Stufe 2

DWH-Sanierung

Stufe 3

Fachliches Projekt 1

Fachliches Projekt 2

Fachliches Projekt 3

oderDWH-

Sanierung Stufe 1

DWH-Sanierung

Stufe 2

DWH-Sanierung

Stufe 3

Fachliches Projekt 3

Fachliches Projekt 1

Fachliches Projekt 2

oder

oderDWH-

Sanierung Stufe 1

DWH-Sanierung

Stufe 2

Fachliches Projekt 3

Fachliches Projekt 1

Fachliches Projekt 2

Unter-brechung

oder

oder

Vorteile fachliche Weiterentwicklung während der Sanierung möglich

oder…

flexible Anordnung von Fach- und Sanierungsprojekten Überprüfung des Sanierungserfolgs vor Abschluss möglich

1618.11.2014 DW2014, Zürich© PPI AG

Page 18: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung – Stufenweise Umsetzung ein BeispielDWH-Sanierung – Stufenweise Umsetzung, ein Beispiel

Phase 2Phase 1

Herstellung Handlungsfähigkeit Sicherstellung Zukunftsfähigkeit

Phase 3

Sicherung Investitionen

Stufe 1(Initialisier ng)

Stufe 2(Performance

DWH)

Stufe 5(Beladungsop-

timierung)

Stufe 7(Schichtenmodell

DWH)

Stufe 9(F k ETL)

Stufe 11(Testautoma-

tisierung)

(Initialisierung)

Stufe 3(Bereinigung)

Stufe 4(Abschaffung DB-Schicht)

Stufe 8(ÜberarbeitungBerichtwesen )

Stufe 6(Fachliche

Modellierung)

(Framework ETL)

Stufe 10(systemübergr.Data Lineage)

Fokus Komplexitätsreduzierung Fokus Zukunftsorientierung

Fokus Performance Fokus Effektivität

Fokus Effizienz

Fokus Transparenz

1718.11.2014 DW2014, Zürich© PPI AG

Page 19: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

DWH-Sanierung - ZusammenfassungDWH-Sanierung - Zusammenfassung

vorher

Handlungsfähigkeit wiederherstellen1

g g

Zukunftsfähigkeit gewährleisten

Getätigte Investitionen schützen

Phase 2DWH-

Sanierung

Phase 1

Getätigte Investitionen schützenPhase 3

nachher

18© PPI AG 18.11.2014 DW2014, Zürich© PPI AG

Page 20: Ist Ihr DWH noch zu retten? DWH-Sanierung als risikoarme Alternative zum kompletten Neubau.

Welche Fragen können wir Ihnen noch beantworten?Welche Fragen können wir Ihnen noch beantworten?

Jens DiekmannSenior Manager Business Intelligence

PPI AktiengesellschaftPeter-Müller-Straße 1040468 Düsseldorf

Telefon: +49 211 97552-5012Mobil: +49 175 [email protected]

1918.11.2014 DW2014, Zürich© PPI AG