HPC @ automotive supplier (part II) -...

26
HPC @ automotive supplier (part II)

Transcript of HPC @ automotive supplier (part II) -...

Page 1: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

HPC @ automotive supplier (part II)

Page 2: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

01

AGENDA

15.03.2017 2

Zwei in eins – ein dual-Cluster System

02 Das Herzstück – der Storage

Page 3: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

FALSCH ZUGEORDNETE ZITATE

©„DIE KÄNGURU CHRONIKEN“ VON MARC-UWE KLING

15.03.2017

TITEL DER PRÄSENTATION

3

„Ehrlich währt am längsten“

Uli Hoeneß

<Original: Redensart>

Page 4: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

WAS MACHT EIN HPC CLUSTER BEI EINEM AUTOMOBIL

ZULIEFERER? BEISPIELE

15.03.2017 4

Page 5: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

ÜBERSICHT

15.03.2017 5

- Generell gilt: Multi Vendor Strategie

- Compute Cluster A: aktuell

- 412 Nodes

- 4.944 CPU Cores (Haswell)

- 30 TB RAM

- Compute Cluster B: aktuell

- 304 Nodes

- 8.512 CPU Cores (Boadwell)

- 55 TB RAM

- Storage: aktuell

- 1,2 PB für scratch und home

- 600 TB für archive

Page 6: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

DIE IDEE

15.03.2017 6

NSD1 NSD2 NSD3 NSD4 NSD5 NSD6

Compute Cluster „A“

Compute Cluster „B“

Storage Cluster

/hpc

Remote Cluster Mount

Remote Cluster Mount

/hpc

/hpc

Scheduler

Page 7: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

DIE IDEE

15.03.2017 7

Compute Cluster „A“

Compute Cluster „B“

Storage Cluster

/hpc

Compute Cluster „C“

/hpc

/hpc

Scheduler

Page 8: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

DAS PROBLEM I

15.03.2017 8

/fs1 NDS1=N1,N2

/fs2 NDS1=N2,N1

Page 9: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

DAS PROBLEM II

15.03.2017 9

- Es gibt einen Cluster, der das File System

bereitstellt, und zwei Remote Cluster, die

auf diesem Filesystem arbeiten

- Greifen zwei und mehr Remote Cluster auf

das gleiche Filesystem zu, erfolgt das Block

Level Locking über den zentralen Cluster

Page 10: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ZWEI IN EINS – EIN DUAL-CLUSTER SYSTEM

DIE LÖSUNG

15.03.2017 10

Compute Cluster „A“

Compute Cluster „B“

Storage Cluster

/hpc

IB Fabric A

IB Fabric B

Cluster Netzwerk

(Ethernet)

Scheduler

Page 11: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

01

AGENDA

15.03.2017 11

Zwei in eins – ein dual-Cluster System

02 Das Herzstück – der Storage

Page 12: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

FALSCH ZUGEORDNETE ZITATE

©„DIE KÄNGURU CHRONIKEN“ VON MARC-UWE KLING

15.03.2017

TITEL DER PRÄSENTATION

12

„So viel Geld lässt sich, weiß Gott, nicht mit

etwas Gutem verdienen.“

Larry Ellison

<Original: Friedrich Schiller, Kabale und Liebe>

Page 13: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

DAS HERZSTÜCK – DER STORAGE

KONFIGURATION

15.03.2017 13

GridScaler GS14KX

24 x 800 GB SSDs, RAID 1 (8,5TB netto, Metadaten)

840 x 2TB NL-SAS in 10 x 84er HD Expansion Drawer

Raid6 8D+2P

Enclosure loss protection (bis zu 2 Encl.)

1,2 PB Netto

12 x EDR IB zu den NSD Servern

Page 14: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

15.03.2017 14

12 x EDR IB, direct attached

IB Fabric A IB Fabric B

24 x FDR IB, NSD-to-Fabric

6 NDS Server, je

2 x EDR (=2 x 100Gbit)

4 x FDR (=4 x 56Gbit)

GridScaler GS14KX

Controller Leistung 50Gbyte / Sek

DAS HERZSTÜCK – DER STORAGE

AUFBAU

Page 15: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

DAS HERZSTÜCK – DER STORAGE

LEISTUNG

15.03.2017 15

Leistungstest „sequentiell“ GPFS Filesystem auf GS14K:

FS-Blocksize = 8MB

16 HPC Nodes

2 x gpfsperf seq / node

Page 16: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

FALSCH ZUGEORDNETE ZITATE

©„DIE KÄNGURU CHRONIKEN“ VON MARC-UWE KLING

15.03.2017

TITEL DER PRÄSENTATION

16

„Ist die Katze gesund, freut sich der

Mensch.“

Erwin Schrödinger

<Original: Kitekat Werbung>

Page 17: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

JOCHEN ZELLERSystem Architekt

Tel.: +49 151 180 256 77

Mail: [email protected]

KONTAKT

KONTAKTIHR WEG ZU UNS

1715.03.2017

Page 18: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

BACKUP FOLIEN – WEITERE KENNZAHLEN GS14K

15.03.2017 18

Metarates, ermittelt mit Spectrum Scale 4.1:

Page 19: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

BACKUP FOLIEN – WEITERE KENNZAHLEN GS14K

15.03.2017 19

random read & random write (ohne Cache hits):

Page 20: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

Automotive

Maschinen & Anlagenbau

Retail

Finance & Insurance

Telekommu-nikation

Standorte16

Public

6 TOPBranchen

Wiesbaden

ÜBER UNS

ÜBER UNS

UNTERNEHMEN

15.03.2017

TITEL DER PRÄSENTATION

20

Page 21: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ÜBER UNS

Mitarbeiter Umsatz in Mio €

245298

403

2014 2015 2016

2017

650

2016

590

2015

464

UNTERNEHMENÜBER UNS

2115.03.2017

TITEL DER PRÄSENTATION

Page 22: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

SVEN EICHELBAUMDiplom Betriebswirt Produkte & Services

PHILIPP ALEXANDERDiplom Ingenieur Vertrieb & Finanzen 1000+

Kunden

1997gegründet

ÜBER UNS

ÜBER UNS

UNTERNEHMEN

15.03.2017

TITEL DER PRÄSENTATION

22

Page 23: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ÜBER UNS

ÜBER UNS

WIR ÜBERNEHMEN VERANTWORTUNG

2315.03.2017

TITEL DER PRÄSENTATION

PROJEKTSTARTVOR

Produkt- bzw. herstellerübergreifende

Lösungsentwicklung

Mehrere hundert Lösungen im

großen Demo-Labor Portfolio sorgfältig für unsere Kunden ausgewähltÜber 30 Herstellerpartnerschaften

Enge Bindung mit Zugang zu

Herstellerlaborenund Einfluss auf Roadmap

Mehr als 330 technische Experten beraten &

integrieren die individuell auf Sie zugeschnittene Lösung.

… ….…

Page 24: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

ÜBER UNS

ÜBER UNS

WIR ÜBERNEHMEN VERANTWORTUNG

2415.03.2017

TITEL DER PRÄSENTATION

PROJEKTPHASENACH DER

Langfristiger Support,

24 x 7 Operations Center

Zentraler und sicherer Zugang zum Kunden und

SVA Customer Center

90 hochqualifizierte System Engineers für

Operational Services

Sicherstellung der Hersteller-supports durch regelmäßige

Health Checks

Für Implementierung und Dokumentation

Professional Services

… ….…

Page 25: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

EINZIGARTIGKEIT

SVA PARTNERSCHAFTENWAS MACHT UNS EINZIGARTIG?

2515.03.2017

TITEL DER PRÄSENTATION

Page 26: HPC @ automotive supplier (part II) - files.gpfsug.orgfiles.gpfsug.org/presentations/2017/Ehningen/28_-_SSUG17DE... · /fs1 NDS1=N1,N2 /fs2 NDS1=N2,N1. ... Portfolio sorgfältig für

EINZIGARTIGKEIT

WAS MACHT UNS EINZIGARTIG?

SVA …

*Gültig und nutzbar von 17.01.2017 bis 16.01.2018, darf nicht verändert werden.

Hohe Mitarbeiterzufriedenheit und Loyalität

Langfristige technische Betreuung unserer gelieferten Lösungen

Überdurchschnittliche Kundenzufriedenheit und Weiterempfehlungsrate

Inhabergeführt

2615.03.2017

TITEL DER PRÄSENTATION