TIM AG Erik Sterck GmbH

TIM AG | NetApp @ Erik Sterck GmbH Harald Will Dipl. Informatiker (FH) Consultant ® TIM AG 2017 | 1 Agenda Data ONTAP Everywhere und Data Fabric cD...
Author: Gesche Kolbe
47 downloads 0 Views 3MB Size
TIM AG | NetApp @ Erik Sterck GmbH Harald Will Dipl. Informatiker (FH) Consultant ® TIM AG 2017 | 1

Agenda

Data ONTAP Everywhere und Data Fabric cDOT – Ein Überblick ONTAP 9 – Neue Funktionen und Verbesserungen

® TIM AG 2017 | 2

Agenda

Data ONTAP Everywhere und Data Fabric cDOT – Ein Überblick ONTAP 9 – Neue Funktionen und Verbesserungen

® TIM AG 2017 | 3

25 Jahre Innovation

OnTap Select

2016

Cloud OnTap All Flash Array

2015 2014

MCC Clustered Data OnTap

2012 FCoE

2009

PAM / Flash Cache

2008

Advanced deduplication

2007 2006

Scalable grid storage

2005

Thin provisioning und virtual cloning ™

RAID-DP disk resiliency

2004

iSCSI storage system

2003 2002 2001 1996 1992

® TIM AG 2017 | 4

Unified SAN/NAS appliance Near-line storage appliance Multiprotocol appliance

NAS appliance und Snapshots

ONTAP Everywhere – Unified 2.0 Mode-2

Mode-1

NetApp® ONTAP® 9 Engineered

Converged

Third-Party

AFF + FAS

FlexPod®

FlexArray®

SDS

Near Cloud

Cloud

ONTAP Select

NetApp Private Storage

ONTAP Cloud

Ein ONTAP – Ein DataManagement

® TIM AG 2017 | 5

NetApp Data Fabric Definition

§ Nahtlose Verbindung unterschiedlicher Umgebungen über verschiedenen CloudDienste in eine gemeinsame integrierte Lösung. § Sie gibt Unternehmen die volle Kontrolle und Wahl über Sicherheit, Datenschutz, Zugriff und Verwaltung ihrer Daten in der Hybrid-Cloud - egal wo sich diese befinden.

® TIM AG 2017 | 6

Data Fabric

6

NetApp Data Fabric: SnapMirror

Select

SnapMirror SolidFire

Data Transport AFF/FAS

® TIM AG 2017 | 7

E/EF Series

AltaVault-C AltaVault

NetApp Data Fabric: Object Store Backup & Restore Public Cloud Object Store Select AltaVault-C

SnapMirror Data Transport

SolidFire

AFF/FAS

AltaVault

Object Store Backup

E/EF Series

Object Store Backup Local Object Stores StorageGRID

E Series ® TIM AG 2017 | 8

OpenStack Swift

CEPH

Third-Party Storage

Third-Party Storage Third-Party Storage

NetApp Data Fabric: Object Store Backup & Restore Public Cloud Object Store

Public Cloud Object Store

Integrated Object Store Backup

Select AltaVault-C

SnapMirror Data Transport

SolidFire

AFF/FAS

AltaVault

Object Store Backup

E/EF Series

Object Store Backup Local Object Stores StorageGRID

E Series ® TIM AG 2017 | 9

OpenStack Swift

CEPH

Third-Party Storage

Third-Party Storage Third-Party Storage

NetApp Data Fabric: Object Store Data Tiering Object Store Data Tiering

Public Cloud Object Store

Integrated Object Store Backup

Public Cloud Object Store

Select AltaVault-C

SnapMirror Data Transport

SolidFire

AFF/FAS

AltaVault

Object Store Backup

E/EF Series

Object Store Data Tiering

Object Store Backup

Local Object Stores StorageGRID

E Series ® TIM AG 2017 | 10

OpenStack Swift

CEPH

Third-Party Storage

Third-Party Storage Third-Party Storage

NetApp Data Fabric Object Store Data Tiering

Public Cloud Object Store

Integrated Object Store Backup

Select AltaVault-C

SnapMirror Data Transport

SolidFire

AFF/FAS

E/EF Series

Public Cloud Object Store

FlexArray & FLI

AltaVault

Object Store Backup

E/EF Series

Object Store Data Tiering

Object Store Backup

Local Object Stores Third-Party Storage

StorageGRID

CEPH

SolidFire

E Series ® TIM AG 2017 | 11

OpenStack Swift

Third-Party Storage

Third-Party Storage Third-Party Storage

Positionierung innerhalb des NetApp Flash Portfolios

EF-Series

All Flash FAS

SolidFire®

Bewährte, einfache Plattform für hohe Performanceanforderung

Enterprise Flash Storage

Scale-out, service-orientierter Flash Storage für das RZ der Zukunft

§ Niedrigste Latenz, höchste Bandbreite

§ Mixed Applikationen, Unified Storage

§ Cloud-like Infrastruktur

§ Performance für Datenbanken

§ Cloud-ready

§ Enterprise XaaS/service providers

§ Nicht-virtualisierte Applikationen

§ Test/dev Anforderungen

§ Erweiterte Virtualisierung

§ Hohe IO Dichte

§ Server Virtualisierung

§ Extrem skalierbar und QoS

§ VDI

§ Self-healing Architektur

® TIM AG 2017 | 12

Agenda

Data ONTAP Everywhere und Data Fabric cDOT – Ein Überblick ONTAP 9 – Neue Funktionen und Verbesserungen

® TIM AG 2017 | 13

Clustered Data ONTAP

Unterbrechungsfreier Betrieb

Bewährte Effizienz

Nahtlose Skalierbarkeit

Durchführung von Lifecycle-Operationen ohne Unterbrechung der Betriebsabläufe

Vereinfachter Betrieb, Automatisierung und höhere Produktivität bei gesenkten IT-Kosten

Kleine Erstinstallation und langfristiges Wachstum für SAN- und NAS-Umgebungen

Der Standard für Enterprise-Datenmanagement vom Datacenter bis zur Cloud ® TIM AG 2017 | 14

Unterbrechungen im Betrieb

Ausmaß des unterbrechungsfreien Betriebs

100 %

0%

® TIM AG 2017 | 15

LifecycleOperationen

Kapazitäts- und PerformanceManagement

Wartungsoperationen

Upgrade von Software, Austausch und Upgrade von Hardware

Infrastrukturstabilität

Widerstandsfähigkeit bei Hardware- und Softwareausfällen

Geplantes Ereignis

Ungeplantes Ereignis

Lastverteilung nach Bedarf

Unterbrechungsfreier Zugriff

Unterbrechungsfreies ausbalancieren ® TIM AG 2017 | 16

NFS / CIFS / iSCSI / FC / FCoE

Unterbrechungsfreier Betrieb NFS / CIFS / iSCSI / FC / FCoE

Keine Ausfallzeiten wegen Upgrades, Aktualisierungen und Austausch

Unterbrechungsfreier Zugriff

§ transparente Upgrades und Technologieaktualisierungen

A1

B2

® TIM AG 2017 | 17

A2

B1

C1

LUN LUN

A3

B

§ produktlebenszyklusübergreifender Datenzugriff C

A

R

LUN

MetroCluster Konfigurationen Zwei-Node Konfiguration

Vier-Node Konfiguration

Acht-Node Konfiguration

§ Single-Node Cluster in jedem RZ

§ Two-Node Cluster in jedem RZ

§ Vier-Node Cluster in jedem RZ

§ Datenschutz und HA über zwei RZ

§ Datenschutz und HA lokal und über zwei RZ

§ Datenschutz und HA lokal und über zwei RZ § Support nur für NAS Protokolle

Cluster A Data Center A ® TIM AG 2017 | 18

Cluster B Data Center B

Cluster A Data Center A

Cluster B Data Center B

Cluster A Data Center A

Cluster B Data Center B

18

Bewährte Effizienzfunktionalitäten Thin Provisioning

Deduplication

95%

Virtual Copies (FlexClone®)

80%

RAID-DP

46%

Flash Cache

Flash Pool ® TIM AG 2017 | 19

33%

Snapshot® Copies

80%

50%

Data Compression

Thin Replication

95%

HA

HA

D

D ‘

CC

C1 A1

B R

A

A2 B2

B1

Nahtlose Skalierbarkeit Horizontale Skalierung durch Hinzufügen von Controllern (maximal 24 Controller) Vertikale Skalierung individueller Controller Flash

Integration vorhandener Arrays in NetApp FlexArray Software

Bis zu 103 PB und 4 Mio. IOPS ¡ Unterstützung von mehr IT-Workloads mit einer einzigen zuverlässigen Storage-Infrastruktur ¡ schnellere Skalierung der Kapazität und Performance ¡ Kombination neuer und vorhandener Assets zur vereinfachten Erweiterung und Konsolidierung ® TIM AG 2017 | 20

Flexibel und erweiterbar Protokolle FC FCoE iSCSI NFS/pNFS CIFS/SMB

Daten HDD-Only

Hybrid

All-Flash

Unified Management § § § § § § ® TIM AG 2017 | 21

Scale-out & Unterbrechungsfreie Operationen Daten Mobilität Integrierte Daten Sicherungsverfahren (Snapshots, SnapMirror, SnapVault) Storage Effizienz (RAID-DP, Thin Provisioning, FlexClone, Dedupe, Compression) Applikations Integration Mandantenfähigkeit und Quality of Service

Agenda

Data ONTAP Everywhere und Data Fabric cDOT – Ein Überblick ONTAP 9 – Neue Funktionen und Verbesserungen

® TIM AG 2017 | 22

OnTap 9.x Highlights § FlexGroups § Performance Verbesserungen § OnCommand System Manager § Storage Efficiency § RAID TEC § NetApp Volume Encryption inkl. Onboard Key Manager § SnapLock § ONTAP Select § SVM DR

® TIM AG 2017 | 23

FlexGroups 100TB 2 Milliarden

Virtualisierte und Databank Workloads ® TIM AG 2017 | 24

20PB 2 Milliarden

Einzelnen Container für Archiv Ablage

20PB 400 Milliarden

Metadaten und Performance intensive Workloads

Stetige Leistungssteigerung seit Data ONTAP 8.3

§ Erhöhter zufälliger Lese-SchreibDurchsatz bei niedrigen Latenzen auf AFF Systemen § Verbesserung mit jeden Release seit der AFF8000 § 30% Durchsatz Steigerung @ 1 ms (ONTAP 9.0 vs 8.3) § 85% Steigerung @ 600 µs (9.0 vs 8.3) § Ergebnis aus mehreren Optimierungen (Lese-SchreibDatenpfade, Nachrichtenverarbeitung und Ressource Scheduling)

® TIM AG 2017 | 25

1 ms

+30%

1x

2x

3x

4x

5x

6x

7x

AFF8080 Datenbank Leistungen verbessert

64% more OPS @ 800 us

Workload: TPC-E: 90% read, 10% write

® TIM AG 2017 | 26

Workload: SLOB2: 75% read, 25% write

§ Monitoring “headroom” ermöglicht: - Bereitstellung von Workloads bei gleichzeitiger Aufrechterhaltung einer optimalen Performance - Schnell Identifizieren, wann die Ressourcennutzung knapp wird oder die optimale Leistungsfähigkeit überschritten wird § Der Optimale Betriebspunkt wird bestimmt durch: - Analyse des Systems unter Last - Anwendung eines heuristischen “Knee of the latency curve” Algorithmus § Der “Headroom” ist die Differenz zwischen dem “maximum optimal operating point” und dem “current operating point” ® TIM AG 2017 | 27

Latency

Node and Aggregate Performance Visibility

Max Optimal Operating Pt Operating Pt Headroom

Utilization

ONTAP 9 OnCommand Performance Manager Reporting

§ Performance Manager meldet die aktuell verwendete Leistungskapazität - 100% ist der “maximum optimal operating point” § Die Darstellung der Leistungskapazität ermöglicht es neue Workloads bereitzustellen, während diese in der selben Operation Zone sind. § Timeline-Ansichten

® TIM AG 2017 | 28

ONTAP 9 OnCommand SystemManager § Geführtes Cluster Setup § FlexGroup Administration § Neues Cluster Dashboard zeigt: - Fehler und Warnungen - Effizienz und Kapazität - Performance - Nodes - Top Objekte § NetApp® RAID-TEC™ Erweiterungen

® TIM AG 2017 | 29

Inline Adaptive Compression and Inline Data Compaction Volume B

Volume A

Schreiben vom Server/Client Ohne compression

8KB

8KB

8KB

50% compressible

80% compressible

80% compressible

4KB

4KB

4KB

4KB

4KB

4KB

4KB

4KB

Vol C 3x 1KB

55% compressible

4KB

4KB

4KB

4KB

4KB

11 blks Nach inline adaptive compression Nachinline data compaction ® TIM AG 2017 | 30

4KB

4KB

4KB

4KB

4KB

4KB

4KB

4KB

8 blks 4KB

4KB

4KB

4KB

4 blks

Data ONTAP 8.3.x Advanced Drive Partitioning

Node A

DP

R

P

R

R

R

R

R

R

S

R

S

R

DP

R

P

R

R

R

R

S

R

S

R

DP

P

D

D

D

D

D

D

D

D

D

S

DP

P

D

D

D

D

D

D

D

D

D

S

0

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

Node B

§ SSDs werden in eine kleine root Partition und in eine große Daten Partition aufgeteilt § Totale nutzbare Kapazität aus 18 Daten Partitionen von insgesamt 24 – 75% Effizienz - 6 SSDs werden für spare und Parität verwendet

® TIM AG 2017 | 31

ONTAP 9 Root-Data-Data (RD2) ADP

Node A

DP

R

P

R

R

R

R

R

R

S

R

S

R

DP

R

P

R

R

R

R

S

R

R

S

DP

P

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

S

DP

P

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

D

S

0

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

16

17

18

19

20

21

22

23

Node B

§ SSDs werden in eine kleine root Partition und in zwei große Daten Partition aufgeteilt - Daten Partitionen sind halb so groß wie eine RD-Datenpartition § Totale nutzbare Kapazität aus 42 Daten Partitionen von insgesamt 48 – 87,5% Effizienz - 21 SSDs für Daten – 3 mehr als bei RD-Partitionierung - 16.7% mehr nutzbare Kapazität (0.875 / 0.75)

® TIM AG 2017 | 32

RAID-TEC Dreifacher Paritätsschutz

RAID-TEC

§ Zum Reduzieren des Datenverlustes bei Festplatten ≥6TB HDDs. § Alternative: Unterstützen von größeren RAID Gruppen durch hinzufügen einer dritten Parität - RAID-TEC Gruppen sind 1.5–2x größer als RAID-DP Gruppen für Festplatten die größer als 6TB sind

RP = row parity (RAID 4) DP = diagonal parity (RAID-DP = RP + DP) TP = triple parity (RAID-TEC = RP + DP + TP)

® TIM AG 2017 | 33

§ RAID-TEC ist Standard für 6TB und 8TB NLSAS HDDs - Notwendig für 10TB und größere NL-SAS HDDs - Es werden auch 10k rpm SAS HDDs und SSDs unterstützt

SnapLock

§ Eine Lizenz für beide Lösungen - SnapLock Compliance: SEC 17-a(4) compliant - SnapLock Enterprise: unterstützt privilegiertes löschen

Primary Storage SnapLock WORM Volumes

Archival Application

§ Administration durch System Manager und Unified Manager

Jun 30th 2040

Secondary Storage

® TIM AG 2017 | 34

Jun 30th 2040

DR Site

§ Support für NetApp Storage Encryption (NSE) § 7MTT copy-based transition

ONTAP Select

VMs / Hosts



File Services ONTAP Select

Hypervisor Commodity DAS

® TIM AG 2017 | 35



§ ONTAP Select™? - Name für NetApp’s ONTAP-based SW-only Plattform für die private Cloud - ONTAP auf Standard Hardware - Enterprise NAS Services für DAS - Datacenter und ROBO Lösungen

§ Business Agility - Enterprise Verfügbarkeit - Effizienter/Effektiver Schutz

§ ONTAP Select - Support für VMware vSphere - Zusätzlicher support für KVM

SnapMirror for Storage Virtual Machines Enhancements

Storage Virtual Machine disaster recovery Audit Audit

Tax Docs

(SVM) Finance

ONTAP®

® TIM AG 2017 | 36

SVM

Audit

Docs

Tax

(SVM) DPFinance

(SVM) Test

ONTAP®

Tax

§ Selektiver Schutz - Nur Volumes die festgelegt werden - Keine „alle oder nichts“ Replizierung mehr § Replizieren der Konfiguration ohne LIFs - Identity Preserve ohne LIFs - Hält die gesamt Zahl der LIFs unten § Test und Dev auf einem SVM DR Ziel - Daten in eine separate SVM für Development und Testing zwecke klonen - Verschiebe Volumes auf eine andere SVM (re-host)

NetApp Volume Encryption

§ Verschlüsseln von Daten auf Standard SSDs undHDDs § Unterstützt mit AFF, FAS, MetroCluster und ONTAP Select § Daten auf einem bestehenden System können mittels „volume move“ verschlüsselt werden

Cryptographic Module

§ Verschlüsselung auf nicht NSE-Festplatten (z.B. 15.3TB SSD) § Cryptographic Module (CM) verschlüsselt die Daten bevor sie auf die Festlatten geschrieben werden; Daten werden entschlüsselt bevor sie das WAFL erreichen. ® TIM AG 2017 | 37

Read (decrypt)

request response Network

WAFL

§ Zero-Management Verschlüsselungslösung § Nutzen der Storage Effizienz Features

Write (encrypt)

RAID Storage

Vielen Dank für Ihre Aufmerksamkeit!

® TIM AG 2017 | 38