Isilon-Data-Lake Von Edge zu Core zu Cloud
Isilon-Data-Lake • Konsolidierte Speicherinfrastruktur für unstrukturierte Daten • Scale-out-Architektur zur Unterstützung von schnellem Datenwachstum
• Unterstützt mehrere Anwendungen und Workloads auf einer einzigen Plattform • Automatisiertes Tiering, um unterschiedliche Performanceanforderungen abzudecken • Erstreckt sich vom Core-Rechenzentrum hin zu Edge-Standorten und bis in die Cloud
• Ermöglicht In-Place-Datenanalysen 3
Dell – nur für interne Zwecke – vertraulich
Wachstum unstrukturierter Daten
80 % 78 % 75 %
2015
2016
2017
71 EB
106 EB
133 EB
Quelle: IDC: 4
Gelieferte Gesamtkapazität weltweit
Dell – nur für interne Zwecke – vertraulich
% unstrukturierte Daten
Alle 2 Jahre fast Verdoppelung des Datenwachstums
Gründe für das Wachstum unstrukturierter Daten Beispiele für herkömmliche und neu entstehende Workloads
Herkömmliche Workloads
Neu entstehende Workloads
Archivierung
Video File-basierte Unternehmensdaten
Öffentliche Datensätze
Soziale Netzwerke, benutzergenerierter Inhalt
Maschinendaten Internet der Dinge
5
Dell – nur für interne Zwecke – vertraulich
Standortdaten
Aufbau eines Data Lake Daten konsolidieren und Speichersilos eliminieren
Herkömmliche Workloads
DAS
NAS
SAN
CLOUD
BAND
6
Neu entstehende Workloads
Dell – nur für interne Zwecke – vertraulich
OBJEKT
Aufbau eines Data Lake Daten konsolidieren und Speichersilos eliminieren
Herkömmliche Workloads
Neu entstehende Workloads DAS
NAS
SAN
DATA Data LAKE Lake BAND
7
Dell – nur für interne Zwecke – vertraulich
CLOUD
OBJEKT
Powered by Intel® Xeon®-Prozessoren
Isilon-Data-Lake-Scale-out-Architektur Mit integrierter Multiprotokollunterstützung für mehrere Workloads und Anwendungen Windows
Web
Anwendungen
Mac/iOS
Cloud Linux/Unix
Archivierung
8
Dell – nur für interne Zwecke – vertraulich
Hadoop
Einfaches Data-Lake-Speichermanagement Isilon AutoBalance ermöglicht einfaches Kapazitätswachstum
Ein einziges Volume und Dateisystem
Ein Volume
Verzeichnisse und Dateien sind Cluster-Nodeübergreifend angeordnet
Automatisierung KEINE manuelle Intervention KEINE Neukonfiguration
KEINE Änderungen der Server- oder Client-MountPunkte oder Anwendungen KEINE Datenmigrationen KEIN RAID
9
Dell – nur für interne Zwecke – vertraulich
Einfache Erweiterung der Data-Lake-Speicherkapazität Isilon-Scale-out-Architektur mit AutoBalance
AUSGEGLICHEN Leer Voll AUSGEGLICHEN
AutoBalance Automatisierter Datenausgleich über alle Knoten hinweg verringert die mit der Skalierung des Speichers einhergehenden Kosten, die Komplexität und die damit verbundenen Risiken
Leer Voll AUSGEGLICHEN
• AutoBalance verschiebt Inhalte automatisch auf neue Speicher-Nodes
Leer
Voll AUSGEGLICHEN Leer Voll AUSGEGLICHEN
Leer
10
Dell – nur für interne Zwecke – vertraulich
• Beseitigung von Problembereichen • Ermöglicht eine bisher unerreichte Auslastung der Speicherkapazität von mehr als 80 %
Powered by Intel® Xeon®-Prozessoren
Isilon-Produktreihe
Lineare Skalierung von Performance und Kapazität
Performance
S-Serie
X-Serie Leistungsfähige Plattform
Besonders vielseitige Plattform
NL-Serie
HD-Serie
NearlinePlattform
Hochdichte Plattform
Softwarebasiert Ihre Hardware
Interne Cloud Externe Cloud
Kapazität 11
Dell – nur für interne Zwecke – vertraulich
Optimierung mit automatisiertem Tiering Isilon SmartPools-Software
Zentrales Management • Ein einziges Dateisystem/ein einziges Volume • Mehrere Performance-Tiers
• Policy-basiertes Tiering-Management • Transparente Neuzuweisung • KEINE Anwendungsänderungen
Performance
Automatische Datenverschiebung
S-Serie Performance
X-Serie Durchsatz
Niedrigere Kosten
NL-Serie Nearline HD-Serie Hohe Dichte
Optimierung der Speicherressourcen • Automatische Anpassung der Speicherressourcen an Datenanforderungen • Datenmigration entfällt 12
Dell – nur für interne Zwecke – vertraulich
Kapazität
Beispiel: Data-Lake-Speicher-Tiering Isilon SmartPools-Software
Beispiel einer SmartPools-Policy
13
< 30 Tage
S210
30 Tage > Tage bis30 1 Jahr
NL410
> 1 Jahr
HD400
Isilon-Cluster im CoreRechenzentrum
Dell – nur für interne Zwecke – vertraulich 13
Datenschutzoptionen Backup und Disaster Recovery Data-LakeSpeicher im CoreRechenzentrum
Disaster-RecoveryStandort
• Disk-to-Disk-Backup • Effiziente Snapshots mit SnapshotIQ • Remotearchive und DR
WAN/LAN
• Datenreplikation mit SyncIQ • Einfaches Failover und Failback per Kopfdruck
14
Dell – nur für interne Zwecke – vertraulich
Data Lake-Sicherheit und Complianceoptionen • Rollenbasierte Zugriffskontrolle (Role-Based Access Control, RBAC)
• Zugriffszonen zur sicheren Isolation • WORM-Datensicherheit • Dateisystemauditing RECHT
BUCHHALTUNG
IT
MARKETING
• Data-at-Rest-Verschlüsselung (DARE) mit Self-Encrypting-Drives (SED) • Sicherheitsverstärkung gemäß dem Security and Technical Implementation Guide (STIG) • CAC-/PIV-Smartcard-Authentifizierung • FIPS-OpenSSL-Unterstützung
15
Dell – nur für interne Zwecke – vertraulich
Data Lake – ermöglicht In-Place-Analysen Scale-out-Speicher mit nativer Hadoop-Integration (HDFS)
Ermöglicht In-Place-Analyse • Native Integration für schnellere Insights • Macht Kopieren und Verschieben von Daten überflüssig
Data-Lake-Sicherheit • Snapshots für effizientes Backup und Recovery • Datenreplikation für Disaster Recovery
Geringere Kosten • Macht dedizierte Hadoop-nfrastruktur überflüssig
die Flexibilität erhöhen • Gleichzeitiger Support für alle Apache-konformen Hadoop-Verteilungen • Ambari-Integration für Management, Überwachung und Provisioning 16
Dell – nur für interne Zwecke – vertraulich
Isilon-Unterstützung für Datenanalysen NFS SMB
SMB
NFS
NFS
Name Node
Name Node Name Node Name Node
Daten Node
SMB, NFS, HTTP, FTP, HDFS
HDFS MAP Reduce MAP Reduce MAP Reduce MAP Reduce MAP Reduce MAP Reduce
17
Dell – nur für interne Zwecke – vertraulich
EDW-Optimierung mit Isilon Enterprise-Data-Warehouse-Auslagerung
• Höhere Effizienz mit aktivem Archiv – Auslagern „inaktiver Daten“ aus Ihrem EDW – Freigeben von EDW-Ressourcen für die Analyse wichtiger Daten – Daten in aktivem Archiv bleiben verfügbar zum Abfragen, Durchsuchen und Analysieren
• ETL- und ELT-Prozesse auslagern – Auslagern von „Data Wrangling“ und Archivierung von Daten – Erzielen höherer EDW-Performance und Beschleunigen der Abläufe
• Potenzial eines Isilon-Data-Lake ausschöpfen 18
Dell – nur für interne Zwecke – vertraulich
– Reduzieren Sie Kosten und vereinfachen Sie das Management
Powered by Intel® Xeon®-Prozessoren
ERWEITERN DES DATA LAKE
Speicherung, Management und Schutz von Daten über das Core-Rechenzentrum hinaus RandstandorteEdge des Unternehmens
Kerndatenrechenzentrum Core
Cloud
44 % der Unternehmen verfügen über 10–50 TB pro Zweigstelle.
Enorm skalierbare Kapazität
4–10 % der Remoteserver unterstützen die Datenerfassung für das IoT
Geringere Kosten
19
Dell – nur für interne Zwecke – vertraulich 19
Powered by Intel® Xeon®-Prozessoren
Isilon-Data-Lake Verbindung über Edge, Core und Cloud hinweg RandstandorteEDGE des Unternehmens
• Software Defined Storage 20
CORE Kerndatenrechenzentrum
• Unterbrechungsfreie Upgrades mit Rollback-Option
CLOUD Cloud
• Automatisiertes, Policybasiertes Tiering in die Cloud
Dell – nur für interne Zwecke – vertraulich 20
Erweiterung auf Randstandorte des Unternehmens IsilonSD Edge Software Defined Storage
Produktmerkmale
Softwarebasierter Scale-out-NAS mit OneFS-Funktionen Wird auf Branchenstandardhardware ausgeführt VMware-Integration Skalierbar auf bis zu 36 TB und 3 bis 6 Nodes Kostenlos und einfach (nicht für Produktion, Communitysupport)
Die wichtigsten Vorteile 21
Einfach, flexibel und kosteneffizient Einfaches Management dank standardmäßiger VMware-Tools Konsolidierung/Verteilung von Daten von/an Randstandorte Weitere Anwendungsbeispiele: Tests/Entwicklung, kleine und mittelständische Unternehmen
Dell – nur für interne Zwecke – vertraulich
Erweiterung in die Cloud Isilon CloudPools-Software
Produktmerkmale • • • •
Cloudfähiger Data Lake Nahtlose und Policy-basierte Datenplatzierung Einfach bereitzustellen und zu managen Verschlüsselung und Komprimierung Die wichtigsten Vorteile
22
Auswahl an Cloudserviceanbietern Niedrigere Kosten und Optimierung der Speicherressourcen vor Ort Erweiterung des Rechenzentrums mit webbasierter Kapazität Sichere Netzwerkübertragung in die Cloud Transparent für Anwender und Anwendungen
Dell – nur für interne Zwecke – vertraulich
Automatisches, Policy-basiertes Tiering in die Cloud Isilon SmartPools und CloudPools Isilon-Cluster im Core-Rechenzentrum
Cloudspeicheranbieter
SmartPools mit CloudPools-Policy –Beispiel < 30 Tage 30 Tage bis 1 Jahr
23
S210 NL410
1 bis > 1 Jahr 2 Jahre
HD400
> 2 Jahre
Cloud
Public, extern: Private, vor Ort:
Isilon oder ECS
Dell – nur für interne Zwecke – vertraulich 23
IsilonData Lake
EMC
Von Edge über Core bis zur Cloud
Scale-out-Speicher Cloudfähig Software Defined
Private
Edge
Core Rechenzentrum Gehostet 24
Dell – nur für interne Zwecke – vertraulich
Public
Vorteile des Isilon-Data-Lake
25
1
Eliminieren von ineffizienten Speicherinseln
2
Einfacheres Management und geringere Kosten
3
Ermöglichen einer besseren Informationsweitergabe
4
Verbesserung von Datensicherheit und Sicherheit
5
Beschleunigung von Datenanalysen für neue Einblicke
6
Unterstützung von datenbasierten Entscheidungsprozessen Dell – nur für interne Zwecke – vertraulich
Isilon-Data-Lake-Nutzungsoptionen
26
Dell – nur für interne Zwecke – vertraulich 26
Weitere Informationen • Für weitere Informationen über Isilon-Produkte und Lösungen siehe: germany.emc.com/isilon • Hier sehen Sie Isilon-Produkte und -Lösungen in unserem Onlineshop: https://store.emc.com/isilon • Zum kostenlosen Herunterladen des Isilon OneFS-Simulators (nicht für Produktionsbetrieb), zum Erstellen einer simulierten Umgebung und zum Vertrautmachen mit der Schnittstelle und den Administrationsaufgaben, die in der neuesten Version des Isilon OneFS-Betriebssystems verfügbar sind, besuchen Sie: germany.emc.com/getisilon • Zum kostenlosen Herunterladen einer nicht für den Produktionsbetrieb bestimmten Version von IsilonSD Edge, der ersten softwarebasierten Speicherlösung mit der Leistungsfähigkeit und Flexibilität von Isilon, besuchen Sie: germany.emc.com/getisilonsdedge • Treten Sie der Isilon-Community bei, um Zugang zu Dokumentation, Benutzerhandbüchern, häufig gestellten Fragen und Schulungen zu erhalten. Außerdem können Sie an Diskussionen von Communitybenutzern teilnehmen, um mehr über die neuesten OneFS-Funktionen zu erfahren: https://community.emc.com/community/products/isilon
27
Dell – nur für interne Zwecke – vertraulich