Big Data & Big Business Wolfgang Nimführ Big Data & DWH Community Leader, Information Agenda Executive Consultant IBM Software Group Europe
©2012 IBM Corporation
Big Data – ein Hype ?
Searches for "big data" on Gartner's website have increased 981% (between March 2011 -October 2011)
“We’re in an environment where negative blogs can lead to an emergency board meeting.” (Edmond Moutran, Chief Executive Officer, Memac Ogilvy & Mather MENA (Middle East & North Africa)
“Big Data: The next frontier for innovation, competition and productivity” McKinsey Global Institute
2012 will be the year of 'big data' BBC Nov 30 2011 ©2012 IBM Corporation
Die Herausforderung - Digitale Datenexplosion Analyse von Logfiles, Datenspeicher und Netzwerken Unterstützende medizinische Diagnostik Vorhersage von Wettermustern zur optimalen Planung von Windkraftwerken, Vorausschauende Wartung Risiko-Entscheidungen auf Basis von Analysen in Echtzeit treffen Identifizierung von Gefahren aus Video, Audio und Datenströmen Verkehrsplanungen ©2012 IBM Corporation
Was ist Big Data ?
Veracity
Umgang mit der Unzuverlässlichkeit von Inormationen ©2012 IBM Corporation
Das neue Big Data Vorgehen zur Analyse Traditionelles Vorgehen
Big Data Vorgehen
Strukturierung & wiederholbare Analysen
iterative & forschende Analysen
Fachbereich Bestimmen, welche Fragen gestellt werden
IT Bereitstellen einer Plattform für kreative Datenanalysen
Fachbereich IT Strukturiert die Daten, um die Fragen zu beantworten Monatlicher Umsatz Profitabilität Kundenanalyse …
Gewinnen von Einsichten und Erkunden von Informationen Reputation der Marke Produktstrategie Gewinnvorhersagen Sentimente ... ©2012 IBM Corporation
Die umfassende IBM Big Data Plattform Analytic Applications BI / Exploration / Functional Industry Predictive Content BI / Reporting Visualization App App Analytics Analytics Reporting
IBM Big Data Platform Text Analysen Math.Modelle
Visualization & Discovery
Systems Management
Eclipse Tooling
Appl.Bausteine InfoSphere Streams
Application Development
Accelerators
Hadoop System
Stream Computing
Netezza Data Warehouse
IBM Smart Analytics System
Big Insights Information Server
Management Konsolen
Information Integration & Governance
InfoSphere Warehouse ©2012 IBM Corporation
Leistungsfähigkeit einer Big Data Plattform Technology
Process & Store huge volume of any data Structure and control data Process Streaming Data Analyze Unstructured Data Integrate all data sources
Hadoop & Map Reduce
Description
Distributed File System
InfoSphere BigInsights
Data Warehouse Netezza & ISAS InfoSphere Warehouse
Parallel Processing Engine
Complex Event Processing InfoSphere Streams
Text Analytics Engine InfoSphere Streams InfoSphere BigInsights
ETL, Data Quality
Stream Computing Engine
Analyze textual content for insights
Integrate, transform, and manage meta data
InfoSphere Information Server ©2012 IBM Corporation
Typische Architektur Business Processes
Smarter Analytics
Events and Alerts
Drive consistent behavior across all applications and processes
web traffic and social media Insight
Insight generates customer churn alert
Big Data Platform Master Data Management Website Logs Clickstream Social Media ...
Campaign Management
Internet Scale Analytics Campaigns Information Integration
Data Warehouse
Customer Product Sales
Streaming Analytics
Customer behavior and experience insight
Customer Sentiment BI
Customer Insight BI
©2012 IBM Corporation
Beispiel: Risikobewertung
Extract Integrate
Textanalytics
©2012 IBM Corporation
Beispiel: Wer ist Wer ? Who WhoIsIsJames JamesDimon? Dimon?
position
committee membership
history
©2012 IBM Corporation
Beispiel: Analyse von Kaufverhalten
Real-time Real-timeproduct product intents intentsenriched enrichedwith with consumer attributes consumer attributes
Entries Entriescontain containpromotional promotionalmessages, messages, wishful thinking, questions, wishful thinking, questions,etc etc Micro-segmentation Micro-segmentationofof product productintents intentsby by occupation occupation
Integration Integrationacross acrossSocial SocialMedia Mediasites sites Real-time tracking by Real-time tracking by micro-segmentation micro-segmentation
For Formany manyofofthe theattributes attributeswe weneed needtotoextract, extract, cleanse, normalize and categorize cleanse, normalize and categorize Micro-segmentation of Micro-segmentation of consumers consumersby byhobbies hobbies
©2012 IBM Corporation
Beispiel: Unterstützende medizinische Betreuung University of Ontario Institute of Technology Anwendungsfall
– Überwachung von Früh- und Neugeborenen – Vorhersage von Infektionen bis zu 24h
Lösung
– Zentrale Überwachung von 120 Kindern: 120K msg/sec, billion msg/day – Ausweitung auf Spitäler in US und China
Event Preprocesser
Sensor Network
Analysis Framework
Stream-based Distributed Interoperable Health care Infrastructure
Solutions (Applications) ©2012 IBM Corporation
Anwendungsfälle in jeder Branche Gesundheitswesen
Handel
Sicherheitsdienste
Verkehrsleitsysteme
Produktion
Handelsanalyse
Finanzwesen
IT Security
Telekommunikation
Marketing
Betrugserkennung
Bestes Angebot
©2012 IBM Corporation
Weiterführende Informationen ibm.com/bigdata ibm.com/smarteranalytics Demo Points • Pure Systems • Analytics Solution • Netezza (Big Data)
Business Partners ©2012 IBM Corporation
THINK Big – Big Data
Dipl.Ing. Wolfgang Nimführ
IBM Österreich Obere Donaustrasse 95
Information Agenda Tel +43-664-618-5389 Executive Consultant
[email protected] Big Data Tiger Team IBM Software Group Europe
©2012 IBM Corporation