Big Data - Trend oder Hype? - SAS · Title: Big Data - Trend oder Hype? Author: Guido Oswald...

Preview:

Citation preview

Copyright © 2012, SAS Institute Inc. All rights reserved.

make connections • share ideas • be inspired

Data

Guido Oswald Solution Architect @SAS Switzerland

Copyright © 2012, SAS Institute Inc. All rights reserved.

BIG Data….. Wer?

Copyright © 2012, SAS Institute Inc. All rights reserved.

BIG Data….. Wer?

Copyright © 2012, SAS Institute Inc. All rights reserved.

Wikipedia sagt:

Als Big Data werden besonders große Datenmengen bezeichnet, die mit Hilfe von Standard-Datenbanken und Daten-Management-Tools nicht oder nur unzureichend verarbeitet werden können.

Problematisch sind hierbei vor allem die Erfassung, die Speicherung, die Suche, Verteilung, Analyse und Visualisierung von großen Datenmengen.

Das Volumen dieser Datenmengen geht in die Terabytes, Petabytes, Exabytes und Zettabytes.

Copyright © 2012, SAS Institute Inc. All rights reserved.

Ist BIG Data relevant für mich?

Zettabytes ?!

1021 Byte

1.000.000.000.000.000.000.000 Byte

Copyright © 2012, SAS Institute Inc. All rights reserved.

Zettabytes

Copyright © 2012, SAS Institute Inc. All rights reserved. * According to IDC

Copyright © 2012, SAS Institute Inc. All rights reserved.

Diversität der Daten wächst!

Copyright © 2012, SAS Institute Inc. All rights reserved.

E = mc2

Copyright © 2012, SAS Institute Inc. All rights reserved.

Gartner “Hype Cycle”

Copyright © 2012, SAS Institute Inc. All rights reserved.

Gartner IT Trends 2012

6. Next-Generation-Analytics

7. Big Data

8. In-Memory-Computing

9. Extrem stromsparende Server

10. Cloud Computing

1. Tablets

2. Mobile Applikationen und Interfaces

3. Kontextuelles und soziales Benutzererlebnis

4. Das Internet der Dinge

5. App-Stores und Marktplätze

Oktober 2011

Copyright © 2012, SAS Institute Inc. All rights reserved.

BIG Data kommt

Wie hat sich nach Ihrer Einschätzung die Datenmenge, die in Ihrem Unternehmen verarbeitet wird,

in den letzten zwölf Monaten verändert? Die Datenmenge ist ... (n=116 , Angaben in Prozent)

Quelle: CW-Marktstudie 2011: Big Data.

Copyright © 2012, SAS Institute Inc. All rights reserved.

VOLUMEN

VARIETÄT

GESCHWINDIGKEIT

RELEVANZ

TODAY THE FUTURE

DA

TA

SIZ

E

Wettbewerbsvorteil aus BIG Data

Copyright © 2012, SAS Institute Inc. All rights reserved.

Analytics Lifecycle und BIG Data

IDENTIFY /

FORMULATE

PROBLEM

DATA

PREPARATION

DATA

EXPLORATION

TRANSFORM

& SELECT BUILD

MODEL

VALIDATE

MODEL

DEPLOY

MODEL

EVALUATE /

MONITOR

RESULTS

How can we

create

strategic

advantage?

Domain Expert

Makes Decisions

Evaluates Processes and ROI

BUSINESS

MANAGER

Model Validation

Model Deployment

Model Monitoring

Data Preparation

IT SYSTEMS /

MANAGEMENT

Data Exploration

Data Visualization

Report Creation

BUSINESS

ANALYST

Exploratory Analysis

Descriptive Segmentation

Predictive Modeling

DATA MINER /

STATISTICIAN

Copyright © 2012, SAS Institute Inc. All rights reserved.

Die Lösung: Supercomputer?

Copyright © 2012, SAS Institute Inc. All rights reserved.

Die Lösung: Supercomputer?

“Monte Rosa” im CSCS (Lugano)

AMD quad core Opteron 2,4 GHz Prozessoren

47.872 Kerne

297,0 TFLOPS

ABER:

Kosten?

Verteilen der Daten / Verarbeitung?

Copyright © 2012, SAS Institute Inc. All rights reserved.

Lösungsansatz für BIG Analytics

Statt die Daten zur «Arbeit»

Copyright © 2012, SAS Institute Inc. All rights reserved.

Lösungsansatz für BIG Analytics Traditionelle Architektur

Copyright © 2012, SAS Institute Inc. All rights reserved.

Lösungsansatz für BIG Analytics

Statt die Daten zur «Arbeit»

Die «Arbeit» zu den Daten

Copyright © 2012, SAS Institute Inc. All rights reserved.

Lösungsansatz für BIG Analytics

MARKETING

VERKAUF

FINANZEN

SUPPLY

CHAIN

RISK

HR

EDW

ADW

Copyright © 2012, SAS Institute Inc. All rights reserved.

Die Lösung für BIG Analytics

Paralleles Datenbanksystem

EMC Greenplum

Teradata

Apache Hadoop

Erprobt durch Google, Facebook, Yahoo

Skaliert praktisch beliebig!

Commodity Hardware (Blade Server)

Copyright © 2012, SAS Institute Inc. All rights reserved.

Commodity Hardware: Blade Server

Copyright © 2012, SAS Institute Inc. All rights reserved.

SAS Lösung für BIG Data

Copyright © 2012, SAS Institute Inc. All rights reserved.

Fazit

make connections • share ideas • be inspired

Copyright © 2012, SAS Institute Inc. All rights reserved.

Vielen Dank für Ihre

Aufmerksamkeit!

Copyright © 2012, SAS Institute Inc. All rights reserved.

make connections • share ideas • be inspired

BACKUP SLIDES

Copyright © 2012, SAS Institute Inc. All rights reserved.

Welche Daten wohin?

DECISIONS / ACTIONS / DATA

RAW RELEVANT DATA

LOW COST STORAGE

ENTERPRISE

DATAWAREHOUSE

Copyright © 2012, SAS Institute Inc. All rights reserved.

Business intelligence weiter denken

FORECASTING

DATA MINING

TEXT ANALYTICS

OPTIMIZATION

STATISTICS

INFORMATION

MANAGEMENT

Copyright © 2012, SAS Institute Inc. All rights reserved.

Recommended