Big Data Vom Hype zum Geschäftsnutzen

Transkript

1 Big Data Vom Hype zum Geschäftsnutzen IBM IM Forum, Berlin, Dr. Carsten Bange, Gründer und Geschäftsführer BARC Hype BARC

2 Interesse an Big Data Nature Economist McKinsey Capital Harvard BM BARC Daten sind das Öl des 21. Jahrhunderts 2

3 Nicht nur Tools Big Data bezeichnet Methoden und Technologien für die hochskalierbare Erfassung, Speicherung und Analyse polystrukturierter Daten. Hohe Datenmengen Hohe Anwenderzahlen Komplexe Abfragen Schnelle Aktualisierung Strukturierte Daten Semi-strukturierte Daten Unstrukturierte Daten Alle Ebenen einer analytischen Infrastruktur. Evtl. nur kurzfristige Speicherung BARC BARC-Marktforschung: Big Data Survey Europe - Big Data aus Unternehmenssicht: - Treiber und geplante Weiterentwicklung - Nutzung und Herausforderungen - Organisation - Technologie und Budgets Teilnehmer aus IT und Fachbereichen in DACH, Frankreich, UK - Veröffentlichung: Februar Frei verfügbar unter: BARC

4 Worin sehen Sie die wichtigsten Vorteile einer Nutzung von Big Data Technologien? Bessere strategische Entscheidungen 59% Bessere Steuerung operativer Prozesse Schnellere Analyse Detaillierte Analysen 43% 51% 50% Verbesserter Kundenservice Zielgerichtetere Marketingaktionen Besseres Verständnis des Marktes/Wettbewerbs Geringere Kosten Bessere Produkt-/Service-Qualität 32% 31% 28% 28% 25% Bessere Kundenbindung 16% Q: BARC Big Data Survey Europe, n = BARC Erschließung von Datenquellen 4

5 Wie entsteht Big Data? Sensorik 4 Milliarden RFID Tags 2012 verkauft 900 Millionen Geräte mit GPS 2013 ausgeliefert (+20%) BMW erhält 30 Gigabyte Daten aus Autos pro Tag Wie entsteht Big Data? Logs Ereignisse BARC

6 2005 Quelle: NBC 2013 Quelle: NBC 6

7 Wie entsteht Big Data? Web 2.0 / Soziale Medien 2,5 Milliarden neue Inhalte 300 Mio. Fotos hochgeladen 500+ Terabyte neue Daten am Tag! Analyse Themen Stimmungen Netzwerke Profile BARC Verwendete Daten Welche Daten nutzen Sie für die Analyse? Transaktionsdaten 70% 20% 10% Logs 55% 30% 15% Sensorik 44% 31% 24% Unstrukturierte Daten (Dokumente, Video, Bild) 40% 29% 32% Social-Media-Daten 14% 50% 36% Q: BARC Big Data Survey Europe, n = 174 0% 20% 40% 60% 80% 100% Im Einsatz Geplant Nicht geplant 7

8 Neue Technologien für Transport & Speicherung von Daten MPP Columnar RDBMS Streaming In-Memory DBMS HADOOP NoSQL Worin sehen Sie die wichtigsten Vorteile einer Nutzung von Big Data Technologien? Bessere strategische Entscheidungen 59% Bessere Steuerung operativer Prozesse Schnellere Analyse Detaillierte Analysen 43% 51% 50% Verbesserter Kundenservice Zielgerichtetere Marketingaktionen Besseres Verständnis des Marktes/Wettbewerbs Geringere Kosten Bessere Produkt-/Service-Qualität 32% 31% 28% 28% 25% Bessere Kundenbindung 16% Q: BARC Big Data Survey Europe, n = BARC

9 Klassische BI-Infrastruktur Dashboards Traditionelle BI-Anwendungen Standard- Reporting Ad hoc Reporting Analyse Data Mining Planung Data Mart 1 Data Mart 2 Data Mart n Analytische Datenbanken Data Warehouse DB Streaming Datenbanken Staging Area Datenintegration & Datenqualität Batch, Real Time SAP ERP CRM Externe Systeme Strukturierte Transaktionsdaten Analytische Infrastruktur für Big Data Dashboards Traditionelle BI-Anwendungen Standard- Reporting Ad hoc Reporting Analyse Data Mining Planung Suche Discovery Big Data Analyse Text Analyse Netzwerk- Analyse Pfad- Analyse Mustererkennung Data Mart 1 Data Mart 2 Data Mart n Analytische Datenbanken Data Warehouse DB Such- Index NoSQL DB Streaming Datenbanken Staging Area Staging Area File System Datenintegration & Datenqualität Datenintegration & Datenqualität Batch, Real Batch, Time Real Time, Streams/Events, MapReduce SAP ERP CRM Externe Systeme Strukturierte Transaktionsdaten Sensor-Daten Web Logs Social Media Dokumente Maschinen-generierte Dokumente/Texte Daten (unstrukturierte Daten) 9

10 Daten sind das Öl des 21. Jahrhunderts und sie müssen raffiniert werden um nützlich zu sein 10

11 Worin sehen Sie die wichtigsten Vorteile einer Nutzung von Big Data Technologien? Bessere strategische Entscheidungen 59% Bessere Steuerung operativer Prozesse Schnellere Analyse Detaillierte Analysen 43% 51% 50% Verbesserter Kundenservice Zielgerichtetere Marketingaktionen Besseres Verständnis des Marktes/Wettbewerbs Geringere Kosten Bessere Produkt-/Service-Qualität 32% 31% 28% 28% 25% Bessere Kundenbindung 16% Q: BARC Big Data Survey Europe, n = BARC Analyseprojekte mit polystrukturierten Daten bei BARC-Kunden in den letzten 24 Monaten Big Data Analyse Supply Chain Monitoring und Optimierung Maschinen-Überwachung und Serviceplanung Textanalyse auf Stichwörter, Stimmungen, Themen Social Media Monitoring und Kampagnenmanagement Verhaltensanalyse - Web-Personalisierung Next Best Offer / Activity, z.b. für Web-Shops & Call Center Betrugsentdeckung /-vermeidung Verbrauchsdatenanalyse (Energie, Netzwerk- Ressourcen, ) Wetterdatenanalyse für Standortplanung/ -optimierung, Absatzplanung, Produktentwicklung IT-Systemmonitoring Genomanalyse, Krebstherapie, Gesundheitsvorsorge Grundlagenforschung (Physik, Pharma, ) Bewegungsanalyse Qualitätsanalyse, vorausschauende Wartung Datenarten RFID-Funkchip- und GPS-Daten-Erfassungen Maschinendaten aus der Produktion (BDE) Unstrukturierte Daten wie Call-Center- oder Service-Notizen, Bilder auf Webseiten oder Video-Clips Social Media Daten aus Facebook, Twitter, Blogs oder Foren. Log-Daten aus der eigenen Webpräsenz oder Web Shops Log-Daten der IT-Systeme Sensor-Daten in Gebäuden oder der Umwelt Streaming Daten, Events Bioinformatik, Medizinische Testdaten, Arzneimittelabsatz Telematik, Sensoren BARC

12 Probleme Welche Probleme sehen Sie beim Einsatz von Big-Data- Technologien? Fehlendes technisches Know-how Fehlendes fachliches Know-how 46% 44% Fehlende überzeugende Einsatzszenarien Technische Probleme Kosten 34% 33% 36% Datenschutz 25% Big Data nicht für Fachanwender im Unternehmen nutzbar Q: BARC Big Data Survey Europe, n = % 0% 20% 40% 60% Voraussetzungen für Geschäftsnutzen aus Big Data 1/2 Strategie und Unternehmenskultur 1. Der Wertbeitrag und die strategische Bedeutung von Daten für das eigene Geschäftsmodell sind unstrittig; 2. Die Unternehmenskultur akzeptiert die Datenanalyse als Entscheidungsgrundlage; 3. Das Management unterstützt die Entwicklung hin zu datengetriebenen Geschäftsprozessen; Datennutzung 4. Die Datenanalyse schließt wenig- oder ungenutzte Datenquellen ein und verfolgte strategische Geschäftsziele; 5. Bereitschaft zum experimentellen Arbeiten mit Daten (Experimentierphase vs. Operationalisierung); BARC

13 Voraussetzungen für Geschäftsnutzen aus Big Data 2/2 Technologie 6. Bereitschaft für Individualentwicklungen ergänzend zum Einsatz von Standardwerkzeugen; 7. Existenz hochskalierbarer Plattformen für Integration, Speicherung und Analyse polystrukturierter Daten; Organisation 8. Verfügbarkeit oder Ausbildung von Data Scientists ; 9. Eine Organisationsstruktur und -kultur, die technisches und fachliches Know-how für Big Data verknüpft; BARC Die Daten sind da. legen wir los! 13

14 Kontakt gerne! Dr. Carsten Bange Gründer und Geschäftsführer BARC GmbH Steinbachtal 2b D Würzburg Tel. +49 (0)931/ Fax +49 (0)931/ BARC