Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen

Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen Eine unabhängige Anwenderbefragung. BARC Institut, Würzburg, Juli 2011 WHITE PAPER 2 Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen Autoren Carsten Bange Melanie Mack Geschäftsführer Head of Market Research cbange@barc.de mmack@barc.de Die Autoren danken Jörn Wittler für seine Unterstützung. Diese unabhängige Studie wurde von BARC erstellt, einem objektiven Marktanalysten. Dank eines Sponsorings durch pmOne und Hewlett-Packard kann diese Studie kostenlos ver- teilt werden. BARC - Business Application Research Center Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen 3 Inhalt Vorwort: Data Warehousing – ein Konzept ohne Zukunft?................................................4 Zentrale Ergebnisse der Umfrage......................................................................................5 Methodik und Demografie..................................................................................................8 Ergebnisse der Umfrage...................................................................................................10 Ziele und Bedeutung von Data Warehouses...............................................................10 Architektur und Umsetzung.........................................................................................14 Architekturkonzepte.................................................................................................14 Ownership...............................................................................................................18 Datenbanktypen......................................................................................................19 Datenaktualisierung................................................................................................20 Skalierung und Wachstum.......................................................................................... 22 Nutzerzahl.............................................................................................................. 22 Datenvolumen.........................................................................................................24 Herausforderungen für IT und Fachbereich.................................................................28 Herausforderungen für den Betrieb von Data Warehouses....................................28 Herausforderungen für die Anwender von Data Warehouses................................ 29 Fach- und prozessübergreifende Auswertungen................................................... 30 Nutzen im Fachbereich............................................................................................... 33 Mehrwert des Data Warehouse nach Unternehmensbereichen............................ 33 Systemzugriff ........................................................................................................ 34 Trendthemen............................................................................................................... 35 Fazit.............................................................................................................................37 BARC - Business Application Research Center 4 Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen Vorwort: Data Warehousing – ein Konzept ohne Zukunft? Die Idee des Data Warehouse ist über 20 Jahre alt – und damit in der immer wieder von Hy- pe-Themen und kurzlebigen Ideen gekennzeichneten IT-Industrie ein sehr bewährtes und dau- erhaftes Konzept. Die separate Speicherung integrierter und homogenisierter Daten in Data Warehouses zur Unterstützung von Entscheidungen ist als nutzbringende Methode etabliert. Doch in letzter Zeit mehren sich die Stimmen, die den Aufbau und Einsatz von Data Warehou- ses in Frage stellen und nicht mehr als sinnvoll erachten: Die immer dynamischer werdenden Anforderungen an das Geschäftsleben erlauben es nicht mehr, die Zeit für eine strukturierte Sammlung und Aufbereitung von Kennzahlen für Entscheidungen in gesicherten, aber dadurch auch langwierigen Prozessen aufzubringen. Zu unflexibel, zu teuer und zu langsam sind die immer wieder vorgebrachten und sicherlich auch teilweise zutreffenden Krititkpunkte für Data Warehouse-Systeme. Die Verteidiger des Konzeptes verweisen allerdings ebenfalls auf gewichtige Vorteile des Data Warehousing: Wo sonst sollen qualitätsgesicherte und unternehmensübergreifend genutzte Kennzahlen vorgehalten werden; wie soll eine effektive Data Governance ohne zentrale Modelle und Qualitätssicherung von Daten erfolgen; wie sonst sollen Daten aus vielen heterogenen Da- tenquellen zusammengeführt und für eine performante Analyse bereitgestellt werden? Die vorliegende Studie soll einen Beitrag zu dieser Diskussion leisten, indem sie den Status quo und die Einschätzung in Unternehmen in Deutschland untersucht. Wir haben dabei, trotz und wegen des Alters des Konzeptes, noch einmal fundamentale Fragen gestellt: Warum werden Data Warehouses gebaut und welche Ziele werden tatsächlich erreicht? Neben Architektur und Umsetzung interessierte uns vor allem auch, welche Herausforderungen IT-Betreiber und Fachanwender die meisten Sorgen bereiten und wie sich Bedarfe hinsichtlich Datenmengen, Nutzerzahlen, übergreifender Auswertungen und weiterer Aspekte entwickeln. Die Auswertungen der Antworten bestätigen vieles, was Experten vermutet haben, aber es zei- gen sich auch überraschende Ergebnisse. Wir danken allen Teilnehmern an der Studie und den Sponsoren pmOne und HP, die eine kos- tenfreie Veröffentlichung ermöglichen. Besonders bedanken wir uns schon jetzt bei allen, die an zukünftigen Befragungen von BARC teilnehmen, denn nur so können wir auch weitere Beiträge zu Diskussionen mit empirischen Daten leisten. Würzburg, 18.7.2011 Dr. Carsten Bange, Melanie Mack BARC - Business Application Research Center Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen 5 Zentrale Ergebnisse der Umfrage Data Warehouses sind kritisch für Unternehmen Nahezu alle Befragten (98 Prozent) bewerten die Bedeutung des Data Warehouses als ‚wichtig‘ oder ‚kritisch‘ für ihr Unternehmen. Vertrauen in Daten als wichtigstes Ziel „Vertrauen in Daten“ befindet sich mit deutlichem Abstand auf Platz eins der wichtigsten Ziele für die Einführung eines Data Warehouse. Für 96 Prozent der Teilnehmer ist dies „wichtig“ (14 Pro- zent) oder „äußerst wichtig“ (82 Prozent). Zielerreichung eines Data Warehouses nur bedingt erfüllt 51 Prozent der Befragten sehen das Ziel ‚Vertrauen in Daten‘ erreicht. Alle übrigen Aspekte weisen eine Zielerreichung von weniger als 50 Prozent auf. Data Warehouses sind stark verbreitet Mit 86 Prozent der Befragten ist die Speicherung von Daten zur Entscheidungsunterstützung in ei- nem Data Warehouse das klar dominierende Konzept, 52 Prozent der Befragten nutzen informelle Datenbestände und 26 Prozent haben unabhängige Data Marts aufgebaut. Der Einsatz eines Data Warehouse lohnt sich Der Einsatz eines Data Warehouse oder Data Mart zeigt Wirkung auf die Erreichung der abge- fragten Ziele wie Vertrauen in Daten, Unterstützung des Planungsprozesses oder schnelleres Be- richtswesen (Anteil an Ziel übertroffen; 34 Prozent DWH-Nutzer zu 21 Prozent kein DWH-Nutzer). Spezialisierte Organisationseinheiten werden eingerichtet, allerdings ohne durchschla- gende Erfolge bei der Zielerreichung Knapp die Hälfte der Befragten gibt an, dass die IT der ‘System-Owner‘ ist und mit 29 Prozent werden spezialisierte Organisationsabteilungen eingerichtet. Bei knapp unter einem Viertel der Teilnehmer ist der Fachbereich verantwortlich für das entscheidungsunterstützende System. Die durchschnittliche Zielerreichung nach Organisationseinheit zeigt nur marginale Unterschiede (2,57 eigene Organisationseinheit; 2,6 Fachbereich; 2,67 IT). BARC - Business Application Research Center 6 Data Warehousing 2011 - Status quo, Herausforderungen und Nutzen Mischansatz aus klassischen und analyseorientierten Datenbanken ist verbreitet Fast alle Befragten (92 Prozent) verwenden klassische Datenbanken. Immerhin die Hälfte der Un- ternehmen setzt analyseoptimierte Datenbanksysteme ein, wobei der Mischansatz aus klassisch und analyseorientieren Datenbanken sehr verbreitet ist (40 Prozent). Nur eine sehr kleine Gruppe von Nutzern (8 Prozent) arbeiten ausschließlich mit analytischen Datenbanken. Datenaktualisierung: Erfolgreicher mit Realtime Daten Über zwei Drittel der Befragten gaben an, dass ihre Daten täglich aktualisiert werden. 22 Prozent greifen auf Daten zu die mehrmals täglich aktualisierte werden und eine kleine Gruppe verfügt über monatlich aktualisierte Daten (9 Prozent). Befragte, deren Daten in Echtzeit aktualisiert werden, schneiden am besten ab (67 Prozent). Danach folgen monatlich aktualisierte Daten (47 Prozent). „BI for the masses“ noch keine Realität In über 70 Prozent der Unternehmen haben weniger als 20 Prozent der Mitarbeiter Zugriff auf die Daten aus dem Data Warehouse. Es gibt aber auch eine kleine Gruppe von Unternehmen, die mit mehr als 75 Prozent Nutzer intensiv ein Data Warehousing betreibt. Eine Zunahme der Nutzerzah- len wird erwartet. Insbesondere in den Branchen IT-Unternehmen, Industrie und Chemie/Pharma erwarten deutlich mehr Unternehmen wachsende Nutzerzahlen.