SP als Big-Data-Plattform
Lange Zeit war das Thema Big Data für SharePoint ein frommer Wunsch, denn in der Praxis war SharePoint eher für kleine Datenmengen ausgelegt. Mit SharePoint 2013, verbesserten Business Intelligence Tools und dem zugehörigen SQL Server 2012 wurden Verbesserungen umgesetzt, die es auch Endanwendern erlauben, in SharePoint mit großen Datenmengen umzugehen. Der Artikel gibt einen Überblick über das Thema SharePoint als Big-Data-Plattform.
SharePoint ist seit der Version 2007 eine Plattform, die das Thema Business Intelligence (BI) einer breiten Anwendergruppe zugänglich macht – u. a. durch eine einfache Integration von Excel-Dateien und die zugehörige Verarbeitung von Daten und Anzeige in der Weboberfläche durch die Excel Services. In den verschiedenen SharePoint-Versionen kamen seit SharePoint 2007 immer mehr Funktionalitäten hinzu, um Daten aus verschiedenen Datenquellen zu integrieren (Business Connectivity Services), aufbereitete Daten und KPIs zu visualisieren (z. B. durch Performance Point und Viso Services) und die Verwaltung aller zugehörigen Komponenten bequem über die SharePoint-Weboberfläche auch Nichtentwicklern durch Web Parts zu ermöglichen. Mit der Weiterentwicklung der SharePoint-Plattform erfolgte die immer bessere Integration von SQL Server, SharePoint und Office. Diese Verknüpfung ist in SharePoint 2013 zu einem mächtigen Werkzeug herangereift, das für Businessanwender die Themen Big Data und BI intuitiv durch gewohnte Tools wie Excel und SharePoint Web Parts zusammenbringt.
Aber reichen die Verbesserungen in den BI-Funktionalitäten aus, damit SharePoint als Big-Data-Plattform gesehen wird?
SharePoint und Small Data
Traditionell ist SharePoint in seiner typischen Rolle als Collaboration Platform oder Intranet/Extranet eher eine Plattform, die mit „kleinen“ Datenmengen umgegangen ist. Das heißt, man hatte in der Regel maximal ein paar tausend Listenelemente pro Liste, die Empfehlung von maximal 10 000 Dokumenten pro Bibliothek in SharePoint 2007 und maximal 2 000 pro Ansicht. Ferner kommt hinzu, dass bei großen SharePoint-Installationen die hohen Datenmengen in der Regel von Dokumenten aus Word und Excel oder PDF-Dokumenten stammen. Diese Daten sind aber für die Einsatzszenarien von Big Data (siehe auch Kasten „Was ist Big Data?“) weniger relevant.
Was ist Big Data?
Bei Big Data geht es um die Speicherung und Verarbeitung von extrem hohen Datenmengen –z. T. aus vielfältigen Datenquellen. Herausforderung dabei sind u. a. die Verarbeitungsgeschwindigkeit, Speicherung, Analyse und Visualisierung dieser Datenmengen. In der Regel spricht man von Big Data ab einem Volumen von Terabytes, Petabytes und Exabytes. Typische Einsatzgebiete sind z. B.:
- Klimaforschung
- Marktforschung und Konsumverhalten
- Finanzmärkte, -transaktionen und E-Commerce
- Analyse von Telekommunikationsverbindungen
Für Unternehmen, Behörden und Forschungseinrichtungen können sich durch die Analyse, Verarbeitung und Visualisierung dieser Datenmengen Einsparpotenziale ergeben, neue Zusammenhänge können hergestellt oder Wettbewerbsvorteile geschaffen werden. Behörden erhoffen sich u. a. bessere Ergebnisse bei der Strafverfolgung und Terrorismusbekämpfung.
Und eher selten findet man Aufgabenlisten und Kalender in Collaboration Websites, die mehrere Millionen Einträge aufweisen, die es zu analysieren gilt. Warum war das so?
Zum einen wurde SharePoint in der Rolle der Zusammenarbeitsplattform gesehen, bei der man abgesehen von Dokumenten keinen Use Case hat, umfangreiche Datensätze über die SharePoint-Oberfläche zu verarbeiten. Zum anderen waren in SharePoint 2007 nur wenige Mechanismen vorhanden, um mit großen Datenmengen umzugehen, diese effizient zu verarbeiten und an der Weboberfläche anzuzeigen. Die zugrunde liegende (32-bit-)Plattform hatte zum einen feste Limits für die Menge der Daten und zum anderen keine effizienten Dienste, um die Daten zu verarbeiten. Auch der Transport der Daten vom Server zum Client war an vielen Stellen nicht optimiert, sodass oftmals...

