Ein Data Lake beherbergt all Ihre Unternehmensdaten mit Leichtigkeit. Aber Vorsicht: So ein XXL-Datendepot kann sich allzu leicht in einen Sumpf verwandeln und Ihre User verschrecken. Lesen Sie, wie Sie das verhindern. [...]
Schon seit einigen Jahren setzen Unternehmen auf der ganzen Welt – getrieben durch Technologien wie Apache Hadoop – auf Data Lakes. Dabei handelt es sich um unternehmenseigene Data-Management-Plattformen, die die Speicherung sämtlicher Daten in ihrem natürlichen Format ermöglichen. Das Versprechen: Informationssilos werden eingerissen und allen Unternehmensbereichen steht ein großes Datendepot zur Verfügung, mit dem von Business Analytics bis Data Mining alle anfallenden Aufgaben erledigt werden sollen. Entsprechend wird der Data Lake als eierlegende Big-Data-Wollmilchsau angepriesen.
VOM DATA LAKE ZUM DATENSUMPF
VOM DATA LAKE ZUM DATENSUMPF
Die Erfahrungen von Avi Perez, CTO beim Business-Intelligence-Spezialisten Pyramid Analytics, sprechen da eine andere Sprache: „Ich sehe regelmäßig Kunden, deren Data Lakes sich in Sümpfe verwandelt haben – massive Datendeponien, die für die Endbenutzer völlig unzugänglich geworden sind.“
Datenbanken, so Perez weiter, seien teuer und der Data Lake die Antwort auf dieses Problem: „Data Lakes – und generell alle Big-Data-Initiativen – kommen aus zwei Gründen zustande: Erstens wegen des Wettbewerbsdrucks und zweitens wegen der Datengeneratoren in der ‚echten‘ Welt, die ständig neue Datenpakete produzieren und neuen Speicherbedarf verursachen.“
Datenbanken, so Perez weiter, seien teuer und der Data Lake die Antwort auf dieses Problem: „Data Lakes – und generell alle Big-Data-Initiativen – kommen aus zwei Gründen zustande: Erstens wegen des Wettbewerbsdrucks und zweitens wegen der Datengeneratoren in der ‚echten‘ Welt, die ständig neue Datenpakete produzieren und neuen Speicherbedarf verursachen.“
Das Problem dabei ist nur: Während einige Konzerne – Google ist das Paradebeispiel – neue Geschäftsmodelle rund um ihre Data Lakes aufgebaut haben, sammeln viele andere einfach nur Daten – ohne klares Ziel oder einen Plan, wie man daraus Mehrwert schaffen kann.
Video: How to Build a Successful Data Lake
Video: How to Build a Successful Data Lake
3 WEGE ZUM DATA-LAKE-KONZEPT
Das soll nicht heißen, dass ein Data Lake per se eine schlechte Idee wäre. Avi Perez ist sogar überzeugt davon, dass irgendwann jedes Unternehmen einen solchen braucht. Doch einen Data Lake zu schaffen, der den Endbenutzern echten Nutzen, beziehungsweise Mehrwert bringt, erfordert eine strategische Vorgehensweise. Wir schlagen Ihnen drei Strategien vor, um nicht im eigenen Data Lake zu ertrinken:
Das soll nicht heißen, dass ein Data Lake per se eine schlechte Idee wäre. Avi Perez ist sogar überzeugt davon, dass irgendwann jedes Unternehmen einen solchen braucht. Doch einen Data Lake zu schaffen, der den Endbenutzern echten Nutzen, beziehungsweise Mehrwert bringt, erfordert eine strategische Vorgehensweise. Wir schlagen Ihnen drei Strategien vor, um nicht im eigenen Data Lake zu ertrinken:
1. SAMMELN SIE WENIGER DATEN
Laut Perez begehen viele Unternehmen den Fehler, zu viele Daten zu sammeln – einfach, weil sie es können. Der Experte führt das Smartphone als Beispiel an: „Am Ende hat man Millionen von Fotos auf dem Telefon, von denen 99 Prozent Datenmüll sind, den man sofort löschen könnte. Das Fotografieren ist dank des Smartphones so einfach geworden, dass es nahezu umsonst ist. Wahrscheinlich erwischen auch Sie sich öfter bei Gedankengängen wie ‚demnächst räume ich auf‘ – dazu kommt es natürlich nie. Stattdessen sammelt man enorme Mengen von Informationen und Daten – hat aber keinerlei effektive Möglichkeit, diese zu strukturieren.“
Laut Perez begehen viele Unternehmen den Fehler, zu viele Daten zu sammeln – einfach, weil sie es können. Der Experte führt das Smartphone als Beispiel an: „Am Ende hat man Millionen von Fotos auf dem Telefon, von denen 99 Prozent Datenmüll sind, den man sofort löschen könnte. Das Fotografieren ist dank des Smartphones so einfach geworden, dass es nahezu umsonst ist. Wahrscheinlich erwischen auch Sie sich öfter bei Gedankengängen wie ‚demnächst räume ich auf‘ – dazu kommt es natürlich nie. Stattdessen sammelt man enorme Mengen von Informationen und Daten – hat aber keinerlei effektive Möglichkeit, diese zu strukturieren.“
Genau dasselbe Problem sucht auch die Data Lakes dieser Welt heim, wie Perez erklärt: „Die Speicherung von Daten in Hadoop ist fast schon günstig genug, um als kostenlos durchzugehen. Aber die schiere Masse von Daten, die über die Zeit akkumuliert wird, macht es schwierig bis unmöglich, diejenigen Datensätze zu identifizieren, die Sie mit wertvollen Insights ausstatten.“
Um dieses Problem zu umgehen, rät der Experte, den Datenhahn zuzudrehen: „Nur weil es günstig ist, die Daten zu sammeln, muss es nicht günstig sein, die Daten zu nutzen. Das könnte sogar ganz schön teuer werden. Sammeln Sie also nicht überall und zu jeder Zeit Daten. Fokussieren Sie sich auf die Daten, von denen Sie bereits wissen, wie Sie sie nutzen wollen.“
Um dieses Problem zu umgehen, rät der Experte, den Datenhahn zuzudrehen: „Nur weil es günstig ist, die Daten zu sammeln, muss es nicht günstig sein, die Daten zu nutzen. Das könnte sogar ganz schön teuer werden. Sammeln Sie also nicht überall und zu jeder Zeit Daten. Fokussieren Sie sich auf die Daten, von denen Sie bereits wissen, wie Sie sie nutzen wollen.“
2. ERARBEITEN SIE EINE MACHINE-LEARNING-STRATEGIE
Wenn Sie sich auf ein oder mehrere Data Sets fokussiert haben, sollten Sie auf Automatisierung setzen, um Mehrwert aus den Daten zu generieren. „Künstliche Intelligenz, Machine Learning, Deep Learning – welches Buzzword Sie auch verwenden, es ist die magische Lösung, die Ihnen den Weg durch die Daten ebnet. Ich behaupte, das ist der einfachste Weg um Mehrwert aus Ihrem 5-Petabyte-Data-Lake zu schöpfen“, so Perez.
Wenn Sie sich auf ein oder mehrere Data Sets fokussiert haben, sollten Sie auf Automatisierung setzen, um Mehrwert aus den Daten zu generieren. „Künstliche Intelligenz, Machine Learning, Deep Learning – welches Buzzword Sie auch verwenden, es ist die magische Lösung, die Ihnen den Weg durch die Daten ebnet. Ich behaupte, das ist der einfachste Weg um Mehrwert aus Ihrem 5-Petabyte-Data-Lake zu schöpfen“, so Perez.
Zum Start empfiehlt der CTO ein Datenpaket und eine Machine-Learning-Technikauszuwählen, um dieses zu bearbeiten. Um effektive Methoden zu entwickeln, sollten Sie vor Investitionen – entweder für Weiterbildung oder für neues Fachpersonal – nicht zurückschrecken, empfiehlt Perez: „Machine Learning ist schwarze Kunst – man braucht dafür sehr spezifische Skills.“
3. IDENTIFIZIEREN SIE DEN GESCHÄFTSZWECK
3. IDENTIFIZIEREN SIE DEN GESCHÄFTSZWECK
An diesem Punkt laufen die Enden zusammen: Sie brauchen eine klare Vision von dem Geschäftsproblem, dass Sie lösen wollen. Mit diesem Ziel vor Augen sollte es nicht besonders schwer sein, die Daten einzugrenzen, die Sie für Ihr Vorhaben brauchen. Auch die richtige Machine-Learning-Technik ergibt sich in der Regel aus dem verfolgten Zweck.
Perez erklärt das Vorgehen am fiktiven Beispiel eines großen Retail-Unternehmens: „Sie wollen mehr darüber erfahren, welche Kunden Ihre Läden frequentieren. Dazu könnten Sie Ihre Kunden fotografieren und die Daten anschließend mit Hilfe eines künstlichen neuronalen Netzes (KNN) auswerten. Das KNN kann Ihnen dabei helfen zu bestimmen, ob es sich bei den Personen auf den Fotos beispielsweise um Kinder oder Erwachsene handelt. Wenn Sie damit fertig sind, verknüpfen Sie die Daten mit dem entsprechenden Geschäftsziel. So können Sie beispielsweise herausfinden, welche Zielgruppen sie eventuell verfehlen. Wichtig ist dabei, dass Sie von Anfang an eine klare Strategie besitzen.“
Perez erklärt das Vorgehen am fiktiven Beispiel eines großen Retail-Unternehmens: „Sie wollen mehr darüber erfahren, welche Kunden Ihre Läden frequentieren. Dazu könnten Sie Ihre Kunden fotografieren und die Daten anschließend mit Hilfe eines künstlichen neuronalen Netzes (KNN) auswerten. Das KNN kann Ihnen dabei helfen zu bestimmen, ob es sich bei den Personen auf den Fotos beispielsweise um Kinder oder Erwachsene handelt. Wenn Sie damit fertig sind, verknüpfen Sie die Daten mit dem entsprechenden Geschäftsziel. So können Sie beispielsweise herausfinden, welche Zielgruppen sie eventuell verfehlen. Wichtig ist dabei, dass Sie von Anfang an eine klare Strategie besitzen.“
Oft lassen sich aus solchen Erkenntnissen auch neue, ergänzende Möglichkeiten ableiten, um das Business mit weiteren maßgeschneiderten Lösungen zu versorgen. Wenn Sie beispielsweise wissen, wer sich in Ihren Läden aufhält, können Sie auch herausfinden, welche Kunden am häufigsten an der Kosmetikabteilung vorbeilaufen.
Dieser Artikel basiert auf einem Beitrag der US-Publikation cio.com.
Dieser Artikel basiert auf einem Beitrag der US-Publikation cio.com.
Video: Big Data – Chancen für die Gesellschaft
*Thor Olavsrud ist Senior Writer bei cio.com und Florian Maier beschäftigt sich für die computerwoche.de mit dem Themenbereich IT-Security und schreibt über reichweitenstarke und populäre IT-Themen
Be the first to comment