Massendaten unter Windows
16.10.2014, 00:00 Uhr
Hortonworks veröffentlicht HDP 2.2
Hadoop ist ein Framework, um immens große Datenbestände redundant zu speichern. Hortonworks bietet dieses Framework unter dem Namen HDP auch auf Windows an. Die neue Version 2.2 kommt mit einem Strauß an neuen Funktionen.
Wenn Datenbestände aus dem Terabyte-Bereich in den Petabyte-Bereich wachsen, wird es Zeit, sich Gedanken zu machen, ob NTFS immer noch das richtige Dateisystem ist. Das Open-Source-Framework Hadoop kommt in solchen Szenarien in der Regel zum Einsatz. Auch Microsoft nutzt Hadoop: HDInsight ist Hadoop in der Cloud und lokal auf dem Server und basiert auf der Implementierung von Hortonworks.
Letztere bringen jetzt die Version 2.2 ihres Produktes HDP heraus, das durch viele neue Feature glänzt. Zum Beispiel macht es HDP 2.2 möglich, ein lokales Hadoop-Cluster in die Cloud zu sichern. Das funktioniert sowohl mit Amazon S3 wie auch mit Microsoft Azure.
HDP arbeitet mit Yarn (yet another resource negotiator) zusammen. Durch dieses Datenbetriebssystem können verschiedene Anwendungen gleichzeitig auf die Daten in HDP zugreifen. Das nutzt HDP 2.2 aus und bietet mit Spark zum Beispiel ein In-Memory-Machine-Learning-Modul an.
Ein weiteres Modul ist Apache Kafka: Ein skalierbares, schnelles und fehlertolerantes Messaging System, das eben auch mit großen Mengen an Nachrichten zurechtkommt.
Schließlich sorgen Apache Storm für Echtzeit-Streaming von Daten und Apache Ranger, vormals Apache Argus, für die Sicherheit beim Zugriff auf die Daten.
Weitere Informationen unter http://hortonworks.com/. [tib]
