Apache Hadoop für Windows Azure - MapReduce mit C#

Fri, 27 Apr 2012 08:33:00 +0100

Nachdem ich in meinem Blog Post “Apache Hadoop für Windows Azure - MapReduce mit JavaScript” einen MapReduce-Algorithmus mit JavaScript vorgestellt hatte, möchte ich diesmal das Ganze mit Microsoft Bordmitteln umsetzen.

Auch hier kommt wieder die Developer Preview der Apache Hadoop-based Services for Windows Azure zum Einsatz.

Hadoop Streaming

MapReduce-Algorithmen lassen sich, dank der Streaming-Funktionalität des Apache Hadoop Frameworks, in jeder Programmiersprache umsetzen, die auf dem zu Grunde liegenden Betriebssystem ausführbar ist.

Hadoop Streaming wurde standardmäßig für Text-Datenströme ausgelegt, obwohl in der Version 0.21.0 auch Binärströme implementiert wurden.

Apache Hadoop für Windows Azure - MapReduce mit JavaScript

Tue, 14 Feb 2012 07:56:00 +0100

Meine Reise mit der Developer Preview des neuen Cloud Speicherdienstes “Apache™ Hadoop™-based Services for Windows Azure” geht weiter:

Diesmal stehen die Interaktive Konsole und ein einfacher MapReduce-Algorithmus mit JavaScript auf dem Plan.

Im letzten Blog Post “Apache Hadoop Dienste für Windows Azure (Developer Preview)” hatte ich von der Erstellung eines eigenen Hadoop Clusters berichtet.
Nachdem dieses dann einsatzbereit war, wollte ich mich auf den Weg zu ein wenig Quellcode machen.

Doch eine grundlegende Frage beschäftigte mich:

MapReduce on Sascha Dittmann

Apache Hadoop für Windows Azure - MapReduce mit C#

Hadoop Streaming

Apache Hadoop für Windows Azure - MapReduce mit JavaScript