Hier erfahrt ihr wie ihr ApacheHadoop installiert. Dazu wird die Cloudera Distribution von Hadoop verwendet.

Wir richten in diesem Beispiel einen Thrift Client ein, der seine Events über Flume ins Hadoop Filesystem (HDFS) schreibt.

Hier wird das Setup eines Thrift RPC Servers auf Basis von PHP erläutert. Der Server wird den Austausch von strukturierten und unstrukturierten Daten erlauben.

Hier erfahrt ihr wie ihr Elephant Bird installiert. Elephant Bird stellt Bibliotheken von Twitter für LZO, Thrift, Protocol Buffer und anderen Hadoop verwandten Projekten zur Verfügung.
Es enthält Tools für Pig, Hive SerDe, HBase, uvm

In diesem Beispiel entwickeln wir eine skalierbare Anwendung mit Hadoop.
Von der Datenaggregation auf den Nodes, über die Auswertung in Hadoop und den Transfer zurück soll ein kompletter Kreislauf entstehen.

Hier erfahrt ihr wie ihr den LZO Kompressionsalgorithmus in Cloudera Flume einrichtet.

Hier erfahrt ihr wie ihr die Thrift Tools auf eurem Computer installiert.

Hier erfahrt ihr wie ihr die Thrift PHP Extension auf eurem System installiert.
Es ist nicht unbedingt erforderlich die Thrift PHP Extension zu nutzen, alternativ kann man auch die mitgelieferten PHP Klassen nutzen, jedoch ist die auf C basierende PHP Extension deutlich performanter.

Skalierbare Systeme sind oft über mehrere Server verteilt und all diese Systeme sammeln Daten, die man zentral auswerten möchte.
Doch wie überträgt man diese Daten möglichst zuverlässig und schnell auf einen zentralen Server?

Ich möchte euch heute eine kleine aber sinnvolle Installationsanleitung für einen Webserver auf Debian Etch mit Apache 2.2, PHP5, MySQL5 und sendmail geben.
Dabei benenne ich alle beenötigten Pakete und erkläre schritt für schritt wie es aussehen soll ;)

Der APC ist ein Opcode Cache für PHP. Er ermöglicht zum einen Werte in einem Cache abzulegen.
Zum anderen werden PHP Scripte im Hintergrund kompiliert und können danach schneller ausgeführt werden.
Hier findet ihr die Anleitung zur Installation im System.

Apache ist sehr weit verbreitet und sicher. Jedoch plaudert er in der Grundkonfiguration ziemlich viele Informationen aus.