Server in den Wolken » db

Überblick skalierbare NoSQL vs. skalierbare SQL Lösungen

Philipp Strube — Mon, 01 Mar 2010 09:13:41 +0000

Den Überblick über die verschiedenen Lösungen zu behalten ist gerade bei jungen Technologien oftmals ein anstrengendes Unterfangen. Schön deshalb wenn sich jemand anderes die Arbeit macht und eine Übersicht schafft und man selbst davon profitieren kann. Gute Sache dieses Internet.

High Performance Scalable Data Stores von Rick Cattell

Im seinem Papier geht Rick allerdings nicht nur auf die verschiedenen NoSQL Vertreter ein, sondern hat ebenfalls eine Liste an relationalen Datenbanken die sich das Thema Skalierbarkeit auf die Fahne geschrieben haben.

Neben einer Vorstellung der verschiedenen Lösungen gibt es ausserdem Beispiele zu Anwendungsgebieten der einzelnen Vertretergruppen.

Behandelt werden:

Key-Value Stores

Redis
Scalaris
Tokyo Tyrant / Cabinet
Voldemort
Riak

Document Stores

SimpleDB
CouchDB
MongoDB

Extensible Record Stores

HBase
HyperTable
Cassandra

Scalable Relational Databases

MySQL Cluster
ScaleDB
Drizzle
VoltDB

via highscalability.com

Ausführliche Einführung zur Arbeit mit CouchDB

Philipp Strube — Fri, 12 Feb 2010 16:14:48 +0000

Auf heise Developer ist ein Artikel erschienen der sehr ausführlich in die Arbeit mit CouchDB einführt.

Dabei wird sowohl einleitend auf die Unterschiede der sogenannten NoSQL Datenbanken im Vergleich mit den relationalen Vertretern der Datenbankwelt eingegangen, als auch die Einrichtung und die ersten Schritte mit CouchDB erklärt.

Besonders gut gefällt mir dabei das Fazit des Autors Rudolf Jansen. Denn er vertritt dort die Ansicht, dass NoSQL Datenbanken gar nicht antreten um relationale Datenbanken zu verdrängen. Viel mehr sollte man die beiden Optionen als Ergänzungen nebeneinander verstehen und je nach Einsatzzweck auf die Stärken des einen oder anderen Systems zurückgreifen.

Vor dem Hintergrund, dass die meisten NoSQL Systeme noch relativ jung sind, bleibt natürlich die Unsicherheit, ob denn die gewählte Datenbank auch in einigen Monaten oder Jahren noch existieren wird. Zwar sind die meisten Open Source, aber die wenigsten Webentwickler werden ein Interesse daran haben, nebenher mehrere 10.000 Zeilen Datenbankquelltext pflegen zu müssen.

CouchDB scheint allerdings hier durchaus brauchbar aufgestellt zu sein. Das System existiert immerhin schon seit 2005 und die dahinter stehende Firma Relax Inc. ist mitlerweile mit einer durchaus beruhigenden Summe Risikokapital (2 Millionen US-Dollar) ausgestattet.

CouchDB – angesagter Vertreter der “NoSQL”-Datenbanken

Google App Engine stellt auf neuen, besseren Datastore um

Philipp Strube — Fri, 18 Sep 2009 14:16:09 +0000

Auf dem Google App Engine Blog findet sich ein bemerkenswert ausführlicher Artikel zum Umstieg auf den verbesserten Datastore. Dabei dreht es sich vor allem um die verbesserte Replikation zwischen verschiedenen Rechenzentren. Teilweise ähnelt der Artikel dem Vortrag den Ryan Barett bereits auf der Google I/O Konferenz gehalten hat. Aber auch wenn man den Vortrag schon kennt ist der Blogartikel lesenswert.

Ganz ohne Ausfall wird die Umstellung des Datastore verständlicherweise nicht sein. Entwickler die App Engine nutzen finden die geplanten Umstellungszeiten am Ende des Artikels.

Open Source Key-Value Store Scalien Keyspace in 1.1 erschienen

Philipp Strube — Fri, 11 Sep 2009 07:00:49 +0000

Keyspace ist ein vom Startup Scalien entwickelter konsistent replizierter und ausfallsicherer Key-Value Speicher. Die Software ist gerade in Version 1.1 erschienen. Zeit sich das ganze mal etwas genauer anzusehen.

Als Open Source Software kann der Quelltext jederzeit eingesehen und angepasst werden. Zum Zugriff sollen verschiedene Bibliotheken angeboten werden. Zur Zeit ist lediglich eine für C verfügbar. Laut Dokumentation sind allerdings weitere für Python, PHP und Java geplant. Interessierte können aber sicher mithelfen. Stichwort Open Source.

Neben der Möglichkeit über ein eigenes Protokoll auf die Datenbank zuzugreifen, gibt es auch die Möglichkeit alle Funktionen über HTTP aufzurufen. Was allerdings auf Grund des Overheads nur für die Entwicklung empfohlen wird. Hier allerdings, kann es durchaus Vorteile haben mal eben per Webbrowser in die Datenbank “gucken” zu können.

Das Bild rechts zeigt die Vorteile auf einen Blick. Neben der konsistenten Replikation, der Hochverfügbarkeit und Fehlertoleranz möchte Keyspace insbesondere durch hohe Performance und den einfachen Upgradepfad überzeugen.

Wie sich Keyspace im Vergleich mit anderen Key-Value Datenbanken schlägt muss sich noch zeigen. Vom Ansatz her wirkt das ganze aber sehr interessant.

Gegründet wurde Scalien, das Startup hinter Keyspace von Marton Trencseni und Attila Gazso. Marton bloggt unter Bytepawn.com.

Podcast mit vielen Infos zu Facebook Cassandra und allgemein ähnlichen Datenbanken

Philipp Strube — Thu, 02 Jul 2009 09:12:09 +0000

Der techZING Podcast hat in der achten Folge unter dem Titel “Dude where’s my database?” der wohl an den Film Ey Mann wo ist mein Auto angelehnt zu sein scheint wirklich hörenswerte Informationen zum Thema Facebook Cassandra und ähnlichen Datenbanken und Ansätzen. Darüber hinaus geht es am Anfang noch um Cloud Computing vs. Cloud Hosting, also wo sind da eigentlich die Unterschiede im Detail und auch um unterschiedliche Ansätze der Open Source Entwicklung.

Einfach mal reinhören. Hier gehts zum Podcast.

Linktipp: Neo4J – a Graph Database that kicks butts

Philipp Strube — Mon, 15 Jun 2009 09:27:53 +0000

Auf High Scalability ist ein Artikel zur Neo4J erschienen den ich meinen Lesern hiermit empfehlen möchte. Neo4J ist eine sogenannte Graph Datenbank. Was das genau bedeutet können der Artikel oder die Neo4J Webseite viel besser als ich erklären.

Neben der Erklärung enthält der Artikel ausserdem noch die Featureliste der Datenbank und ein paar Worte zum Vergleich zwischen Neo4J und Hadoop.

Neo4j – a Graph Database that Kicks Buttox

LightCloud: Key Value Store Datenbank von Plurk

Philipp Strube — Fri, 06 Mar 2009 20:15:40 +0000

Ich hab ja schon das ein oder andere mal auf Key Value Store Datenbank als alternative verwiesen. Gerade für Cloud Computing eignen sich diese, da diese im Zweifelsfall einfach durch das hinzufügen von Nodes erweitert werden können. Dabei steigt sowohl der Speicherplatz als auch die Geschwindigkeit mit jeder Node. Etwas wovon man bei relationalen Datenbanken nur träumen kann.

Genauso wie nicht auf jede Frage die Antwort RDBMS lautet, lautet sie aber genausowenig Key Value Store. Im Zweifelsfall kommt es wie so oft darauf an, das richtige Tool für den Job zu finden.

Als Möglichkeit möchte ich deshalb hier kurz auf LightCloud verweisen. Eine Key Value Store Datenbank entwickelt von den Jungs und Mädels von Plurk. Beeindruckende Eckdaten hat LightCloud jedenfalls:

Great performance (comparable to memcached!)
Can store millions of keys on very few servers – tested in production
Scale out by just adding nodes
Nodes are replicated via master-master replication. Automatic failover and load balancing is supported from the start

Das ganze ist unter der BSD Lizenz als Open Source veröffentlicht und hier zu finden.

via HighScalability

Linktipps 6

Philipp Strube — Sun, 01 Mar 2009 20:35:28 +0000

Auch diesen Sonntag wieder, ein paar stanende Links zum Start in die neue Woche.

Linktipps 5

Philipp Strube — Wed, 25 Feb 2009 20:56:17 +0000

Auf Grund des Höhepunkts der fünften Jahreszeit hier im Rheinland etwas verspätet. Aber wie heisst es so schön? Besser spät als nie.

Soundcloud: Musik in der Wolke

Philipp Strube — Sun, 01 Feb 2009 17:09:02 +0000

Soundcloud ist nun wahrlich keine Neuigkeit mehr. Soundcloud beschreibt die eigenen Funktionen mit den drei Worten empfangen, senden und verteilen. Dabei geht es wie der Name vermuten lässt natürlich um Musik.

Man kann übersichtlich neue Musik der Künstler mit denen man innerhalb des Dienstes verbunden ist hören, man kann eigene Musik an andere senden und Soundcloud bietet zusätzlich noch einen Player um die eigene Musik in andere Seiten einzubinden und dort anhörbar zu machen. Die Versandfunktion will das versenden von großen Dateien erleichtern. Selbst ausprobiert habe ich den Dienst nicht. Bin aber auch wahrlich kein Musiker.

Warum ich jetzt über Soundcloud schreibe ist dieser Blogpost. Bei Soundcloud kam es im Zuge eines zur Behebung von Geschwindigkeitsproblemen ohnehin geplanten Serverumzuges zu einem Fehler mit den Festplatten des Datenbankservers. Dadurch ging die Seite offline und weil man sich gerade im Umzug befand blieb sie dies auch bis der Umzug abgeschlossen war. Für geschlagene zwölf Stunden.

Solche Vorfälle passieren immer wieder. Ob jetzt menschliches Versagen oder einfach Pech die Ursache dafür waren ist eigentlich nebensächlich. Fakt ist, sowas darf nicht passieren wenn man ein Unternehmen aufbauen will.

Das Problem, die Skalierung der eigenen Plattform mit den Anforderungen ist schon tausendmal gelöst worden. Doch trotzdem muss es jedes Startup für sich selbst neu lösen. Warum? Weil die Hostingunternehmen nicht in der Lage sind funktionierende Lösungen zu schaffen um dieses Problem zu lösen.

Man ruht sich lieber auf seinen Lorbeeren aus und übertrifft sich gegenseitig mit Absenz jeglicher Innovation.