Server in den Wolken » facebook

Friendfeed / Facebook stellt Tornado Web-Server unter Apache Open Source Lizenz

Philipp Strube — Fri, 11 Sep 2009 09:00:07 +0000

Das Echtzeitweb ist in aller Munde. Im Schatten von Twitter überzeugte Friendfeed lange Zeit mit technischer Überlegenheit. Leider ohne die überwältigenden Nutzerzahlen. Jetzt hat sich Facebook Friendfeed geschnappt. Wahrscheinlich, so vermutet man, hauptsächlich wegen Technologie und Team.

Als eines der ersten Resultate daraus ist jetzt der Tornado Web Server unter der Apache Open Source Lizenz veröffentlicht worden. Tornado ist eine Kobination aus Web Server und Tools um effizient eine Vielzahl an offenen Verbindungen verwalten zu können. Mit diesem klaren Ziel vor Augen, sind die Benchmarkergebnisse auch durchaus vielversprechend. Ca. vierfache Leistung gegenüber anderen Python Framework/Web-Server Kobinationen. Tornado selbst ist übrigens auch in Python geschrieben.

Alle technischen Details und Informationen zu Tornado findet man in der Dokumentation. Auch Bret Taylor, einer der Friendfeed Gründer, hat auf seinem Blog einen ausführlichen Artikel.

Update:

Bret Teylor steht der Gilmor Gang Rede und Antwort zu Tornado.

Podcast mit vielen Infos zu Facebook Cassandra und allgemein ähnlichen Datenbanken

Philipp Strube — Thu, 02 Jul 2009 09:12:09 +0000

Der techZING Podcast hat in der achten Folge unter dem Titel “Dude where’s my database?” der wohl an den Film Ey Mann wo ist mein Auto angelehnt zu sein scheint wirklich hörenswerte Informationen zum Thema Facebook Cassandra und ähnlichen Datenbanken und Ansätzen. Darüber hinaus geht es am Anfang noch um Cloud Computing vs. Cloud Hosting, also wo sind da eigentlich die Unterschiede im Detail und auch um unterschiedliche Ansätze der Open Source Entwicklung.

Einfach mal reinhören. Hier gehts zum Podcast.

Linktipps 12

Philipp Strube — Sun, 19 Apr 2009 12:47:36 +0000

Wie immer gilt, Linktipps gerne per E-Mail oder Twitter.

Linktipps 11

Philipp Strube — Sun, 12 Apr 2009 17:26:33 +0000

Linktipps elf. Viel Spaß beim lesen.

Wie Facebook in Zukunft besser mit 500GB Photouploads pro Tag zurecht kommen will

Philipp Strube — Mon, 06 Apr 2009 10:15:56 +0000

Niall Kennedy beschreibt ausführlich den Haytack getauften Photospeicher, den Facebook einsetzen will um die Hostingkosten für die immense Menge an Photos die Nutzer jeden Monat auf der Plattform hochladen zurechtzukommen. Haystack ist dabei eine Eigenentwicklung und bekam seinen Namen von der Idee das einzelne Photo, also Quasi die Nadel im Heuhaufenzu schneller finden.

Dabei soll Haytack als Hauptfeature die Anzahl der I/O Requests die pro Photoaufruf nötig sind von drei auf einen einzigen reduzieren. Darüber hinaus beherrscht Haystack aber auch direkt eigene Cachingfunktionen, die es Facebook ermöglichen die hohen Kosten für Content Distribution Netzwerke drastisch zu reduzieren.

Folgende Präsentation hat ebenfalls noch Details zum System.

Facebook Casandra

Philipp Strube — Thu, 12 Feb 2009 11:59:44 +0000

Wer sich schon immer gefragt hat wie man 25TB an Nachrichten für über 100 Millionen Nutzer speichert kann sich einfach mal dieses Video (wieso kann ich Facebook Video nicht embedden?) ansehen. Dort wird Facebooks Antwort auf die Frage vorgestellt. Wer Text bevorzugt findet diesen auch auf James Hamiltons Blog.

via Highscalability

Panel zum Thema Software auf der DLD

Philipp Strube — Wed, 28 Jan 2009 15:50:02 +0000

Heute ist wohl der Tag der Videos. Auf der DLD, die vor kurzem zu Ende gegangen ist, gab es ein Panel zum Thema Software. Dort wurde unter anderem über die Wichtigkeit von Plattformen wie Facebook F8, OpenSocial oder auch der iPhone oder Android Plattform für die Zukunft von Softwareentwicklung diskutiert.

Natürlich ist Cloud Computing auch ein Thema. Vor allem natürlich in der Form von Software as a service.

Wer ne gute Stunde Zeit übrig hat sollte sich das Video mal ansehen. Dieses und viele andere DLD-Videos findet man übrigenshier.

Facebook optimiert memcache

Philipp Strube — Tue, 16 Dec 2008 16:02:17 +0000

Auf highscalability.com, einem meiner Lieblingsblogs zum Thema Skalierung von Webanwendungen, ist eine sehr lesenswerte Zusammenfassung zu finden wie Facebook es schafft sechs mal so viele memcache-Anfragen wie normal zu bewältigen. Dabei sind nicht nur Veränderungen an memcache selbst, sondern auch am Linux Kernel Teil der Strategie. Wirklich Pflichtlektüre.

Google App Engine und Facebook F8 in fünf Minuten

Philipp Strube — Wed, 20 Aug 2008 22:30:15 +0000

Auf dem letzten Webmontag in Bonn habe ich versucht in fünf Minuten etwas zum Thema Google App Engine und Facebook F8 zu sagen. Versucht deshalb, weil es mir nicht ganz gelungen ist. Also ich habe etwas gesagt, aber es hat wesentlich länger als 5 Minuten gedauert. Ich gelobe Besserung.

Für alle die es interessiert, hier das Video meines kurzen Vortrags.

Am Ende des Videos entwickelt sich auch noch eine kleine Diskussion mit durchaus interessanten Ansätzen. Wer jetzt nach dem Video der Ansicht ist, dass ich an meinem Vortragsstil arbeiten muss dem gelobe ich Besserung. Zu meiner Verteidigung möchte ich allerdings noch vorbringen, dass der Vortrag relativ spontan kurz vor dem Webmontag entstanden ist, weil noch keine anderen Vorträge eingetragen waren. Schön spontan wie die Webmontage in Bonn bisher aber alle waren haben sich doch noch 3 weitere Vorträge gefunden.

Der nächste Webmontag in Bonn ist übrigens am 15. September 2008 im Cafe Podcast.