Server in den Wolken

Diese Frage stellt @roidrage auf dem Daily AWS Wtf Blog. (Super Blog Name btw.)
Demnach resultierte eine Denial of Service Attacke bei einem auf EC2 gehosteten Dienst in extrem langsamen Zugriffen auf die EBS Volumes. Was die Vermutung nahe legt, dass die gleiche Netzwerkverbindung für externe Verbindungen und für den Zugriff auf die EBS Volumes genutzt wird. Ob dies nun wirklich so ist, oder nicht, weiss ich allerdings auch nicht…
Wie der Artikel aber schon sagt, kann man nur hoffen, dass die Vermutung sich nicht bewahreitet oder zumindest dieser Designfehler hoffentlich bald …

Amazon der Platzhirsch im Infrastructure as a Service Markt hat bisher keine Zahlen veröffentlicht. Nicht technischer und auch nicht finanzieller Natur. Wo offizielle Zahlen fehlen ist natürlich Raum für Spekulationen und nach der Analyse der IDs durch Guy Rosen hat Randy Bias jetzt versucht an Hand verschiedener Annahmen den EC2 Umsatz abzuschätzen.
Einige Eckdaten:

ca. 40.000 Server +/- 10.000
2 U Dual-Socket wahrscheinlich 8 Kern Server (Rackable S2108)
8 x 500GB SATA Festplatten pro Server
Server verteilt auf 6 Availability-Zones
6.700 pro Zone
16 Server pro Rack
417 Racks pro Zone, 2500 insgesamt
200.000 m² Rechenzentren insgesamt

Beeindruckende Zahlen. …

Zu behaupten, dass Amazon nicht sonderlich viele Informationen zu den Amazon Web Services veröffentlicht ist eine Untertreibung aus dem Lehrbuch.
Was natürlich niemanden davon abhält Untersuchungen an- und Vermutung aufzustellen.
Amazon EC2 erlaubt es Kunden stundenweise virtuelle Instanzen zu mieten. Soweit so kurz zur Einführung. Diese Instanzen bekommen einzigartige IDs zugewiesen. Guy Rosen ist bei den IDs die er zugewiesen bekommen hat ein Schema aufgefallen. Neugierig hat er daraufhin ein paar Versuche gestartet und kam dabei zu dem Ergebnis, dass Amazon in einer Verfügbarkeitszone an einem Tag im September 2009 50.000 neue …

Einige Funktionen der Amazon Web Services waren bisher auf die amerikanischen Rechenzentren beschränkt. Dies war aber nur vorübergehend. Ab sofort sind zumindest folgende Funktionen auch in Europa verfügbar.

Amazon SimpleDB – Highly available and scalable, low/no administration structured data storage.
Amazon CloudWatch – Monitoring for the AWS cloud, starting with providing resource consumption (CPU utilization, network traffic, and disk I/O) for EC2 instances.
Elastic Load Balancing – Traffic distribution across multiple EC2 instances.
Auto Scaling – Automated scaling of EC2 instances based on rules that you define.

Damit erhöht Amazon weiter die Meßlatte für Cloud …

Einmalpasswörter versprechen Sicherheit durch die Kombination zweier bekannter Eingaben, nämlich Benutzername und Passwort und einer Dritten Zeichenfolge, dem Einmalpasswort. Dieses Einmalpasswort ändert sich in gewissen Zeitabständen und ist wenn nichts schief läuft nicht vorraussagbar. Normalerweise wird das Einmalpasswort auf einem kleinen Gerät angezeigt, von diesem kann man es dann ablesen und mit Benutzername und Passwort eingeben.
Ein solches Verfahren hat Amazon jetzt für die Amazon Web Services eingeführt. Auf diese Weise soll unberechtiger Zugriff auf die AWS Konsole erschwert werden.
Um das Verfahren einzusetzen muss man zuerst das Gerät kaufen, und dann …

Vor ca. einer Woche hat das Amazon Cloud Computing Featurewunder einen neuen Sprössling bekommen. Dieser hört auf den wundervollen Namen Amazon Elastic MapReduce. MapReduce ist die Bezeichnung für ein Verfahren um Informationen aus großen Datenmengen zu filtern. Dabei werden die Informationen in kleine möglichst gleichgroße Einheiten aufgeteilt und auf verschiedenen Arbeitern bearbeitet. Sobald ein Arbeiter fertig ist, schickt er seine Ergebnisse an eine Sammelstelle. Diese bündelt die Informationen der einzelnen Arbeiter und gibt das Ergebnis zurück.
Google verwendet ein ähnliches System für die Google Suche und auch Yahoo setzt mit Hilfe …

AppScale ist laut Homepage ein Open Source Framework um Anwendungen die für Google App Engine entwickelt wurden zu betreiben. Es handelt sich dabei um ein Forschungsprojekt der University of California, Santa Barbara (UCSB), die mit Eucalyptus auch schon eine API-Kompatible Open Source Implementation einiger AWS-Produkte (EC2 und S3) anbietet.
Mit AppScale soll es danach möglich sein GAE-Anwendungen besser lokal testen zu können, als dies mit dem SDK möglich ist. Es kann ein Image für XEN heruntergeladen werden auf dem die Anwendungen dann laufen können. Aber vorsicht, zur Zeit gehen alle Daten …

Mit dem AWS Toolkit for Eclipse hat Amazon Java-Entwicklern ein mächtiges Tool an die Hand gegeben.
Es ist damit möglich die Entwicklung von Java-Anwendungen auf und für EC2 direkt aus Eclipse heraus zu steuern. Dies umfasst sowohl Debugging der Anwendung während der Entwicklung, als auch die Kontrolle der laufenden Instanzen.
Damit baut Amazon konsequent weiter seine Vormachtstellung in Sachen Iaas aus und versucht das große Problem des hohen Administrationsaufwands etwas einzudämmen indem den Entwicklern gute Tools an die Hand gegeben werden. Trotzdem darf man natürlich nicht vergessen, dass Tools immer nur so …

Amazon baut weiter fleißig am Iaas Angebot EC2. Neuester Streich ist die Möglichkeit gegen eine einmalige Zahlung Instanzen zu reservieren. Für diese sinkt dann darüber hinaus auch noch die Nutzungsgebühr. Weiterhin gilt aber, so lange die Instanzen nicht genutzt werden, fallen auch keine Kosten dafür an.
Das Angebot bietet Sicherheit für das Problem der Unsicherheit, ob Instanzen verfügbar sind wenn man welche braucht. Wenn man vorhersehbare Lastspitzen hat, kann man jetzt dafür Instanzen reservieren und hat die Sicherheit, dass man genug Ressourcen zur Verfügung hat um die Last zu bewältigen.
Die einmalige …

In einer Präsentation auf der USENIX hat S3 General Manager Alyssa Henry bekannt gegeben, dass Amazon Simple Storage Service Stand Q4 2008 40 Milliarden Objekte speichert. Dies ist eine Verdreifachung innerhalb eines Jahres.
Auch die Anzahl der AWS Entwickler stieg von 370.000 im April 2008 auf 490.000. Beeindruckende Zahlen.
In der Präsentation geht Henry ausserdem darauf ein, welche Desingprinzipien Amazon S3 zu Grunde liegen. Mehr Hintergründe zur Präsentation und die Folien hat James Hamilton auf seinem Blog gesammelt.
via Data Center Knowledge