Big-Data-Analysen mit Google Cloud Dataflow

Cloud Dataflow und andere Big-Data-Werkzeuge

Google Cloud Dataflow ist ein Service, der die Analyse grosser Datenmengen sowohl im Batch-Modus als auch im Streaming-Modus – also nahezu in Echtzeit – erlaubt. Die Hauptmerkmale sind:
  • Voll gemanagter Service: Der Nutzer muss sich keine Gedanken um die verwendete Infrastruktur machen, kann aber jederzeit auf die eingesetzten Server und virtuellen Maschinen zugreifen.
  • Einfaches Programmiermodell: Der Entwickler übersetzt die logischen Schritte der Analyse in eine Sequenz einfacher Befehle. Die Verteilung der Last auf die einzelnen Knoten und die Op­timierung laufen im Hintergrund transparent ab.
  • Derselbe Code für Batch-Modus und Streaming: Die Unterscheidung zwischen Batch-Modus und Streaming trifft der Entwickler durch die Wahl der Datenquelle. Die Programmschritte bleiben dieselben.
  • Einfache Definition von Zeitfenstern: Dataflow hat eine Zeit­variable integriert. So lässt sich im Streaming-Modus mit nur einer Zeile Code ein Zeitfenster für die Datenanalyse definieren.
  • Extrem skalierbar: Der Entwickler kann sein Programm lokal zum Testen und Debuggen verwenden, In-Memory-Daten, Cloud Storage oder Streaming-APIs nutzen, ohne den Code verändern zu müssen. Google verspricht eine Skalierbarkeit bis in den Exabyte-Bereich hinein.
Google Cloud Dataflow ist derzeit als Private Beta verfügbar, für die man sich anmelden kann. Wer sich unter der E-Mail-Adresse Cloud_Dataflow_announce@googlegroups.com registriert, erfährt am schnellsten, wenn es etwas Neues gibt. Eine Aufzeichnung der Präsentation zu Dataflow auf der Entwicklerkonferenz Google I/O ist bei Youtube zu finden.
Seite 8/8
Auf einer Seite lesen
  1. Big-Data-Analysen mit Google Cloud Dataflow
  2. Einheitliches Datenmodell und flexiblere Abfragen
  3. Google Cloud Dataflow statt Map-Reduce?
  4. Die Schwächen von Map-Reduce-Berechnungen
  5. RDD und Spark als Big-Data-Alternativen
  6. IBM-Statement zur Datenverarbeitung in der Cloud
  7. Intel-Statement zur Datenverarbeitung in der Cloud
  8. Cloud Dataflow und andere Big-Data-Werkzeuge
Artikel drucken
Das könnte Sie auch interessieren
Excel-Tipps vor 3 Tagen
Zeit für Excel
In Microsofts Tabellenverwaltung Excel lassen sich Daten und Zeiten nicht nur schön darstellen, sondern auch berechnen. Wir zeigen Ihnen, wie das geht.
 
vor 3 Tagen
Outlook-Tipps vor 4 Tagen
Das neue Outlook
Microsoft hat seine beliebte E-Mail- und Organisations-Software Outlook komplett überarbeitet. Wir zeigen Ihnen Schritt für Schritt, wie Sie die neue Version einrichten, bedienen und optimal auf Ihre Bedürfnisse anpassen.
 
vor 4 Tagen
Mac-Tipps 24.04.2024
In schönster Harmonie - Windows auf dem Mac
Parallels Desktop entbindet unzählige Mac-Anwender davon, sich für bestimmte Aufgaben einen Windows-PC zu kaufen. Der virtuelle PC funktioniert erst noch einfacher als sein Vorbild aus der realen Welt. Mit diesem Leitfaden wird der Umgang zum Klacks.
 
24.04.2024
Stromspeicher 23.04.2024
Strom optimal speichern
Stromspeicher dienen zum Aufladen und Betreiben von Elektrogeräten. Erhältlich sind die Strombunker in unterschiedlichsten Formaten – von der Powerbank bis zu XXL-Powerstations. Online PC hilft beim Finden des optimalen Speichers für Ihre Zwecke.
 
23.04.2024