Twitter gibt seinen Datenbagger als Open Source frei

Entwicklung Die Betreiber des Microblogging-Dienstes Twitter hat die Bereitstellung seines Verteiler-Tools für große Datenmengen, "Crane", unter einer Open Source-Lizenz angekündigt. Die Software sorgt für die Übertragung von Daten von einer MySQL-Datenbank nach Hadoop. Bei letzterem handelt es sich um eine Plattform, die große Informationsmengen in Clustern weiterverarbeiten kann. Ihre Basis stammt von Google und Facebook setzt sie beispielsweise zur Verteilung der großen Datenmengen ein, die das Social Network generiert.

Bei Twitter sorgt Crane dafür, dass mit Hadoop die große Zahl an Postings durchsuchbar gemacht werden kann. Die Beiträge der Nutzer werden sofort analysiert und Anwender können so in Echtzeit Nachrichten zu bestimmten Schlüsselwörtern anzeigen lassen.

Dafür muss das Hadoop-System beständig mit den Daten versorgt werden, die erst einmal in verteilten MySQL-Datenbanken abgelegt werden. Crane bildet bei dem Dienst so eine wichtige Schnittstelle zwischen den Speicher- und Verarbeitungssystemen, was auch Betreibern anderer Webservices, die große Datenmengen zu verarbeiten haben, helfen könnte.

WinFuture bei Twitter: Twitter.com/WinFuture
Diese Nachricht empfehlen
Jetzt einen Kommentar schreiben


Alle Kommentare zu dieser News anzeigen
Beliebte X/Twitter-Downloads
Jetzt als Amazon Blitzangebot
Ab 08:30 Uhr Goldge 24Pcs Schlüsselanhänger Taschenlampe Mini Lampe 4cmGoldge 24Pcs Schlüsselanhänger Taschenlampe Mini Lampe 4cm
Original Amazon-Preis
14,99
Im Preisvergleich ab
?
Blitzangebot-Preis
13,59
Ersparnis zu Amazon 9% oder 1,40
Tipp einsenden
❤ WinFuture unterstützen
Sie wollen online einkaufen? Dann nutzen Sie bitte einen der folgenden Links, um WinFuture zu unterstützen: Vielen Dank!