Logo von iX

Suche
Robert Lippert

Big Data: Apache Sqoop neues Top-Level-Projekt der Apache Software Foundation

Die Apache Software Foundation (ASF) hat das Datentransfer-Tool Sqoop als neues Top-Level-Projekt angenommen. Es ist vor allem für den Einsatz in Big-Data-Umgebungen interessant, da es einen Datenaustausch zwischen dem NoSQL-Framework Apache Hadoop und SQL-Datenbanken erlaubt. Knapp ein Jahr nach der Aufnahme in den Apache Incubator habe das Projekt bewiesen, dass seine Community und die Entwicklung selbst gut zum leistungsorientierten Prozess der ASF passen würden, so die Begründung der Foundation.

Anzeige

Die Entwicklung von Sqoop geht auf das Jahr 2009 zurück, in dem Entwickler Aaron Kimball Sqoop als Hadoop-Modul für den Datenbank-Import in Hadoop-Cluster vorschlug. Später wurde Sqoop in ein eigenes Projekt ausgegliedert, um die Entwicklung der Technik schneller vorantreiben zu können. Im Juni 2011 wurde es schließlich in den Apache Incubator aufgenommen. Letzterer gilt als Vorstufe für eine mögliche Aufnahme als Top-Level-Projekt und bietet die Gelegenheit, sich als Projekt und angeschlossener Community unter den Richtlinien der ASF zu bewähren.

Hadoop stellt die Grundlage diverser Hadoop-Distributionen, wie sie beispielsweise HortonWorks und Cloudera anbieten, sowie verschiedener kommerzieller Big-Data-Angebote unter anderem von IBM. Zahlreiche Anwender haben Hadoop-basierte Lösungen im Produktiveinsatz. (rl)

Kommentieren

Themen:

Anzeige
  1. Big Data: Apache Software Foundation erhebt Kylin zum Top-Level-Projekt

    Big Data: Apache Software Foundation erhebt Kylin zum Top-Level-Projekt

    Apache Kylin ist eine OLAP-Engine, die die in der Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen will.

  2. Big Data: Apache Apex erreicht Top-Level-Status

    Big Data: Apache Apex erreicht Top-Level-Status

    Die Köpfe hinter der Stream- und Batch-Processing-Plattform des Hadoop-Frameworks konnte in gut neun Monaten allen Forderungen an ein Top-Level-Projekt nachkommen.

  3. Big Data: Apache Ignite erhält Top-Level-Status

    Big Data: Apache Ignite erhält Top-Level-Status

    Das In-Memory-Computing-System für Berechnungen und Transaktionsvorgänge in Echtzeit hat den Incubator der Apache Software Foundation verlassen.

  4. Big Data: Zeppelin wird Top-Level-Projekt der Apache Software Foundation

    Big-Data-Projekt Zeppelin wird Top-Level-Projekt der Apache Software Foundation

    Die sich in den Browser integrierende Benutzeroberfläche verfügt über Notebook-ähnliche Fähigkeiten für Analysten und Datenwissenschaftler.

  1. Federlesen #19: 15 Jahre Apache Software Foundation

    Wer Software entwickelt, braucht einen langen Atem, Disziplin und gemeinsame Ziele. Die Apache Software Foundation gibt es seit über 15 Jahren – Zeit für einen Rückblick.

  2. Federlesen #18: Wie aktuell und trotzdem nachhaltig sind Apache-Produkte?

    Java 8 liegt seit einigen Monaten vor, und mit Java 8u20 wurden Mitte August neben weiteren Fehlerkorrekturen die ersten Funktionserweiterungen veröffentlicht. Mit Blick auf die Apache-Projekte sei deswegen der Stand der Aktualisierung auf Java 8 und etwaige Hindernisse hierbei untersucht.

  3. Apache Kylin: OLAP im Big-Data-Maßstab

    Kylin-Architektur mit Komponenten aus dem Hadoop-Ökosystem (Abb. 2)

    Das von eBay entwickelte Kylin will die in der klassischen Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen. Ein Überblick zur Architektur und zu Prozessen sowie ein paar nützliche Hinweise bei der Generierung von Cubes.

  1. Acer Predator 21 X: 21-Zoll-Notebook mit krummem Display und mechanischen Tasten

    Acer Predator 21X: 21-Zoll-Notebook mit krummem Display und mechanischen Tasten

    Acer hat auf die IFA ein Gaming-Notebook mitgebracht, das das Wettrüsten in der Nische auf die Spitze treibt: Ein gebogenes 21-Zoll-Display, zwei GTX1080, fünf Lüfter, sechs Lautsprecher und ein Fenster zum Reinschauen.

  2. Gestohlene Dropbox-Passwörter offenbar echt

    Gestohlene Dropbox-Passwörter offenbar echt

    Die jetzt aufgetauchten Dropbox-Passwörter sind anscheinend echt; ein Test verrät, ob das eigene dabei war. Wer in den letzten Jahren sein Passwort für den Cloud-Speicherdienst nicht geändert hat, sollte das schleunigst tun.

  3. Acer Swift 7: Das "dünnste Notebook der Welt"

    Acer Swift 7: Das "dünnste Notebook der Welt"

    Gerade mal einen Zentimeter dick und 1,1 Kilogramm leicht ist das Acer Swift 7. Im kompakten Alu-Gehäuse stecken ein 13-Zoll-Display und ein brandneuer Intel Core-Prozessor. Zusätzlich bringt Acer vier weitere Notebooks der neuen Swift-Serie zur IFA mit.

  4. Neue Samsung-Smartwatches Gear S3 frontier und Gear S3 classic mit Tizen

    Neue Samsung-Smartwatches Gear S3 frontier und Gear S3 classic mit Tizen

    Samsung hat die Smartwatch Gear S3 in zwei Varianten vorgestellt: Die S3 frontier ist auf Robustheit ausgelegt, während die classic eher zurückhaltend gestaltet ist. Beide Modelle sind wasserdicht, haben jede Menge Sensoren an Bord und laufen mit Tizen.

Anzeige