Logo von iX

Suche
preisvergleich_weiss

Recherche in 1.516.035 Produkten

Robert Lippert

Big Data: Apache Sqoop neues Top-Level-Projekt der Apache Software Foundation

Die Apache Software Foundation (ASF) hat das Datentransfer-Tool Sqoop als neues Top-Level-Projekt angenommen. Es ist vor allem für den Einsatz in Big-Data-Umgebungen interessant, da es einen Datenaustausch zwischen dem NoSQL-Framework Apache Hadoop und SQL-Datenbanken erlaubt. Knapp ein Jahr nach der Aufnahme in den Apache Incubator habe das Projekt bewiesen, dass seine Community und die Entwicklung selbst gut zum leistungsorientierten Prozess der ASF passen würden, so die Begründung der Foundation.

Anzeige

Die Entwicklung von Sqoop geht auf das Jahr 2009 zurück, in dem Entwickler Aaron Kimball Sqoop als Hadoop-Modul für den Datenbank-Import in Hadoop-Cluster vorschlug. Später wurde Sqoop in ein eigenes Projekt ausgegliedert, um die Entwicklung der Technik schneller vorantreiben zu können. Im Juni 2011 wurde es schließlich in den Apache Incubator aufgenommen. Letzterer gilt als Vorstufe für eine mögliche Aufnahme als Top-Level-Projekt und bietet die Gelegenheit, sich als Projekt und angeschlossener Community unter den Richtlinien der ASF zu bewähren.

Hadoop stellt die Grundlage diverser Hadoop-Distributionen, wie sie beispielsweise HortonWorks und Cloudera anbieten, sowie verschiedener kommerzieller Big-Data-Angebote unter anderem von IBM. Zahlreiche Anwender haben Hadoop-basierte Lösungen im Produktiveinsatz. (rl)

Kommentieren

Themen:

Anzeige
  1. Big Data: Apache Software Foundation erhebt Kylin zum Top-Level-Projekt

    Big Data: Apache Software Foundation erhebt Kylin zum Top-Level-Projekt

    Apache Kylin ist eine OLAP-Engine, die die in der Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen will.

  2. Big Data: Apache Apex erreicht Top-Level-Status

    Big Data: Apache Apex erreicht Top-Level-Status

    Die Köpfe hinter der Stream- und Batch-Processing-Plattform des Hadoop-Frameworks konnte in gut neun Monaten allen Forderungen an ein Top-Level-Projekt nachkommen.

  3. Apache Arrow: Neues Top-Level-Projekt der Apache Software Foundation

    Apache Arrow: Neues Top-Level-Projekt der Apache Software Foundation

    Apache Arrow wird das Potenzial bescheinigt, ähnliche Bedeutung wie die Big-Data-Projekte Hadoop, Spark und Kafka erlangen zu können. Denn es könnte zum Standard für spaltenorientierte In-Memory-Datenverarbeitung werden.

  4. Apache Spot: Neues Open-Source-Projekt zur Cybersecurity

    Apache Spot: Neues Open-Source-Projekt zur Cybersecurity

    Big Data und Machine Learning zum Schutz vor Cybersecurity-Problemen – das soll sich im neuen Apache-Projekt Spot wiederfinden, das Intel und Cloudera diese Woche vorgestellt haben.

  1. Apache Drill – SQL für alles

    Apache Drill ? SQL für alles !?

    Die Analyse großer Datenmengen ermöglicht eine Vielzahl neuer Projekte – sofern man die nötigen Tools beherrscht. Apache Drill soll als Vermittler denjenigen helfen, die sich nicht von SQL als Abfragesprache verabschieden wollen.

  2. Federlesen #19: 15 Jahre Apache Software Foundation

    Wer Software entwickelt, braucht einen langen Atem, Disziplin und gemeinsame Ziele. Die Apache Software Foundation gibt es seit über 15 Jahren – Zeit für einen Rückblick.

  3. Apache Kylin: OLAP im Big-Data-Maßstab

    Kylin-Architektur mit Komponenten aus dem Hadoop-Ökosystem (Abb. 2)

    Das von eBay entwickelte Kylin will die in der klassischen Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen. Ein Überblick zur Architektur und zu Prozessen sowie ein paar nützliche Hinweise bei der Generierung von Cubes.

  1. 1.000.000 km im Mercedes 200 D

    Mercedes

    Die Baureihe W 124 brachte Daimler nach anfänglichen Problemen einen Ruf für Dauerhaltbarkeit. Michael Nickl fährt so einen. Seit 1987 arbeitet der bei Daimler und fährt Tag für Tag mit seinem 200er Diesel. Seit 1992 nun schon über eine Million Kilometer, Tendenz steigend. Ein Vorbild für nachhaltige Auto-Nutzung

  2. Toyota röntgt Lithium-Ionen-Akkus

    Elektroautos, alternative Antriebe

    Um Kapazität und Lebensdauer von Lithium-Ionen-Speichern zu verbessern, hat Toyotas Forschungsabteilung eine Methode entwickelt, mit der sich das Verhalten von Lithium-Ionen beim Laden und Entladen von Lithium-Ionen-Batterien in Echtzeit direkt beobachten lässt

  3. Stephen Hawking: Künstliche Intelligenz und Automation bedrohen Arbeitsplätze

    Stephen Hawking

    Der britische Physiker Stephen Hawking sieht durch das wachsende Potential von künstlicher Intelligenz und Automationstechnik Arbeitsplätze bedroht. Die flächendeckende Verfügbarkeit des Internets mache Ungleichheit zudem viel spürbarer.

  4. Audi Q3, Mazda CX-5 und VW Tiguan im Vergleichstest

    Mit seiner Skyactiv-Technologie verspricht der Mazda CX-5 niedrige Verbräuche und vorbildliche Emissionseigenschaften. Gut ausgestattet ist er auch und könnte damit eine günstige Alternative zu Audi Q3 und VW Tiguan sein. Wie schlagen sich die drei Allrad-Diesel um die 175 PS?

Anzeige