Logo von iX

Suche
Abonnieren

Tägliche Top-News bei WhatsApp, Facebook Messenger, Telegram & Insta

preisvergleich_weiss

Recherche in 1.508.171 Produkten

Robert Lippert

Big Data: Apache Sqoop neues Top-Level-Projekt der Apache Software Foundation

Die Apache Software Foundation (ASF) hat das Datentransfer-Tool Sqoop als neues Top-Level-Projekt angenommen. Es ist vor allem für den Einsatz in Big-Data-Umgebungen interessant, da es einen Datenaustausch zwischen dem NoSQL-Framework Apache Hadoop und SQL-Datenbanken erlaubt. Knapp ein Jahr nach der Aufnahme in den Apache Incubator habe das Projekt bewiesen, dass seine Community und die Entwicklung selbst gut zum leistungsorientierten Prozess der ASF passen würden, so die Begründung der Foundation.

Die Entwicklung von Sqoop geht auf das Jahr 2009 zurück, in dem Entwickler Aaron Kimball Sqoop als Hadoop-Modul für den Datenbank-Import in Hadoop-Cluster vorschlug. Später wurde Sqoop in ein eigenes Projekt ausgegliedert, um die Entwicklung der Technik schneller vorantreiben zu können. Im Juni 2011 wurde es schließlich in den Apache Incubator aufgenommen. Letzterer gilt als Vorstufe für eine mögliche Aufnahme als Top-Level-Projekt und bietet die Gelegenheit, sich als Projekt und angeschlossener Community unter den Richtlinien der ASF zu bewähren.

Hadoop stellt die Grundlage diverser Hadoop-Distributionen, wie sie beispielsweise HortonWorks und Cloudera anbieten, sowie verschiedener kommerzieller Big-Data-Angebote unter anderem von IBM. Zahlreiche Anwender haben Hadoop-basierte Lösungen im Produktiveinsatz. (rl)

Kommentieren

Themen:

Anzeige
  1. Big Data: Apache Apex erreicht Top-Level-Status

    Big Data: Apache Apex erreicht Top-Level-Status

    Die Köpfe hinter der Stream- und Batch-Processing-Plattform des Hadoop-Frameworks konnte in gut neun Monaten allen Forderungen an ein Top-Level-Projekt nachkommen.

  2. Apache Beam wird zum Top-Level-Projekt

    Apache Beam wird zum Top-Level-Projekt

    Das aus Googles Cloud Dataflow SDK hervorgegangene Projekt verlässt die Incubator-Phase bei der Apache Software Foundation. Gleichzeitig steigt auch die Big-Data-Analyse-Software Apache Eagle zum Top-Level-Projekt auf.

  3. Apache Spot: Neues Open-Source-Projekt zur Cybersecurity

    Apache Spot: Neues Open-Source-Projekt zur Cybersecurity

    Big Data und Machine Learning zum Schutz vor Cybersecurity-Problemen – das soll sich im neuen Apache-Projekt Spot wiederfinden, das Intel und Cloudera diese Woche vorgestellt haben.

  4. Cybersecurity: Apache Metron wird Top-Level-Projekt

    Cybersecurity: Apache Metron wird Top-Level-Projekt

    Apache Metron bietet eine skalierbare Plattform zur Sicherheitsanalyse, die auf diversen Projekten der Open-Source-Organisation basiert, ihren Ursprung aber bei Cisco hat.

  1. Apache Drill – SQL für alles

    Apache Drill ? SQL für alles !?

    Die Analyse großer Datenmengen ermöglicht eine Vielzahl neuer Projekte – sofern man die nötigen Tools beherrscht. Apache Drill soll als Vermittler denjenigen helfen, die sich nicht von SQL als Abfragesprache verabschieden wollen.

  2. Apache Kylin: OLAP im Big-Data-Maßstab

    Weboberfläche von Kylin (Abb. 3)

    Das von eBay entwickelte Kylin will die in der klassischen Business Intelligence seit vielen Jahren etablierten OLAP-Cubes mit Unterstützung der Hadoop-Plattform in die Big-Data-Welt übertragen. Ein Überblick zur Architektur und zu Prozessen sowie ein paar nützliche Hinweise bei der Generierung von Cubes.

  3. Machine Learning mit Apache Spark 2

    Maschinelles Lernen mit Apache Spark 2

    Apache Spark bietet ausgereifte Werkzeuge für das Umsetzen von Software im Bereich maschinelles Lernen. Ein Beispielprojekt zeigt Bilderkennung für handgeschriebene Ziffern.

  1. Im Test: BMW X1 xDrive 20d

    BMW

    Der zweite BMW X1 wirkt innen nobler, dreht aber aus Kostengründen sein Antriebskonzept um. Statt des standardmäßigen Hinterradantriebs mit zugeschalteter Vorderachse werden nun die Hinterräder nur bei Bedarf angetrieben. Eine Ausfahrt sollte zeigen, ob sich dieser BMW noch wie einer anfühlt

  2. Apple Carplay im BMW 1er

    BMW NBT Evo

    Unsere Kollegen von Techstage haben sich angesehen, wie BMW Apple Carplay integriert hat. Das ist nicht ganz billig, von BMW aber insgesamt sehr gut gelöst. Ein paar Dinge könnten BMW und Apple in ihrer Zusammenarbeit aber noch verbessern

  3. "Hilfe, wir werden von einem Piratensender gestört!"

    Peinliches Guerilla-Marketing im US-Radio

  4. "Großes Finale": Cassini meldet sich nach Flug zwischen dem Saturn und seinen Ringen

    "Großes Finale": Cassini meledet sich nach Flug zwischen Saturn und Ringen

    Einen Tag nach dem ersten Abtauchen zwischen den Saturn und seine Ringe hat sich die NASA-Sonde Cassini zurückgemeldet. Eine Antenne in Kalifornien empfängt die heiß ersehnten Daten. Offenbar lief alles nach Plan, freut sich die NASA.

Anzeige