Ich möchte Daten von Hortonworks Stock zu Cassandra exportieren Gibt es eine Möglichkeit, Daten von Horton Hive zu Datastax Cassandra ohne ETL-Tools zu exportieren?Wie Daten aus Hortonworks Bienenstock nach Cassandra exportieren?
Sie verwenden Sqoop dafür.
Apache Sqoop
Apache Sqoop (TM) ist ein Werkzeug für die effiziente Übertragung von Daten zwischen bulk Apache Hadoop und strukturierte Datenspeicher wie relationale Datenbanken entwickelt.
Sqoop hat im März 2012 erfolgreich den Inkubator abgeschlossen und ist jetzt ein Top-Level-Apache-Projekt.
Verwendung von Apache Funken mit dem Funken Cassandra Stecker und saveToCassandra ist eine andere Wahl und den ich sehe in diesen Tagen über Sqoop mehr empfohlen. Sie können Spark als grundlegendes Ladewerkzeug verwenden oder ETL-Transformationen für Ihre Daten durchführen.
Verwenden Sie den Befehl spark-submit => spark-submit --class --master local --deploy-mode client --conf spark.driver.extraClassPath =/absoluter Pfad/ --jars/absolute- Pfad//Absoluter Pfad/ –
abhijitcaps