Wie konfiguriert man HBase in Spark?

Question

Was sind die Schritte, um Spark mit HBase zu verbinden?

Ich habe die Master-Adressen für beide. Füge ich einfach die hbase-Adresse in den Spark-Klassenpfad ein?

Answer 1

Dieser Beitrag über Funken Mit HBase verbinden sollte hilfreich sein: http://www.vidyasource.com/blog/Programming/Scala/Java/Data/Hadoop/Analytics/2014/01/25/lighting-a-spark-with-hbase

Do I just add the hbase address into spark classpath?

Nr Eigentlich sollten Sie die hbase configuraion Dateien in der Funken Classpath setzen. Wenn nicht, sollten Sie sie in Ihren Codes setzen, wie zum Beispiel:

Configuration hConf = HBaseConfiguration.create(conf); 
    hConf.set("hbase.zookeeper.quorum", "PDHadoop1.corp.CompanyName.com,PDHadoop2.corp.CompanyName.com"); 
    hConf.setInt("hbase.zookeeper.property.clientPort", 10000);