0

Ich habe jetzt einen Cluster von 4 Spark-Knoten und 1 Solr-Knoten und benutze Cassandra als meine Datenbank. Ich möchte die Knoten mittelfristig auf 20 und langfristig auf 100 erhöhen. Aber Datastax scheint Mesos oder Garn nicht zu unterstützen. Wie würde ich diese Knoten CPU, Speicher und Speicher am besten verwalten? Ist Mesos sogar mit 20 oder 100 Knoten nötig? Bis jetzt konnte ich kein Beispiel dafür finden, wie ich Daten-Daten verwende. Ich habe normalerweise keine Jobs, die erledigt werden müssen, aber ich führe einen kontinuierlichen Datenstrom. Deshalb denke ich sogar darüber nach, Datastax zu löschen, weil ich meiner Meinung nach nicht so viele Knoten effizient ohne YARN oder Mesos verwalten kann, aber vielleicht gibt es eine bessere Lösung, an die ich nicht gedacht habe? Auch ich benutze Python, also scheint Garn meine einzige Option zu sein.Wie man am besten alle meine Knoten CPU, Speicher und Speicher mit Datastax Funke verwalten?

Wenn Sie irgendwelche Vorschläge oder Best-Practice-Beispiele haben, lassen Sie es mich wissen.

Danke!

Antwort

1

Wenn Sie DSE mit einer unterstützten Hadoop/Yarn-Umgebung ausführen möchten, müssen Sie BYOH verwenden, lesen Sie dazu HERE In BYOH können Sie entweder die interne Hadoop-Plattform in DSE ausführen oder eine Cloudera- oder HDP-Plattform mit YARN ausführen und alles andere, was verfügbar ist.

Verwandte Themen