Unser Kunde plant die Migration der Hadoop-Umgebung von Cloudera zu HortonWorks aus irgendeinem Grund.Migration von Cloudera nach Hortonworks
Kann mir bitte jemand mitteilen, ob es ein Standarddokument gibt, das die erforderlichen Schritte für diese Art der Migration enthält?
In anderen Arbeiten können wir hadoop distcp Befehl verwenden, um hdfs Daten von Cloudera-Umgebung zu Hortonworks zu kopieren.
Ja, Sie können distcp verwenden.
Sie können die Migration auch in Abhängigkeit von der Version von CDH, von der Sie migrieren, und von der Version von HDP, die Sie auch migrieren, durchführen. Dies hängt auch von den Diensten ab, die Sie in hadoop verwenden, und von den Versionen dieser Schemas. Wenn Sie beispielsweise Version X.3 von Hive in Cloudera verwenden und Sie in Hortonworks zu X.2 migrieren, treten Probleme mit den Schemas auf. Es scheint sehr riskant und unordentlich zu sein, an Ort und Stelle zu migrieren, obwohl theoretisch machbar.
Ich würde empfehlen, die distcp-Route zu verwenden, damit Sie die Daten in Ihrem neuen Hortonworks-Cluster gegen den Cloudera-Cluster validieren können, bevor Sie ihn außer Betrieb nehmen.