Ich habe ein sehr seltsames Problem. Ich benutze dfs-datastores Pail-Abstraktion, um Daten in HDFS in Java zu schreiben. Ich denke nicht, dass das Pail Stück für das Problem wichtig ist.Hadoop FileSystem.getFS() pausiert für ca. 2 Minuten
Wenn es ruft org.apache.hadoop.fs.FileSystem getFS (java.lang.String Pfad) mit einem Pfad auf meinem lokalen Dateisystem pausiert es für etwa 2 Minuten scheinbar nichts tut und dann zurück. Das ist auf meinem Laptop.
Das Seltsame ist, dass es wirklich schnell funktionierte, als ich heute in meinem Büro im Netzwerk war, aber jetzt, wo ich zuhause bin, mache ich es wieder. Ich benutze Ubuntu 10.10 64-Bit mit Java 1.7.
Wer hat irgendwelche Ideen, was es macht? Was kann anders sein, wenn man bei der Arbeit ist und zu Hause ist?
UPDATE: Ich habe Code mit dem Debugger schrittweise durchlaufen und es scheint Probleme in Configuration.loadResource() zu haben. Es ruft mehrmals an und es dauert 5-10 Sekunden, um von dieser Funktion zurückzukehren.
UPDATE2: Ich habe das ein wenig weiter eingegrenzt. Das größte Auflegen scheint zu sein, wenn es KerberosName.setConfiguration() aufruft. Das würde erklären, warum es bei der Arbeit schnell läuft, da das Active Directory als Kerberos-Server fungiert. Ich habe keinen hier zu Hause, also kann ich keinen finden. Jetzt stellen sie in Frage, warum auf der Welt versucht wird, Java Kerberos zu laden.
Alles interessante in den NamenNode-Protokollen? –
Ich glaube nicht, dass es irgendwelche NameNode-Protokolle gibt. Es schreibt in das lokale Dateisystem und der Ort, an dem es hängt, ist nur einen Ordner zu erstellen. –
Hat Ihr Ubuntu einen NTFS-Mount? –