Ich habe Hive (2.1.1) auf Hadoop (2.7.3) in AWS ec2 Ubuntu 14.04 Instanz installiert. Früher war ich hive der Lage Start von nur Befehle start-all.sh eingeben und hive jetzt, wenn ich ich versuche, es zu tun, ich bin immer Fehler wie untenFehler beim Versuch, den Stock auszuführen
_Logging Konfiguration in jar initialisiert werden: file:/usr/local/hive/lib/hive-common-2.1.1.jar! /hive-log4j2.properties Async: true Ausnahme im Thread "main" java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException (org. apache.hadoop.hdfs.server.namenode.SafeModeException): Verzeichnis/tmp/hive/hduser/77c5347f-bcdb-452b-9a99-86f45827933a kann nicht erstellt werden. Der Name-Knoten befindet sich im abgesicherten Modus. Ressourcen sind auf NN niedrig. Fügen Sie zusätzliche Ressourcen hinzu oder geben Sie sie frei, und deaktivieren Sie den abgesicherten Modus manuell. HINWEIS: Wenn Sie den abgesicherten Modus vor dem Hinzufügen von Ressourcen ausschalten, kehrt das NN sofort in den abgesicherten Modus zurück. Verwenden Sie "hdfs dfsadmin -safemode leave", um den abgesicherten Modus zu deaktivieren. bei org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkNameNodeSafeMode (FSNamesystem.java:1327) bei org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirs (FSNamesystem.java:3895) bei org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.mkdirs (NameNodeRpcServer.java:984) bei org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.mkdirs (ClientNamenodeProtocolServerSideTranslatorPB.java:622) bei org.apache. hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos $ ClientNamenodeProtocol $ 2.callBlockingMethod (ClientNamenodeProtocolProtos.java) bei org.apache.hadoop.ipc.ProtobufRpcEngine $ Server $ ProtoBufRpcInvoker.call (ProtobufRpcEngine.java:616) bei org.apache.hadoop .ipc.RPC $ Server.call (RPC.java:982) unter org.apache.hadoop.ipc.Server $ Handler $ 1.run (Server.java:2049) unter org.apache.hadoop.ipc.Server $ Handler $ 1.run (Server.java:2045) bei java. security.AccessController.doPrivileged (Native Methode) bei javax.security.auth.Subject.doAs (Betreff.java:415) bei org.apache.hadoop.security.UserGroupInformation.doAs (UserGroupInformation.java:1698) bei org .apache.hadoop.ipc.Server $ Handler.run (Server.java:2043)
at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:591)
at org.apache.hadoop.hive.ql.session.SessionState.beginStart(SessionState.java:531)
at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:705)
at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:641)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.util.RunJar.run(RunJar.java:221)
at org.apache.hadoop.util.RunJar.main(RunJar.java:136)
verursacht durch: org.apache.hadoop.ipc.RemoteException (org.apache.hadoop.hdfs.server.namenode .SafeModeException): Verzeichnis/tmp/hive/hduser/77c5347f-bcdb-452b-9a99-86f45827933a kann nicht erstellt werden. Der Name-Knoten befindet sich im abgesicherten Modus. Ressourcen sind auf NN niedrig. Fügen Sie zusätzliche Ressourcen hinzu oder geben Sie sie frei, und deaktivieren Sie den abgesicherten Modus manuell. HINWEIS: Wenn Sie den abgesicherten Modus vor dem Hinzufügen von Ressourcen ausschalten, kehrt das NN sofort in den abgesicherten Modus zurück. Verwenden Sie "hdfs dfsadmin -safemode leave", um den abgesicherten Modus zu deaktivieren. bei org.apache.hadoop.hdfs.server.namenode.FSNamesystem.checkNameNodeSafeMode (FSNamesystem.java:1327) bei org.apache.hadoop.hdfs.server.namenode.FSNamesystem.mkdirs (FSNamesystem.java:3895) bei org.apache.hadoop.hdfs.server.namenode.NameNodeRpcServer.mkdirs (NameNodeRpcServer.java:984) bei org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolServerSideTranslatorPB.mkdirs (ClientNamenodeProtocolServerSideTranslatorPB.java:622) bei org.apache. hadoop.hdfs.protocol.proto.ClientNamenodeProtocolProtos $ ClientNamenodeProtocol $ 2.callBlockingMethod (ClientNamenodeProtocolProtos.java) bei org.apache.hadoop.ipc.ProtobufRpcEngine $ Server $ ProtoBufRpcInvoker.call (ProtobufRpcEngine.java:616) bei org.apache.hadoop .ipc.RPC $ Server.call (RPC.java:982) unter org.apache.hadoop.ipc.Server $ Handler $ 1.run (Server.java:2049) unter org.apache.hadoop.ipc.Server $ Handler $ 1.run (Server.java:2045) bei java. security.AccessController.doPrivileged (Native Methode) bei javax.security.auth.Subject.doAs (Betreff.java:415) bei org.apache.hadoop.security.UserGroupInformation.doAs (UserGroupInformation.java: 1698) bei org.apache.hadoop.ipc.Server $ Handler.run (Server.java:2043)
at org.apache.hadoop.ipc.Client.call(Client.java:1475)
at org.apache.hadoop.ipc.Client.call(Client.java:1412)
at org.apache.hadoop.ipc.ProtobufRpcEngine$Invoker.invoke(ProtobufRpcEngine.java:229)
at com.sun.proxy.$Proxy30.mkdirs(Unknown Source)
at org.apache.hadoop.hdfs.protocolPB.ClientNamenodeProtocolTranslatorPB.mkdirs(ClientNamenodeProtocolTranslatorPB.java:558)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invokeMethod(RetryInvocationHandler.java:191)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invoke(RetryInvocationHandler.java:102)
at com.sun.proxy.$Proxy31.mkdirs(Unknown Source)
at org.apache.hadoop.hdfs.DFSClient.primitiveMkdir(DFSClient.java:3000)
at org.apache.hadoop.hdfs.DFSClient.mkdirs(DFSClient.java:2970)
at org.apache.hadoop.hdfs.DistributedFileSystem$21.doCall(DistributedFileSystem.java:1047)
at org.apache.hadoop.hdfs.DistributedFileSystem$21.doCall(DistributedFileSystem.java:1043)
at org.apache.hadoop.fs.FileSystemLinkResolver.resolve(FileSystemLinkResolver.java:81)
at org.apache.hadoop.hdfs.DistributedFileSystem.mkdirsInternal(DistributedFileSystem.java:1043)
at org.apache.hadoop.hdfs.DistributedFileSystem.mkdirs(DistributedFileSystem.java:1036)
at org.apache.hadoop.hive.ql.session.SessionState.createPath(SessionState.java:732)
at org.apache.hadoop.hive.ql.session.SessionState.createSessionDirs(SessionState.java:655)
at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:563)
... 9 more
So wie es zu lösen (i versucht hdfs dfsadmin -safemode verlassen), aber keine Verwendung
überprüfen Sie den freien Speicherplatz auf hdfs. – philantrovert
Vielen Dank @philantrovert mein Speicherplatz war niedrig, so dass ich etwas Platz frei und in der Lage, glatt starten – Rudresh