Speichern hdfs Befehl Ausgabe auf eine Shell-Variable

Question

Ich versuche, die hdfs Befehl Ausgabe auf eine Shell-Variable, aber bekomme Fehler. Mein Skript ist wie folgt:

#!/bin/bash 
default=$1 
date=""; 
HDFS_PATH='/data/max_emp_value' (This is a directory) 
if $(hadoop fs -test -e $HDFS_PATH/*); then 
    date = "`hadoop fs -cat HDFS_PATH/*)`" 
else 
    date=$default 
fi 
echo date = ${date} 

Danke, Stacky

Answer 1

funktionierts - kopieren und einfügen, wie ist.

#!/bin/bash 
default=$1 
date="" 
HDFS_PATH='/data/max_emp_value' #(This is a directory) 
if $(hadoop fs -test -e $HDFS_PATH/*) 
then 
    date="`hadoop fs -cat $HDFS_PATH/*)`" 
else 
    date=$default 
fi 
echo "date is ${date}" 

Warum möchten Sie alle Dateien in einem Verzeichnis überprüfen? $HDFS_PATH/* Die * bezieht sich auf alle Dateien in einem Verzeichnis. Möglicherweise versuchen Sie zu überprüfen, ob die Dateien angekommen sind - in diesem Fall sollten Sie nach Abschluss der Übertragung normalerweise eine Berührungsdatei haben, die normalerweise als _success gekennzeichnet ist. Andernfalls riskieren Sie, die Daten auf der Durchreise zu konsumieren.

Answer 2

Ihr Skript hat einige Syntaxfehler (Zeile 6: ~> unwnated ), Leerzeichen zwischen DATE =). Versuchen Sie auch, Variablennamen zu verwenden, die nicht bash Befehl ist (date ist bash-Befehl):

#!/bin/bash 
default=$1 
DATE='' 
HDFS_PATH='/user/cloudera/datefiles' 

if $(hadoop fs -test -e ${HDFS_PATH}/*); then 
    DATE=`hadoop fs -cat ${HDFS_PATH}/*` 
else 
    DATE=${default} 
fi 
echo ${DATE} 

---

[cloudera@quickstart ~]$ ./test_3.sh 
08/22/2016 
[cloudera@quickstart ~]$