Az SCP használata az Apache Hadooptal az Azure HDInsightban
Ez a cikk a fájlok HDInsight-fürttel való biztonságos átviteléről nyújt tájékoztatást.
Fájlok másolása
Az scp
segédprogrammal fájlokat másolhat a fürt egyes csomópontjairól más csomópontokra. A következő paranccsal például a test.txt
könyvtárat a helyi rendszerről az elsődleges átjárócsomópontra másolhatja:
scp test.txt sshuser@clustername-ssh.azurehdinsight.net:
Mivel nincs megadva elérési út a :
után, a fájl az sshuser
kezdőkönyvtárba kerül.
A következő parancs a test.txt
fájlt az elsődleges átjárócsomóponton található sshuser
kezdőkönyvtárból a helyi rendszerre másolja:
scp sshuser@clustername-ssh.azurehdinsight.net:test.txt .
Az scp
csak a fürt egyes csomópontjainak fájlrendszeréhez képes hozzáférni. Nem használható a fürt HDFS-kompatibilis tárolójában lévő adatok elérésére.
Ha egy SSH-munkamenetből kíván feltölteni egy használni kívánt erőforrást, használja az scp
segédprogramot. Például töltsön fel egy Python-szkriptet, majd futtassa a szkriptet egy SSH-munkamenetből.
Adatok közvetlenül a HDFS-kompatibilis tárolóba való betöltésével kapcsolatos információkat a következő dokumentumokban talál: