Usar SCP com Apache Hadoop no Azure HDInsight
Este artigo fornece informações sobre a transferência segura de arquivos com o cluster HDInsight.
Copiar ficheiros
O utilitário scp
pode ser utilizado para copiar ficheiros de e para os nós individuais do cluster. Por exemplo, o comando seguinte copia o diretório test.txt
do sistema local para o nó principal primário:
scp test.txt sshuser@clustername-ssh.azurehdinsight.net:
Uma vez que não foi especificado nenhum caminho após :
, o ficheiro é colocado no diretório raiz sshuser
.
O exemplo seguinte copia o ficheiro test.txt
do diretório raiz sshuser
no nó principal primário para o sistema local:
scp sshuser@clustername-ssh.azurehdinsight.net:test.txt .
scp
apenas pode aceder ao sistema de ficheiros de nós individuais dentro do cluster. Ele não pode ser usado para acessar dados no armazenamento compatível com HDFS para o cluster.
Utilize scp
quando tiver de carregar um recurso para utilização a partir de uma sessão SSH. Por exemplo, carregue um script de Python e, em seguida, execute o script a partir de uma sessão SSH.
Para obter informações sobre o carregamento de dados diretamente para o armazenamento compatível com HDFS, consulte os seguintes documentos:
Próximos passos
- Utilizar SSH com o HDInsight
- Use edge nodes in HDInsight (Utilizar nós de extremidade no HDInsight)