Use o Apache Hadoop no Azure HDInsight
Este artigo fornece informações sobre como transferir arquivos com segurança com o cluster HDInsight.
Copiar arquivos
O utilitário scp pode ser usado para copiar arquivos de e para os nós individuais no cluster. Por exemplo, o comando a seguir copia o diretório test.txt do sistema local para o nó principal primário:
scp test.txt sshuser@clustername-ssh.azurehdinsight.net:
Como nenhum caminho é especificado após :, o arquivo é colocado no diretório base sshuser.
O exemplo a seguir copia o arquivo test.txt do diretório base sshuser no nó principal primário para o sistema local:
scp sshuser@clustername-ssh.azurehdinsight.net:test.txt .
scp só pode acessar o sistema de arquivos de nós individuais dentro do cluster. Ele não pode ser usado para acessar os dados no armazenamento compatível com o HDFS para o cluster.
Use scp quando precisar carregar um recurso para usar em uma sessão SSH. Por exemplo, carregue um script Python, em seguida, execute o script em uma sessão SSH.
Para obter informações sobre como carregar diretamente os dados no armazenamento compatível com o HDFS, consulte os seguintes documentos: