Menggunakan SCP dengan Apache Hadoop di Azure HDInsight
Artikel ini menyediakan informasi tentang mentransfer file secara aman dengan kluster HDInsight Anda.
Salin file
Utilitas scp dapat digunakan untuk menyalin file ke dan dari masing-masing node dalam kluster. Misalnya, perintah berikut menyalin direktori test.txt dari sistem lokal ke node kepala utama:
scp test.txt sshuser@clustername-ssh.azurehdinsight.net:
Karena tidak ada jalur yang ditentukan setelah :, file ditempatkan di direktori beranda sshuser.
Contoh berikut menyalin file test.txt dari direktori beranda sshuserpada node kepala utama ke sistem lokal:
scp sshuser@clustername-ssh.azurehdinsight.net:test.txt .
scp hanya dapat mengakses sistem file dari masing-masing node dalam kluster. Ini tidak dapat digunakan untuk mengakses data di penyimpanan yang kompatibel dengan HDFS untuk kluster tersebut.
Gunakan scp saat Anda perlu mengunggah sumber daya untuk digunakan dari sesi SSH. Misalnya, unggah skrip Python, lalu jalankan skrip dari sesi SSH.
Untuk informasi tentang pemuatan data secara langsung ke penyimpanan yang kompatibel dengan HDFS, lihat dokumen berikut ini: