Masalah utama sareng file salinan ngahiji hdfs nyaéta yén éta tiasa lambat pisan.
import shutil shutil.copyfile("/hdfs/path/to/file", "/local/path/to/file")
Garis kode ieu ngimpor modul shutil teras nganggo fungsi copyfile tina modul éta pikeun nyalin file tina HDFS ka filesystem lokal.
Naon hdfs
HDFS mangrupikeun sistem file anu disebarkeun anu nyayogikeun panyimpen anu tiasa skala, awét, sareng dipercaya pikeun set data anu ageung. Éta ditulis dina Java sareng dijalankeun dina platform Java.
Cara pikeun ngahijikeun file
Aya sababaraha cara pikeun ngahijikeun file dina Python. Cara pangbasajanna nyaéta ngagunakeun modul ngahiji file anu diwangun:
impor filemerger
file1 = open("file1.txt")
file2 = open("file2.txt")
merge_file(file1, file2)
print("File dihijikeun!")
Gawe sareng file
Dina Python, anjeun tiasa damel sareng file ku ngimpor modul anu cocog. Contona, pikeun ngimpor modul penanganan file, anjeun bakal nganggo garis ieu:
ti file Nanganan impor File
Sakali anjeun ngimpor modul, anjeun tiasa ngaksés file nganggo nami na salaku variabel. Contona, upami anjeun hoyong ngaksés file myfile.txt dina diréktori anjeun ayeuna, anjeun bakal nganggo garis ieu:
myfile = File ("myfile.txt")
