कॉपी फाइल विलीन hdfs सह मुख्य समस्या आहे की ते खूप हळू असू शकते.
import shutil shutil.copyfile("/hdfs/path/to/file", "/local/path/to/file")
ही कोड लाइन shutil मॉड्यूल आयात करते आणि नंतर HDFS वरून स्थानिक फाइल सिस्टममध्ये फाइल कॉपी करण्यासाठी त्या मॉड्यूलमधील कॉपीफाइल फंक्शन वापरते.
एचडीएफएस म्हणजे काय
HDFS ही एक वितरित फाइल प्रणाली आहे जी मोठ्या डेटा सेटसाठी स्केलेबल, टिकाऊ आणि विश्वासार्ह स्टोरेज प्रदान करते. हे Java मध्ये लिहिलेले आहे आणि Java प्लॅटफॉर्मवर चालते.
फायली विलीन करण्याचे मार्ग
Python मध्ये फाइल्स विलीन करण्याचे काही मार्ग आहेत. अंगभूत फाइल विलीनीकरण मॉड्यूल वापरणे हा सर्वात सोपा मार्ग आहे:
फाइलमर्जर आयात करा
file1 = उघडा("file1.txt")
file2 = उघडा("file2.txt")
विलीन_फाइल(फाइल1, फाइल2)
प्रिंट ("फाइल विलीन केली!")
फाइल्ससह कार्य करा
पायथनमध्ये, तुम्ही योग्य मॉड्यूल आयात करून फाइल्ससह कार्य करू शकता. उदाहरणार्थ, फाइल हाताळणी मॉड्यूल आयात करण्यासाठी, तुम्ही खालील ओळ वापराल:
फाइल हँडलिंग इंपोर्ट फाइलमधून
एकदा तुम्ही मॉड्युल इंपोर्ट केले की, तुम्ही फाइल्सचे नाव व्हेरिएबल म्हणून वापरून ऍक्सेस करू शकता. उदाहरणार्थ, तुम्हाला तुमच्या वर्तमान निर्देशिकेतील myfile.txt फाइलमध्ये प्रवेश करायचा असल्यास, तुम्ही खालील ओळ वापराल:
myfile = फाइल ("myfile.txt")
