Apache Airflow के साथ डेटा पाइपलाइन
Практическое руководство по созданию конвейеров данных
सारांश:
परिचय
पुस्तक «Data Pipelines with Apache Airflow» (हिंदी: «Apache Airflow के साथ डेटा पाइपलाइन») बास हरेंसलाक और जूलियन रटगर डे रूयटर द्वारा लिखित, Apache Airflow के साथ काम करने के लिए 2021 में प्रकाशित सबसे व्यापक और व्यावहारिक मार्गदर्शिकाओं में से एक है। यद्यपि विवरण में Go भाषा का उल्लेख है, वास्तव में यह पुस्तक पूरी तरह से Python पारिस्थितिकी तंत्र और Apache Airflow (जो Python में लिखा गया है) पर केंद्रित है। यह मूल डेटा में एक त्रुटि है: यह पुस्तक Python डेवलपर्स और डेटा इंजीनियरों के लिए लिखी गई है। 472 पृष्ठों का यह संस्करण सरल DAG से लेकर मॉनिटरिंग और स्केलिंग के साथ प्रोडक्शन समाधान तक, डेटा पाइपलाइनों के निर्माण, डिबगिंग और संचालन के सभी चरणों को कवर करता है।
पुस्तक किस बारे में है
यह पुस्तक एक क्रमिक मार्गदर्शिका के रूप में संरचित है: Airflow की स्थापना से लेकर क्लाउड में तैनाती तक। लेखक बुनियादी अवधारणाओं — DAG, ऑपरेटर, सेंसर, XCom — से शुरुआत करते हैं और धीरे-धीरे उन्नत विषयों: डायनामिक DAG, परीक्षण, बैकफिल, बड़े डेटा वॉल्यूम के साथ काम करना, Kubernetes और AWS के साथ एकीकरण की ओर बढ़ते हैं। सर्वोत्तम प्रथाओं और सामान्य गलतियों पर विशेष ध्यान दिया गया है। प्रत्येक अध्याय में वास्तविक कोड उदाहरण और व्यावहारिक परिदृश्य शामिल हैं।
यह पुस्तक किसके लिए है
यह पुस्तक डेटा इंजीनियरों, Python डेवलपर्स और DevOps विशेषज्ञों के लिए है जो डेटा पाइपलाइन ऑर्केस्ट्रेशन में महारत हासिल करना चाहते हैं। यह Airflow से अभी-अभी परिचित हो रहे नौसिखियों और अपने ज्ञान को गहरा करने के इच्छुक अनुभवी उपयोगकर्ताओं दोनों के लिए उपयोगी होगी।