آموزش ساخت و اجرای خط لوله‌های ETL در Databricks - آخرین آپدیت

دانلود Build and Run ETL Pipelines in Databricks

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: سازمان‌های مدرن با چالش سیلوهای داده پراکنده و فرآیندهای ETL کند و مستعد خطا دست و پنجه نرم می‌کنند. در این دوره آموزشی با عنوان «ساخت و اجرای خط لوله‌های ETL در Databricks»، شما توانایی طراحی خط لوله‌های داده‌ای قدرتمند را کسب خواهید کرد که ذخیره‌سازی را یکپارچه کرده و تحلیل داده‌ها را بهینه می‌کند. ابتدا بررسی می‌کنید که چگونه Databricks و Delta Lake چالش‌های ETL را حل می‌کنند. سپس، نحوه ساخت خط لوله‌ها با استفاده از Notebookها را می‌آموزید؛ از استخراج داده‌ها و تبدیل آن‌ها گرفته تا بارگذاری در Delta Lake. در نهایت، یاد می‌گیرید که چگونه عملکرد را بهینه کرده و جریان‌های کاری را با استفاده از Databricks Jobs خودکارسازی کنید. پس از اتمام این دوره، شما مهارت‌ها و دانش لازم برای پیاده‌سازی ETL مبتنی بر Databricks را خواهید داشت تا دریاچه‌های داده (Data Lakes) و انبارهای داده (Data Warehouses) را یکپارچه کرده و خط لوله‌های مقیاس‌پذیر و خودکار ارائه دهید.

سرفصل ها و درس ها

درک Databricks برای ETL Understanding Databricks for ETL

  • مقدمه‌ای بر ETL و Databricks Introduction to ETL and Databricks

  • توضیح معماری Lakehouse Lakehouse Architecture Explained

  • مقایسه ETL دسته‌ای (Batch) در مقابل جریانی (Streaming) Batch vs. Streaming ETL

ساخت خط لوله‌های ETL با نوت‌بوک‌های Databricks Building ETL Pipelines with Databricks Notebooks

  • تکنیک‌های استخراج داده‌ها Data Extraction Techniques

  • تبدیل داده‌ها با Spark Transformations with Spark

  • بارگذاری در مقصدهای نهایی Loading to Targets

  • بهترین روش‌های استفاده از نوت‌بوک Notebook Best Practices

بهینه‌سازی خط لوله‌های ETL Optimizing ETL Pipelines

  • پارتیشن‌بندی و کشینگ Partitioning and Caching

  • تنظیمات بهینه‌سازی Delta Lake Delta Lake Tuning

  • عیب‌یابی جریان‌های کاری Troubleshooting Workflows

خودکارسازی خط لوله‌های ETL Automating ETL Pipelines

  • راه‌اندازی Databricks Jobs Databricks Jobs Setup

  • مانیتورینگ و هشدارها Monitoring and Alerts

  • یکپارچه‌سازی CI/CD CI:CD Integration

  • منابع تکمیلی Additional Resources

نمایش نظرات

آموزش ساخت و اجرای خط لوله‌های ETL در Databricks
جزییات دوره
52m
14
(آخرین آپدیت)
13
3.9 از 5
دارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Dr. Ali Feizollah Dr. Ali Feizollah

سلام من علی هستم من دکترای علوم کامپیوتر دارم. در حال حاضر به عنوان مدرس مشغول به کار هستم. من تحقیقاتی را در مورد تجزیه و تحلیل رسانه های اجتماعی با استفاده از پایتون و یادگیری ماشین انجام می دهم. من یک کانال یوتیوب به نام Flutterware دارم که آموزش پلتفرم Flutter Google را به اشتراک می گذارد که برای توسعه برنامه های تلفن همراه برای اندروید و iOS با یک کد پایه استفاده می شود. من عاشق تحقیق و کشف دانش هستم. به نظر من کسب دانش بدون اشتراک آن بی فایده است. امیدوارم کلاس های من برای شما مفید باشد.