دسترسی سریع:

مسیر:

صفحه اصلی

لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در کانال تلگرام عضو شوید.

آموزش اتوماسیون خطوط لوله داده: تکامل شمای داده‌ها (Schema Evolution) - آخرین آپدیت

دانلود Automate Data Pipelines: Schema Evolution

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.

نمونه ویدیوها: (صرفا برای مشاهده نمونه ویدیو، ممکن هست نیاز به شکن داشته باشید.)

توضیحات دوره: دوره متوسط «اتوماسیون خطوط لوله داده: تکامل شمای داده‌ها» برای مهندسان داده، تحلیل‌گران و توسعه‌دهندگانی طراحی شده است که به دنبال ساخت گردش‌کارهای داده‌ای مقاوم و ضد خطا هستند. در فضای پویای داده‌های امروز، خطوط لوله (Pipelines) اغلب هنگام تغییرات غیرمنتظره در ساختار داده‌های منبع دچار شکست می‌شوند؛ مشکلی که به عنوان «لغزش شمای داده» یا Schema Drift شناخته می‌شود. این دوره به طور مستقیم با این چالش مقابله کرده و به شما می‌آموزد چگونه با استفاده از Apache Airflow، خطوط لوله داده‌ای را طراحی و خودکارسازی کنید که بتوانند تکامل شما را به طور بهینه مدیریت کنند. شما تجربه عملی در طراحی، ساخت و زمان‌بندی خطوط لوله داده پیچیده (DAGs) را کسب خواهید کرد که فرآیندهای ETL را از استخراج تا بارگذاری خودکار می‌کنند. سرفصل‌های این دوره تأکید ویژه‌ای بر ایجاد گردش‌کارهای Idempotent دارد که تغییرات شما را شناسایی کرده و با آن سازگار می‌شوند تا یکپارچگی داده‌ها تضمین شده و از خطاهای هزینه‌بر جلوگیری شود. از طریق آزمایشگاه‌های عملی و بررسی مطالعات موردی واقعی از شرکت‌هایی مانند Uber و BharatPe، شما اعتبارسنجی داده‌ها را پیاده‌سازی کرده و سیستم‌های جامع نظارت و هشدار را خواهید ساخت. در پایان این دوره، شما قادر خواهید بود خطوط لوله داده‌ای منعطف، مقیاس‌پذیر و کاملاً خودکاری ایجاد کنید که برای تحمل پیچیدگی‌های محیط‌های داده واقعی ساخته شده‌اند.

سرفصل ها و درس ها

توسعه خط لوله در Airflow Airflow Pipeline Development

کدنویسی و زمان‌بندی اولین DAG Coding and Scheduling Your First DAG

مدیریت تکامل شمای داده‌ها Schema Evolution Management

قاتل خاموش خط لوله: لغزش شمای داده The Silent Pipeline Killer: Schema Drift
نوشتن و تطبیق تست‌های dbt Writing and Adapting dbt Tests

نظارت بر خط لوله و قابلیت اطمینان Pipeline Monitoring and Reliability

وقتی درختی می‌افتد: خطر خطاهای خاموش When a Tree Falls: The Danger of Silent Failures
ساخت سیستم هشدار خطا Building-In Failure Alerts

برای ارسال نظر ثبت نام کنید.

نمایش نظرات

آموزش اتوماسیون خطوط لوله داده: تکامل شمای داده‌ها (Schema Evolution)

جزییات دوره

زمان دوره: 2h 5m

تعداد ویدیو ها: 5

شرکت: Coursera (کورسرا)

تاریخ انتشار مرجع: (آخرین آپدیت)

بازدید مرجع : 106

امتیاز مرجع: - از 5

فایل تمرین: دارد

زیرنویس زبان اصلی: دارد

زیرنویس فارسی: (توسط هوش مصنوعی) دارد

مدرس: Chris Croft

لینک کوتاه این دوره

https://donyad.com/d/857bee

جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

نرم افزارهای مورد نیاز

طرح

ابزار طراحی

توسعه نرم افزار

آموزش اتوماسیون خطوط لوله داده: تکامل شمای داده‌ها (Schema Evolution) - آخرین آپدیت

دانلود Automate Data Pipelines: Schema Evolution

توسعه خط لوله در Airflow Airflow Pipeline Development

کدنویسی و زمان‌بندی اولین DAG Coding and Scheduling Your First DAG

مدیریت تکامل شمای داده‌ها Schema Evolution Management

قاتل خاموش خط لوله: لغزش شمای داده The Silent Pipeline Killer: Schema Drift

نوشتن و تطبیق تست‌های dbt Writing and Adapting dbt Tests

نظارت بر خط لوله و قابلیت اطمینان Pipeline Monitoring and Reliability

وقتی درختی می‌افتد: خطر خطاهای خاموش When a Tree Falls: The Danger of Silent Failures

ساخت سیستم هشدار خطا Building-In Failure Alerts

نمایش نظرات

https://donyad.com/d/857bee

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar