آموزش کارخانه داده و ارکستراسیون (Data Factory & Orchestration) - آخرین آپدیت

دانلود Data Factory & Orchestration

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: قابلیت‌های اتوماسیون خود را با ساخت خطوط لوله داده (Data Pipelines) قابل اعتماد و آماده تولید در Microsoft Fabric ارتقا دهید. این دوره عملی بر مهندسی خط لوله با استفاده از Fabric Data Factory و ارکستراسیون Spark تمرکز دارد تا به شما کمک کند داده‌های خام را به دارایی‌های قابل اعتماد و آماده برای تحلیل تبدیل کنید. شما در این دوره، تبدیل‌های قابل استفاده مجدد را در Dataflows Gen2 با استفاده از Power Query ایجاد کرده و زمان‌بندی به‌روزرسانی‌ها را برای کاربران تجاری تنظیم خواهید کرد. همچنین خطوط لوله داده Fabric را با پارامترها، تریگرها و منطق ساختاریافته مدیریت خطا طراحی می‌کنید و Copy Jobs را برای جذب افزایشی فایل‌های CSV و Parquet از فضای ذخیره‌سازی ابری پیکربندی خواهید کرد. در بخش پردازش‌های کد-محور، نوت‌بوک‌های PySpark را برای تبدیل‌های چندمرحله‌ای با خروجی‌های بهینه Delta می‌نویسید، قوانین اعتبارسنجی کیفیت داده را برای جلوگیری از بارگذاری داده‌های نادرست پیاده‌سازی می‌کنید و لاگ‌های خط لوله، نوت‌بوک و جاب‌ها را برای تشخیص و رفع سریع خطاها نظارت خواهید کرد. در پایان این دوره، شما قادر خواهید بود جریان‌های کاری پیچیده داده را خودکار کنید، کنترل‌های کیفی را اعمال نمایید و جاب‌های Spark را با نظارت بر عملکرد ارکستره کنید؛ و بدین ترتیب، انضباط مهندسی لازم برای ارائه خطوط لوله داده مقیاس‌پذیر و در سطح سازمانی را کسب خواهید کرد.

سرفصل ها و درس ها

ساخت جریان‌های داده (Dataflows) قابل استفاده مجدد با Power Query Building Reusable Dataflows with Power Query

  • چرا تبدیل‌های بدون کد (No Code) بازی را تغییر می‌دهند Why No-Code Transforms Change the Game

  • مبانی Dataflows Gen2 و Power Query Dataflows Gen2 and Power Query Fundamentals

تبدیل‌های چند مرحله‌ای با PySpark Multi-Step PySpark Transformations

  • مبانی PySpark و الگوهای تبدیل داده PySpark Fundamentals and Transformation Patterns

ساخت خطوط لوله با اکتیویتی‌ها و پارامترها Building Pipelines with Activities and Parameters

  • چرا فرآیندهای دستی شکست می‌خورند Why Manual Processes Fail

  • اکتیویتی‌ها و پارامترهای خط لوله - بخش اول Pipeline Activities and Parameters - Part 1

  • اکتیویتی‌ها و پارامترهای خط لوله - بخش دوم Pipeline Activities and Parameters - Part 2

تریگرها و مدیریت خطا Triggers and Error Handling

  • تریگرها، تلاش مجدد و مدیریت شکست Triggers, Retries, and Failure Handling

پیکربندی Copy Jobs برای جذب افزایشی داده‌ها Configuring Copy Jobs for Incremental Ingestion

  • جذب مداوم داده‌ها بدون پیچیدگی در خط لوله Continuous Ingestion Without Pipeline Complexity

  • پیکربندی و حالت‌های Copy Job Copy Job Configuration and Modes

پیاده‌سازی گیت‌های کیفی در خطوط لوله Implementing Quality Gates in Pipelines

  • زمانی که داده‌های بد همه چیز را مسموم می‌کنند When Bad Data Poisons Everything

  • قوانین کیفی، قرنطینه و امتیازدهی Quality Rules, Quarantine, and Scoring

عیب‌یابی و رفع خطاهای جریان کاری Diagnosing and Fixing Workflow Failures

  • هشدار ساعت ۳ صبح The 3 AM Alert

  • خواندن لاگ‌های خط لوله، نوت‌بوک و Copy Job Reading Pipeline, Notebook, and Copy Job Logs

توسعه خط لوله با کمک هوش مصنوعی AI-Assisted Pipeline Development

پروژه عملی خط لوله داده خودکار Automated Data Pipeline Project

نمایش نظرات

آموزش کارخانه داده و ارکستراسیون (Data Factory & Orchestration)
جزییات دوره
7h 11m
13
(آخرین آپدیت)
108
- از 5
دارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar