آموزش جامع پیاده‌سازی راهکارهای مهندسی داده با Microsoft Fabric (آمادگی آزمون DP-700) - آخرین آپدیت

سرفصل ها و درس ها

مقدمه Introduction

• آزمون DP 700: پیاده‌سازی راهکارهای مهندسی داده با Microsoft Fabric: مقدمه Exam DP-700: Implementing Data Engineering Solutions Using Microsoft Fabric: Introduction

درس ۱: آشنایی با مهندسی داده در Microsoft Fabric Lesson 1: Introduction to Microsoft Fabric Data Engineering

• دسترسی به Microsoft Fabric Accessing Microsoft Fabric

• بررسی اجزای کلیدی مهندسی داده در Microsoft Fabric Surveying the key components of Microsoft Fabric data engineering

• اهداف آموزشی Learning objectives

• کوییز Quiz

• مقایسه مهندسی داده، علم داده و تحلیل داده Comparing data engineering, data science, and analytics

• درک مفاهیم بنیادی Microsoft Fabric Understanding Microsoft Fabric fundamentals

• درک نقش مهندسان داده در اکوسیستم‌های داده مدرن Understanding the role of data engineers in modern data ecosystems

• درک مجوزهای مورد نیاز و لایسنس‌ها Understanding required permissions and licensing

درس ۲: پیکربندی فضای کاری (Workspaces) در Fabric Lesson 2: Configure Fabric Workspaces

• پیکربندی تنظیمات Spark Configuring Spark settings

• پیکربندی تنظیمات دامنه Configuring domain settings

• کوییز Quiz

• پیکربندی تنظیمات OneLake Configuring OneLake settings

• اهداف آموزشی Learning objectives

• پیکربندی تنظیمات جریان کاری داده‌ها Configuring data workflow settings

درس ۳: پیاده‌سازی مدیریت چرخه حیات Lesson 3: Implement Lifecycle Management

• اهداف آموزشی Learning objectives

• کوییز Quiz

• استفاده از Git برای کنترل نسخه فضای کاری و آیتم‌ها Using Git to version control workspaces and items

• به‌کارگیری پروژه‌های دیتابیس برای Warehouse Utilizing database projects for warehouse

• پیاده‌سازی خط لوله‌های استقرار (Deployment Pipelines) Implementing deployment pipelines

درس ۴: پیکربندی امنیت و حاکمیت داده‌ها Lesson 4: Configure Security and Governance

• پیکربندی کنترل‌های دسترسی RLS، CLS، سطح شیء و سطح پوشه/فایل Configuring RLS, CLS, object-level, and folder/file-level access controls

• اهداف آموزشی Learning objectives

• پیکربندی کنترل‌های دسترسی برای آیتم‌ها Configuring access controls for items

• پیکربندی و استفاده از امنیت OneLake Configuring and using OneLake security

• پیکربندی ماسک کردن دینامیک داده‌ها (Dynamic Data Masking) Configuring dynamic data masking

• کوییز Quiz

• پیکربندی کنترل‌های دسترسی برای فضای کاری Configuring access controls for workspaces

• اعمال برچسب‌های حساسیت و تایید آیتم‌ها Applying sensitivity labels and endorsing items

• پیکربندی و استفاده از لاگ‌های فضای کاری Configuring and using workspace logging

درس ۵: نحوه ارکستراسیون آیتم‌های Fabric Lesson 5: How to Orchestrate Fabric Items

• اهداف آموزشی Learning objectives

• پیکربندی زمان‌بندی خط لوله (Pipeline Schedules) Configuring pipeline schedules

• کوییز Quiz

• استفاده از پارامترها در نوت‌بوک‌ها Using parameters in notebooks

• استفاده از پارامترها و عبارات دینامیک در خط لوله‌ها Using parameters and dynamic expressions in pipelines

• پیکربندی زمان‌بندی‌های Dataflow Gen2 Configuring Dataflow Gen2 schedules

• پیکربندی زمان‌بندی‌های نوت‌بوک Configuring notebook schedules

درس ۶: طراحی و پیاده‌سازی الگوهای بارگذاری Lesson 6: Design and Implement Loading Patterns

• آماده‌سازی داده‌ها برای ورود به مدل ابعادی Preparing data for ingestion into a dimensional model

• پیاده‌سازی بارگذاری افزایشی داده‌ها (Incremental Loads) Implementing incremental data loads

• اهداف آموزشی Learning objectives

• پیاده‌سازی بارگذاری کامل داده‌ها (Full Loads) Implementing full data loads

• کوییز Quiz

درس ۷: جذب و تبدیل داده‌های دسته‌ای (Batch Data) Lesson 7: Ingest and Transform Batch Data

• طراحی یک مدل ابعادی Designing a dimensional model

• ایجاد و مدیریت Mirroring Creating and managing mirroring

• انتخاب بین Lakehouse و Warehouse برای ذخیره‌سازی داده‌ها Choosing between a lakehouse and a warehouse for data storage

• گروه‌بندی و تجمیع داده‌ها Grouping and aggregating data

• ایجاد و مدیریت Shortcutهای Lakehouse Creating and managing lakehouse shortcuts

• استفاده از خط لوله‌ها برای جذب داده‌ها Using pipelines to ingest data

• کوییز Quiz

• مدیریت داده‌های تکراری، مفقود و داده‌هایی با تأخیر در ورود Handling duplicate, missing, and late-arriving data

• جذب داده‌ها با استفاده از یکپارچه‌سازی مستمر از OneLake Ingesting data by using continuous integration from OneLake

• اهداف آموزشی Learning objectives

• تبدیل داده‌ها با استفاده از Power Query، PySpark، KQL و T SQL Transforming data using Power Query, PySpark, KQL, and T-SQL

درس ۸: جذب و تبدیل داده‌های جریانی (Streaming Data) Lesson 8: Ingest and Transform Streaming Data

• استفاده از توابع Windowing برای کوئری گرفتن از داده‌های جریانی Using windowing functions to query streaming data

• انتخاب بین Eventstream، Spark Structured Streaming و KQL برای استریم Choosing between Eventstream, Spark Structured Streaming, and KQL for streaming

• استفاده از Eventstreams برای پردازش داده‌ها Using Eventstreams to process data

• درک ذخیره‌سازی بومی دیتابیس KQL، ذخیره‌سازی دنبال‌کننده و Shortcutهای OneLake Understanding KQL database native storage, followed storage, and OneLake shortcuts

• استفاده از Spark Structured Streaming برای پردازش داده‌ها Using Spark Structured Streaming to process data

• استفاده از KQL برای پردازش داده‌ها Using KQL to process data

• اهداف آموزشی Learning objectives

• کوییز Quiz

درس ۹: مانیتورینگ آیتم‌های Fabric Lesson 9: Monitor Fabric Items

• مانیتورینگ رفرش‌های مدل معنایی Power BI Monitoring Power BI semantic model refreshes

• کوییز Quiz

• پیکربندی هشدارها Configuring alerts

• مانیتورینگ جذب داده‌ها Monitoring data ingestion

• اهداف آموزشی Learning objectives

• مانیتورینگ تبدیل داده‌ها Monitoring data transformation

درس ۱۰: نحوه شناسایی و رفع خطاها Lesson 10: How to Identify and Resolve Errors

• کوییز Quiz

• عیب‌یابی و رفع خطاهای نوت‌بوک Troubleshooting and resolving notebook errors

• اهداف آموزشی Learning objectives

• عیب‌یابی و رفع خطاهای Dataflow Troubleshooting and resolving dataflow errors

• عیب‌یابی و رفع خطاهای خط لوله (Pipeline) Troubleshooting and resolving pipeline errors

• عیب‌یابی و رفع خطاهای T SQL Troubleshooting and resolving T-SQL errors

• عیب‌یابی و رفع خطاهای Shortcut Troubleshooting and resolving Shortcut errors

• عیب‌یابی و رفع خطاهای Eventhouse و Eventstream Troubleshooting and resolving Eventhouse and Eventstream errors

درس ۱۱: نحوه بهینه‌سازی عملکرد Lesson 11: How to Optimize Performance

• بهینه‌سازی Eventstreams و Eventhouses Optimizing Eventstreams and Eventhouses

• کوییز Quiz

• بهینه‌سازی Warehouse Optimizing a warehouse

• بهینه‌سازی عملکرد Spark Optimizing Spark performance

• بهینه‌سازی جدول Lakehouse Optimizing a lakehouse table

• بهینه‌سازی خط لوله Data Factory Optimizing a data factory pipeline

• بهینه‌سازی عملکرد کوئری‌ها Optimizing query performance

• اهداف آموزشی Learning objectives

درس ۱۲: کاربردهای عملی و بررسی موردی Lesson 12: Practical Applications and Case Studies

• بررسی داستان‌های موفقیت در استفاده از Microsoft Fabric Exploring success stories using Microsoft Fabric

• به‌کارگیری درس‌های آموخته شده و بهترین تجربیات (Best Practices) Applying lessons learned and best practices

• اهداف آموزشی Learning objectives

• بررسی پروژه‌های کوچک هدایت‌شده Exploring guided mini-projects

• بررسی نمونه‌های خاص صنعتی (مالی، بهداشت و درمان، خرده‌فروشی) Surveying industry-specific examples (finance, healthcare, retail)

جمع‌بندی Summary

• آزمون DP 700: پیاده‌سازی راهکارهای مهندسی داده با Microsoft Fabric: جمع‌بندی Exam DP-700: Implementing Data Engineering Solutions Using Microsoft Fabric: Summary