آموزش دوره جامع مهندسی داده Azure Databricks (DP-750) سال 2026 - آخرین آپدیت

سرفصل ها و درس ها

راه‌اندازی و پیکربندی محیط Azure Databricks Set Up and Configure an Azure Databricks Environment

• پردازش‌های Job Job compute

• پردازش‌های بدون سرور (Serverless) Serverless compute

• تمرین عملی پردازش بدون سرور Serverless compute Hands-on

• پردازش‌های Warehouse Warehouse compute

• پردازش‌های کلاسیک (Classic) Classic compute

• پردازش‌های اشتراکی (Shared) Shared compute

• تمرین عملی پردازش‌های اشتراکی Shared compute Hands-on

• تنظیمات CPU CPU

• تعداد نودها (Node Count) Node count

• مقیاس‌پذیری خودکار (Autoscaling) Autoscaling

• تنظیمات خاتمه (Termination) Termination

• تمرین عملی تنظیمات عملکرد: CPU، Autoscaling و Termination Performance Setting - CPU, Autoscaling and Termination Hands on

• استفاده از Pooling Pooling

• تمرین عملی Pooling Pooling Hands-on

• شتاب‌دهنده Photon Photon acceleration

• زمان اجرای Databricks (Runtime) Databricks runtime

• نسخه Spark Spark version

• تمرین عملی تنظیمات: شتاب‌دهنده Photon و نسخه Spark Feature Setting: Photon Acceleration and Spark Version Hands-on

• نصب کتابخانه‌ها برای منابع پردازشی Installing libraries for compute resources

• پیکربندی دسترسی‌ها برای منابع پردازشی Configuring permissions for compute resources

• تمرین عملی پیکربندی دسترسی‌های منابع پردازشی Configuring permissions for compute resources Hands-on

• کاتالوگ‌ها (Catalogs) Catalogs

• طرح‌ها (Schemas) Schemas

• حجم‌ها (Volumes) Volumes

• تمرین عملی Unity Catalog: کاتالوگ، طرح و حجم Unity Catalog: Catalog, Schema and Volume Hands-on

• جداول (Tables) Tables

• تمرین عملی کار با جداول Tables Hands-on

• ویوها (Views) Views

• تمرین عملی کار با ویوها Views Hands-on

• ویوهای متریالایز شده Materialized views

• تمرین عملی ویوهای متریالایز شده Materialized views Hands-on

• مقایسه جداول Managed در مقابل External Managed vs External tables

• کاتالوگ‌های خارجی (Foreign Catalogs) Foreign catalogs

امنیت و حاکمیت اشیاء Unity Catalog Secure and Govern Unity Catalog Objects

• امنیت در سطح جدول Table level security

• تمرین عملی امنیت سطح جدول Table level security Hands-On

• امنیت در سطح ستون Column level security

• تمرین عملی امنیت سطح ستون Column level security Hands-On

• امنیت در سطح ردیف Row level security

• تمرین عملی امنیت سطح ردیف Row level security Hands-On

• اصول سرویس (Service Principals) Service principals

• هویت‌های مدیریت شده (Managed Identities) Managed identities

• یکپارچه‌سازی با Key Vault Key Vault integration

• تعاریف جدول Table definitions

• تعاریف ستون Column definitions

• تمرین عملی تعاریف جدول و ستون Table definitions & Column definition Hands-On

• کنترل دسترسی ABAC با تگ‌ها ABAC with tags

• تمرین عملی ABAC با تگ‌ها ABAC with tags Hands-On

• کنترل دسترسی ABAC با سیاست‌ها ABAC with policies

• ردیابی Lineage داده‌ها Lineage tracking

• تمرین عملی ردیابی Lineage Lineage tracking Hands-On

• ثبت لاگ‌های审计 (Audit logging) Audit logging

• استراتژی‌های اشتراک‌گذاری امن Secure sharing strategies

• تمرین عملی استراتژی‌های اشتراک‌گذاری امن Secure sharing strategies Hands-On

آماده‌سازی و پردازش داده‌ها Prepare and Process Data

• پارتیشن‌بندی (Partitioning) Partitioning

• خوشه‌بندی (Clustering) Clustering

• تمرین عملی Clustering Clustering Hands on

• جداول زمانی (Temporal Tables) Temporal tables

• تمرین عملی جداول Temporal Temporal Table Hands on

• اتصال Lakeflow Connect Lakeflow Connect

• نوت‌بوک‌ها Notebooks

• سرویس Azure Data Factory Azure Data Factory

• تمرین عملی Azure Data Factory Azure Data Factory Hands on

• فرمت Parquet Parquet

• فرمت Delta Delta

• فرمت CSV CSV

• فرمت JSON JSON

• فرمت Iceberg Iceberg

• استریم ساختاریافته Spark Spark Structured Streaming

• هاب‌های رویداد (Event Hubs) Event Hubs

• فیدهای CDC CDC feeds

• اتصال داده‌ها (Joins) Joins

• ادغام داده‌ها (Unions) Unions

• تغییر ساختار (Pivot/Unpivot) Pivot/Unpivot

• غیرنرمال‌سازی (Denormalization) Denormalization

• محدودیت‌ها (Constraints) Constraints

• چک‌های اعتبارسنجی Validation checks

• اجرای اجباری طرح (Schema Enforcement) Schema enforcement

• انتظارات خط لوله (Pipeline Expectations) Pipeline expectations

• عملیات Merge Merge

• عملیات Insert Insert

• عملیات Append Append

استقرار و نگهداری خط لوله‌های داده و حجم‌های کاری Deploy and Maintain Data Pipelines and Workloads

• ترتیب عملیات Order of operations

• مقایسه نوت‌بوک در برابر پایپ‌لاین‌های Declarative در Lakeflow Spark Notebook vs Lakeflow Spark Declarative pipelines

• راه‌اندازی Setup

• تریگرها (Triggers) Triggers

• زمان‌بندی (Scheduling) Scheduling

• هشدارها (Alerts) Alerts

• بازراه‌اندازی‌ها (Restarts) Restarts

• یکپارچه‌سازی با Git Git integration

• شاخه بندی (Branching) Branching

• درخواست‌های Pull (Pull Requests) Pull requests

• حل تداخلات (Conflict Resolution) Conflict resolution

• تست واحد (Unit Test) Unit

• تست یکپارچگی (Integration Test) Integration

• تست جامع (End to End) End to end

• تست پذیرش کاربر (UAT) UAT

• بسته‌بندی (Packaging) Packaging

• استقرار از طریق CLI Deployment via CLI

• استقرار از طریق REST APIها Deployment via REST APIs

• بهینه‌سازی مصرف کلاستر Cluster consumption optimization

• تعمیر و بازراه‌اندازی Lakeflow Jobs Repair/restart of Lakeflow Jobs

• تنظیم عملکرد Spark Job Spark job tuning

• تحلیل DAG DAG analysis

• رابط کاربری Spark UI Spark UI

• پروفایل‌بندی کوئری (Query Profiling) Query profiling

• بهینه‌سازی با دستور OPTIMIZE OPTIMIZE

• پاکسازی با دستور VACUUM VACUUM

• مانیتورینگ با Azure Monitor Azure Monitor

• تحلیل لاگ‌ها (Log Analytics) Log Analytics

• هشدارهای Azure Alert Azure Alert

• تمرین عملی Azure Alert Azure Alert Hands on

آزمون جامع تمرینی DP-750: Azure Databricks Data Engineer Associate DP-750: Azure Databricks Data Engineer Associate Practice Test

• تست تمرینی DP-750: بخش اول DP-750: Azure Databricks Data Engineer Associate Practice Test - 1

• تست تمرینی DP-750: بخش دوم DP-750: Azure Databricks Data Engineer Associate Practice Test - 2

• تست تمرینی DP-750: بخش سوم [Hotspot] DP-750: Azure Databricks Data Engineer Associate Practice Test - 3 [ Hotspot ]

• تست تمرینی DP-750: بخش چهارم [Hotspot] DP-750: Azure Databricks Data Engineer Associate Practice Test - 4 [ Hotspot ]

• تست تمرینی DP-750: بخش پنجم [بله/خیر] DP-750: Azure Databricks Data Engineer Associate Practice Test - 5 [ Yes / No ]

• تست تمرینی DP-750: بخش ششم DP-750: Azure Databricks Data Engineer Associate Practice Test - 6