آموزش جامع آمادگی آزمون گواهینامه Databricks Certified Data Engineer Associate - آخرین آپدیت

مقدمه Introduction

• مرور کلی دوره Course overview

1. پلتفرم Databricks Lakehouse 1. Databricks Lakehouse Platform

• متوقف کردن کلاسترها Terminating clusters

• مرور کلی معماری Databricks Overview of the Databricks architecture

• راه‌اندازی مجدد کلاسترها Restarting clusters

• آشنایی با پلتفرم Databricks Lakehouse Introduction to the Databricks Lakehouse platform

• تفاوت کلاسترهای All purpose و job All-purpose vs. job clusters

• ایجاد و مدیریت کلاسترها Creating and managing clusters

• فیلتر کردن لیست کلاسترها Filtering the clusters list

• پیکربندی زمان اجرای کلاستر (Runtimes) Configuring cluster runtimes

2. تغییر شکل داده‌ها با Apache Spark 2. Data Transformation with Apache Spark

• پشتیبانی از چندین زبان برنامه‌نویسی Multilanguage support

• نصب و استفاده از Databricks برای RStudio Installing and using Databricks for RStudio

• مرور کلی بر Databricks Repos Databricks Repos overview

• به اشتراک‌گذاری نوت‌بوک‌ها Sharing notebooks

• آشنایی با نوت‌بوک‌ها Introduction to notebooks

• تنظیم IntelliJ برای Databricks با Go Set up IntelliJ for Databricks with Go

• نصب و استفاده از Databricks CLI Installing and using the Databricks CLI

• اجرای نوت‌بوک‌ها Executing notebooks

3. مدیریت داده‌ها با Delta Lake 3. Data Management with Delta Lake

• پرس‌وجو از منابع داده خارجی Querying external data sources

• بررسی جداول Inspecting tables

• استفاده از Catalog Explorer Using Catalog Explorer

• بهینه‌سازی با Z ordering Z-ordering optimization

• ایجاد جداول از روی فایل‌ها Creating tables from files

• خط لوله‌های داده قابل اعتماد با Delta Lake Reliable data pipelines with Delta Lake

• تراکنش‌های ACID ACID transactions

• تغییر شکل بهینه داده‌ها با Spark SQL Efficient data transformation with Spark SQL

4. خط لوله‌های داده با Delta Live Tables 4. Data Pipelines with Delta Live Tables

• تفاوت خط لوله‌های مداوم و Triggered Continuous vs. triggered pipelines

• پاک‌سازی (Vacuuming) و جمع‌آوری زباله‌ها Vacuuming and garbage collection

• خط لوله‌های خودکار با Delta Live Tables Automated pipelines with Delta Live Tables

• پرس‌وجو از رویدادهای خط لوله Querying pipeline events

• اجزای Delta Live Tables Delta Live Tables components

• مثال جامع از Delta Live Tables End-to-end example of Delta Live Tables

• پیکربندی Auto Loader Configuring Auto Loader

• مستندسازی جداول Table documentation

5. مدیریت حجم‌های کاری با Jobs 5. Workloads with Jobs

• دموی Jobs در Databricks Databricks jobs demo

• مدیریت خطاها Handling failures

• وابستگی‌های تسک‌ها Task dependencies

• مشاهده تاریخچه اجرای Job Viewing job history

• استفاده از داشبوردها Using dashboards

• سازماندهی حجم‌های کاری با Jobs Orchestrating workloads with jobs

• پیکربندی تلاش‌های مجدد (Retries) Configuring retries

• گردش کارهای چند تسکی (Multitask) Multitask workflows

6. دسترسی به داده‌ها با Unity Catalog 6. Data Access with Unity Catalog

• بهترین روش‌ها برای اتصالات Best practices for connections

• دسترسی یکپارچه به داده‌ها با Unity Catalog Unified data access with Unity Catalog

• بهترین روش‌ها برای کاتالوگ‌ها Best practices for catalogs

• شروع سریع Unity Catalog با پایتون Unity Catalog quick start with Python

• اعمال امنیت روی اشیاء Applying object security

• تفاوت کاتالوگ‌ها و Metastoreها Catalogs vs. metastores

• بهترین روش‌ها برای واحدهای تجاری Best practices for business units