آموزش ساخت اولین خط لوله ETL خود با استفاده از Azure Databricks

سرفصل ها و درس ها

بررسی اجمالی دوره Course Overview

• بررسی اجمالی دوره Course Overview

شروع با Azure Databricks Getting Started with Azure Databricks

• بررسی اجمالی ماژول Module Overview

• طرح کلی دوره Course Outline

• پرونده برای Databricks The Case for Databricks

• جرقه 101 Spark 101

• دیتابریک چیست؟ What Is Databricks?

• م Datلفه های پایگاه داده Databricks Components

• Azure Databricks چیست؟ What Is Azure Databricks?

• خلاصه Summary

تنظیم محیط پایگاه داده خود Setting up Your Databricks Environment

• بررسی اجمالی ماژول Module Overview

• تنظیم فضای کاری Setting up Workspace

• ایجاد خوشه Creating Cluster

• کار با نوت بوک Working with Notebook

• پیکربندی امنیت Configuring Security

• سناریو Walkthrough Scenario Walkthrough

• خلاصه Summary

استخراج داده ها از چندین منبع Extracting Data from Multiple Sources

• بررسی اجمالی ماژول Module Overview

• درحال استخراج & nbsp؛ از خدمات ذخیره سازی Azure Extracting from Azure Storage Services

• خواندن چندین قالب فایل Reading Multiple File Formats

• استفاده از طرح ها Applying Schemas

• خلاصه Summary

تغییر شکل و تمیز کردن داده ها Transforming and Cleaning Data

• بررسی اجمالی ماژول Module Overview

• درک تحولات رایج Understanding Common Transformations

• تجزیه و تحلیل و تمیز کردن داده ها Analyzing and Cleaning Data

• اعمال تحولات Applying Transformations

• کار با Spark SQL Working with Spark SQL

• مدیریت داده های خراب Handling Corrupt Data

• خلاصه Summary

در حال بارگیری داده ها Loading Data

• بررسی اجمالی ماژول Module Overview

• در حال بارگیری در پرونده ها Loading to Files

• کار با جداول Databricks Working with Databricks Tables

• خلاصه Summary

ارکستراسیون خط لوله ETL Orchestrating ETL Pipeline

• بررسی اجمالی ماژول Module Overview

• تنظیم گردش کار Setting up Workflow

• برنامه ریزی با مشاغل Databricks Scheduling with Databricks Jobs

• همكاری با Azure Data Factory Orchestrating with Azure Data Factory

• خلاصه Summary

ایجاد خطوط لوله بهتر در پایگاه داده Building Better Pipelines on Databricks

• بررسی اجمالی ماژول Module Overview

• استفاده از Databricks API Using Databricks APIs

• درک دریاچه دلتا Understanding Delta Lake

• خلاصه Summary