آموزش Azure Data Factory را یاد بگیرید - آخرین آپدیت

سرفصل ها و درس ها

معرفی Introduction

• معرفی Introduction

• ساختار دوره Course Structure

• Azure Data Factory چیست؟ What is Azure Data Factory?

راه اندازی محیط Environment Setup

• نمای کلی ماژول Module Overview

• بررسی اجمالی گروه منابع Resource Group Overview

• دست در دست - ایجاد گروه منابع Hands on - Resource Group Creation

• دست روی -Azure Data Factory Creation Hands on -Azure Data Factory Creation

• ایجاد حساب ذخیره سازی دستی Hands on -Storage Account Creation

• دست در راه ایجاد -Azure SQL DB Hands on -Azure SQL DB Creation

• دست روی -Azure Cosmo DB Creation Hands on -Azure Cosmo DB Creation

• گروه منابع و منابع را خاتمه دهید Terminate Resource and Resource Group

• خلاصه ای از راه اندازی محیط Summary of Environment Setup

بلوک های ساختمان ADF Building Blocks Of ADF

• نمای کلی ماژول Module Overview

• خط لوله و فعالیت Pipeline And Activity

• خدمات مرتبط و مجموعه داده Linked Services And Datasets

• دست در دست - ایجاد یک سرویس پیوندی Hands on -Create a Linked Services

• فرمت فایل پشتیبانی شده Supported file format

• دست روی -یک مجموعه داده ایجاد کنید Hands on -Create a Dataset

• محرک ها Triggers

• دست روی -یک خط لوله ایجاد کنید Hands on -Create a Pipeline

یکپارچه سازی زمان اجرا Integration Runtime

• یکپارچه سازی زمان اجرا - مقدمه Integration Runtime - Introduction

• انواع یکپارچه سازی زمان اجرا Types of Integration Runtime

Copy Data Activity Copy Data Activity

• داده ها را از ذخیره سازی blob در adls gen2 کپی کنید Copy data from blob storage to adls gen2

• داده ها را از SQL DB در ADLS Gen2 کپی کنید Copy data from SQL DB to ADLS Gen2

• تغییر نام ستون در سیستم هدف Rename column in target system

• داده ها را از Azure Cosmo DB برای No SQL در ADLS Gen2 کپی کنید Copy data from Azure Cosmo DB for No SQL to ADLS Gen2

جریان داده ها Data Flows

• مقدمه ای بر جریان داده Introduction to Data Flow

• دریفت طرحواره در نگاشت جریان داده Schema drift in mapping data flow

• منبع و سینک در جریان داده ها Source and Sink in Data Flows

• ستون مشتق شده Derived Column

• انتخاب کنید Select

• فیلتر کنید Filter

• شعبه جدید New Branch

• پیوستن Join

• قالب Cast

• مرتب سازی Sort

• تقسیم مشروط - سناریوی 1 Conditional split-Scenario 1

• تقسیم مشروط-سناریو 2 Conditional split-Scenario 2

• تقسیم مشروط - سناریو 3 Conditional split-Scenario 3

• جستجو Lookup

• تجمیع Aggregate

• اتحاد. اتصال Union

• وجود داشته باشد Exist

• کلید جانشین Surrogate Key

• رتبه Rank

• تغییر ردیف Alter Row

• فلولت Flowlet

پارامترها و متغیرها Parameters & Variables

• پارامتر در خدمات مرتبط Parameter in linked services

• پارامتر در مجموعه داده ها Parameter in data sets

• پارامترها در خط لوله Parameters in pipeline

• پارامترهای جهانی Global parameters

• متغیر خط لوله Pipeline Variable

• متغیر سیستم System Variable

• خلاصه پارامترها و متغیرها Summary of Parameter & Variables

اتصال چندین فعالیت Connecting multiple activities

• اتصال فعالیت ها در Pipeline Connecting activities in Pipeline

کنترل فعالیت های جریان Control Flow Activities

• نمای کلی ماژول Module Overview

• متغیر را تنظیم کنید Set Variable

• افزودن متغیر Append Variable

• صبر کن Wait

• خط لوله را اجرا کنید Execute Pipeline

• فیلتر کنید Filter

• برای هر For Each

• اگر شرط If Condition

• تعویض Switch

• خلاصه فعالیت های جریان کنترل Summary of Control Flow Activities

محرک ها Triggers

• ماشه چیست What is trigger

• ماشه زمانبندی Schedule Trigger

• راه‌انداز رویداد ذخیره‌سازی Storage event trigger

• نمای کلی ماشه پنجره غلتشی Tumbling Window Trigger Overview

• ماشه پنجره غلتشی (حداکثر همزمانی و تاخیر) Tumbling Window Trigger (Max concurrency and Delay)

• ماشه پنجره غلتشی (تعداد و بازه خط مشی دوباره امتحان کنید در ثانیه) Tumbling Window Trigger (Retry Policy Count and interval in seconds)

• ماشه پنجره غلتشی (افزودن وابستگی) Tumbling Window Trigger (Add Dependency)

• ماشه پنجره غلتشی (افست و اندازه پنجره) Tumbling Window Trigger (Offset and Window Size)

• تفاوت بین پنجره غلتشی و ماشه برنامه ریزی شده Difference between Tumbling window and scheduled trigger

• خلاصه ای از محرک ها Summary of Triggers

نظارت بر Monitoring

• نظارت کنید Monitor

سناریوی دنیای واقعی Real World Scenario

• SCD نوع 1 را پیاده سازی کنید Implement SCD Type 1

• آشنایی با SCD نوع 2 Understanding SCD Type 2

• SCD نوع 2 را پیاده سازی کنید Implement SCD Type 2

• بلع مبتنی بر فراداده Metadata driven ingestion

• خط لوله عمومی برای کپی داده ها از ذخیره سازی Blob به Blob Storage Generic pipeline to copy data from Blob storage to Blob Storage

نتیجه Conclusion

• خلاصه دوره Summary of Course