آموزش مهندسی داده Azure با بیش از ۲۰ پروژه واقعی و عملی - آخرین آپدیت

سرفصل ها و درس ها

مقدمه Introduction

• مقدمه Introduction

• معرفی دوره و سرفصل‌ها Course Introduction & curriculum

• نحوه ساخت حساب رایگان Azure How to Create Azure Free Account

• نحوه ساخت حساب رایگان Microsoft Fabric How to Create Microsoft Fabric Free Account

پروژه ۱: پروژه جامع Microsoft Fabric - تجارت الکترونیک PROJECT 1 END TO END MICROSOFT FABRIC PROJECT - ECommerce Project

• معرفی پروژه PROJECT INTRODUCTION

• راه‌اندازی پروژه و منابع داده PROJECT SETUP & SOURCE SETUP

• Workspace و Lakehouse در Fabric FABRIC WORKSPACE & LAKEHOUSE

• خط لوله داده - کپی از ADLS به Lakehouse DATA PIPELINE - ADLS TO LAKEHOUSE COPY

• پاک‌سازی داده‌ها و گزارش‌گیری - PySpark و Power BI DATA CLEANING & REPORTING - PYSPARK + POWER BI

پروژه ۲: پروژه جامع مهندسی داده Azure Synapse PROJECT -2 END TO END AZURE SYNAPSE DATA ENGINEER PROJECT

• پروژه مهندسی داده Azure - ترکیب ADLS, ADF, Spark, SQL و Synapse AZURE DATA ENGINEER PROJECT - ADLS + ADF + SPARK + SQL - SYNAPSE

پروژه ۳: پروژه جامع خط لوله داده ADF - اعتبارسنجی Schema PROJECT -3 END TO END ADF DATA PIPELINE PROJECT - SCHEMA VALIDATION PROJECT

• پروژه اعتبارسنجی Schema - پروژه خط لوله داده ADF SCHEMA VALIDATION PROJECT - ADF DATA PIPELINE PROJECT

پروژه ۴: پروژه جامع Databricks خرده‌فروشی PROJECT -4 END TO END RETAIL DATABRICKS PROJECT

• معرفی پروژه PROJECT INTRODUCTION

• ایجاد لایه برنزی (Bronze) BRONZE LAYER CREATION

• ایجاد مجموعه داده‌های نقره‌ای (Silver) SILVER DATASET CREATION

• مجموعه داده‌های طلایی (Gold) و بصری‌سازی GOLD DATASET AND VISUALIZATION

پروژه ۵: پروژه جامع خط لوله داده - از REST API به ADLS PROJECT - 5 END TO END DATA PIPELINE PROJECT - REST API TO ADLS -

• پروژه خط لوله داده از REST API به ADLS با استفاده از Azure Data Factory REST API TO ADLS - DATA PIPELINE PROJECT USING AZURE DATA FACTORY

پروژه ۶: پروژه جامع معماری مدالیون در Microsoft Fabric PROJECT - 6 END TO END MEDALLION ARCHITECTURE PROJECT - MICROSOFT FABRIC

• معرفی پروژه PROJECT INTRODUCTION

• خط لوله داده - از ADLS به Lakehouse DATA PIPELINE - ADLS TO LAKEHOUSE

• پاک‌سازی داده‌ها و گزارش‌گیری - PySpark و Power BI DATA CLEANING & REPORTING- PYSPARK & POWER BI

پروژه ۷: پروژه‌های مهندسی داده خرده‌فروشی PROJECT 7 - END TO END RETAIL DATA ENGINEERING PROJECTS

• پروژه مهندسی داده Azure - ترکیب ADF, ADLS, Azure SQL, Databricks و Power BI AZURE DATA ENGINNEING PROJECT - ADF + ADLS + AZURE SQL + DATABRICKS + POWER BI

پروژه ۸: پروژه جامع خط لوله داده ADF - نوع SCD 1 PROJECT - 8 END TO END ADF DATA PIPELINE PROJECT - SCD TYPE - 1

• پروژه خط لوله داده SCD نوع ۱ با استفاده از Azure Data Factory SCD TYPE - 1 DATA PIPELINE PROJECT USING AZURE DATA FACTORY

پروژه ۹: پروژه جامع خط لوله Data Flow در ADF - نوع SCD 2 PROJECT - 9 END TO END ADF DATA FLOW PIPELINE PROJECT - SCD TYPE - 2

• پروژه خط لوله داده SCD نوع ۲ با استفاده از Data Flow در Azure Data Factory SCD TYPE - 2 DATA PIPELINE PROJECT USING DATA FLOW IN AZURE DATA FACTORY

پروژه ۱۰: پروژه جامع مهندسی داده Databricks PROJECT -10 END TO END DATABRICKS DATA ENGINNERING PROJECT

• پروژه مهندسی داده - ترکیب API, ADLS, ADF, Databricks و Spark SQL DATA ENGINNERING PROJECT - API + ADLS + ADF + DATABRICKS +SPARK SQL

پروژه ۱۱: پروژه جامع مهاجرت داده‌های Fabric - خط لوله داده جامع PROJECT - 10 END TO END FABRIC DATA MIGRATION PROJECT - END TO END DATA PIPELINE

• معرفی پروژه PROJECT INTRODUCTION

• مورد کاربرد تجاری و بررسی مسئله BUSINESS USE CASE & PROBLEM

• پیاده‌سازی عملی خط لوله داده جامع PRACTICAL - END TO END DATA PIPELINE

پروژه ۱۲: پروژه تحلیل سفارشات تجارت الکترونیک با Microsoft Fabric PROJECT - 11 END TO END MICROSOFT FABRIC ECOMMERCE ORDER ANALYTICS PROJECT

• معرفی پروژه PROJECT INTRODUCTION

• پیاده‌سازی عملی پروژه - خط لوله داده, Lakehouse و Spark SQL PROJECT PRACTICAL - DATA PIPELINE + LAKEHOUSE + SPARK SQL

• گزارش‌گیری با Power BI POWER BI & REPORTING

پروژه ۱۳: پروژه تحلیل منابع انسانی (HR) با Microsoft Fabric PROJECT -12 END TO END MICROSOFT FABRIC HR ANALYTIC PROJECT

• معرفی پروژه و مورد کاربرد تجاری PROJECT INTRODUCTION & BUSINESS USE CASE

• پیاده‌سازی عملی پروژه - خط لوله داده, Lakehouse, Data Flow Gen2 و Power BI PROJECT PRACTICAL - DATA PIPELIEN + LAKEHOUSE + DATA FLOW GEN2 + POWER BI

پروژه ۱۴: پروژه بارگذاری افزایشی داده‌ها در Microsoft Fabric PROJECT - 13 END TO END MICROSOFT FABRIC INCREMENTAL DATA LOAD PROJECT

• معرفی پروژه و مورد کاربرد تجاری PROJECT INTRODUCTION & BUSINESS USE CASE

• خط لوله داده جامع (End-to-End) END TO END DATA PIPELINE

پروژه ۱۵: پروژه‌های بیمه با Microsoft Fabric PROJECT - 14 END TO END MICROSOFT FABRIC INSURANCE PROJECTS

• معرفی پروژه و مورد کاربرد تجاری PROJECT INTRODUCTION & BUSINESS USECASE

• پیاده‌سازی عملی پروژه - ADLS, Lakehouse, PySpark و گزارش‌گیری PROJECT PRACTICAL - ADLS + LAKEHOUSE+ PYSPARK + REPORTING

پروژه ۱۶: پروژه‌های مهندسی داده خرده‌فروشی PROJECT - 15 END TO END RETAIL DATA ENGINEERING PROJECTS

• معرفی پروژه PROJECT INTRODUCTION

• پیاده‌سازی عملی پروژه - خط لوله داده, PySpark, Lakehouse و گزارش‌گیری PROJECTS PRACTICAL - DATA PIPELINE + PYSPARK + LAKEHOUSE + REPORTING

پروژه ۱۷: پروژه خط لوله داده SCD نوع ۱ در Microsoft Fabric PROJECT - 16 END TO END MICROSOFT FABRIC SCD TYPE -1 DATA PIPELINE PROJECT

• معرفی پروژه - SCD نوع ۱ PROJECT INTRODUCTION - SCD TYPE 1

• پروژه‌های جامع - خط لوله داده END TO END PROJECTS- DATA PIPELINE

پروژه ۱۸: پروژه خط لوله داده SCD نوع ۲ در Microsoft Fabric PROJECT - 17 END TO END MICROSOFT FABRIC SCD TYPE -2 DATA PIPELINE PROJECT

• معرفی پروژه PROJECT INTRODUCTION

• درک مجموعه داده‌ها - SCD نوع ۲ DATASET UNDERSTANDING - SCD TYPE-2

• پیاده‌سازی عملی پروژه PROJECT PRACTICAL

پروژه ۱۹: پروژه خط لوله ADF - سناریوی بررسی فایل خالی PROJECT - 18 ADF DATA PIPELINE PROJECT - EMPTY FILE CHECK SCENARIO

• بررسی فایل خالی - پروژه خط لوله داده ADF EMPTY FILE CHECK - DATA PIPELINE ADF PROJECT

پروژه ۲۰: پروژه خط لوله Azure Data Factory - سناریوی Unzip فایل PROJECT - 19 Azure Data Factory DATA PIPELINE PROJECT -FILE UNZIP SCENARIO

• سناریوی Unzip فایل - پروژه خط لوله داده Azure Data Factory File Unzip Scenario - Azure Data Factory DATA PIPELINE PROJECT

پروژه ۲۱: پروژه خط لوله Azure Data Factory - سناریوی حذف فایل PROJECT - 20 Azure Data Factory DATA PIPELINE PROJECT - Delete File Scenario

• سناریوی حذف فایل - پروژه خط لوله داده Azure Data Factory Delete File Scenario - Azure Data Factory DATA PIPELINE PROJECT

پروژه ۲۲: پروژه خط لوله ADF - حذف فایل‌های بزرگتر از ۱ مگابایت PROJECT-2` ADF DATA PIPELINE DELETE FILES GREATER 1 MB

• حذف فایل‌های بزرگتر از ۱ مگابایت - پروژه خط لوله داده Azure Data Factory Delete file greater than 1 mb) - Azure Data Factory DATA PIPELINE PROJECT

بونوس و بخش تکمیلی BONUS

• سوالات آمادگی برای مصاحبه مهندسی داده DATA ENGINEER INTERVIEW PREP QUESTIONS

• آموزش کامل Azure Data Factory COMPLETE AZURE data factory TUTORIAL

• آموزش Synapse SYNAPSE