آموزش فناوری‌های Azure Data Engineer برای مبتدیان [بسته] - آخرین آپدیت

دانلود Azure Data Engineer Technologies for Beginners [Bundle]

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:

چرا مهندس داده مایکروسافت Azure؟

  • مهندسی داده مایکروسافت Azure یکی از سریع‌ترین مشاغل در حال رشد و پرتقاضا در میان متخصصان علم داده است.
  • طبق گزارش Dice در سال 2019، رشد سالانه آگهی‌های شغلی برای مهندسان داده 88% بوده که بالاترین نرخ رشد در میان تمام مشاغل فناوری بوده است.
  • اگر به این حوزه علاقه‌مند هستید، هیچ زمان بهتری برای شروع یادگیری این فناوری‌های راه‌حل داده مایکروسافت Azure وجود ندارد.

نتایج مورد انتظار

پس از این دوره:

  • Microsoft Azure SQL Server: شما قادر خواهید بود گزینه استقرار مناسب Azure SQL Server، مدل خرید و سطح سرویس را بر اساس نیازمندی‌ها شناسایی کرده و آن را در فضای ابری مستقر کنید. همچنین می‌توانید پیکربندی امنیتی را برای محافظت از پایگاه داده خود تنظیم کنید.
  • Microsoft Azure SQL Data Warehouse: شما قادر خواهید بود Azure Synapse Analytics (که قبلاً با نام Azure SQL Data Warehouse شناخته می‌شد) را در محیط ابری Azure مستقر کنید. درک خوبی از معماری داخلی MPP خواهید داشت و می‌توانید انبار داده محلی خود را تجزیه و تحلیل کرده و داده‌ها را به Azure Data Warehouse منتقل کنید.
  • Microsoft Azure Data Lake: شما قادر خواهید بود حساب ذخیره‌سازی Azure Data Lake را ایجاد کرده، آن را با داده‌ها پر کنید و با استفاده از Databricks و HDInsight آن را تجزیه و تحلیل کنید.
  • Microsoft Azure Data Factory: شما اجزای کلیدی و مزایای Azure Data Factory را درک خواهید کرد. قادر خواهید بود پایپ‌لاین‌های ساده ایجاد، زمان‌بندی و نظارت کنید.
  • مبانی Hadoop: درک اساسی از اکوسیستم Hadoop و 3 بلوک اصلی آن خواهید آموخت. این ماژول شما را برای شروع یادگیری Big Data در Azure Cloud با استفاده از HDInsight آماده می‌کند.
  • Microsoft Azure HDInsight: متوجه خواهید شد که چگونه HDInsight کار با Hadoop را آسان می‌کند و یک دمو ساده را مشاهده خواهید کرد که در آن داده‌ها را از Data Lake دریافت می‌کنیم، از طریق Hive پردازش می‌کنیم و سپس داده‌ها را در SQL Server ذخیره می‌کنیم.
  • Cosmos DB: تمام مفاهیم اساسی Cosmos DB را درک خواهید کرد و قادر به ایجاد پایگاه داده، کانتینر، اسناد جدید، انتخاب کلید پارتیشن مناسب، پیکربندی توزیع جهانی و استفاده از سایر ویژگی‌های مهم خواهید بود.
  • سرویس استریم: جزئیات به زودی اضافه خواهد شد.
  • Databricks: درس‌های ویدیویی اضافه شده‌اند، جزئیات به زودی در اینجا اضافه خواهد شد.
  • سرویس ذخیره‌سازی: درس‌های ویدیویی اضافه شده‌اند، جزئیات به زودی در اینجا اضافه خواهد شد.

مخاطبان هدف

  • مبتدیان در پلتفرم مایکروسافت Azure
  • مهندسان داده مایکروسافت Azure
  • دانشمندان داده مایکروسافت Azure
  • توسعه‌دهندگان پایگاه داده و BI
  • مدیران پایگاه داده
  • تحلیلگران داده یا مشاغل مشابه
  • مشاغل مرتبط با پایگاه داده محلی که می‌خواهند نحوه پیاده‌سازی این فناوری‌ها را در Azure Cloud بیاموزند.
  • هر کسی که به دنبال شروع شغل خود به عنوان یک مهندس داده Azure است.

سطح دوره

  • مبتدی (100)
  • "اگر در حال حاضر تجربه دارید و روی این فناوری‌ها کار می‌کنید، این ممکن است بهترین دوره برای شما نباشد."
  • من چند دوره فشرده (رایگان) برای مبتدیان مطلق دارم، می‌توانید لینک‌ها را در وب سایت من پیدا کنید.

پیش‌نیازها

  • مفاهیم پایه T-SQL و پایگاه داده
  • اشتراک آزمایشی رایگان مایکروسافت Azure

زبان دوره

  • انگلیسی
  • اگر با زبان انگلیسی راحت نیستید، لطفاً در دوره شرکت نکنید، زیرا زیرنویس‌ها برای درک دوره کافی نیستند.

محتوای دوره

  • درس‌های ویدیویی، PPTs، منابع دمو، آزمون، تکالیف و سایر لینک‌های مهم
  • دسترسی کامل مادام‌العمر با تمام به‌روزرسانی‌های آینده
  • گواهی اتمام دوره
  • ضمانت بازگشت وجه 30 روزه

به‌روزرسانی‌های دوره

من به طور مداوم محتوای جدیدی را در قالب سخنرانی‌ها و دموها اضافه می‌کنم. لطفاً گزارش‌های زیر را برای تغییرات گذشته و آینده پیدا کنید.

به‌روزرسانی‌های قبلی:

  • ژانویه 2021 - ماژول Synapse با تمام تغییرات جدید بازنگری شد.
  • آگوست 2020 - درس‌های مربوط به رمزگذاری داده‌ها اضافه شد.
  • جولای 2020 - نظارت و بهینه‌سازی خدمات.
  • جولای 2020 - AMS (Azure Monitoring Service).
  • جولای 2020 - Azure Data Factory با تمام به‌روزرسانی‌های جدید مجدداً ضبط شد.
  • جولای 2020 - پایگاه داده‌های NoSQL در مایکروسافت Azure (Azure Blob Storage).
  • جولای 2020 - ماژول Azure Databricks اضافه شد.
  • جولای 2020 - ماژول Azure Streaming Analytics اضافه شد.
  • ژوئن 2020 - ماژول Azure Cosmos DB اضافه شد.
  • مه 2020 - دوره کامل در مورد Data Lake.
  • آوریل 2020 - ماژول‌هایی در مورد مبانی رایانش ابری Azure و پروفایل مهندس داده اضافه شد.
  • آوریل 2020 - دوره فشرده در مورد رایانش ابری و انبار داده اضافه شد.
  • مارس 2020 - Azure Synapse Analytics اضافه شد.
  • فوریه 2020 - Azure SQL Database اضافه شد.
  • اکتبر 2019 - Azure HDInsight اضافه شد.
  • سپتامبر 2019 - Azure Data Factory اضافه شد.
  • آگوست 2019 - دوره در مورد Azure Data Lake ایجاد شد.

جزئیات دوره

در پایان این دوره:

  • Microsoft Azure SQL Server:
    • مزایای Azure Database نسبت به پایگاه داده محلی را خواهید دانست.
    • قادر خواهید بود هر سه نوع استقرار PaaS Azure Database (تک، Elastic Pool، Managed Instance) را راه‌اندازی کنید.
    • مدل‌های مختلف خرید و سطوح سرویس و نحوه پیکربندی آن‌ها را بر اساس نیازمندی‌ها خواهید آموخت.
    • قادر خواهید بود Azure Database را در ماشین مجازی (IaaS) راه‌اندازی کنید.
    • قادر خواهید بود پایگاه داده Elastic Pool را مستقر کرده و پایگاه‌های داده بیشتری را به Pool اضافه/حذف کنید.
    • قادر خواهید بود پایگاه داده Managed Instance را مستقر کرده، آن را پیکربندی کرده و با SQL Server Management Studio خود متصل کنید.
  • Microsoft Azure Synapse Analytics Service:
    • خواهید آموخت که چرا باید راه‌حل‌های انبار داده را در فضای ابری در نظر بگیریم.
    • درباره سرویس جدید Azure Synapse Analytics مایکروسافت و چگونگی ترکیب انبار داده سازمانی و تجزیه و تحلیل Big Data و ارائه یک تجربه یکپارچه برای دریافت، آماده‌سازی، مدیریت و سرویس‌دهی داده‌ها برای نیازهای فوری BI و یادگیری ماشین خواهید آموخت.
    • تفاوت بین معماری سنتی، مدرن و Synapse را خواهید آموخت.
    • معماری معروف MPP (Massive Parallel Processing) Azure را خواهید آموخت.
    • همچنین مفاهیم داخلی بسیاری مانند توزیع داده‌ها، Sharding و پارتیشن‌بندی را خواهید آموخت.
    • روش‌های مختلف مهاجرت و بهترین شیوه‌ها را خواهید آموخت.
    • پیکربندی PolyBase (بهترین روش بارگذاری) را خواهید آموخت.
    • با استفاده از SSIS، Data Factory و PolyBase، دموهای زیادی را برای مهاجرت داده‌ها به Azure SQL Data Warehouse انجام خواهید داد.
  • Microsoft Azure Data Lake Gen1:
    • محدودیت‌های سیستم‌های پایگاه داده سنتی در مدیریت انقلاب Big Data را خواهید آموخت.
    • تفاوت بین Azure Data Lake، SSIS، Hadoop و Data Warehouse را خواهید آموخت.
    • قادر خواهید بود حساب ذخیره‌سازی Azure Data Lake Gen1 را ایجاد کرده، آن را با داده‌ها پر کنید و با استفاده از زبان U-SQL آن را تجزیه و تحلیل کنید.
  • Microsoft Azure Data Factory:
    • اجزای کلیدی و مزایای Azure Data Factory را درک خواهید کرد.
    • قادر خواهید بود پایپ‌لاین‌های ساده ایجاد، زمان‌بندی و نظارت کنید.
  • مبانی Hadoop:
    • درک اساسی از اکوسیستم Hadoop و 3 بلوک اصلی آن خواهید آموخت.
    • این ماژول شما را برای شروع یادگیری Big Data در Azure Cloud با استفاده از HDInsight آماده می‌کند.
  • Microsoft HDInsight:
    • خواهید آموخت که چالش‌های Hadoop چیست و چگونه HDInsight این چالش‌ها را حل می‌کند.
    • همچنین انواع کلاستر، معماری HDInsight و سایر جنبه‌های مهم Azure HDInsight را خواهید آموخت.
    • همچنین یک دمو را مشاهده خواهید کرد که در آن داده‌ها را از Data Lake دریافت می‌کنیم، از طریق Hive پردازش می‌کنیم و سپس داده‌ها را در SQL Server ذخیره می‌کنیم.

نظرات برخی از دانشجویان

  • "یکی از شگفت‌انگیزترین دوره‌هایی که تا به حال در Udemy گذرانده‌ام. لطفاً در شرکت در این دوره تردید نکنید. مدرس واقعاً حرفه‌ای است و تجربه زیادی در مورد موضوع دوره دارد. - Khadija Badary
  • اکثر مفاهیم به خوبی توضیح داده شده‌اند. این یک دوره ضروری برای مبتدیان است - Manoranjan Swain
  • من از توضیح دقیق همه چیز برای یک مبتدی در این دوره قدردانی می‌کنم. این به من کمک خواهد کرد تا بر چالش‌های محل کارم غلبه کنم - Benjamin Curtis
  • دوره خوبی برای مبتدیان. لابراتوارها برای درک مفاهیم بسیار مفید هستند. متشکرم - Sapna

سرفصل ها و درس ها

مرور دوره و تعیین انتظارات Course Overview and Set Expectations

  • مرور دوره و تعیین انتظارات Course Overview and Set Expectations

  • دوره‌های مشابه؟ کدام را باید بگذرانم؟ Similar courses? which one should I take?

  • سوالات متداول مربوط به دوره - نکته مهم QAs related to course - Imp Note

  • چگونه پس از ۱۲ ماه از Azure Portal به صورت رایگان استفاده کنم؟ How to keep using Azure Portal for FREE after 12 months?

  • چگونه اعتبار رایگان برای Azure Portal دریافت کنم؟ How to get FREE credits for Azure Portal

  • قبل از شروع... Before you start...

مقدمه‌ای بر Azure Cloud Computing Introduction to Azure Cloud Computing

  • دانلود PPT این ماژول Download PPT of this Module

  • مقدمه Introduction

  • ایجاد اشتراک رایگان Azure Create Azure free subscription

  • مرور کلی Azure Portal Azure Portal overview

  • مرور کلی خدمات Azure Azure Services Overview

  • خدمات مدیریت شده و غیر مدیریت شده Managed and Unmanaged Service

  • گروه مدیریت منابع و اشتراک Resource Management group and Subscription

  • گروه‌های منابع Resource Groups

  • ارائه‌دهنده منابع Resource Provider

  • برچسب‌گذاری Tagging

  • کنترل دسترسی Access Control

  • دمو - ایجاد سرویس Azure SQL Database Demo - Create Azure SQL Database service

  • حذف منابع و تعیین بودجه Delete resources and set budget

  • نتیجه‌گیری Conclusion

مقدمه‌ای بر پروفایل مهندس داده Introduction to Data Engineer Profile

  • دانلود PPT این ماژول Download PPT of this Module

  • مقدمه Introduction

  • نقش و مسئولیت مهندس داده Data Engineer role and responsibility

  • مقدمه‌ای بر فناوری‌های مهندس داده Introduction to Data Engineer technologies

  • نتیجه‌گیری Conclusion

****** Azure SQL Database ****** Azure SQL Database ******

  • مقدمه ماژول Module Introduction

  • دانلود PPT - Azure SQL Database Download PPT - Azure SQL Database

  • **** بخش **** - مقدمه‌ای بر Azure SQL Database **** SECTION **** - Introduction to Azure SQL Database

  • مقدمه Introduction

  • چرا SQL Server را در Azure انتخاب کنیم؟ Why choosing SQL Server in Azure

  • پیشنهادات پایگاه داده IaaS و PaaS در Azure Azure IaaS vs PaaS database offerings

  • Iaas در مقابل Instance مدیریت شده Iaas vs Managed Instance

  • گزینه‌های استقرار PaaS SQL Server SQL Server PaaS deployment options

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • **** بخش **** - Azure SQL Server در ماشین مجازی (IaaS) **** SECTION **** - Azure SQL Server in Virtual Machine (IaaS)

  • مقدمه Introduction

  • SQL Server در ماشین مجازی Azure SQL Server in Azure Virtual Machine

  • دمو - SQL Server در ماشین مجازی Azure Demo - SQL Server in Azure Virtual Machine

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • **** بخش **** - Azure Single Database **** SECTION **** - Azure Single Database

  • مقدمه Introduction

  • دمو - Azure Single Database Demo - Azure Single Database

  • مدل‌های خرید و سطح سرویس Purchasing models and Service Tier

  • Azure Database در مقابل Azure Data Warehouse Azure Database vs Azure Data warehouse

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • **** بخش **** - Elastic Database Pool **** SECTION **** - Elastic Database Pool

  • مقدمه Introduction

  • Azure Elastic Database Azure Elastic Database

  • دمو - Azure Elastic Database Demo - Azure Elastic Database

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • **** بخش **** - Managed Instance Database **** SECTION **** - Managed Instance Database

  • مقدمه Introduction

  • Azure Managed Instance Database Azure Managed Instance Database

  • تفاوت بین محیط داخلی و Instance مدیریت شده Difference between on-premises and Managed Instance

  • گزینه‌های انتقال برای Instance مدیریت شده Migration options for Managed Instance

  • سطوح سرویس برای Instance مدیریت شده Service tiers for Managed Instance

  • عملیات مدیریت Management operations

  • دمو - Instance مدیریت شده Demo - Managed Instance

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • **** بخش **** - امنیت پایگاه داده Azure **** SECTION **** - Azure Database Security

  • مقدمه Introduction

  • گزینه‌های امنیتی پایگاه داده Azure Azure Database Security options

  • امنیت پیشرفته Azure Managed Instance Azure Managed Instance advance security

  • رمزگذاری داده در حالت سکون و در حال انتقال Encrypting Data at Rest and Motion

  • پوشاندن پویا داده‌ها Dynamic Data Masking

  • دسترس‌پذیری بالا در مقابل بازیابی فاجعه High Availability vs Disaster Recovery

  • RTO در مقابل RPO RTO vs RPO

  • گزینه‌های دسترسی بالا و بازیابی فاجعه در Azure SQL Database Azure SQL Database High Availability and Disaster Recovery options

  • پشتیبان‌گیری و بازیابی Azure SQL Database Azure SQL Database Backup and Restore

  • مقیاس‌پذیری Azure SQL Database Azure SQL Database Scaling

  • مراجع بیشتر از Microsoft Docs Further References from Microsoft Docs

  • آزمون تمرینی Practice Test

  • نظارت از طریق پورتال Monitoring through portal

  • نظارت از طریق ابزارهای خارجی Monitoring through external tools

  • عملکرد هوشمند و تنظیم خودکار Intelligent performance and Automatic Tuning

  • بینش عملکرد کوئری Query Performance Insight

****** Azure SQL Data Warehouse ****** Azure SQL Data Warehouse *****

  • به‌روزرسانی‌های مهم در مورد تغییرات جدید - لطفاً بخوانید IMPORTANT Updates on new changes - PLEASE READ

  • انبار داده - دوره فشرده Data Warehouse - crash course

  • مقدمه ماژول Module Introduction

  • منابع PPT و دمو Azure Synapse Azure Synapse - PPT and Demo Resources

  • **** بخش به‌روزرسانی شده **** - مقدمه‌ای بر سرویس Azure Synapse Analytics **** UPDATED SECTION **** - Introduction to Azure Synapse Analytics Service

  • مقدمه Introduction

  • چرا انبارداری در فضای ابری Why warehousing in cloud

  • معماری انبار سنتی در مقابل مدرن Traditional vs Modern Warehouse architecture

  • سرویس Synapse Analytics چیست؟ What is Synapse Analytics Service

  • دمو: ایجاد Dedicated SQL Pool Demo: Create Dedicated SQL Pool

  • دمو: اتصال SQL Pool با SSMS Demo: Connect SQL Pool with SSMS

  • دمو: ایجاد Azure Synapse Analytics Workspace Demo: Create Azure Synapse Analytics Workspace

  • دمو: کاوش Synapse Studio V2 Demo: Explore Synapse Studio V2

  • دمو: ایجاد Dedicated SQL Pool و Spark Pool از داخل Synapse Studio Demo: Create Dedicated SQL Pool and Spark Pool from inside Synapse Studio

  • دمو: تجزیه و تحلیل داده با استفاده از Dedicated SQL Pool Demo: Analyse Data using Dedicated SQL Pool

  • تجزیه و تحلیل داده با استفاده از دفترچه یادداشت Apache Spark Analyse Data using Apache Spark Notebook

  • دمو: تجزیه و تحلیل داده با استفاده از Serverless SQL Pool Demo: Analyse Data using Serverless SQL Pool

  • دمو: ابزار کپی Data Factory از تب Integrate Synapse Demo: Data Factory Copy Tool from Synapse Integrate Tab

  • دمو: نظارت بر Synapse Analytics Studio Demo: Monitor Synapse Analytics Studio

  • Azure Synapse یک تغییر دهنده بازی Azure Synapse a Game changer

  • مزایای Azure Synapse Azure Synapse Benefits

  • تجربه یکپارچه Synapse Synpase unified experience

  • خلاصه Summary

  • آزمون تمرینی Practice Test

  • **** بخش **** - داخلی و معماری Azure Synapse **** SECTION **** - Azure Synapse Internal and Architecture

  • مقدمه Introduction

  • معماری MPP Azure Synapse Azure Synapse MPP Architecture

  • الگوهای ذخیره‌سازی و پارتیشن‌بندی Storage and Sharding patterns

  • توزیع داده و کلیدهای توزیع Data Distribution and Distributing Keys

  • انواع داده و انواع جدول Data Types and Table Types

  • پارتیشن‌بندی Partitioning

  • بهترین شیوه‌ها برای جداول Fact و Dimension Best Practices for Fact and Dimension tables

  • دمو - تجزیه و تحلیل توزیع داده قبل از انتقال به Azure Demo - Analyse data distribution before migration to azure

  • خلاصه Summary

  • آزمون تمرینی Practice Test

  • **** بخش **** - انتقال داده به Azure Synapse Data Warehouse **** SECTION **** - Data Migration to Azure Synapse Data Warehouse

  • مقدمه Introduction

  • ۵ بهترین روش برای بارگذاری داده 5 best practices for Data Load

  • روش‌های مختلف بارگذاری DIfferent loading methods

  • بارگذاری با SSIS در مقابل PolyBase Loading with SSIS vs PolyBase

  • دمو - بارگذاری با SSIS Demo - Loading with SSIS

  • دمو - بارگذاری با Polybase Demo - Loading with Polybase

  • دمو - بارگذاری با Data Factory Demo - Loading with Data Factory

  • خلاصه Summary

  • آزمون تمرینی Practice Test

  • سوال تکلیف - آزمایشگاه: Lake to Synapse Assignment Question - Lab: Lake to Synapse

  • راه‌حل تکلیف - آزمایشگاه: Lake to Synapse Assignment Solution - Lab: Lake to Synapse

  • **** بخش **** - لایه‌های امنیتی در سرویس Azure Synapse **** SECTION **** - Security layers in Azure Synapse Service

  • مقدمه Introduction

  • امنیت پیشرفته داده Advance Data Security

  • حسابرسی Auditing

  • امنیت شبکه Network Security

  • رمزگذاری شفاف داده Transparent data encryption

  • پوشاندن پویا داده‌ها Dynamic Data Masking

  • مدیریت دسترسی Access Management

  • خلاصه Summary

  • آزمون تمرینی Practice Test

  • **** بخش **** - پیکربندی و بهینه‌سازی سرویس Azure Synapse **** SECTION **** - Configuring and Optimizing Azure Synapse Service

  • مقدمه Introduction

  • گزینه‌های پیکربندی Configuration Options

  • انجام سایر وظایف Performing other tasks

  • پشتیبان‌گیری و بازیابی Backup and Restore

  • مقیاس‌پذیری Scaling

  • بهینه‌سازی قیمت Price Optimization

  • مدیریت حجم کار Managing Workloads

  • نظارت Monitoring

  • پشتیبانی و عیب‌یابی Support and Troubleshooting

  • حذف منابع Delete Resources

  • خلاصه Summary

  • آزمون تمرینی Practice Test

  • یادداشت‌های سریع/برگه تقلب DP-200 DP-200 Quick Notes/cheat sheet

****** Azure Data Lake ****** Azure Data Lake ******

  • منابع PPT و دمو Data Lake Data Lake - PPT and Demo Resources

  • مقدمه Introduction

  • بیان مسئله Problem statement

  • Data Lake چیست؟ و چگونه این مشکل را حل می‌کند؟ What is Data Lake? and how it can solve this problem?

  • Data Lake در مقابل Hadoop Data Lake vs Hadoop

  • Data Lake Gen2 چگونه تکامل یافته است؟ How Data Lake Gen2 evolved?

  • Blob Storage در مقابل Data Lake Blob Storage vs Data Lake

  • فضای نام سلسله مراتبی Hierarchical namespace

  • دمو - ایجاد حساب Azure Data Lake Gen2 Demo - Create Azure Data Lake Gen2 Account

  • دمو - مرور کلی حساب Data Lake Gen2 Demo - Data Lake Gen2 account overview

  • سایر ویژگی‌های Data Lake Gen2 Data Lake Gen2 other features

  • **** بخش **** - دریافت داده به Data Lake از طریق ابزارهای مختلف **** SECTION **** - Data Lake Ingestion through diff tools

  • کاوش ابزارهای مختلف برای دریافت داده در Azure Data Lake Gen2 Explore different tools to Ingest Data in Azure Data Lake Gen2

  • دمو - انتقال از محیط داخلی به Data Lake Gen2 با استفاده از پورتال و Storage Explorer Demo - On-Premises to Data Lake Gen2 using portal and storage explorer

  • دمو - انتقال از محیط داخلی به Data Lake Gen2 با استفاده از azcopy Demo - On-Premises to Data Lake Gen2 using azcopy

  • دمو - انتقال از Azure Blob به Data Lake Gen 2 با استفاده از Data Factory Demo - Azure Blob to Data Lake Gen 2 using Data Factory

  • دمو - انتقال از Azure SQL Database به Data Lake Gen2 با استفاده از Data Factory Demo - Azure SQL Database to Data Lake Gen2 using Data Factory

  • دمو - انتقال از Amazon S3 به Data Lake Gen2 با استفاده از Data Factory Demo - Amazon S3 to Data Lake Gen2 using Data Factory

  • **** بخش **** - جریان داده حول Data Lake **** SECTION **** - Data flow around Data Lake

  • جریان داده حول Data Lake Data flow around Data Lake

  • Data Lake و خوشه‌های گذرا Data Lake and Transient clusters

  • پردازش داده با HDInsight Data Processing using HDInsight

  • **** بخش **** - پردازش Data Lake از طریق Databricks **** SECTION **** - Data Lake Processing through Databricks

  • نکته مهم در مورد این دمو Imp Note about this Demo

  • مرور کلی دمو Demo overview

  • تأمین Databricks، خوشه‌ها و دفترچه یادداشت Provision Databricks, Clusters and workbook

  • اتصال Data Lake به DBFS دیتابریکس Mount Data Lake to Databricks DBFS

  • کاوش، تجزیه و تحلیل، پاک‌سازی، تبدیل داده‌ها Explore, Analyze, Clean, Transform

  • **** بخش **** - لایه‌های امنیتی Data Lake **** SECTION **** - Data Lake Security Layers

  • مقدمه Introduction

  • کلیدهای دسترسی ذخیره‌سازی Storage Access Keys

  • SAS - امضای دسترسی مشترک SAS - Shared Access Signature

  • Azure Active Directory Azure Active Directory

  • کنترل دسترسی مبتنی بر نقش (RBAC) Role Based Access Control (RBAC)

  • لیست کنترل دسترسی (ACL) Access Control list (ACL)

  • فایروال‌ها و شبکه‌های مجازی Firewalls and Virtual Networks

  • رمزگذاری در حال انتقال Encryption in Transit

  • رمزگذاری در حالت سکون Encryption at Rest

  • حفاظت پیشرفته از تهدید Advanced threat protection

  • **** بخش **** - نظارت و بهینه‌سازی Data Lake **** SECTION **** - Data Lake Monitoring and Optimization

  • گزارش فعالیت Activity Log

  • دمو: گزارش‌های فعالیت Demo: Activity Logs

  • متریک‌ها Metrics

  • دمو: متریک‌ها Demo: Metrics

  • دمو: بینش‌ها Demo: Insights

  • دمو: هشدارها Demo: Alerts

  • تنظیمات تشخیصی Diagnostic settings

  • دمو: تنظیمات تشخیصی Demo: Diagnostic settings

  • بهینه‌سازی Optimization

****** پایگاه‌های داده NoSQL در Microsoft Azure ****** NoSQL Databases in Microsoft Azure ******

  • منابع PPT و دمو PPT and Demo Resources

  • مقدمه‌ای بر NoSQL Introduction to NoSQL

  • SQL در مقابل NoSQL SQL vs NoSQL

  • ۴ نوع پایگاه داده NoSQL 4 types of NoSQL Databases

  • پیشنهادات NoSQL توسط Microsoft Azure NoSQL Offerings by Microsoft Azure

  • مقدمه‌ای بر Azure Storage Azure Storage Introduction

  • دمو: قسمت ۱ تأمین حساب Azure Storage Demo: Part 1 Provision Azure Storage Account

  • قسمت ۲ دمو: تکثیر Azure Storage Demo Part 2: Azure Storage Replication

  • دمو: قسمت ۳ ادامه تأمین حساب Azure Storage Demo: Part 3 Continue Provisioning Azure Storage account

  • Azure Blob Storage Azure Blob Storage

  • مدیریت چرخه حیات داده Managing the Data LifeCycle

  • Azure Storage - گزینه‌های HA و DR Azure Storage - HA and DR Options

****** Azure Cosmos DB ****** Azure Cosmos DB ******

  • منابع PPT و دمو Cosmos DB Cosmos DB - PPT and Demo Resources

  • بیان مسئله چگونه Cosmos DB تکامل یافته است Problem Statement How Cosmos DB Evolved

  • ویژگی‌های Cosmos DB Cosmos DB Features

  • Cosmos DB - ۵ API چند مدلی Cosmos DB - Multi Model 5 APIs

  • Azure Table Storage در مقابل Cosmos DB Table API Azure Table Storage vs Cosmos DB Table API

  • تأمین حساب Cosmos DB Provision Cosmos DB Account

  • Cosmos DB - پایگاه داده، کانتینرها و موارد Cosmos DB - Database , Containers and items

  • Cosmos DB - توان عملیاتی و واحدهای درخواست Cosmos DB - Throughput and Request units

  • Cosmos DB - مقیاس‌پذیری افقی Cosmos DB - Horizontally Scalable

  • Cosmos DB - پارتیشن و کلید پارتیشن‌بندی Cosmos DB - Partition and Partitioning key

  • Cosmos DB - توان عملیاتی اختصاصی در مقابل اشتراکی Cosmos DB - Dedicated vs Shared throughput

  • Cosmos DB - اجتناب از پارتیشن‌های داغ Cosmos DB - Avoiding hot partitions

  • Cosmos DB - پارتیشن تکی در مقابل پارتیشن متقابل Cosmos DB - Single partition vs Cross partition

  • Cosmos DB - کلید ترکیبی Cosmos DB - Composite Key

  • Cosmos DB - بهترین شیوه‌ها برای کلید پارتیشن Cosmos DB - Partition key best practice

  • Cosmos DB - نمایه‌سازی خودکار Cosmos DB - Automatic Indexing

  • دمو درج و پرس‌وجو داده در Cosmos DB شما Demo Insert and query data in your cosmos DB

  • Cosmos DB - ویژگی زمان تا پایان عمر (Time to Live) Cosmos DB - Time to Live feature

  • Cosmos DB - ویژگی توزیع جهانی Cosmos DB - Globally Distribution feature

  • Cosmos DB - ویژگی چند استاد (Multi Master) Cosmos DB - Multi Master feature

  • Cosmos DB - انتقال دستی در مقابل خودکار خرابی Cosmos DB - Manual vs Automatics Failover

  • Cosmos DB - ۵ سطح سازگاری Cosmos DB - 5 consistent levels

  • Cosmos DB - Azure CLI Cosmos DB - Azure CLI

  • Cosmos DB - قیمت‌گذاری Cosmos DB - Pricing

  • Cosmos DB - نظارت از طریق AMS (سرویس نظارت Azure) Cosmos DB - Monitoring through AMS (Azure Monitor Service)

  • Cosmos DB - نظارت از طریق پورتال Cosmos DB Cosmos DB - Monitoring through Cosmos DB Portal

  • Cosmos DB - امنیت Cosmos DB - Security

  • Cosmos DB - گزینه دسترسی بالا و بازیابی فاجعه Cosmos DB - High Availability and Disaster Recovery Option

****** Azure Streaming Analytics ****** Azure Streaming Analytics ******

  • منابع PPT و دمو PPT and Demo Resources

  • پردازش رویداد زنده چیست؟ What is Live Event Processing?

  • مقدمه‌ای بر سرویس Azure Streaming Analytics Introduction to Azure Streaming Analytics Service

  • Streaming Analytics - پنجره‌بندی زمانی چیست؟ Streaming Analytics - What is time windowing

  • Streaming Analytics - پنجره ریزشی (Tumbling Window) Streaming Analytics - Tumbling Window

  • Streaming Analytics - پنجره پرشی (Hopping Window) Streaming Analytics - Hopping Window

  • Streaming Analytics - پنجره لغزشی (Sliding Window) Streaming Analytics - Sliding Window

  • Streaming Analytics - پنجره نشست (Session Window) Streaming Analytics - Session Window

  • Streaming Analytics - پردازش ورودی Blob Storage Streaming Analytics - Processing Blob Storage Input

  • Streaming Analytics - پردازش ورودی IOT Hub Streaming Analytics - Processing IOT Hub Input

  • Stream Analytics - نظارت Stream Analytics - Monitoring

  • Stream Analytics - بهینه‌سازی Stream Analytics - Optimization

****** Azure Databricks ****** Azure Databricks ******

  • منابع PPT و دمو PPT and Demo Resources

  • مبانی Spark Spark Basics

  • چرا Spark دشوار است؟ چرا Databricks تکامل یافته است؟ Why Spark is difficult? Why Databricks Evolved?

  • چرا Databricks در Cloud؟ مقدمه‌ای بر Azure Databricks Why Databricks in Cloud? Introduction to Azure Databricks

  • چگونه هزینه دمو Databricks را کاهش دهیم How to save Databricks demo Cost

  • مرور کلی دمو Demo overview

  • دمو: تأمین Databricks، خوشه‌ها و دفترچه یادداشت Demo: Provision Databricks, Clusters and workbook

  • دمو: اتصال Data Lake به DBFS دیتابریکس Demo: Mount Data Lake to Databricks DBFS

  • دمو: کاوش، تجزیه و تحلیل، پاک‌سازی، تبدیل و بارگذاری داده در Databricks Demo :Explore, Analyze, Clean, Transform and Load Data in Databricks

  • خوشه‌های Azure Databricks Azure Databricks Clusters

  • سایر مؤلفه‌های مهم Azure Databricks Azure Databricks other Important Components

  • Databricks - نظارت Databricks - Monitoring

****** Azure Data Factory ****** Azure Data Factory ******

  • منابع PPT و دمو PPT and Demo Resources

  • Data Factory چیست؟ What is Data Factory

  • Data Factory در اکوسیستم Azure Data Factory in Azure Ecosystem

  • تأمین نمونه Azure Data Factory Provision Azure Data Factory Instance

  • مؤلفه‌های Data Factory Data Factory Components

  • Data Factory - Pipeline و Activities Data Factory - Pipeline and Activities

  • Data Factory - Linked Service و Datasets Data Factory - Linked Service and Datasets

  • Data Factory - Integration runtime Data Factory - Integration runtime

  • Data Factory - Triggers Data Factory - Triggers

  • Data Factory - Copy Data Activity Wizard Data Factory - Copy Data Activity Wizard

  • Data Factory - کپی داده با استفاده از Author Data Factory - Copy Data Activity using Author

  • Data Factory - ویژگی ورودی/خروجی امن Data Factory - Secure Input/Output Property

  • Data Factory - خصوصیات کاربر Data Factory - User Properties

  • Data Factory - پارامترها Data Factory - Parameters

  • Data Factory - مفهوم جریان داده Data Factory - Data Flow Concept

  • Data Factory - Mapping Data Flow Data Factory - Mapping Data Flow

  • Data Factory - Wrangling Data Flow Data Factory - Wrangling Data Flow

  • Data Factory - نظارت Data Factory - Monitoring

  • Data Factory - نظارت از طریق متریک‌ها، هشدارها، تنظیمات تشخیصی Data Factory - Monitoring through Metrics, Alerts, Diagnostic Settings

****** سرویس Azure Monitor ****** Azure Monitor Service ******

  • منابع PPT و دمو PPT and Demo Resources

  • چرا نظارت مهم است؟ Why Monitoring is Important

  • مقدمه‌ای بر سرویس Azure Monitor Introduction to Azure Monitor Service

  • دمو: سرویس Azure Monitor Demo: Azure Monitor Service

****** HDInsight ****** HDInsight ******

  • PPT - Hadoop و HDInsight PPT - Hadoop and HDInsight

  • Hadoop - دوره فشرده Hadoop - crash course

  • مرور کلی HDInsight HDInsight overview

  • چرا Hadoop دشوار است؟ Why Hadoop is Hard

  • چگونه HDInsight هادوپ را آسان می‌کند؟ How HDInsight make Hadoop Easy

  • جنبه‌های مهم HDInsight Important aspects of HDInsight

  • انواع خوشه‌های HDInsight HDInsight cluster types

  • معماری HDInsight HDInsight Architecture

  • **** بخش **** - دمو - HDInsight **** SECTION **** - Demo - HDInsight

  • مرور کلی دمو Demo overview

  • ایجاد Azure Data Lake Storage Gen 2 (منبع) و SQL Server (مقصد) Create Azure Data Lake Storage Gen 2 (source) and SQL Server (destination)

  • هویت مدیریت شده چیست؟ What is Managed Identity

  • افزودن هویت مدیریت شده به حساب‌های Gen2 و Database Add Managed Identity to Gen2 and Database accounts

  • ایجاد خوشه HDInsight Interactive Query Create HDInsight Interactive Query Cluster

  • مرور کلی و رابط کاربری Ambari Ambari overview and UI

  • دریافت مجموعه داده در ذخیره‌سازی DataLake Ingest dataset in to DataLake storage

  • استخراج داده با Hive Data Extraction with Hive

  • تبدیل داده با Hive Data transformation with Hive

  • خروجی داده با Sqoop Data Export using Sqoop

  • خلاصه Summary

****** دوره‌های فشرده برای تازه‌کاران مطلق ****** Crash Courses for absolute beginners ******

  • دوره‌های فشرده برای تازه‌کاران مطلق Crash Courses for absolute beginners

دوره فشرده انبار داده برای تازه‌کاران مطلق Data Warehouse crash course for absolute beginners

  • دانلود PPT این ماژول Download PPT of this Module

  • مقدمه Introduction

  • انبار داده چیست؟ What is Data Warehouse

  • چرا به انبار داده نیاز داریم؟ Why we need Data Warehouse

  • راه حل ایده‌آل انبار داده Ideal Data Warehouse Solution

  • مسئولیت‌های طراح انبار داده Responsibilities of Data Warehouse designer

  • SQL Server در مقابل انبار داده SQL Server vs Data Warehouse

  • مدل‌سازی ابعادی Dimensional Modeling

  • فکت‌ها و جدول فکت Facts and Fact Table

  • ابعاد و جدول بعد Dimensions and Dimension table

  • ستاره در مقابل برفدانه Star vs Snowflake

  • خلاصه Summary

دوره فشرده Hadoop برای تازه‌کاران مطلق Hadoop crash course for absolute beginners

  • دانلود PPT Download PPT

  • مرور کلی Hadoop Hadoop overview

  • چرا به محاسبات توزیع شده نیاز داریم؟ Why we need distribute computing?

  • دو راه برای ساخت سیستم Two ways to build system

  • معرفی Hadoop Introducing Hadoop

  • Hadoop در مقابل RDBMS Hadoop vs RDBMS

  • خلاصه Hadoop Hadoop Summary

آزمون‌های تمرینی Practice Tests

  • آزمون تمرینی ۱ Practice Test 1

  • آزمون تمرینی ۲ Practice Test 2

جمع‌بندی Wrapping up

  • بخش جایزه Bonus Section

نمایش نظرات

آموزش فناوری‌های Azure Data Engineer برای مبتدیان [بسته]
جزییات دوره
33.5 hours
318
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
36,112
4.5 از 5
دارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Eshant Garg | LearnCloud.Info | 80,000+ Enrollments Eshant Garg | LearnCloud.Info | 80,000+ Enrollments

مربی | LearnCloud.info | AWS | Azure13 سال تجربه حرفه ای گسترده با تخصص در مایکروسافت پایگاه داده و راه حل های اطلاعات کسب و کار، تجزیه و تحلیل پیشرفته، گزارشات و فن آوری های محاسبات ابری Azure گواهینامه ها - DP-200: پیاده سازی یک راه حل داده Azure - DP-201: طراحی یک راه حل داده Azure - متخصص فن آوری گواهینامه مایکروسافت (MCTS) - توسعه پایگاه داده SQL Server - کتابخانه زیرساخت فناوری اطلاعات (ITIL v3) گواهی شده است تخصص Azure: دریاچه داده، کارخانه داده ها، Synapse Analytics (DW)، Polybase، Stream Analytics & Storage Tech Data Big: HDInsgiht، Databricks، Cosmosdb، Hadoop، Spark، Pyspark، Hive، Sqoop