آموزش مدیریت پیشرفته داده‌ها در Azure Databricks - آخرین آپدیت

دانلود Advanced Data Management in Azure Databricks

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: به‌روزرسانی شده در می ۲۰۲۵. این دوره اکنون دارای Coursera Coach است! روشی هوشمندتر برای یادگیری با گفتگوهای تعاملی و بلادرنگ که به شما کمک می‌کند تا دانش خود را آزمایش کنید، فرضیات را به چالش بکشید و در حین پیشروی در دوره، درک خود را عمیق‌تر کنید. این دوره پیشرفته Azure Databricks شما را با مهارت‌های لازم برای مدیریت کارآمد جریان‌های کاری پیچیده داده‌ها توانمند می‌سازد. با تمرکز بر ویژگی‌های پیشرفته‌ای مانند Unity Catalog، جداول Delta و ابزارهای Ingestion در Databricks، شما تجربه عملی در مدیریت خط لوله‌های داده در مقیاس بزرگ، تضمین سازگاری داده‌ها و اجرای حاکمیت داده (Data Governance) در سراسر پلتفرم Databricks را کسب خواهید کرد. در پایان این دوره، درک جامع از قابلیت‌های Databricks در مدیریت داده‌ها خواهید داشت و برای مدیریت راهکارهای داده در سطح سازمانی آماده می‌شوید. دوره با معرفی Unity Catalog آغاز می‌شود و نحوه راه‌اندازی و استفاده از آن برای مدیریت دسترسی کاربران و ایمن‌سازی اشیاء در محیط Databricks را نشان می‌دهد. شما یاد می‌گیرید که چگونه Unity Catalog را پیکربندی کرده و با اشیاء مختلف قابل ایمن‌سازی کار کنید تا یک چشم‌انداز داده‌ای سازمان‌یافته و امن داشته باشید. با پیشروی در دوره، به طور عمیق‌تر وارد Delta Lake و جداول Delta می‌شوید؛ ابتدا با ویژگی‌های Delta Lake آشنا شده و سپس به بررسی کامل نحوه ایجاد و مدیریت جداول Delta، از جمله خواندن و بهینه‌سازی آن‌ها برای افزایش عملکرد می‌پردازید. در ماژول‌های بعدی، ابزارهای جذب افزایشی (Incremental Ingestion) در Databricks را بررسی خواهید کرد. با معماری و موارد استفاده از جذب داده‌های افزایشی، از جمله نحوه بهره‌برداری از ابزارهایی مانند Copy Into و Databricks Autoloader با قابلیت تکامل طرح‌واره (Schema Evolution) آشنا می‌شوید. همچنین با جذب داده‌های استریمینگ کار خواهید کرد تا پردازش داده‌های بلادرنگ را با کمترین تلاش تضمین کنید. دوره با معرفی Delta Live Tables (DLT) به پایان می‌رسد، جایی که یاد می‌گیرید خط لوله‌ها و ورک‌لودهای DLT را با استفاده از SQL و Python ایجاد کنید و دانش خود را در بهینه‌سازی تحلیل‌های بلادرنگ تثبیت نمایید. این دوره برای مهندسان داده با تجربه، معماران داده و دانشمندان داده‌ای که می‌خواهند در Azure Databricks متخصص شوند، ایده‌آل است. داشتن تجربه قبلی در پلتفرم‌های داده ابری، SQL و Python توصیه می‌شود. این دوره با تمرکز بر کاربردهای عملی، طراحی شده است تا تخصص شما در مدیریت داده‌ها را به سطح بعدی ببرد.

سرفصل ها و درس ها

کار با Unity Catalog Working with Unity Catalog

  • در این بخش چه خواهید آموخت What will you learn in this section

  • مقدمه‌ای بر Unity Catalog Introduction to Unity Catalog

  • راه‌اندازی Unity Catalog Setup Unity Catalog

  • مدیریت دسترسی کاربران در Unity Catalog Unity Catalog User Provisioning

  • کار با اشیاء قابل ایمن‌سازی Working with Securable Objects

کار با Delta Lake و جداول Delta Working with Delta Lake and Delta Tables

  • در این بخش چه خواهید آموخت What will you learn in this section

  • مقدمه‌ای بر Delta Lake Introduction to Delta Lake

  • ایجاد جدول Delta Creating Delta Table

  • اشتراک‌گذاری داده‌ها برای جداول Delta خارجی Sharing data for External Delta Table

  • خواندن جدول Delta Reading Delta Table

  • عملیات روی جدول Delta Delta Table Operations

  • سفر در زمان (Time Travel) در جدول Delta Delta Table Time Travel

  • تبدیل Parquet به Delta Convert Parquet to Delta

  • اعتبارسنجی طرح‌واره جدول Delta Delta Table Schema Validation

  • تکامل طرح‌واره جدول Delta Delta Table Schema Evolution

  • بررسی داخلی جدول Delta Look Inside Delta Table

  • ابزارها و بهینه‌سازی جدول Delta Delta Table Utilities and Optimization

کار با ابزارهای جذب افزایشی Databricks Working with Databricks Incremental Ingestion Tools

  • در این بخش چه خواهید آموخت What will you learn in this section

  • معماری و نیاز به جذب افزایشی Architecture and Need for Incremental Ingestion

  • استفاده از Copy Into با تکامل دستی طرح‌واره Using Copy Into with Manual Schema Evolution

  • استفاده از Copy Into با تکامل خودکار طرح‌واره Using Copy Into with Automatic Schema Evolution

  • جذب استریمینگ با تکامل دستی طرح‌واره Streaming Ingestion with Manual Schema Evolution

  • جذب استریمینگ با تکامل خودکار طرح‌واره Streaming Ingestion with Automatic Schema Evolution

  • مقدمه‌ای بر Databricks Autoloader Introduction to Databricks Autoloader

  • استفاده از Autoloader با تکامل خودکار طرح‌واره Autoloader with Automatic Schema Evolution

کار با جداول زنده دلتا (DLT) در Databricks Working with Databricks Delta Live Tables (DLT)

  • در این بخش چه خواهید آموخت What will you learn in this section

  • مقدمه‌ای بر Databricks DLT Introduction to Databricks DLT

  • درک سناریوهای کاربردی DLT Understand DLT Use Case Scenario

  • راه‌اندازی مجموعه داده سناریوی DLT Setup DLT Scenario Dataset

  • ایجاد ورک‌لود DLT با SQL Creating DLT Workload in SQL

  • ایجاد خط لوله DLT برای ورک‌لود شما Creating DLT Pipeline for your Workload

  • ایجاد ورک‌لود DLT با Python Creating DLT Workload in Python

نمایش نظرات

آموزش مدیریت پیشرفته داده‌ها در Azure Databricks
جزییات دوره
11h 43m
32
(آخرین آپدیت)
2,053
5 از 5
دارد
دارد
دارد
Chris Croft
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Chris Croft Chris Croft

مربی مدیریت، سخنران، نویسنده