آموزش آماده‌سازی و اکتشاف داده‌ها در Databricks - آخرین آپدیت

سرفصل ها و درس ها

شروع کار با Databricks Getting Started with Databricks

• آشنایی با Databricks Introduction to Databricks

• درک معماری و اجرای Apache Spark Understanding Apache Spark Architecture and Execution

• راه‌اندازی محیط کار Setting up the Environment

• کار با Databricks Unity Catalog Working with Databricks Unity Catalog

• اتصال به Azure Data Lake Storage از طریق Databricks Connecting to Azure Data Lake Storage from Databricks

اکتشاف، پاک‌سازی و تبدیل داده‌ها در Databricks Exploring, Cleaning, and Transforming Data in Databricks

• درک و ایجاد Apache Spark DataFrames Understanding and Creating Apache Spark DataFrames

• اعمال Schemaها Applying Schemas

• اکتشاف و تحلیل داده‌ها Exploring and Analyzing Data

• پاک‌سازی داده‌ها Cleaning Data

• اعمال تغییرات و تبدیلات (Transformations) Applying Transformations

• اجرای کوئری‌های SQL روی DataFrames Running SQL Queries on DataFrames

• بصری‌سازی داده‌ها و ایجاد داشبورد Visualizing Data and Creating Dashboard

ذخیره‌سازی داده‌های پردازش شده با Delta Lake در Databricks Storing Processed Data with Delta Lake in Databricks

• درک Delta Lake در Databricks Understanding Delta Lake on Databricks

• نوشتن داده‌ها در Data Lake به صورت فایل Writing to Data Lake as Files

• کار با جداول Delta Working with Delta Tables

• اجرای عملیات DML روی جداول Delta Performing DML Operations on Delta Table

• اکتشاف داده‌های تاریخی با قابلیت Time Travel در Delta Lake Exploring Historical Data with Delta Lake Time Travel

بهینه‌سازی عملکرد در Databricks Performance Optimizations in Databricks

• بهینه‌سازی و Z ordering در جداول Delta Optimizing and Z-ordering Delta Tables

• پاک‌سازی فایل‌های جداول Delta با دستور Vacuum Cleaning Delta Table Files with Vacuum

• فعال‌سازی بهینه‌سازی خودکار (Auto Optimization) در جداول Delta Enabling Auto Optimization on Delta Tables