آموزش Databricks SQL برای تحلیلگران داده

سرفصل ها و درس ها

راه اندازی و مرور کلی Databricks Set Up and Overview of Databricks

• بررسی اجمالی دوره Course Overview

• مقدمه ای بر داده های بزرگ (اختیاری) Introduction to Big Data (Optional)

• اکوسیستم آپاچی اسپارک (اختیاری) Apache Spark Ecosystem (Optional)

• مروری بر Databricks Overview of Databricks

• راه اندازی حساب Azure Azure Account Set Up

• مروری بر پورتال لاجورد Azure Portal Overview

• مدیریت هزینه و صورتحساب Cost Management and Billing

• ایجاد یک Databricks Premium Workspace Creating a Databricks Premium Workspace

• رابط کاربری Databricks Workspace Databricks Workspace User Interface

• نمای کلی کاتالوگ یونیتی Unity Catalog Overview

• فعال کردن کاتالوگ Unity - نمای کلی Enabling Unity Catalog - Overview

• نمای کلی ADLS و ایجاد فضای ذخیره سازی ADLS Overview and Storage Creation

• اتصال دهنده دسترسی برای Databricks Access Connector for Databricks

• فعال کردن کاتالوگ یونیتی Enabling Unity Catalog

• ایجاد انبار SQL Creating a SQL Warehouse

مقدمه ای بر کوئری ها Introduction to Queries

• اولین درخواست شما Your First Query

• تغییر کاتالوگ ها و طرحواره ها Switching Catalogs and Schemas

• پرس و جوهای زمان بندی Scheduling Queries

• افزودن نظرات به کوئری ها Adding Comments to Queries

• منابع دوره - دانلود کد SQL Course Resources - SQL Code Download

کاتالوگ ها، طرحواره ها، جداول و نماها Catalogs, Schemas, Tables and Views

• ایجاد کاتالوگ Creating Catalogs

• ایجاد طرحواره ها Creating Schemas

• انواع داده در Databricks SQL Data Types in Databricks SQL

• مروری بر جداول در Databricks Overview of Tables in Databricks

• ایجاد جداول مدیریت شده با SQL Creating Managed Tables with SQL

• ایجاد جداول مدیریت شده در Hive Metastore Creating Managed Tables in Hive Metastore

• ایجاد جداول مدیریت شده با استفاده از Data Explorer Creating Managed Tables using the Data Explorer

• ایجاد محل ذخیره سازی خارجی Creating an External Storage Location

• ایجاد جداول خارجی Creating External Tables

• نادیده گرفتن مکان ذخیره سازی جدول مدیریت شده پیش فرض کاتالوگ Unity Overriding Unity Catalog’s Default Managed Table Storage Location

• جدول کوتاه Truncate Table

• جدول تغییرات Alter Table

• جداول، طرحواره ها و کاتالوگ ها را رها کنید Drop Tables, Schemas and Catalogs

تجزیه و تحلیل داده ها با SQL Data Analysis with SQL

• Recap بیانیه را انتخاب کنید Select Statement Recap

• متمایز را انتخاب کنید Select Distinct

• در جدول JC_BIKE_DATA_22 یادداشت کنید Note on the JC_BIKE_DATA_22 Table

• فیلتر کردن سوابق با بند WHERE Filtering Records with the WHERE Clause

• فیلتر کردن سوابق بر اساس شرایط چندگانه Filtering Records Based on Multiple Conditions

• فیلتر کردن سوابق با اپراتورهای IN و LIKE Filtering Records with the IN and LIKE Operators

• حذف رکوردها Deleting Records

• بررسی اجمالی توابع داخلی Databricks SQL Databricks SQL Built In Functions Overview

• توابع رشته String Functions

• توابع عددی Numerical Functions

• توابع تاریخ و مهر زمان Date and Timestamp Functions

• تبدیل رشته ها به تاریخ/مهر زمان Converting Strings to Dates/Timestamps

• توابع شرطی Conditional Functions

• توابع جمع Aggregate Functions

• گروه بر اساس بند Group By Clause

• فیلتر کردن جداول تجمیع شده با بند داشتن Filtering Aggregated Tables with the Having Clause

• بررسی اجمالی جداول پیوستن Joining Tables Overview

• پیوستن به نسخه نمایشی جداول Joining Tables Demo

• دستور بر اساس و محدودیت بند Order By and Limit Clauses

• SQL Order of Execution SQL Order of Execution

• سوالات فرعی Subqueries

• بازدیدها Views

• تنظیم اپراتورها Set Operators

• چالش SQL 1 SQL Challenge 1

• چالش SQL 2 SQL Challenge 2

• چالش SQL 3 SQL Challenge 3

• چالش SQL 4 SQL Challenge 4

• چالش SQL 5 SQL Challenge 5

• پاکسازی طرحواره Schema Clean Up

دریاچه دلتا Delta Lake

• معماری مدالیون و آخرین مایل ETL Medallion Architecture and Last Mile ETL

• نسخه ی نمایشی معماری مدالیون Medallion Architecture Demo

• مزایای فرمت فایل دلتا Benefits of Delta File Format

• Upsert/Merge Into Upsert / Merge Into

• جدول تاریخچه حسابرسی و سفر در زمان Table Audit History and Time Travel

پرس و جو هشدارها و نظارت Query Alerts and Monitoring

• تاریخچه پرس و جو و نمایه Query History and Profile

• Query Caching در Databricks SQL Query Caching in Databricks SQL

• هشدارهای پرس و جو Query Alerts

تجسم و داشبورد در Databricks SQL Visualizations and Dashboards in Databricks SQL

• نمای کلی تجسم ها و داشبوردها Visualizations and Dashboards Overview

• اولین نمودار ما در Databricks SQL Our First Chart in Databricks SQL

• نمودارهای خط و مساحت Line and Area Charts

• نمودار ترکیبی Combo Chart

• نمودار دایره ای Pie Chart

• پراکندگی و حباب پلات Scatter and Bubble Plots

• هیستوگرام ها Histograms

• توطئه های جعبه Box Plots

• نقشه های حرارتی Heatmaps

• نمودارهای سانکی Sankey Charts

• جداول Tables

• جداول محوری Pivot Tables

• شمارنده ها Counters

• راهنمای اضافی در مورد نمودارها در Databricks SQL Additional Guidance on Charts in Databricks SQL

• چالش تجزیه و تحلیل داده های اکتشافی Exploratory Data Analysis Challenge

• افزودن داده های از دست رفته به جدول JC_BIKE_DATA_22 Adding Missing Data to the JC_BIKE_DATA_22 Table

• ایجاد نما برای ساده سازی دموهای آینده Creating a View to Simplify Upcoming Demos

• فیلترهای پرس و جو Query Filters

• پارامترهای پرس و جو Query Parameters

• پارامترهای پرس و جو (تاریخ) Query Parameters (Dates)

• مقدمه ای بر داشبوردها Introduction to Dashboards

• افزودن پارامتر به داشبورد Adding Parameters to Dashboards

• افزودن فیلتر به داشبورد Adding Filters to Dashboards

• چالش تجزیه و تحلیل مدت سفر Trip Duration Analysis Challenge

• چالش تحلیل نوع سوار Rider Type Analysis Challenge

کنترل دسترسی، مدیریت داده و کاتالوگ وحدت Access Control, Data Governance and Unity Catalog

• نقش های اداری در Databricks Administrative Roles in Databricks

• افزودن یک کاربر جدید به حساب Azure ما Adding a New User to our Azure Account

• افزودن یک کاربر جدید به محیط Databricks Adding a New User to our Databricks Environment

• تنظیمات مدیریت فضای کاری Workspace Admin Settings

• کنترل دسترسی به شی فضای کاری Workspace Object Access Control

• کنترل دسترسی انبار SQL SQL Warehouse Access Control

• کنترل دسترسی به پوشه Folder Access Control

• کنترل دسترسی پرس و جو Query Access Control

• کنترل دسترسی داشبورد Dashboard Access Control

• کنترل دسترسی به شی فضای کاری - خلاصه Workspace Object Access Control - Summary

• اشیاء و امتیازات قابل ایمن کاتالوگ Unity Unity Catalog Securable Objects and Privileges

• اعطا و لغو امتیازات با SQL (Unity Catalog) Granting and Revoking Privileges with SQL (Unity Catalog)

• اعطا و لغو امتیازات از طریق Data Explorer (Unity Catalog) Granting and Revoking Privileges via the Data Explorer (Unity Catalog)

• ویرایش داده ها با نماهای پویا (PII) Redacting Data with Dynamic Views (PII)

• کشف داده ها Data Discovery

• نسب داده Data Lineage

• بررسی اجمالی اشتراک گذاری دلتا Delta Sharing Overview

• Databricks به Databricks Delta Sharing Databricks to Databricks Delta Sharing

• اشتراک گذاری دلتا را باز کنید Open Delta Sharing

بابت تکمیل دوره به شما تبریک می گویم! Congratulations on completing the course!

• تبریک می گویم Congratulations

• سخنرانی پاداش Bonus Lecture