Microsoft Azure Data Lake Storage Service (Gen1 و Gen2) [ویدئو]

سرفصل ها و درس ها

🔻معرفی دوره Â Course Introduction

• معرفی دوره Course Introduction

مقدمه ای بر محاسبات ابری Azure  Introduction to Azure Cloud Computing

• اشتراک رایگان Azure ایجاد کنید Create Azure Free Subscription

• مروری بر پورتال لاجورد Azure Portal Overview

• بررسی اجمالی خدمات Azure Azure Services Overview

• گروه مدیریت منابع و اشتراک Resource Management Group and Subscription

• گروه های منابع Resource Groups

• برچسب زدن Tagging

• حذف منابع و تنظیم بودجه Delete Resources and Set Budget

آشنایی با دریاچه داده لاجورد Introduction to Azure Data Lake

• بیان مسأله Problem Statement

• دریاچه داده چیست؟ What is Data Lake?

• دریاچه داده در مقابل هادوپ Data Lake Versus Hadoop

• چگونه Data Lake Gen2 تکامل یافت How Data Lake Gen2 Evolved

• Azure Data Lake در مقابل ذخیره سازی Azure Blob Azure Data Lake Versus Azure Blob storage

• ارائه حساب Azure Data Lake Gen2 Provision Azure Data Lake Gen2 Account

• نمای کلی حساب Azure Data Lake Gen2 Azure Data Lake Gen2 Account Overview

• فضای نام سلسله مراتبی Hierarchical Namespace

• سایر ویژگی های Data Lake Gen 2 Other Data Lake Gen 2 Features

بلع داده ها Data Ingestion

• ابزارهایی برای جذب داده در دریاچه داده Tools to Ingest Data in Data Lake

• نسخه ی نمایشی - مصرف با استفاده از پورتال و SE Demo - Ingest Using Portal and SE

• نمایش داده ها با استفاده از Azcopy Demo- Ingest Data Using Azcopy

• نسخه ی نمایشی: Azure Blob Storage به Data Lake Gen2 با استفاده از Data Factory Demo: Azure Blob Storage to Data Lake Gen2 Using Data Factory

• نسخه ی نمایشی: SQL Server به Data Lake Gen2 با استفاده از Data Factory Demo: SQL Server to Data Lake Gen2 Using Data Factory

• نسخه ی نمایشی: Amazon S3 به Data Lake Gen2 با استفاده از Data Factory Demo: Amazon S3 to Data Lake Gen2 Using Data Factory

جریان داده در اطراف دریاچه داده Data Flow Around Data Lake

• جریان داده در اطراف دریاچه داده Data Flow Around Data Lake

• دریاچه داده و خوشه های گذرا Data Lake and Transient Clusters

پردازش دریاچه داده های لاجورد از طریق آجرهای داده Azure Data Lake Processing Through Databricks

• نمای کلی نسخه ی نمایشی Demo Overview

• نسخه ی نمایشی: Provision Databricks، Cluster و Workbook Demo: Provision Databricks, Clusters, and Workbook

• نسخه ی نمایشی: Mount Data Lake به Databricks DBFS Demo: Mount Data Lake to Databricks DBFS

• نسخه ی نمایشی: کاوش، تجزیه و تحلیل، پاک کردن، تبدیل، و بارگذاری داده ها Demo: Explore, Analyze, Clean, Transform, and Load Data

پردازش دریاچه داده Azure از طریق HDInsight Azure Data Lake Processing Through HDInsight

• نمای کلی نسخه ی نمایشی Demo Overview

• ایجاد Azure Data Lake Storage Gen2 (منبع) و SQL Server (مقصد) Create Azure Data Lake Storage Gen2 (Source) and SQL Server (Destination)

• هویت مدیریت شده چیست What is Managed Identity

• هویت مدیریت شده را به حساب‌های Gen2 و پایگاه داده اضافه کنید Add Managed Identity to Gen2 and Database Accounts

• خوشه پرس و جو تعاملی HDInsight را ایجاد کنید Create HDInsight Interactive Query Cluster

• نمای کلی و رابط کاربری Ambari Ambari Overview and UI

• داده‌ها را در Data Lake Storage وارد کنید Ingest Dataset into Data Lake Storage

• استخراج داده ها با Hive Data Extraction with Hive

• تبدیل داده ها با Hive Data Transformation with Hive

• صادرات داده با استفاده از Sqoop Data Export Using Sqoop

• خلاصه Summary

لایه های امنیتی در دریاچه داده Security Layers in Data Lake

• معرفی Introduction

• کلیدهای دسترسی به حافظه Storage Access Keys

• SAS - امضای دسترسی مشترک SAS - Shared Access Signature

• Azure Active Directory Azure Active Directory

• لیست کنترل دسترسی (ACL) Access Control List (ACL)

• فایروال ها و شبکه های مجازی Firewalls and Virtual Networks

• رمزگذاری در حمل و نقل Encryption in Transit

• رمزگذاری در حالت استراحت Encryption at Rest

• حفاظت از تهدیدات پیشرفته Advanced Threat Protection

نظارت و بهینه سازی دریاچه داده ها Data Lake Monitoring and Optimization

• گزارش فعالیت Activity Log

• نسخه ی نمایشی - گزارش فعالیت Demo - Activity Logs

• معیارهای Metrics

• نسخه ی نمایشی: معیارها Demo: Metrics

• نسخه ی نمایشی: بینش Demo: Insights

• نسخه ی نمایشی: هشدارها Demo: Alerts

• تنظیمات تشخیصی Diagnostic Settings

• نسخه ی نمایشی: تنظیمات تشخیصی Demo: Diagnostic Settings

• بهينه سازي Optimization

تمرین تست ها و پاداش Practice Tests and Bonus

• حذف منابع Delete Resources