آموزش ساخت دیتا لیک (Data Lake) در AWS - آخرین آپدیت

ماژول ۱: مقدمه‌ای بر دریاچه‌های داده (Data Lakes) Module 1: Introduction to Data Lakes

• معرفی و مرور کلی دوره Course Introduction and Overview

• اهداف ماژول Module Objectives

• چرا از دیتالیک استفاده کنیم؟ Why Data Lakes?

• مقایسه دیتالیک در مقابل انبار داده (Data Warehouse) Data Lake vs Data Warehouse

• اجزا و معماری‌ها Components and Architectures

ماژول ۲: ورود، کاتالوگ‌بندی و آماده‌سازی داده‌ها Module 2: Data ingestion, cataloging, and preparation

• اهداف ماژول Module Objectives

• ذخیره‌سازی در دیتالیک Data Lake Storage

• ورود داده‌ها (Data Ingestion) Data Ingestion

• خزش و کاتالوگ‌بندی داده‌ها Crawl and Catalog Data

• دمو: ایجاد و اجرای Glue Crawler Demo: Creating and Running a Glue Crawler

• قالب‌بندی داده‌ها در دریاچه Formatting the Data in the Lake

• پارتیشن‌بندی، فشرده‌سازی و متراکم‌سازی داده‌ها در دریاچه Partitioning, Compressing, and Compacting the Data in the Lake

• کوئری گرفتن از داده‌ها با Amazon Athena Query Data with Amazon Athena

• دمو: کوئری گرفتن از داده‌های CSV با Amazon Athena Demo: Querying CSV data with Amazon Athena

• دمو: فرمت‌های ستونی داده‌ها با Amazon Athena؛ مقایسه هزینه و عملکرد Demo: Columnar data formats with Amazon Athena - a performance and cost comparison

ماژول ۳: ساخت دیتالیک با AWS Lake Formation Module 3: Building a data lake with AWS Lake Formation

• به ماژول ۳ خوش آمدید Welcome to Module 3

• مروری بر AWS Lake Formation AWS Lake Formation Overview

• مدل مجوزهای پایه در AWS Lake Formation AWS Lake Formation Basic Permission Model

ماژول ۴: پردازش و تحلیل داده‌ها Module 4: Data processing and analytics

• اهداف ماژول Module Objectives

• تبدیل داده‌ها (Data Transformation) Data Transformation

• پردازش داده‌ها با AWS Glue Data Processing with AWS Glue

• جاب‌ها و گردش‌کارهای AWS Glue AWS Glue Jobs and Workflows

• دمو: Glue Databrew Demo - Glue Databrew

• دمو: Glue Studio Demo - Glue Studio

• بحث فنی: کوئری‌های فدرال Glue / Athena Tech Talk - Glue / Athena Federated Queries

ماژول ۵: پیکربندی‌ها و قابلیت‌های تکمیلی AWS Lake Formation Module 5: AWS Lake Formation additional configurations and capabilities

• اهداف ماژول Module Objectives

• استفاده از بلوپرینت‌ها (Blueprints) و گردش‌کارها Using Blueprints and Workflows

• کنترل دسترسی دقیق (Fine-grained Access Control) Fine-grained Access Control

• دمو: تگ‌های LF Demo - LF-Tags

• بصری‌سازی داده‌ها با QuickSight (دمو) Visualizing Data with QuickSight - Demo

ماژول ۶: معماری مدرن داده در AWS Module 6: Modern data architecture on AWS

• اهداف ماژول Module Objectives

• معماری مدرن داده Modern Data Architecture

• سناریوهای جابجایی داده‌ها Data Movement Scenarios

• مدل‌های اشتراک‌گذاری داده Data Sharing Models

• بحث فنی: قابلیت مورد علاقه شما در دیتالیک چیست؟ Tech Talk - What's your favorite data lake feature?

• مرور دوره و نکات کلیدی Course Recap/Key Takeaways