آموزش [جدید] AWS خبره مهندس داده 2023 - دست در دست!

سرفصل ها و درس ها

معرفی Introduction

• نمای کلی دوره - خدماتی که ما پوشش خواهیم داد Course Overview - Services we will Cover

• مطالب دوره را دریافت کنید Get the Course Materials

• Udemy 101 Udemy 101

مبانی مهندسی داده Data Engineering Fundamentals

• مقدمه: مبانی مهندسی داده Intro: Data Engineering Fundamentals

• انواع داده ها (ساختار یافته، بدون ساختار، نیمه ساختاریافته) Types of Data (Structured, Unstructured, Semi-Structured)

• ویژگی های داده ها (حجم/سرعت/تنوع) Properties of Data (Volume / Velocity / Variety)

• انبارهای داده در مقابل دریاچه های داده (و دریاچه ها) Data Warehouses vs. Data Lakes (and Lakehouses)

• مدیریت و تنظیم خطوط لوله ETL Managing and Orchestrating ETL Pipelines

• منابع داده رایج و قالب‌های داده Common Data Sources and Data Formats

• بررسی سریع مدل‌سازی داده، نسب داده و تکامل طرحواره Quick Review of Data Modeling, Data Lineage, and Schema Evolution

• بهینه سازی عملکرد پایگاه داده Database Performance Optimization

• تکنیک های نمونه گیری داده ها Data Sampling Techniques

• مکانیسم های انحراف داده ها Data Skew Mechanisms

• اعتبار سنجی و پروفایل سازی داده ها Data Validation and Profiling

• بررسی SQL: تجمع، گروه بندی، مرتب سازی، محوری SQL Review: Aggregations, Grouping, Sorting, Pivoting

• انواع SQL JOIN SQL JOIN types

• تمرین پرس و جوهای تجمع در SQL Practicing aggregation queries in SQL

• تمرین پرس و جوهای گروه بندی در SQL Practicing grouping queries in SQL

• تمرین Join Query در SQL Practicing join queries in SQL

• بررسی Git: معماری و دستورات Git review: architecture and commands

• خلاصه اصول مهندسی داده Data Engineering Fundamentals recap

ذخیره سازی Storage

• مقدمه: ذخیره سازی Intro: Storage

• آمازون S3 Amazon S3

• Amazon S3 - Hands On Amazon S3 - Hands On

• Amazon S3 Security - Bucket Policy Amazon S3 Security - Bucket Policy

• امنیت آمازون S3 - سیاست سطل - دست در دست Amazon S3 Security - Bucket Policy - Hands On

• آمازون S3 - نسخه سازی Amazon S3 - Versioning

• Amazon S3 - نسخه سازی - Hands On Amazon S3 - Versioning - Hands On

• آمازون S3 - تکرار Amazon S3 - Replication

• Amazon S3 - Replication - Notes Amazon S3 - Replication - Notes

• Amazon S3 - Replication - Hands On Amazon S3 - Replication - Hands On

• Amazon S3 - کلاس های ذخیره سازی Amazon S3 - Storage Classes

• Amazon S3 - کلاس های ذخیره سازی - Hands On Amazon S3 - Storage Classes - Hands On

• Amazon S3 - قوانین چرخه حیات Amazon S3 - Lifecycle Rules

• آمازون S3 - قوانین چرخه زندگی - دست در دست Amazon S3 - Lifecycle Rules - Hands On

• Amazon S3 - اعلان های رویداد Amazon S3 - Event Notifications

• Amazon S3 - اعلان‌های رویداد - Hands On Amazon S3 - Event Notifications - Hands On

• آمازون S3 - عملکرد Amazon S3 - Performance

• Amazon S3 - Select & Glacier Select Amazon S3 - Select & Glacier Select

• آمازون S3 - رمزگذاری Amazon S3 - Encryption

• درباره DSSE-KMS About DSSE-KMS

• Amazon S3 - رمزگذاری - Hands On Amazon S3 - Encryption - Hands On

• Amazon S3 - رمزگذاری پیش فرض Amazon S3 - Default Encryption

• Amazon S3 - نقاط دسترسی Amazon S3 - Access Points

• Amazon S3 - Object Lambda Amazon S3 - Object Lambda

• آمازون EBS Amazon EBS

• Amazon EBS - Hands On Amazon EBS - Hands On

• آمازون EFS Amazon EFS

• Amazon EFS - Hands On Amazon EFS - Hands On

• Amazon EFS در مقابل Amazon EBS Amazon EFS vs. Amazon EBS

• پشتیبان گیری AWS AWS Backup

• AWS Backup - Hands On AWS Backup - Hands On

• سوالات امتحانی تمرین ذخیره سازی Storage practice exam questions

پایگاه داده Database

• مقدمه: پایگاه داده Intro: Database

• آمازون DynamoDB Amazon DynamoDB

• Amazon DynamoDB - Hands On Amazon DynamoDB - Hands On

• آمازون DynamoDB در داده های بزرگ Amazon DynamoDB in Big Data

• آمازون DynamoDB - توان عملیاتی (RCU و WCU) Amazon DynamoDB - Throughput (RCU & WCU)

• Amazon DynamoDB - Throughput (RCU & WCU) - Hands On Amazon DynamoDB - Throughput (RCU & WCU) - Hands On

• Amazon DynamoDB - APIهای پایه Amazon DynamoDB - Basic APIs

• Amazon DynamoDB - APIهای اساسی - Hands On Amazon DynamoDB - Basic APIs - Hands On

• Amazon DynamoDB - شاخص‌ها (LSI و GSI) Amazon DynamoDB - Indexes (LSI & GSI)

• Amazon DynamoDB - Indexs (LSI & GSI) - Hands On Amazon DynamoDB - Indexes (LSI & GSI) - Hands On

• Amazon DynamoDB - PartiQL Amazon DynamoDB - PartiQL

• آمازون DynamoDB Accelerator (DAX) Amazon DynamoDB Accelerator (DAX)

• آمازون DynamoDB Accelerator (DAX) - Hands On Amazon DynamoDB Accelerator (DAX) - Hands On

• Amazon DynamoDB - Streams Amazon DynamoDB - Streams

• Amazon DynamoDB - Streams - Hands On Amazon DynamoDB - Streams - Hands On

• Amazon DynamoDB - Time To Live (TTL) Amazon DynamoDB - Time To Live (TTL)

• Amazon DynamoDB - الگوهای با S3 Amazon DynamoDB - Patterns with S3

• Amazon DynamoDB - امنیت Amazon DynamoDB - Security

• آمازون RDS Amazon RDS

• قفل های مشترک و انحصاری در RDS Shared and exclusive locks in RDS

• بهترین روش های آمازون RDS Amazon RDS Best Practices

• Amazon DocumentDB Amazon DocumentDB

• Amazon MemoryDB برای Redis Amazon MemoryDB for Redis

• Amazon Keyspaces (برای آپاچی کاساندرا) Amazon Keyspaces (for Apache Cassandra)

• نپتون آمازون Amazon Neptune

• معرفی و معماری آمازون Redshift Amazon Redshift Intro & Architecture

• Redshift طیف و تنظیم عملکرد Redshift Spectrum and Performance Tuning

• دوام و مقیاس پذیری Redshift Redshift Durability and Scaling

• سبک های توزیع Redshift Redshift Distribution Styles

• کلیدهای مرتب سازی Redshift Redshift Sort Keys

• Redshift Data Flow و دستور COPY Redshift Data Flows and the COPY command

• ادغام Redshift/WLM/Vacuum Redshift Integration / WLM / Vacuum

• تغییر اندازه Redshift و ویژگی های جدیدتر Redshift Resizing & Newer Features

• Redshift AQUA، Redshift ML Redshift AQUA, Redshift ML

• Redshift Security Redshift Security

• بدون سرور Redshift Redshift Serverless

• مشاهده‌های مادی‌شده Redshift Redshift Materialized Views

• Redshift به اشتراک گذاری داده/اشتراک داده ها Redshift Data Sharing / Data Shares

• Redshift Lambda UDF Redshift Lambda UDF

• پرس و جوهای فدرال شده Redshift Redshift Federated Queries

• Redshift - Hands On Redshift - Hands On

• سوالات آزمون تمرینی پایگاه داده Database practice exam questions

مهاجرت و انتقال Migration and Transfer

• مقدمه: مهاجرت و انتقال Intro: Migration and Transfer

• سرویس کشف برنامه و سرویس مهاجرت برنامه Application Discovery Service & Application Migration Service

• سرویس مهاجرت پایگاه داده AWS (AWS DMS) AWS Database Migration Service (AWS DMS)

• سرویس مهاجرت پایگاه داده AWS (AWS DMS) - Hands On AWS Database Migration Service (AWS DMS) - Hands On

• AWS DataSync AWS DataSync

• خانواده برفی AWS AWS Snow Family

• AWS Snow Family - Hands On AWS Snow Family - Hands On

• خانواده انتقال AWS AWS Transfer Family

• سوالات آزمون عملی مهاجرت و انتقال Migration and Transfer practice exam questions

محاسبه کنید Compute

• مقدمه: محاسبه Intro: Compute

• EC2 در داده های بزرگ EC2 in Big Data

• AWS Lambda AWS Lambda

• ادغام لامبدا - قسمت 1 Lambda Integration - Part 1

• ادغام لامبدا - قسمت 2 Lambda Integration - Part 2

• AWS Lambda - نصب سیستم فایل AWS Lambda - File Systems Mounting

• AWS SAM AWS SAM

• AWS SAM - نصب CLI AWS SAM - CLI Installation

• AWS SAM - ایجاد پروژه AWS SAM - Create Project

• AWS SAM - استقرار پروژه AWS SAM - Deploy Project

• AWS SAM - با دروازه API AWS SAM - with API Gateway

• AWS SAM - با DynamoDB AWS SAM - with DynamoDB

• دسته AWS AWS Batch

• محاسبه سوالات امتحانی تمرینی Compute practice exam questions

ظروف Containers

• مقدمه: ظروف Intro: Containers

• داکر چیست؟ What is Docker?

• آمازون ECS Amazon ECS

• Amazon ECS - ایجاد خوشه - Hands On Amazon ECS - Create Cluster - Hands On

• آمازون ECS - ایجاد سرویس - Hands On Amazon ECS - Create Service - Hands On

• آمازون ECR Amazon ECR

• آمازون EKS Amazon EKS

• Amazon EKS - Hands On Amazon EKS - Hands On

• ظروف تمرین سوالات امتحانی Containers practice exam questions

تجزیه و تحلیل Analytics

• مقدمه: تجزیه و تحلیل Intro: Analytics

• چسب AWS AWS Glue

• چسب، کندو و ETL Glue, Hive, and ETL

• اصلاح کاتالوگ داده های چسب از اسکریپت های ETL Modifying the Glue Data Catalog from ETL Scripts

• چسب ETL: نقاط پایانی توسعه‌دهنده، اجرای مشاغل ETL با نشانک‌ها Glue ETL: Developer Endpoints, Running ETL Jobs with Bookmarks

• هزینه های چسب و ضد الگوها Glue Costs and Anti-Patterns

• AWS Glue Studio AWS Glue Studio

• کیفیت داده چسب AWS AWS Glue Data Quality

• AWS Glue DataBrew AWS Glue DataBrew

• مدیریت PII در DataBrew Transformations Handling PII in DataBrew Transformations

• سازند دریاچه AWS AWS Lake Formation

• فیلترهای داده سازند دریاچه AWS AWS Lake Formation Data Filters

• آمازون آتنا Amazon Athena

• آتنا و چسب، هزینه ها و امنیت Athena and Glue, Costs, and Security

• اجرای آتنا Athena Performance

• معاملات آتنا اسید Athena ACID Transactions

• دسترسی ریزدانه آتنا به کاتالوگ داده های چسب AWS Athena Fine-Grained Access to AWS Glue Data Catalog

• آپاچی اسپارک Apache Spark

• دریاچه های داده آتنا، چسب و S3 - Hands On Athena, Glue, and S3 Data Lakes - Hands On

• ادغام جرقه با Kinesis و Redshift Spark Integration with Kinesis and Redshift

• ادغام جرقه با آتنا Spark Integration with Athena

• آمازون EMR Amazon EMR

• EMR، ادغام AWS، و ذخیره سازی EMR, AWS integration, and Storage

• EMR Promises; معرفی هادوپ EMR Promises; Intro to Hadoop

• EMR بدون سرور؛ EMR در EKS EMR Serverless; EMR on EKS

• آمازون کینزیس جریان داده Amazon Kinesis Data Streams

• Amazon Kinesis Data Streams - تولیدکنندگان Amazon Kinesis Data Streams - Producers

• آمازون کینزیس جریان داده - مصرف کنندگان Amazon Kinesis Data Streams - Consumers

• Amazon Kinesis Data Streams - Hands On Amazon Kinesis Data Streams - Hands On

• Amazon Kinesis Data Streams - فن خروجی پیشرفته Amazon Kinesis Data Streams - Enhanced Fan Out

• آمازون Kinesis جریان داده - مقیاس Amazon Kinesis Data Streams - Scaling

• آمازون Kinesis جریان داده - مدیریت موارد تکراری Amazon Kinesis Data Streams - Handling Duplicates

• Amazon Kinesis Data Streams - Security Amazon Kinesis Data Streams - Security

• Amazon Kinesis Data Firehose Amazon Kinesis Data Firehose

• Amazon Kinesis با فیلترهای اشتراک CloudWatch Amazon Kinesis with CloudWatch Subscription Filters

• عیب یابی جریان داده های Kinesis و تنظیم عملکرد Kinesis Data Stream Troubleshooting and Performance Tuning

• Kinesis Data Analytics/سرویس مدیریت شده آمازون برای Apache Flink (MSAF) Kinesis Data Analytics / Amazon Managed Service for Apache Flink (MSAF)

• هزینه های تجزیه و تحلیل Kinesis; RANDOM_CUT_FOREST Kinesis Analytics Costs; RANDOM_CUT_FOREST

• آمازون MSK Amazon MSK

• آمازون MSK - اتصال Amazon MSK - Connect

• Amazon MSK - بدون سرور Amazon MSK - Serverless

• Amazon Kinesis در مقابل Amazon MSK Amazon Kinesis vs. Amazon MSK

• سرویس جستجوی باز آمازون Amazon OpenSearch Service

• Amazon OpenSearch Service، Pt. 2 Amazon OpenSearch Service, Pt. 2

• مدیریت فهرست OpenSearch و طراحی برای ثبات OpenSearch Index Management and Designing for Stability

• عملکرد سرویس جستجوی باز آمازون Amazon OpenSearch Service Performance

• بدون سرور جستجوی باز آمازون Amazon OpenSearch Serverless

• آمازون QuickSight Amazon QuickSight

• قیمت گذاری و داشبورد QuickSight. بینش ML QuickSight Pricing and Dashboards; ML Insights

• سوالات امتحانی تمرین تجزیه و تحلیل Analytics practice exam questions

یکپارچه سازی برنامه Application Integration

• مقدمه: یکپارچه سازی برنامه Intro: Application Integration

• آمازون SQS Amazon SQS

• Amazon Kinesis Data Streams در مقابل Amazon SQS Amazon Kinesis Data Streams vs. Amazon SQS

• آمازون SQS - صف های مرده نامه Amazon SQS - Dead Letter Queues

• آمازون SQS - صف های مرده نامه - دست در دست Amazon SQS - Dead Letter Queues - Hands On

• آمازون SNS Amazon SNS

• Amazon SNS - با SQS Fan Out Amazon SNS - with SQS Fan Out

• Amazon SNS - Hands On Amazon SNS - Hands On

• توابع مرحله AWS AWS Step Functions

• Amazon AppFlow Amazon AppFlow

• پل رویداد آمازون Amazon EventBridge

• Amazon EventBridge - Hands On Amazon EventBridge - Hands On

• جریان های کاری مدیریت شده آمازون برای Apache Airflow (Amazon MWAA) Amazon Managed Workflows for Apache Airflow (Amazon MWAA)

• خطوط لوله مهندسی کامل داده Full Data Engineering Pipelines

• سوالات تمرین یکپارچه سازی برنامه Application Integration practice questions

امنیت، هویت و انطباق Security, Identity, and Compliance

• مقدمه: امنیت، هویت و انطباق Intro: Security, Identity, and Compliance

• اصل کمترین امتیاز Principle of Least Privilege

• پوشش داده ها و ناشناس سازی Data Masking and Anonymization

• نمک زدن کلید Key Salting

• جلوگیری از پشتیبان گیری یا تکرار در مناطق غیر مجاز AWS Preventing Backups or Replication to Disallowed AWS Regions

• IAM مقدمه: کاربران، گروه ها، سیاست ها IAM Introduction: Users, Groups, Policies

• کاربران و گروه‌های IAM فعال هستند IAM Users & Groups Hands On

• سیاست های IAM IAM Policies

• سیاست های IAM - Hands On IAM Policies - Hands On

• IAM MFA IAM MFA

• IAM MFA - Hands On IAM MFA - Hands On

• نقش های IAM IAM Roles

• نقش های IAM - Hands On IAM Roles - Hands On

• رمزگذاری 101 Encryption 101

• AWS KMS AWS KMS

• AWS KMS - Hands On AWS KMS - Hands On

• آمازون مکی Amazon Macie

• مدیر اسرار AWS AWS Secrets Manager

• AWS Secrets Manager - Hands On AWS Secrets Manager - Hands On

• AWS WAF AWS WAF

• سپر AWS AWS Shield

• AWS Services Security Deep Dive - قسمت 1 AWS Services Security Deep Dive - Part 1

• AWS Services Security Deep Dive - قسمت 2 AWS Services Security Deep Dive - Part 2

• AWS Services Security Deep Dive - قسمت 3 AWS Services Security Deep Dive - Part 3

• سوالات تمرین امنیت، هویت و انطباق Security, Identity, and Compliance practice questions

شبکه سازی و تحویل محتوا Networking and Content Delivery

• مقدمه: شبکه سازی و تحویل محتوا Intro: Networking and Content Delivery

• VPC، زیرشبکه ها، دروازه اینترنت، دروازه NAT VPC, Subnets, Internet Gateway, NAT Gateway

• NACL، گروه‌های امنیتی، گزارش‌های جریان VPC NACL, Security Groups, VPC Flow Logs

• VPC Peering، Endpoints، VPN، Direct Connect VPC Peering, Endpoints, VPN, Direct Connect

• برگه تقلب VPC و نظرات پایانی VPC Cheat Sheet & Closing Comments

• AWS PrivateLink AWS PrivateLink

• DNS چیست؟ What is DNS?

• مسیر آمازون 53 Amazon Route 53

• Amazon Route 53 - ثبت دامنه ها - Hands On Amazon Route 53 - Registering Domains - Hands On

• Amazon Route 53 - ایجاد رکوردهای DNS - Hands On Amazon Route 53 - Creating DNS Records - Hands On

• Amazon CloudFront Amazon CloudFront

• Amazon CloudFront - S3 as Origin - Hands On Amazon CloudFront - S3 as Origin - Hands On

• Amazon CloudFront - ALB as Origin Amazon CloudFront - ALB as Origin

• Amazon CloudFront - عدم اعتبار کش Amazon CloudFront - Cache Invalidation

• سوالات تمرینی شبکه و ارائه محتوا Networking and Content Delivery practice questions

مدیریت و حکمرانی Management and Governance

• مقدمه: مدیریت و حکمرانی Intro: Management and Governance

• Amazon CloudWatch - متریک Amazon CloudWatch - Metrics

• Amazon CloudWatch - سیاههها Amazon CloudWatch - Logs

• Amazon CloudWatch - Logs - Hands On Amazon CloudWatch - Logs - Hands On

• Amazon CloudWatch - Logs Unified Agent Amazon CloudWatch - Logs Unified Agent

• Amazon CloudWatch - هشدارها Amazon CloudWatch - Alarms

• Amazon CloudWatch - هشدارها - Hands On Amazon CloudWatch - Alarms - Hands On

• Amazon CloudTrail Amazon CloudTrail

• Amazon CloudTrail - Hands On Amazon CloudTrail - Hands On

• دریاچه AWS CloudTrail AWS CloudTrail Lake

• پیکربندی AWS AWS Config

• AWS Config - Hands On AWS Config - Hands On

• CloudWatch در مقابل CloudTrail در مقابل Config CloudWatch vs. CloudTrail vs. Config

• AWS CloudFormation AWS CloudFormation

• AWS CloudFormation - Hands On AWS CloudFormation - Hands On

• فروشگاه پارامتر SSM SSM Parameter Store

• فروشگاه پارامتر SSM - Hands On SSM Parameter Store - Hands On

• فروشگاه پارامتر SSM - ادغام لامبدا SSM Parameter Store - Lambda Integration

• چارچوب و ابزار خوش معماری AWS AWS Well-Architected Framework & Tool

• آمازون گرافانا را مدیریت کرد Amazon Managed Grafana

• سوالات تمرین مدیریت و حکمرانی Management and Governance practice questions

فراگیری ماشین Machine Learning

• مقدمه: یادگیری ماشینی Intro: Machine Learning

• آمازون SageMaker Amazon SageMaker

• فروشگاه ویژگی SageMaker SageMaker Feature Store

• SageMaker ML Lineage Tracking SageMaker ML Lineage Tracking

• SageMaker Data Rangler SageMaker Data Wrangler

• سوالات تمرینی یادگیری ماشین Machine Learning practice questions

ابزارهای توسعه دهنده Developer Tools

• مقدمه: ابزارهای توسعه دهنده Intro: Developer Tools

• کلیدهای دسترسی AWS، CLI و SDK AWS Access Keys, CLI & SDK

• راه اندازی AWS CLI در ویندوز AWS CLI Setup on Windows

• راه اندازی AWS CLI در Mac OS X AWS CLI Setup on Mac OS X

• راه اندازی AWS CLI در لینوکس AWS CLI Setup on Linux

• AWS CLI Hands On AWS CLI Hands On

• AWS Cloud9 AWS Cloud9

• AWS Cloud9 - Hands On AWS Cloud9 - Hands On

• AWS CDK AWS CDK

• AWS CDK - Hands On AWS CDK - Hands On

• AWS CodeDeploy AWS CodeDeploy

• AWS CodeCommit AWS CodeCommit

• AWS CodeBuild AWS CodeBuild

• AWS CodePipeline AWS CodePipeline

• سوالات تمرینی Developer Tools Developer Tools practice questions

همه چیز دیگر Everything Else

• مقدمه: همه چیز دیگر Intro: Everything Else

• بودجه های AWS AWS Budgets

• بودجه های AWS - دست در دست AWS Budgets - Hands On

• AWS Cost Explorer AWS Cost Explorer

• دروازه API آمازون Amazon API Gateway

• دروازه API آمازون - در دسترس است Amazon API Gateway - Hands On

• آخرین مسابقه! The last quiz!

بسته بندی Wrapping Up

• مقدمه: جمع بندی Intro: Wrapping Up

• مرور راهنمای آزمون (و سایر منابع AWS) Reviewing the Exam Guide (and other AWS resources)

• نکات عمومی آزمون گواهینامه AWS General AWS Certification Exam Tips

• راهنمای آزمون و ثبت نام Exam Walkthrough and Signup

• 30 دقیقه اضافی در آزمون AWS خود دریافت کنید - فقط انگلیسی زبانان غیر بومی Get an Extra 30 Minutes on your AWS Exam - Non Native English Speakers Only

• متشکرم! Thank you!

• سخنرانی جایزه BONUS Lecture