کانال تلگرام پشتیبانی تلگرام شماره تماس پشتیبانی: 0930 395 3766
ورود ثبت نام

آموزش دوره کامل AWS Certified Data Engineer + پروژه عملیاتی - آخرین آپدیت

دانلود NEW Complete AWS Certified Data Engineer + Hands on Project

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:

[2025 جدید] مهندسی داده در AWS با پروژه عملی واقعی! یادگیری با انجام دادن!

ساخت یک پایپ‌لاین کامل و مدرن مهندسی داده همراه با آمادگی برای آزمون AWS Certified Data Engineer!

مروری بر دوره:

این دوره بر پروژه‌های واقعی تمرکز دارد که اثبات شده بهترین راه برای حفظ دانش و اثبات تخصص شماست. این پروژه‌ها می‌توانند منابع اضافی برای رزومه شما و استفاده در فرآیندهای مصاحبه جهت شرح تجربه با AWS Cloud و مهندسی داده باشند.

آزمون AWS Certified Data Engineer Associate (DEA-C01 یا DE1-C01) یکی از آزمون‌های دشوار است. این دوره با ترکیب ماژول‌های توضیحی و راهنمایی‌های عملی، بهترین‌ها را ارائه می‌دهد تا به شما اطمینان دهد که خدمات AWS را به خوبی درک کرده‌اید.

هدف من این است که شما را برای تبدیل شدن به یک مهندس داده، درک شیوه‌های مهندسی داده به عنوان یک معمار راهکار، گذراندن گواهینامه AWS DEA-C01 و موفقیت در شغل خود آماده کنم.

این دوره یکی از جامع‌ترین و پروژه‌محورترین دوره‌های موجود است که توسط مدرسان با سوابق گسترده در AWS پشتیبانی می‌شود!

محتوای دوره شامل:

  • جمع‌آوری داده‌های جریانی و دسته‌ای با AWS DMS، Schema Conversion Tool، Apache Kafka، Amazon MSK، MSK Connect، Kinesis Data Streams، Kinesis Data Firehose، AWS Glue Schema Registry
  • ذخیره‌سازی و پایگاه‌های داده در Amazon S3، Amazon EBS، Amazon EFS، AWS Backup، Amazon RDS، Amazon Aurora، Amazon DynamoDB، Amazon Neptune، Amazon DocumentDB، Amazon Timestream، AWS Lake Formation
  • تبدیل و پردازش داده با AWS Glue، Amazon EC2، Amazon ECR، Amazon ECS، Amazon EKS، Amazon EMR، AWS Batch، AWS Lambda، Managed Service for Apache Flink
  • تجزیه و تحلیل و پرس‌وجو از داده‌ها با Amazon OpenSearch Service، Amazon Redshift، Amazon Athena
  • زمان‌بندی و ارکستراسیون پایپ‌لاین با Amazon EventBridge، AWS Step Functions، Apache Airflow MWAA، AWS Glue Workflows، Amazon SNS، Amazon SQS، Amazon AppFlow
  • مصرف و بصری‌سازی داده‌ها با Amazon QuickSight، Machine Learning، Amazon Sagemaker
  • عملیاتی کردن، نگهداری و نظارت بر پایپ‌لاین‌های داده با Amazon CloudWatch و CloudTrail
  • یادگیری شیوه‌های احراز هویت، مجوز دسترسی، رمزگذاری داده‌ها، حریم خصوصی و حاکمیت داده. Amazon IAM، Amazon KMS و AWS Secrets Manager
  • مفاهیم پایپ‌لاین ETL مانند Slowly Changing Dimensions (SCD I, SCD II)
  • ابزارهای CI/CD در AWS مانند AWS CloudFormation، AWS Serverless Application Model، AWS CodeCommit، AWS CodeBuild، AWS Code Deploy، AWS CodePipeline

غرق شدن در فناوری‌های متن‌باز و SQL:

  • خواندن، نوشتن و تبدیل داده‌ها با Apache Spark
  • یادگیری مبانی پردازش جریانی با Apache Kafka
  • درک معماری OpenSearch
  • نوشتن پرس‌وجوهای پایه تا متوسط با Structured Query Language (SQL)

پیش‌نیازها:

  • نیاز به تجربه برنامه‌نویسی گسترده نیست.
  • آشنایی با خواندن و نوشتن کد پایتون.
  • درک اساسی از AWS Cloud (VPC، Regions، Availability Zones).

به من در این سفر هیجان‌انگیز بپیوندید و برای کسب Data Engineer Associate Exam (DEA-C01 یا DE1-C01) تلاش کنید.

سرفصل ها و درس ها

مقدمه Introduction

  • مقدمه دوره Course Introduction

  • سناریوی پروژه Project Scenario

  • نمودار معماری Architecture Diagram

  • بررسی مجموعه داده ها Data Sets Review

  • منابع پروژه Project Resources

مروری بر مهندسی داده Data Engineering Overview

  • آشنایی با داده ها Data 101

  • خطوط لوله مهندسی داده Data Engineering Pipelines

  • مدل سازی داده Data Modelling

  • حاکمیت داده ها Data Governance

  • معماری داده Data Architecture

[عملی] راه اندازی حساب [Hands On] Account Set Up

  • [عملی] - ایجاد حساب رایگان [Hands On] - Create Free Tier Account

  • [عملی] - تنظیم بودجه ها [Hands On] - Set Up Budgets

  • [عملی] - تنظیم کاربر IAM [Hands On] - Set Up IAM User

ذخیره سازی Storage

  • مروری بر ذخیره سازی Storage Overview

  • Amazon S3 Amazon S3

  • Amazon S3 – کلاس های ذخیره سازی Amazon S3 – Storage Classes

  • Amazon S3 – کنترل دسترسی Amazon S3 – Access Control

  • Amazon S3 – رمزگذاری Amazon S3 – Encryption

  • Amazon S3 – عملکرد آپلود/دریافت Amazon S3 – Upload/Fetch Performance

  • Amazon EBS Amazon EBS

  • Amazon EFS Amazon EFS

  • AWS Backup AWS Backup

پایگاه های داده Databases

  • Amazon RDS/Amazon Aurora Amazon RDS/Amazon Aurora

  • Amazon DynamoDB Amazon DynamoDB

  • Amazon DynamoDB – ظرفیت Amazon DynamoDB – Capacity

  • Amazon DynamoDB – ایندکس ها Amazon DynamoDB – Indexes

  • Amazon Neptune Amazon Neptune

  • Amazon DocumentDB Amazon DocumentDB

  • Amazon Timestream Amazon Timestream

  • AWS Lake Formation AWS Lake Formation

[عملی] ذخیره سازی [Hands-On] Storage

  • [عملی] - معرفی بخش [Hands On] - Section Introduction

  • [عملی] - منبع در Amazon RDS MySQL [Hands On] - Source on Amazon RDS MySQL

  • [عملی] - CDC و جداول منبع [Hands On] - CDC and Source Tables

  • [عملی] - مقصد در Amazon S3 [Hands On] - Target on Amazon S3

ورود داده ها Data Ingestion

  • مروری بر ورود داده ها Ingestion Overview

  • AWS DMS AWS DMS

  • AWS Schema Conversion Tool AWS Schema Conversion Tool

  • Apache Kafka Apache Kafka

  • Amazon MSK Amazon MSK

  • MSK Connect MSK Connect

  • Kinesis Data Streams Kinesis Data Streams

  • ظرفیت Kinesis Data Streams Kinesis Data Streams Capacity

  • Kinesis Data Firehose Kinesis Data Firehose

  • AWS Glue Schema Registry AWS Glue Schema Registry

[عملی] ورود داده ها [Hands-On] Data Ingestion

  • معرفی بخش Section Introduction

  • [عملی] - ایجاد نمونه تکرار [Hands on] - Create Replication Instance

  • [عملی] - نقاط پایانی منبع و مقصد [Hands on] - Source and Target Endpoints

  • [عملی] - وظایف انتقال پایگاه داده [Hands on] - Database Migration Tasks

انتقال و جابجایی Migration and Transfer

  • خانواده AWS Snow AWS Snow Family

  • AWS Storage Gateway AWS Storage Gateway

  • خانواده AWS Transfer AWS Transfer Family

  • AWS DataSync AWS DataSync

پردازش Processing

  • مقدمه Apache Spark Apache Spark Introduction

  • AWS Glue AWS Glue

  • AWS Glue Studio AWS Glue Studio

  • Amazon EC2 Amazon EC2

  • Amazon ECR Amazon ECR

  • Amazon ECS Amazon ECS

  • Amazon EKS Amazon EKS

  • Amazon EMR Amazon EMR

  • AWS Batch AWS Batch

  • AWS Lambda AWS Lambda

  • سرویس مدیریت شده برای Apache Flink Managed Service for Apache Flink

[عملی] تولید داده [Hands On] Data Generation

  • معرفی بخش Section Introduction

  • [عملی] – راه اندازی و بررسی کد [Hands on] – Setup and Code Review

  • [عملی] – ایجاد تابع Lambda [Hands on] – Create Lambda Function

  • [عملی] - بررسی نتایج [Hands on] - Review Results

[عملی] پردازش [Hands On] Processing

  • معرفی بخش Section Introduction

  • [عملی] - شروع به کار با Glue [Hands on] - Get started with Glue

  • [عملی] – پیکربندی Glue Notebook [Hands on] – Configure Glue Notebook

  • [عملی] – خواننده Apache Spark DataFrame [Hands on] – Apache Spark DataFrame Reader

  • [عملی] – ایجاد Glue crawler و کاتالوگ [Hands on] – Create Glue crawler and catalog

  • [عملی] – تبدیل های Apache Spark – محصول [Hands on] – Apache Spark Transformations – Product

  • [عملی] – نویسنده DynamicFrame Apache Spark [Hands on] - Apache Spark DynamicFrame Writer

[عملی] پردازش افزایشی [Hands On] Incremental Processing

  • [عملی] - فعال سازی نشانگرهای وظیفه [Hands on] - Enable Job bookmarks

  • [راه حل] وظیفه تبدیل – مشتری [Solution] Transformation Job – Customer

  • [راه حل] وظیفه تبدیل – سفارش ها [Solution] Transformation Job – Orders

  • [راه حل] وظیفه تبدیل – جزئیات سفارش [Solution] Transformation Job – OrderDetails

SQL SQL

  • مروری بر SQL SQL Overview

  • DDL - زبان تعریف داده ها DDL - Data Definition Language

  • DML - زبان دستکاری داده ها DML - Data Manipulation Language

  • دستور SQL Select SQL Select Statement

  • Join های SQL Select SQL Select Joins

  • تجمعات SQL Select SQL Select Aggregations

  • توابع پنجره SQL SQL Window Functions

انباره داده/تحلیل داده Data Warehousing/Analysis

  • سرویس Amazon OpenSearch Amazon OpenSearch Service

  • Amazon Redshift Amazon Redshift

  • ویژگی های Amazon Redshift - داده در محل Amazon Redshift Features - Data in Place

  • ویژگی های Amazon Redshift - ورود داده ها Amazon Redshift Features - Data Ingestion

  • ویژگی های Amazon Redshift - رویه های ذخیره شده، نمایه‌های مادی، UDFها و WLM Amazon Redshift Features - Stored Procedures, Materialized Views, UDFs and WLM

  • Amazon Redshift - امنیت و نظارت Amazon Redshift - Security and Monitoring

  • Amazon Athena Amazon Athena

  • بهینه سازی عملکرد کوئری Query Performance Optimizations

[عملی] انباره داده [Hands On] Data Warehousing

  • معرفی بخش Section Introduction

  • [عملی] - خوشه بدون سرور Amazon Redshift [Hands on] - Amazon Redshift Serverless Cluster

  • [عملی] - ایجاد جداول مقصد [Hands on] - Create Target Tables

  • [عملی] - ایجاد رویه ذخیره شده – محصول [Hands on] - Create Stored Procedure – Product

  • [عملی] - ایجاد رویه ذخیره شده - مشتری [Hands on] - Create Stored Procedure - Customer

  • [عملی] – نمای مادی [Hands on] – Materialized View

[عملی] بارگذاری داده [Hands On] Data Loading

  • معرفی بخش Section Introduction

  • [عملی] تنظیم اتصالات VPC [Hands on] VPC Connections Setup

  • [عملی] - وظیفه بارگذاری – بعد محصول [Hands on] - Load Job – Product Dimension

  • [عملی] - وظیفه بارگذاری – بعد مشتری [Hands on] - Load Job – Customer Dimension

  • [عملی] - وظیفه بارگذاری – حقایق [Hands on] - Load Job – Facts

ارکستراسیون و یکپارچه‌سازی Orchestration and Integration

  • Amazon EventBridge Amazon EventBridge

  • AWS Step Functions AWS Step Functions

  • Apache Airflow MWAA Apache Airflow MWAA

  • گردش کارهای AWS Glue AWS Glue Workflows

  • Amazon SNS Amazon SNS

  • Amazon SQS Amazon SQS

  • Amazon AppFlow Amazon AppFlow

[عملی] ارکستراسیون [Hands On] Orchestration

  • معرفی بخش Section Introduction

  • تنظیم ماشین حالت State Machine Setup

  • [عملی] – وظایف تبدیل موازی [Hands on] – Parallel Transform Jobs

  • [عملی] – بارگذاری ابعاد موازی – محصولات [Hands on] – Parallel Load Dimensions – Products

  • [عملی] - بارگذاری ابعاد موازی – مشتری [Hands on] - Parallel Load Dimensions – Customer

  • [عملی] - بارگذاری حقایق موازی [Hands on] - Parallel Load Facts

هوش تجاری و یادگیری ماشین BI and ML

  • هوش تجاری Business Intelligence

  • Amazon QuickSight Amazon QuickSight

  • یادگیری ماشین Machine Learning

  • Amazon Sagemaker Amazon Sagemaker

[عملی] بصری‌سازی [Hands On] Visualisation

  • معرفی بخش Section Introduction

  • [عملی] – ایجاد حساب QuickSight [Hands on] – Create QuickSight Account

  • [عملی] – اتصال به مجموعه داده ها [Hands on] – Connect to Datasets

  • [عملی] – ایجاد تحلیل [Hands on] – Create Analysis

  • [عملی] – انتشار داشبورد [Hands on] – Publish Dashboard

[عملی] اجرای خط لوله [Hands On] Execute Pipeline

  • معرفی بخش Section Introduction

  • [عملی] – پاکسازی خط لوله [Hands on] – Pipeline Cleanup

  • [عملی] – زمان‌بندی با EventBridge [Hands on] – Schedule with EventBridge

  • کاوش داده ها Data Exploration

  • [عملی] – اعتبارسنجی و بینش ها [Hands on] – Validation and Insights

[مهم!! عملی] پاکسازی پروژه [IMPORTANT!! Hands On] Project Cleanup

  • [عملی] پاکسازی منابع [Hands On] Clean Up Resources

  • [اختیاری] حذف حساب AWS [Optional] Delete AWS Account

امنیت Security

  • مروری بر امنیت داده ها Data Security Overview

  • Amazon IAM Amazon IAM

  • Amazon KMS Amazon KMS

  • AWS Secrets Manager AWS Secrets Manager

  • Amazon Macie Amazon Macie

  • AWS WAF AWS WAF

  • AWS Shield AWS Shield

نظارت و ثبت وقایع Monitoring and Logging

  • Amazon CloudWatch Amazon CloudWatch

  • لاگ های Amazon CloudWatch Amazon CloudWatch Logs

  • AWS CloudTrail AWS CloudTrail

  • Amazon Managed Grafana Amazon Managed Grafana

  • AWS Config AWS Config

  • SSM Parameter Store SSM Parameter Store

زیرساخت و استقرار Infrastructure and Deployment

  • AWS CDK AWS CDK

  • AWS CloudFormation AWS CloudFormation

  • AWS Serverless Application Model AWS Serverless Application Model

  • AWS CodeCommit AWS CodeCommit

  • AWS CodeBuild AWS CodeBuild

  • AWS Code Deploy AWS Code Deploy

  • AWS CodePipeline AWS CodePipeline

نتیجه گیری Conclusion

  • راهنمای آزمون و نتیجه گیری Exam Guide and Conclusion

نمایش نظرات

آموزش دوره کامل AWS Certified Data Engineer + پروژه عملیاتی
جزییات دوره
14 hours
154
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
399
4.6 از 5
دارد
دارد
دارد

https://donyad.com/d/9e4c94

جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

KTS Kloud Tech Studio KTS Kloud Tech Studio

معمار راهکارهای ارشد