مهندسی داده در AWS - آموزش جامع - آخرین آپدیت

دانلود Data Engineering on AWS - The complete training

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:

آموزش مهندسی داده در AWS Cloud: افزایش اعتماد و اعتبار شما

مهندس داده یک نقش پرتقاضا با کمبود متخصصان ماهر است. این آموزش به شما کمک می‌کند تا اعتماد و اعتبار خود را به عنوان یک مهندس داده، معمار داده و سایر نقش‌های مرتبط با داده در AWS Cloud افزایش دهید.

در این آموزش، شما توانایی پیاده‌سازی پایپ‌لاین‌های داده، نظارت، عیب‌یابی و بهینه‌سازی مسائل مربوط به هزینه و عملکرد را مطابق با بهترین روش‌ها توسعه خواهید داد.

این آموزش توانایی شما را در انجام وظایف زیر افزایش می‌دهد:

  • دریافت و تبدیل داده‌ها و سازماندهی پایپ‌لاین‌های داده در حین اعمال مفاهیم برنامه‌نویسی.
  • انتخاب یک مخزن داده بهینه، طراحی مدل‌های داده، فهرست‌بندی طرحواره‌های داده و مدیریت چرخه‌های عمر داده.
  • به‌کارگیری، نگهداری و نظارت بر پایپ‌لاین‌های داده. تجزیه و تحلیل داده‌ها و تضمین کیفیت داده.
  • پیاده‌سازی احراز هویت، مجوز، رمزگذاری داده، حریم خصوصی و حکمرانی مناسب. فعال‌سازی گزارش‌گیری.

اگرچه این آموزش بر گواهینامه AWS Certified Data Engineer - Associate (DEA-C01) متمرکز است، اما برای زبان‌آموزانی که می‌خواهند درباره مهندسی داده در AWS Cloud بیشتر بدانند نیز به همان اندازه مفید است. در این آموزش، چهار حوزه امتحانی زیر پوشش داده شده است:

  • دامنه 1: دریافت و تبدیل داده (Data Ingestion and Transformation)
  • دامنه 2: مدیریت مخزن داده (Data Store Management)
  • دامنه 3: عملیات و پشتیبانی داده (Data Operations and Support)
  • دامنه 4: امنیت و حاکمیت داده (Data Security and Governance)

پیش نیازها

آشنایی با مفاهیم کلی تحلیل داده، شبکه‌سازی، ذخیره‌سازی و محاسبات در AWS Cloud.

مهارت‌هایی که کسب خواهید کرد:

دریافت و تبدیل داده

  • انجام دریافت داده.
  • تبدیل و پردازش داده.
  • سازماندهی پایپ‌لاین‌های داده.
  • اعمال مفاهیم برنامه‌نویسی.

مدیریت مخزن داده

  • انتخاب یک مخزن داده.
  • درک سیستم‌های فهرست‌بندی داده.
  • مدیریت چرخه عمر داده.
  • طراحی مدل‌های داده و تکامل طرحواره.

عملیات و پشتیبانی داده

  • خودکارسازی پردازش داده با استفاده از خدمات AWS.
  • تجزیه و تحلیل داده با استفاده از خدمات AWS.
  • نگهداری و نظارت بر پایپ‌لاین‌های داده.
  • تضمین کیفیت داده.

امنیت و حاکمیت داده

  • اعمال مکانیزم‌های احراز هویت.
  • اعمال مکانیزم‌های مجوز.
  • تضمین رمزگذاری و ماسک کردن داده.
  • تهیه گزارش برای حسابرسی.
  • درک حریم خصوصی و حاکمیت داده.

سرفصل ها و درس ها

Introduction - Data is the new oil-مقدمه - داده‌ها نفت جدید هستند Introduction - Data is the new oil

  • Introduction-مقدمه Introduction

Know your trainer-با مربی خود آشنا شوید Know your trainer

  • Know your trainer-با مربی خود آشنا شوید Know your trainer

Getting started with Data Analytics-شروع کار با تجزیه و تحلیل داده Getting started with Data Analytics

  • Data Engineering on AWS-مهندسی داده در AWS Data Engineering on AWS

  • Basic Terminologies-اصطلاحات پایه Basic Terminologies

AWS Glue - Catalog and process your data-AWS Glue - فهرست‌بندی و پردازش داده‌ها AWS Glue - Catalog and process your data

  • Glue Data Catalog-فهرست داده Glue Glue Data Catalog

  • Glue ETL - Part 1-Glue ETL - قسمت 1 Glue ETL - Part 1

  • Glue ETL - Part 2-Glue ETL - قسمت 2 Glue ETL - Part 2

  • Glue ETL - Part 3-Glue ETL - قسمت 3 Glue ETL - Part 3

  • Workflows-گردش‌های کاری Workflows

  • Job Bookmark-نشانه‌گذاری شغل Job Bookmark

  • Execution Type-نوع اجرا Execution Type

  • Data Quality - Part 1-کیفیت داده - قسمت 1 Data Quality - Part 1

  • Data Quality - Part 2-کیفیت داده - قسمت 2 Data Quality - Part 2

  • Glue Databrew-Glue Databrew Glue Databrew

  • Additional Features-ویژگی‌های اضافی Additional Features

Amazon Redshift - A data warehouse in AWS-Amazon Redshift - یک انبار داده در AWS Amazon Redshift - A data warehouse in AWS

  • Amazon Redshift-Amazon Redshift Amazon Redshift

  • Architecture-معماری Architecture

  • Creating a cluster-ایجاد یک خوشه Creating a cluster

  • Query Editor v2-ویرایشگر پرس‌وجو v2 Query Editor v2

  • Distribution styles-سبک‌های توزیع Distribution styles

  • Cluster operations-عملیات خوشه Cluster operations

  • Data API-API داده Data API

  • Redshift Spectrum-Redshift Spectrum Redshift Spectrum

  • Redshift Serverless - Part 1-Redshift Serverless - قسمت 1 Redshift Serverless - Part 1

  • Redshift Serverless - Part 2-Redshift Serverless - قسمت 2 Redshift Serverless - Part 2

  • Materialized views-نماهای مادی شده Materialized views

  • WLM and concurrency-WLM و همزمانی WLM and concurrency

  • Datashare-اشتراک داده Datashare

  • Additional information-اطلاعات اضافی Additional information

Processing Streaming Data on Amazon Kinesis and Amazon MSK-پردازش داده‌های جریانی در Amazon Kinesis و Amazon MSK Processing Streaming Data on Amazon Kinesis and Amazon MSK

  • What is Streaming Data?-داده‌های جریانی چیست؟ What is Streaming Data?

  • Streaming Services in AWS-سرویس‌های جریانی در AWS Streaming Services in AWS

  • Amazon Kinesis family-خانواده Amazon Kinesis Amazon Kinesis family

  • Amazon Kinesis Data Streams-جریان‌های داده Amazon Kinesis Amazon Kinesis Data Streams

  • Capacity Mode-حالت ظرفیت Capacity Mode

  • Shard Iterators-تکرارکننده‌های Shard Shard Iterators

  • Kinesis Data Generator-تولید کننده داده Kinesis Kinesis Data Generator

  • Data Stream Porducers-تولید کنندگان جریان داده Data Stream Porducers

  • Data Stream Consumer-مصرف کننده جریان داده Data Stream Consumer

  • Enhanced fan-out-فن‌آوری پیشرفته Enhanced fan-out

  • Amazon Kinesis Firehose-Amazon Kinesis Firehose Amazon Kinesis Firehose

  • Dynamic Partitioning-پارتیشن بندی پویا Dynamic Partitioning

  • Data Stream vs. Data Firehose-جریان داده در مقابل Data Firehose Data Stream vs. Data Firehose

  • Managed Service for Apache Flink-سرویس مدیریت شده برای Apache Flink Managed Service for Apache Flink

  • Flink Application-برنامه Flink Flink Application

  • Flink Studio-استودیو Flink Flink Studio

  • Apache Kafka-Apache Kafka Apache Kafka

  • Amazon Managed Service for Kafka-سرویس مدیریت شده Amazon برای Kafka Amazon Managed Service for Kafka

  • MSK Cluster-خوشه MSK MSK Cluster

  • Kafka Topic-موضوع Kafka Kafka Topic

  • Send and receive messages-ارسال و دریافت پیام‌ها Send and receive messages

  • Amazon MSK Serverless-Amazon MSK Serverless Amazon MSK Serverless

  • MSK Provisioned vs. Serverless-MSK Provisioned در مقابل Serverless MSK Provisioned vs. Serverless

  • Amazon MSK Connect-Amazon MSK Connect Amazon MSK Connect

  • Amazon Kinesis vs. Amazon MSK-Amazon Kinesis در مقابل Amazon MSK Amazon Kinesis vs. Amazon MSK

Running Big data workloads on Amazon EMR-اجرای بارهای کاری Big Data در Amazon EMR Running Big data workloads on Amazon EMR

  • What is Big data?-Big Data چیست؟ What is Big data?

  • Map Reduce-Map Reduce Map Reduce

  • Big data ecosystem-اکوسیستم Big Data Big data ecosystem

  • Amazon EMR-Amazon EMR Amazon EMR

  • Storage for EMR-ذخیره‌سازی برای EMR Storage for EMR

  • Creating EMR cluster - Part 1-ایجاد خوشه EMR - قسمت 1 Creating EMR cluster - Part 1

  • Creating EMR cluster - Part 2-ایجاد خوشه EMR - قسمت 2 Creating EMR cluster - Part 2

  • Migration-مهاجرت Migration

  • Amazon EMR Serverless-Amazon EMR Serverless Amazon EMR Serverless

  • Cost optimization-بهینه‌سازی هزینه Cost optimization

Building Datalakes on AWS-ساخت دریاچه‌های داده در AWS Building Datalakes on AWS

  • What is Datalake?-دریاچه داده چیست؟ What is Datalake?

  • Data warehouse vs. Datalake-انبار داده در مقابل دریاچه داده Data warehouse vs. Datalake

  • AWS Lake Formation-AWS Lake Formation AWS Lake Formation

  • How it works?-چگونه کار می‌کند؟ How it works?

  • Setting up a Datalake - Part 1-راه‌اندازی یک دریاچه داده - قسمت 1 Setting up a Datalake - Part 1

  • Setting up a Datalake - Part 2-راه‌اندازی یک دریاچه داده - قسمت 2 Setting up a Datalake - Part 2

  • Datalake permissions-مجوزهای دریاچه داده Datalake permissions

  • Tag based permissions-مجوزهای مبتنی بر برچسب Tag based permissions

  • Open Table Formats-فرمت‌های جدول باز Open Table Formats

Query your data using Amazon Athena-پرس‌وجو داده‌ها با استفاده از Amazon Athena Query your data using Amazon Athena

  • Why to use Amazon Athena?-چرا باید از Amazon Athena استفاده کرد؟ Why to use Amazon Athena?

  • How it works?-چگونه کار می‌کند؟ How it works?

  • Optimizing queries in Athena - Part 1-بهینه‌سازی پرس‌وجوها در Athena - قسمت 1 Optimizing queries in Athena - Part 1

  • Optimizing queries in Athena - Part 2-بهینه‌سازی پرس‌وجوها در Athena - قسمت 2 Optimizing queries in Athena - Part 2

  • Workgroups-گروه‌های کاری Workgroups

  • Federated query - Part 1-پرس‌وجوی فدرال - قسمت 1 Federated query - Part 1

  • Federated query - Part 2-پرس‌وجوی فدرال - قسمت 2 Federated query - Part 2

Visualize your data using Amazon Quicksight-تجسم داده‌ها با استفاده از Amazon Quicksight Visualize your data using Amazon Quicksight

  • Data visualization-تجسم داده Data visualization

  • Getting started-شروع کار Getting started

  • Integration with Amazon Athena-ادغام با Amazon Athena Integration with Amazon Athena

Orchestrating your data pipeline-هماهنگ‌سازی خط لوله داده Orchestrating your data pipeline

  • Orchestrating your data pipeline-هماهنگ‌سازی خط لوله داده Orchestrating your data pipeline

  • Which one to choose?-کدام را انتخاب کنیم؟ Which one to choose?

  • Amazon AppFlow-Amazon AppFlow Amazon AppFlow

  • AWS Data Exchange-AWS Data Exchange AWS Data Exchange

  • AWS Step Functions - Part 1-AWS Step Functions - قسمت 1 AWS Step Functions - Part 1

  • AWS Step Functions - Part 2-AWS Step Functions - قسمت 2 AWS Step Functions - Part 2

  • AWS Step Functions - Part 3-AWS Step Functions - قسمت 3 AWS Step Functions - Part 3

Data Migration services in AWS-سرویس‌های مهاجرت داده در AWS Data Migration services in AWS

  • A note before you proceed-یادداشتی قبل از ادامه A note before you proceed

  • Migrating your databases to AWS-انتقال پایگاه‌های داده به AWS Migrating your databases to AWS

  • AWS DMS - Part 1-AWS DMS - قسمت 1 AWS DMS - Part 1

  • AWS DMS - Part 2-AWS DMS - قسمت 2 AWS DMS - Part 2

  • AWS DMS - Part 3-AWS DMS - قسمت 3 AWS DMS - Part 3

  • Migrating your data to AWS-انتقال داده‌ها به AWS Migrating your data to AWS

  • AWS DataSync - Part 1-AWS DataSync - قسمت 1 AWS DataSync - Part 1

  • AWS DataSync - Part 2-AWS DataSync - قسمت 2 AWS DataSync - Part 2

  • AWS Transfer Family - Part 1-AWS Transfer Family - قسمت 1 AWS Transfer Family - Part 1

  • AWS Transfer Family - Part 2-AWS Transfer Family - قسمت 2 AWS Transfer Family - Part 2

  • AWS Snow Family-AWS Snow Family AWS Snow Family

Going beyond AWS analytics services-فراتر رفتن از سرویس‌های تجزیه و تحلیل AWS Going beyond AWS analytics services

  • A note before you proceed-یادداشتی قبل از ادامه A note before you proceed

  • AWS Lambda - Important features-AWS Lambda - ویژگی‌های مهم AWS Lambda - Important features

  • AWS Lambda - Concurrency-AWS Lambda - همزمانی AWS Lambda - Concurrency

  • AWS Lambda - Layers-AWS Lambda - لایه‌ها AWS Lambda - Layers

  • AWS Lambda - VPC connectivity-AWS Lambda - اتصال VPC AWS Lambda - VPC connectivity

  • AWS Lambda - Permissions-AWS Lambda - مجوزها AWS Lambda - Permissions

  • Amazon S3 - Encryption-Amazon S3 - رمزگذاری Amazon S3 - Encryption

  • Amazon S3 - Glacier Storage Tiers-Amazon S3 - سطوح ذخیره‌سازی Glacier Amazon S3 - Glacier Storage Tiers

  • Amazon S3 - Events Notification-Amazon S3 - اعلان رویدادها Amazon S3 - Events Notification

  • Amazon S3 - Lifecycle policies-Amazon S3 - سیاست‌های چرخه عمر Amazon S3 - Lifecycle policies

  • Amazon S3 - Intelligent Tier-Amazon S3 - سطح هوشمند Amazon S3 - Intelligent Tier

  • Amazon S3 - Select-Amazon S3 - انتخاب Amazon S3 - Select

  • Amazon S3 - Object Lambda-Amazon S3 - Object Lambda Amazon S3 - Object Lambda

  • Amazon EC2 - EBS volumes-Amazon EC2 - حجم‌های EBS Amazon EC2 - EBS volumes

  • Amazon RDS - Performance insights-Amazon RDS - بینش‌های عملکرد Amazon RDS - Performance insights

  • Amazon DynamoDB - Streams-Amazon DynamoDB - جریان‌ها Amazon DynamoDB - Streams

  • Amazon DynamoDB - Global tables-Amazon DynamoDB - جداول جهانی Amazon DynamoDB - Global tables

  • Amazon DynamoDB - Auto Scaling-Amazon DynamoDB - مقیاس‌بندی خودکار Amazon DynamoDB - Auto Scaling

Final note-یادداشت پایانی Final note

  • Final note-یادداشت پایانی Final note

نمایش نظرات

مهندسی داده در AWS - آموزش جامع
جزییات دوره
19 hours
120
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
1,697
4.6 از 5
دارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Ashish Prajapati Ashish Prajapati

آموزش آسان و جذاب مهارت‌های ابری AWS