آموزش تسلط بر توسعه و مدیریت Amazon Redshift

سرفصل ها و درس ها

مقدمه و پیش نیاز Introduction and Pre-requisites

• Instructor and Redshift - مقدمه Instructor and Redshift - Introduction

• مهم: بخش های دوره را طبق تخصص خود رد کنید IMPORTANT : SKIP COURSE SECTIONS AS PER YOUR EXPERTISE

• پیش نیاز - آنچه برای این دوره نیاز دارید Pre-requisites - What you'll need for this course

• اهداف دوره Course Objectives

• محتوای دوره، کنوانسیون و منابع Course Content, Convention and Resources

آمازون Redshift Architecture and setup - Theory Amazon Redshift Architecture and Setup - Theory

• بخش دستور کار Section Agenda

• مبانی - انواع فروشگاه های داده Fundamentals - Types of Data Stores

• مروری بر معماری انبار داده Amazon Redshift Amazon Redshift Data Warehouse Architecture Overview

• معماری داخلی آمازون Redshift و ویژگی های کلیدی Amazon Redshift Internal Architecture and Key Features

• ساختارهای بنیادی آمازون Redshift Amazon Redshift Fundamental Constructs

• آمازون Redshift Cluster Sizing Amazon Redshift Cluster Sizing

• پیکربندی شبکه آمازون Redshift Cluster Amazon Redshift Cluster Network Configuration

• منابع Resources

Amazon Redshift Basic Operations - Labs Amazon Redshift Basic Operations - Labs

• بخش دستور کار Section Agenda

• رابط کاربری جدید Redshift Console New Redshift Console UI

• آزمایشگاه - ایجاد یک خوشه آمازون Redshift Lab - Creating an Amazon Redshift cluster

• آزمایشگاه - ایجاد خوشه Redshift با استفاده از کنسول جدید Redshift Lab - Creating Redshift cluster using NEW Redshift Console

• آزمایشگاه - خاتمه آمازون Redshift Cluster Lab - Terminating Amazon Redshift Cluster

• آزمایشگاه - هزینه نظارت آمازون Redshift Cluster Lab - Monitoring Cost of Amazon Redshift Cluster

• آزمایشگاه - نصب، راه اندازی و گشت و گذار در سرویس گیرنده SQL Lab - SQL Client Installation, Set-up and Guided-Tour

• آزمایشگاه - پیکربندی سرور Redshift آمازون Lab - Amazon Redshift Server Configuration

• آزمایشگاه - بارگیری داده های نمونه در Amazon Redshift Lab - Loading Sample Data into Amazon Redshift

• آزمایشگاه - پشتیبان گیری و بازیابی از آمازون Redshift Cluster Lab - Backup and Restore of Amazon Redshift Cluster

• مجوز Redshift برای دسترسی به خدمات آمازون Authorizing Redshift to access Amazon Services

• آزمایشگاه - تست پذیرش آمازون Redshift Cluster Lab - Acceptance Testing Amazon Redshift Cluster

• منابع Resources

• منابع Resources

آمازون Redshift - دستورات DDL Amazon Redshift - DDL Commands

• بخش دستور کار Section Agenda

• انواع داده ها و اپراتورها در آمازون Redshift Data Types and Operators in Amazon Redshift

• آزمایشگاه - انواع داده ها و اپراتورها در Amazon Redshift Lab - Data Types and Operators in Amazon Redshift

• ایجاد اشیاء با دستورات DDL در آمازون Redshift CREATE Objects with DDL commands in Amazon Redshift

• اشیاء را با دستورات DDL در آمازون Redshift تغییر دهید MODIFY Objects with DDL commands in Amazon Redshift

• DELETE اشیا با دستورات DDL در Amazon Redshift DELETE Objects with DDL commands in Amazon Redshift

• آزمایشگاه - بیانیه DDL در آمازون Redshift Lab - DDL Statement in Amazon Redshift

آمازون Redshift - دستورات DML Amazon Redshift - DML Commands

• بخش دستور کار Section Agenda

• بارگیری داده ها در آمازون Redshift Loading Data in Amazon Redshift

• آزمایشگاه - بارگیری داده ها در آمازون Redshift Lab - Loading Data in Amazon Redshift

• آزمایشگاه - تخلیه یا بارگیری داده ها از Amazon Redshift Lab - Unloading Or Downloading Data from Amazon Redshift

• بیانیه های SQL برای عملیات CRUD در آمازون Redshift SQL Statements for CRUD Operations in Amazon Redshift

• بیانیه های SQL برای تراکنش ها در Amazon Redshift SQL Statements for Transactions in Amazon Redshift

• بیانیه های SQL برای آمار سیستم در آمازون Redshift SQL Statements for System Statistics in Amazon Redshift

• آزمایشگاه - بیانیه های SQL برای مدیریت امتیازات در آمازون Redshift Lab - SQL Statements for Administering Privileges in Amazon Redshift

• توابع، عبارات و اپراتورهای داخلی در Amazon Redshift Built-in Functions, Expressions and Operators in Amazon Redshift

Amazon Redshift - طراحی جدول پیشرفته Amazon Redshift - Advanced Table Design

• بخش دستور کار Section Agenda

• آزمایشگاه: طراحی جدول Redshift آمازون - رمزگذاری های فشرده Lab: Amazon Redshift Table Design - Compression Encodings

• آزمایشگاه: طراحی جدول قرمز آمازون - سبک های توزیع Lab: Amazon Redshift Table Design - Distribution Styles

• به روز رسانی: 28-مارس-2019: Redshift به طور خودکار سبک توزیع جدول را انتخاب می کند Update: 28-Mar-2019 : Redshift automatically selects table distribution style

• آزمایشگاه: طراحی جدول قرمز آمازون - کلیدهای مرتب سازی Lab: Amazon Redshift Table Design - Sort Keys

• طراحی جدول Redshift آمازون - محدودیت ها Amazon Redshift Table Design - Constraints

• منابع طراحی جدول Table Design Resources

اطلاعات سیستم آمازون Redshift Amazon Redshift System Information

• بخش دستور کار Section Agenda

• جداول سیستم و کاتالوگ در آمازون Redshift System and Catalog Tables in Amazon Redshift

• نماهای سیستم در آمازون Redshift System Views in Amazon Redshift

تنظیم عملکرد و بهینه سازی پرس و جوها در Amazon Redshift Performance Tuning and Optimizing Queries in Amazon Redshift

• بخش دستور کار Section Agenda

• Lab: Query Planning and Execution Workflow در Amazon Redshift Lab: Query Planning and Execution Workflow in Amazon Redshift

• پرس و جو عوامل عملکرد در آمازون Redshift Query Performance Factors in Amazon Redshift

• نحوه تشخیص عملکرد Query در Amazon Redshift How to Diagnose Query Performance in Amazon Redshift

مدیریت عملیات و بار کاری در Amazon Redshift Operations and Workload Management in Amazon Redshift

• بخش دستور کار Section Agenda

• آزمایشگاه: بارگذاری افزایشی داده در Amazon Redshift Lab: Incremental data loads in Amazon Redshift

• گروه های پارامتر در آمازون Redshift Parameter Groups in Amazon Redshift

• مدیریت حجم کار در آمازون Redshift Workload Management in Amazon Redshift

• آزمایشگاه: گروه‌های پارامترها و مدیریت بار کاری در Amazon Redshift Lab: Parameters Groups and Workload Management in Amazon Redshift

آمازون Redshift Cluster Administration Amazon Redshift Cluster Administration

• بخش دستور کار Section Agenda

• بخش دستور کار Section Agenda

• محدودیت های آمازون Redshift Amazon Redshift Limits

• آزمایشگاه: پیکربندی و وضعیت اجمالی داشبورد آمازون Redshift Lab: Configuration and Status Overview of Amazon Redshift Dashboard

• آزمایشگاه: پیکربندی شبکه پیشرفته آمازون Redshift Cluster Lab: Advanced Network Configuration of Amazon Redshift Cluster

• آزمایشگاه: برچسب‌گذاری منابع در آمازون Redshift Cluster Lab: Resource Tagging in Amazon Redshift Cluster

• آزمایشگاه: رویدادها و اشتراک ها در آمازون Redshift Cluster Lab: Events and Subscriptions in Amazon Redshift Cluster

• آزمایشگاه: حسابرسی و ورود به سیستم آمازون Redshift Cluster Lab: Auditing and Logging in Amazon Redshift Cluster

• آزمایشگاه: پشتیبان گیری و بازیابی فاجعه در آمازون Redshift Lab: Backups and Disaster Recovery in Amazon Redshift

• آزمایشگاه: پشتیبان گیری و بازیابی فاجعه در آمازون Redshift Cluster Lab: Backups and Disaster Recovery in Amazon Redshift Cluster

• آزمایشگاه: نظارت بر عملکرد آمازون Redshift Cluster Lab: Performance Monitoring of Amazon Redshift Cluster

• آزمایشگاه: توسعه داشبوردهای مدیریت خوشه برای آمازون Redshift Cluster Lab: Developing Cluster Management Dashboards for Amazon Redshift Cluster

• آزمایشگاه: تغییر اندازه آمازون Redshift Cluster Lab: Resizing Amazon Redshift Cluster

• بهینه سازی هزینه آمازون Redshift Cluster Cost Optimization of Amazon Redshift Cluster

• آزمایشگاه: رمزگذاری داده ها در آمازون Redshift Cluster Lab: Data Encryption in Amazon Redshift Cluster

• بهترین روش های آمازون Redshift Amazon Redshift Best Practices

بسته شدن Wrap-up

• پاکسازی منابع Redshift آمازون Clean-Up Amazon Redshift Resources

ویژگی ها و نسخه های جدید Redshift - 2018 Redshift New Features & Releases - 2018

• 04-اکتبر-2018: ویرایشگر پرس و جو برای اجرای پرس و جوهای Redshift از کنسول AWS 04-Oct-2018 : Query editor to run Redshift queries from AWS Console

• 31-مه-2018: شتاب جستجوی کوتاه خود بهینه سازی 31-May-2018 : Self Optimizing Short Query Acceleration

• 05-ژوئن-2018: داده های ORC و پارکت را در Redshift کپی کنید 05-June-2018 : Copy ORC and Parquet Data in Redshift

• 26-ژوئیه-2018: توصیه بهترین تمرین سفارشی Redshift با مشاور 26-July-2018 : Redshift Customized Best Practice Recommendation with Advisor

• 30-ژوئیه-2018: معیارهای عملکرد خوشه در Amazon Redshift 30-July-2018 : Cluster Performance metrics in Amazon Redshift

• 07-اوت-2018: پشتیبانی از مرجع نام مستعار ستون جانبی در Amazon Redshift 07-Aug-2018 : Support for lateral column alias reference in Amazon Redshift

• 16 اکتبر 2018: خوشه Redshift رمزگذاری نشده موجود را رمزگذاری کنید 16-Oct-2018 : Encrypt existing unencrypted Redshift cluster

• 15 نوامبر 2018: تغییر اندازه الاستیک Redshift در مقابل تغییر اندازه کلاسیک 15-Nov-2018 : Redshift Elastic Resize vs Classic Resize

• 20 نوامبر 2018: تعمیر و نگهداری معوق Redshift با اعلان رویدادهای پیشرفته 20-Nov-2018 : Redshift Deferred Maintenance with Advance Event Notifications

• 19-دسامبر-2018: Redshift Automatic Vacuum Delete 19-Dec-2018 : Redshift Automatic Vacuum Delete

ویژگی ها و نسخه های جدید Redshift - 2019 Redshift New Features & Releases - 2019

• 18 ژانویه 2019: به‌روزرسانی آمار جدول خودکار Redshift 18-Jan-2019 : Redshift automatic Table Statistics update

• 27-مارس-2019: مقیاس‌گذاری همزمانی Redshift 27-Mar-2019 : Redshift concurrency scaling

• 04-آوریل 2019: بهبودهای عکس فوری Redshift 04-Apr-2019 : Redshift snapshot enhancements

• 15 نوامبر 2019: رابط کاربری جدید کنسول را تغییر دهید 15-Nov-2019 : Reshift new console UI

• با استفاده از رابط کاربری جدید کنسول Redshift Cluster ایجاد کنید Create Redshift Cluster using NEW console UI

• 09 آگوست 2019: Redshift از کنترل دسترسی سطح ستون با تشکیل دریاچه پشتیبانی می کند 09-Aug-2019 : Redshift supports column level access control with lake formation

• 17-مه-2019: Redshift از رویه های ذخیره شده پشتیبانی می کند 17-May-2019 : Redshift supports stored procedures

• 20 آگوست 2019: Redshift کلیدهای توزیع را توصیه می کند 20-Aug-2019 : Redshift recommends distribution keys

• 20 سپتامبر 2019: Redshift از مدیریت خودکار بار کاری و اولویت پرس و جو پشتیبانی می کند 20-Sep-2019 : Redshift supports automatic workload management and query priority

• 08 اکتبر 2019: Redshift رمزگذاری فشرده سازی AZ64 را معرفی کرد 08-Oct-2019 : Redshift introduces AZ64 compression encoding

• 14 اکتبر 2019: Redshift عملکرد Snapshot Transfers بین منطقه ای را بهبود می بخشد 14-Oct-2019 : Redshift improves performance of Inter-Region Snapshot Transfers

• 07-نوامبر-2019: Redshift از تغییر کلیدهای مرتب سازی جدول به صورت پویا پشتیبانی می کند 07-Nov-2019 : Redshift supports changing table sort keys dynamically

• 15-نوامبر-2019: Redshift بازیابی چند نمونه ای را راه اندازی کرد 15-Nov-2019 : Redshift launches cross-instance restore

• 21 نوامبر 2019: Redshift پشتیبانی از داده های مکانی را اعلام کرد 21-Nov-2019 : Redshift announces support for spatial data

• 25 نوامبر 2019: Redshift مرتب‌سازی خودکار جدول را معرفی می‌کند - جایگزین مرتب‌سازی خلاء 25-Nov-2019 : Redshift introduces automatic table sort - vacuum sort alternative

• 26 نوامبر 2019: Redshift از برنامه ریزی تغییر اندازه الاستیک پشتیبانی می کند 26-Nov-2019 : Redshift supports elastic resize scheduling

• 27-نوامبر 2019: Redshift پشتیبانی از نماهای Materialized را معرفی می کند 27-Nov-2019 : Redshift introduces support for Materialized Views

• 03-دسامبر-2019: Redshift پشتیبانی از گره های RA3 را معرفی می کند 03-Dec-2019 : Redshift introduces support for RA3 nodes

• 03-دسامبر-2019: Redshift صادرات داده دریاچه را اعلام کرد - داده ها را در قالب پارکت به اشتراک بگذارید 03-Dec-2019 : Redshift announces Data Lake Export - share data in Parquet format

• 03-دسامبر-2019: Redshift پشتیبانی از پرس و جو فدرال را معرفی می کند 03-Dec-2019 : Redshift introduces support for federated query

ویژگی ها و نسخه های جدید Redshift - 2020 Redshift New Features & Releases - 2020

• 04-فوریه-2020: Redshift از صورت‌حساب در ثانیه پشتیبانی می‌کند 04-Feb-2020 : Redshift supports per-second billing

• 19 فوریه 2020: Redshift از شناسه‌های Azure Active Directory پشتیبانی می‌کند 19-Feb-2020 : Redshift supports Azure Active Directory identities

• 05-مارس-2020: Redshift از کنترل دسترسی در سطح ستون پشتیبانی می کند 05-Mar-2020 : Redshift supports column-level access control

• 11-مارس-2020: Redshift از مکث و از سرگیری پشتیبانی می کند 11-Mar-2020 : Redshift supports pause and resume

• 26-مارس-2020: Redshift اکنون کلیدهای مرتب سازی را برای بهبود عملکرد پرس و جو توصیه می کند 26-Mar-2020 : Redshift now recommends sort keys for improved query performance

• 02-آوریل 2020: Redshift گره های RA3.4xlarge را با فضای ذخیره سازی مدیریت شده راه اندازی کرد 02-Apr-2020 : Redshift launches RA3.4xlarge nodes with managed storage

• 06 آوریل 2020: Redshift از تغییر انواع گره ها با تغییر اندازه الاستیک پشتیبانی می کند 06-Apr-2020 : Redshift supports changing node types with elastic resize

• 20 آوریل 2020: Redshift پشتیبانی از احراز هویت چند عاملی را معرفی می کند 20-Apr-2020 : Redshift introduces support for multi-factor authentication

• 23 آوریل 2020: کنترل‌های هزینه برای طیف Redshift و مقیاس‌گذاری همزمان 23-Apr-2020 : Cost controls for Redshift Spectrum and Concurrency Scaling

• 07-مه-2020: قابلیت های جدید نظارت بر پرس و جو در کنسول Redshift آمازون 07-May-2020 : New Query monitoring capabilities in Amazon Redshift Console

• 15-مه-2020: Redshift از فیلترهای Bloom برای بهبود عملکرد پرس و جو 2 برابری استفاده می کند 15-May-2020 : Redshift leverages Bloom filters to improve 2x query performance

• 02-اکتبر-2020: Redshift پشتیبانی از طرح های Hyperloglog را اعلام کرد 02-Oct-2020 : Redshift announces support for Hyperloglog sketches

• 02-ژوئن-2020: Redshift پشتیبانی از کنترل ذخیره سازی در طرحواره ها را اعلام کرد 02-Jun-2020: Redshift announces support for storage control in schemas

• 02-ژوئن-2020: Redshift عملکرد جستجوی سرد را با کامپایل بهتر بهبود می بخشد 02-Jun-2020 : Redshift improves cold query performance with better compilation

• 08-ژوئن-2020: Redshift اکنون از نوشتن در جداول خارجی در S3 پشتیبانی می کند 08-Jun-2020 : Redshift now supports writing to external tables in S3

• 19-ژوئن-2020: نماهای تحقق یافته Redshift از جداول خارجی پشتیبانی می کنند 19-Jun-2020 : Redshift materialized views support external tables

• 10 سپتامبر 2020: Redshift از 100 هزار جدول در یک کلاستر پشتیبانی می کند 10-Sep-2020 : Redshift supports 100K tables in a single cluster

• 10-سپتامبر 2020: API داده برای Amazon Redshift 10-Sep-2020 : Data API for Amazon Redshift

• 15 سپتامبر 2020: Redshift بهبود عملکرد فضایی را اعلام می کند 15-Sep-2020 : Redshift announces spatial functionality enhancements

• 24-سپتامبر-2020: طیف Redshift پشتیبانی را به جستجوی آپاچی هودی و دلتا لیک اضافه می‌کند 24-Sep-2020 : Redshift spectrum adds support to query Apache Hudi & Delta Lake

• 25 سپتامبر 2020: JetBrains IDE را به پایگاه های داده RDS یا Redshift آمازون وصل کنید 25-Sep-2020 : Connect JetBrains IDE to Amazon RDS or Redshift Databases

• 15-اکتبر-2020: معرفی جستجوهای پایگاه داده متقابل در Amazon Redshift 15-Oct-2020 : Introducing cross database queries in Amazon Redshift

• 20 اکتبر 2020: کدهای فشرده سازی ستون را برای بهینه سازی ذخیره سازی و پرس و جو تغییر دهید 20-Oct-2020 : Modify column compression encodings to optimize storage & querying

• 22-اکتبر-2020: Redshift از زمان بندی پرس و جوهای SQL با آمازون EventBridge پشتیبانی می کند 22-Oct-2020: Redshift supports scheduling SQL queries with Amazon EventBridge

• 26 اکتبر 2020: Redshift پشتیبانی از UDF های Lambda را اعلام کرد و توکن سازی را فعال کرد 26-Oct-2020 : Redshift announces support for Lambda UDFs & enables tokenization

• 05-نوامبر 2020: Redshift درایورهای منبع باز JDBC و Python را معرفی کرد 05-Nov-2020 : Redshift announces open-source JDBC and Python drivers

• 11-نوامبر-2020: بازخوانی خودکار و بازنویسی پرس و جو - نماهای تحقق یافته در Redshift 11-Nov-2020 : Automatic refresh & query rewrite - materialized views in Redshift

• 11 نوامبر 2020: Redshift پشتیبانی از انواع داده های TIME و TIMETZ را اعلام کرد 11-Nov-2020 : Redshift announce support for TIME and TIMETZ data types

• 08-دسامبر-2020: AWS آموزش ماشین آمازون Redshift را اعلام کرد 08-Dec-2020 : AWS announces Amazon Redshift Machine Learning

• 09-دسامبر-2020: Amazon Redshift بهینه سازی خودکار جدول را اعلام کرد 09-Dec-2020 : Amazon Redshift announces automatic table optimization

• 09-دسامبر-2020: آمازون Redshift ادغام کنسول بومی با شرکا را اعلام کرد 09-Dec-2020 : Amazon Redshift announces native console integration with partners

• 09-دسامبر-2020: Redshift قابلیت جابجایی خوشه ها بین AZ را اعلام کرد 09-Dec-2020 : Redshift announces capability to move clusters between AZs

• 09-دسامبر-2020: Amazon Redshift گره های RA3.xlplus را با فضای ذخیره سازی مدیریت شده راه اندازی کرد 09-Dec-2020 : Amazon Redshift launches RA3.xlplus nodes with managed storage

• 09-دسامبر-2020: Redshift از JSON بومی و پردازش داده های نیمه ساختاریافته پشتیبانی می کند 09-Dec-2020 : Redshift supports native JSON & semi-structured data processing

• 09-دسامبر-2020: آمازون Redshift اشتراک گذاری داده را معرفی می کند - قسمت 1 09-Dec-2020 : Amazon Redshift introduces data sharing - Part 1

• 09-دسامبر-2020: Amazon Redshift اشتراک گذاری داده را معرفی می کند - قسمت 2 09-Dec-2020 : Amazon Redshift introduces data sharing - Part 2

• 09-دسامبر-2020: Redshift از RDS MySQL و Aurora MySQL برای پرس و جوی فدرال پشتیبانی می کند 09-Dec-2020 : Redshift supports RDS MySQL & Aurora MySQL for federated querying

ویژگی‌ها و نسخه‌های جدید Redshift - 2021 Redshift New Features & Releases - 2021

• 12 ژانویه 2021: Redshift از کنترل دسترسی در دستورات COPY & UNLOAD پشتیبانی می کند 12-Jan-2021 : Redshift supports access control on COPY & UNLOAD commands

خلاصه Summary

• خلاصه Summary

• سخنرانی جایزه - کوپن های تخفیف Bonus Lecture - Discount Coupons