آموزش ساختن سیستم‌های جریان انعطاف‌پذیر در پلتفرم Google Cloud

معماری خطوط لوله تحلیل جریانی Architecture of Streaming Analytics Pipelines

• استریمینگ چیست؟ What Is Streaming?

• استریمینگ چیست؟ What Is Streaming?

• چالش 1 - حجم های متغیر نیاز به توانایی مصرف در مقیاس و تحمل خطا دارند. Challenge 1 - Variable volumes require ability of ingest to scale and be fault-tolerant

• چالش 1 - حجم های متغیر نیاز به توانایی مصرف در مقیاس و تحمل خطا دارند. Challenge 1 - Variable volumes require ability of ingest to scale and be fault-tolerant

• چالش 2 - تاخیر قابل انتظار است Challenge 2 - Latency is to be expected

• چالش 2 - تاخیر قابل انتظار است Challenge 2 - Latency is to be expected

• چالش 3 - به بینش فوری نیاز دارید Challenge 3 - Need instant insights

• چالش 3 - به بینش فوری نیاز دارید Challenge 3 - Need instant insights

• در مورد برخی از سناریوهای جریان بحث کنید Discuss some streaming scenarios

• در مورد برخی از سناریوهای جریان بحث کنید Discuss some streaming scenarios

مصرف حجم های متغیر Ingesting Variable Volumes

• Pub/Sub چیست؟ What is Pub/Sub ?

• Pub/Sub چیست؟ What is Pub/Sub ?

• چگونه کار می کند - موضوعات و اشتراک ها How it works - Topics and Subscriptions

• چگونه کار می کند - موضوعات و اشتراک ها How it works - Topics and Subscriptions

• شروع کار با GCP و Qwiklabs Getting Started With GCP and Qwiklabs

• شروع کار با GCP و Qwiklabs Getting Started With GCP and Qwiklabs

• بررسی اجمالی آزمایشگاه Lab Overview

• بررسی اجمالی آزمایشگاه Lab Overview

• پردازش داده های جریانی - آزمایشگاه 1: انتشار داده های جریانی در PubSub نسخه 1.3 Streaming Data Processing - Lab 1 : Publish Streaming Data into PubSub v1.3

• پردازش داده های جریانی - آزمایشگاه 1: انتشار داده های جریانی در PubSub نسخه 1.3 Streaming Data Processing - Lab 1 : Publish Streaming Data into PubSub v1.3

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

اجرای خطوط لوله جریان Implementing Streaming Pipelines

• جریان داده ها Dataflow Streaming

• جریان داده ها Dataflow Streaming

• چالش‌ها در جریان Challenges in streaming

• چالش‌ها در جریان Challenges in streaming

• یک خط لوله پردازش جریانی برای داده های ترافیک زنده بسازید Build a stream processing pipeline for live traffic data

• یک خط لوله پردازش جریانی برای داده های ترافیک زنده بسازید Build a stream processing pipeline for live traffic data

• مدیریت داده های دیرهنگام - واترمارک ها، محرک ها، انباشتگی Handle late data - watermarks, triggers, accumulation

• مدیریت داده های دیرهنگام - واترمارک ها، محرک ها، انباشتگی Handle late data - watermarks, triggers, accumulation

• بررسی اجمالی آزمایشگاه Lab Overview

• بررسی اجمالی آزمایشگاه Lab Overview

• پردازش داده های جریانی - آزمایشگاه 2: خطوط لوله داده های جریانی نسخه 1.3 Streaming Data Processing - Lab 2 : Streaming Data Pipelines v1.3

• پردازش داده های جریانی - آزمایشگاه 2: خطوط لوله داده های جریانی نسخه 1.3 Streaming Data Processing - Lab 2 : Streaming Data Pipelines v1.3

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

جریان تجزیه و تحلیل و داشبورد Streaming analytics and dashboards

• جریان تجزیه و تحلیل و داشبورد Streaming Analytics and Dashboard

• جریان تجزیه و تحلیل و داشبورد Streaming Analytics and Dashboard

• بررسی اجمالی آزمایشگاه Lab Overview

• بررسی اجمالی آزمایشگاه Lab Overview

• پردازش داده های جریانی - آزمایشگاه 3: تحلیل جریانی و داشبورد نسخه 1.3 Streaming Data Processing - Lab 3 : Streaming Analytics and Dashboards v1.3

• پردازش داده های جریانی - آزمایشگاه 3: تحلیل جریانی و داشبورد نسخه 1.3 Streaming Data Processing - Lab 3 : Streaming Analytics and Dashboards v1.3

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

رسیدگی به توان عملیاتی و الزامات تاخیر Handling Throughput and Latency Requirements

• توان عملیاتی و تاخیر Throughput and Latency

• توان عملیاتی و تاخیر Throughput and Latency

• Bigtable - NoSQL بزرگ، سریع و خودکار Bigtable - big, fast, autoscaling NoSQL

• Bigtable - NoSQL بزرگ، سریع و خودکار Bigtable - big, fast, autoscaling NoSQL

• ورود به Bitgable Ingesting into Bitgable

• ورود به Bitgable Ingesting into Bitgable

• طراحی برای Bigtable Designing for Bigtable

• طراحی برای Bigtable Designing for Bigtable

• استریم به Bigtable Streaming into Bigtable

• استریم به Bigtable Streaming into Bigtable

• پردازش داده‌های جریانی - آزمایشگاه 4: انتقال داده‌ها به Bigtable نسخه 1.3 Streaming Data Processing - Lab 4 : Streaming Data Pipelines into Bigtable v1.3

• پردازش داده‌های جریانی - آزمایشگاه 4: انتقال داده‌ها به Bigtable نسخه 1.3 Streaming Data Processing - Lab 4 : Streaming Data Pipelines into Bigtable v1.3

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

• نسخه ی نمایشی و بررسی آزمایشگاه Lab demo and review

• ملاحظات عملکرد Performance Considerations

• ملاحظات عملکرد Performance Considerations

• خلاصه مهندسی داده در تخصص GCP Summary of Data Engineering on GCP Specialization

• خلاصه مهندسی داده در تخصص GCP Summary of Data Engineering on GCP Specialization