آموزش تصور مدل پردازش برای سرویس جریان داده GCP

بررسی اجمالی دوره Course Overview

• بررسی اجمالی دوره Course Overview

شروع با Cloud Dataflow Getting Started with Cloud Dataflow

• پیش نیازها و طرح کلی دوره Prerequisites and Course Outline

• بررسی اجمالی پرتو آپاچی Overview of Apache Beam

• معرفی Cloud Dataflow Introducing Cloud Dataflow

• اجرای خطوط لوله در گردش اطلاعات Executing Pipelines on Dataflow

• نسخه ی نمایشی: فعال کردن API ها Demo: Enabling APIs

• نسخه ی نمایشی: راه اندازی یک حساب سرویس Demo: Setting up a Service Account

• نسخه ی نمایشی: نمونه برنامه شمارش کلمات Demo: Sample Word Count Application

• نسخه ی نمایشی: اجرای برنامه شمارش کلمات در Beam Runner Demo: Executing the Word Count Application on the Beam Runner

• نسخه ی نمایشی: ایجاد سطل ذخیره سازی Cloud Demo: Creating Cloud Storage Buckets

• نسخه ی نمایشی: پیاده سازی خط لوله Beam برای اجرای گردش اطلاعات Demo: Implementing a Beam Pipeline to Run on Dataflow

• نسخه ی نمایشی: اجرای خط لوله پرتو در Cloud Dataflow Demo: Running a Beam Pipeline on Cloud Dataflow

• نسخه ی نمایشی: گزینه های خط لوله سفارشی Demo: Custom Pipeline Options

• قیمت گذاری جریان داده Dataflow Pricing

نظارت بر مشاغل در Cloud Dataflow Monitoring Jobs in Cloud Dataflow

• نظارت بر مشاغل Monitoring Jobs

• نسخه ی نمایشی: پیاده سازی خط لوله با ورودی جانبی Demo: Implementing a Pipeline with a Side Input

• نسخه ی نمایشی: اجرای کد و کاوش در نمودار شغلی Demo: Running the Code and Exploring the Job Graph

• نسخه ی نمایشی: کاوش در معیارهای شغلی Demo: Exploring Job Metrics

• نسخه ی نمایشی: مقیاس خودکار Demo: Autoscaling

• نسخه ی نمایشی: فعال کردن موتور جریان Demo: Enabling the Streaming Engine

• نسخه ی نمایشی: استفاده از رابط خط فرمان برای نظارت بر مشاغل Demo: Using the Command-line Interface to Monitor Jobs

• نسخه ی نمایشی: ورود پیام ها در گردش داده Demo: Logging Messages in Dataflow

• نسخه ی نمایشی: ردیابی معیارهای جریان داده با Metrics Explorer Demo: Tracking Dataflow Metrics with the Metrics Explorer

• نسخه ی نمایشی: پیکربندی هشدارها Demo: Configuring Alerts

بهینه سازی خطوط لوله جریان داده Cloud Optimizing Cloud Dataflow Pipelines

• ساختار کد کاربر Structuring User Code

• نسخه ی نمایشی: نوشتن نتایج خط لوله در Pub/Sub Demo: Writing Pipeline Results to Pub/Sub

• نسخه ی نمایشی: مشاهده نتایج خط لوله در Pub/Sub Demo: Viewing Pipeline Results in Pub/Sub

• نسخه ی نمایشی: نوشتن نتایج خط لوله در BigQuery Demo: Writing Pipeline Results to BigQuery

• نسخه ی نمایشی: مشاهده نتایج خط لوله در BigQuery Demo: Viewing Pipeline Results in BigQuery

• نسخه ی نمایشی: انجام عملیات پیوستن Demo: Performing Join Operations

• نسخه ی نمایشی: خطاها و تلاش های مجدد در گردش داده Demo: Errors and Retries in Dataflow

• Fusion و Combine Optimizations Fusion and Combine Optimizations

• تعادل خودکار و تعادل کار پویا Autoscaling and Dynamic Work Rebalancing

• نسخه ی نمایشی: خواندن جریان اطلاعات از Pub/Sub Demo: Reading Streaming Data from Pub/Sub

• نسخه ی نمایشی: نوشتن جریان داده ها در BigQuery Demo: Writing Streaming Data to BigQuery

اجرای خطوط لوله انتقال داده Cloud با استفاده از الگوها Running Cloud Dataflow Pipelines Using Templates

• معرفی الگوها در گردش اطلاعات Introducing Templates in Dataflow

• نسخه ی نمایشی: الگوهای داخلی در گردش داده Demo: Built-in Templates in Dataflow

• نسخه ی نمایشی: در حال اجرا الگوهای داخلی Demo: Running Built-in Templates

• نسخه ی نمایشی: ایجاد الگوهای سفارشی گردش داده Demo: Creating Custom Dataflow Templates

• نسخه ی نمایشی: اجرای الگوهای سفارشی در گردش داده Demo: Executing Custom Templates in Dataflow

• خلاصه و مطالعه بیشتر Summary and Further Study