آموزش یادگیری جریان داده گوگل

مقدمه Introduction

• مروری بر Dataflow An overview of Dataflow

• امتحان فصل Chapter Quiz

1. مروری سریع از Dataflow 1. A Quick Overview of Dataflow

• راه اندازی یک پروژه Google Cloud برای Dataflow Setting up a Google Cloud project for Dataflow

• ایجاد اعتبار برای خط لوله پردازش داده Creating credentials for a data processing pipeline

• آشنایی با پرتو آپاچی Understanding Apache Beam

• نقش Dataflow The role of Dataflow

• ایجاد یک پروژه Apache Beam با Maven Creating an Apache Beam project with Maven

• تعریف گزینه های خط لوله Defining pipeline options

• اجرای یک برنامه Apache Beam Running an Apache Beam application

• تعریف مرحله تبدیل خط لوله Defining a pipeline transformation step

• ساخت و اجرای خط لوله Apache Beam Building and executing an Apache Beam pipeline

• امتحان فصل Chapter Quiz

2. سرویس Dataflow 2. The Dataflow Service

• راه اندازی یک سطل ذخیره سازی ابری Setting up a cloud storage bucket

• کار با فایل ها در Apache Beam Working with files in Apache Beam

• اجرای کار پردازش فایل Running the file processing job

• اجرای خط لوله با Dataflow Executing a pipeline with Dataflow

• مشاهده فایل های تولید شده توسط یک کار Dataflow Viewing the files generated by a Dataflow job

• تجمیع مقادیر در خط لوله Aggregating values in a pipeline

• اجرای و تأیید یک کار تجمیع Running and verifying an aggregation job

• امتحان فصل Chapter Quiz

3. پیکربندی و نظارت بر خطوط لوله 3. Configuring and Monitoring Pipelines

• محاسبه یک مقدار متوسط ​​از داده ها Computing an average value from data

• تنظیم تعداد کارگران Configuring the number of workers

• انجام محاسبات سراسری Performing a global computation

• تغذیه یک ورودی جانبی به مرحله خط لوله Feeding a side input to a pipeline step

• بررسی اجرای خط لوله ورودی جانبی Verifying the side input pipeline run

• امتحان فصل Chapter Quiz

4. استفاده از الگوهای جریان داده 4. Using Dataflow Templates

• کنار هم قرار دادن قطعات برای قالب Dataflow Putting together the pieces for a Dataflow template

• تعریف و اجرای یک کار با قالب Dataflow Defining and running a job with a Dataflow template

• امتحان فصل Chapter Quiz

5. استفاده از Dataflow Prime 5. Using Dataflow Prime

• کار با Dataflow Prime Working with Dataflow Prime

• امتحان فصل Chapter Quiz

نتیجه Conclusion

• خلاصه و مراحل بعدی Summary and next steps