آموزش پردازش داده‌های بدون سرور با Dataflow: توسعه خطوط لوله داده (Pipeline) - آخرین آپدیت

سرفصل ها و درس ها

مقدمه Introducción

• معرفی دوره Introducción al curso

مرور مفاهیم Beam Revisión de conceptos de Beam

• مفاهیم پایه Beam Conceptos básicos de Beam

• ترانسفورمیشن‌های کاربردی Transformaciones de utilidad

• چرخه حیات DoFn Ciclo de vida de DoFn

• شروع کار با گوگل کلود و Qwiklabs Empezar a usar Google Cloud y Qwiklabs

پنجره‌ها، واترمارک‌ها و تریگرها Ventanas, marcas de agua y activadores

• پنجره‌ها (Windows) Ventanas

• واترمارک‌ها (Watermarks) Marcas de agua

• تریگرها (Triggers) Activadores

منابع و گیرنده‌ها Fuentes y receptores

• منابع و گیرنده‌ها Fuentes y receptores

• ورودی و خروجی Text و File E/S de Text y de File

• ورودی و خروجی BigQuery E/S de BigQuery

• ورودی و خروجی PubSub E/S de PubSub

• ورودی و خروجی Kafka E/S de Kafka

• ورودی و خروجی BigTable E/S de BigTable

• ورودی و خروجی Avro E/S de Avro

• قابلیت تقسیم DoFn DoFn divisible

طرحواره‌ها Esquemas

• طرحواره‌های Beam Esquemas de Beam

• نمونه‌های کدنویسی Ejemplos de código

حالت و تایمرها Estado y Temporizadores

• رابط برنامه‌نویسی State API API de State

• رابط برنامه‌نویسی Timer API API de Timer

• جمع‌بندی Resumen

بهترین روش‌های بهینه‌سازی Prácticas Recomendadas

• طرحواره‌ها Esquemas

• مدیریت داده‌های غیرقابل پردازش Manejo de los datos que no se pueden procesar

• مدیریت خطاها Manejo de errores

• تولیدکننده کد AutoValue Generador de código AutoValue

• مدیریت داده‌های JSON Manejo de datos JSON

• بهره‌گیری از چرخه حیات DoFn Utilización del ciclo de vida de DoFn

• بهینه‌سازی خطوط لوله Optimizaciones para canalizaciones

SQL و DataFrames در Dataflow Dataflow SQL y DataFrames

• Dataflow و SQL در Beam Dataflow y SQL de Beam

• سیستم پنجره‌ها در SQL Sistema de ventanas en SQL

• دیتافریم‌های Beam Dataframes de Beam

نوت‌بوک‌های Beam Notebooks de Beam

• نوت‌بوک‌های Beam Notebooks de Beam

جمع‌بندی Resumen

• جمع‌بندی نهایی دوره Resumen del curso