آموزش آشنایی با مهندسی داده در گوگل کلاود (Google Cloud) - آخرین آپدیت

وظایف مهندسی داده و اجزای مرتبط Tâches d'ingénierie de données et composants associés

• معرفی دوره Présentation du cours

وظایف مهندسی داده و اجزای مرتبط Tâches d'ingénierie de données et composants associés

• معرفی ماژول Présentation du module

• نقش مهندسان داده Le rôle des ingénieurs de données

• منابع و گیرنده‌های داده Sources de données et récepteurs de données

• فرمت‌های داده Formats de données

• گزینه‌های ذخیره‌سازی در گوگل کلاود Options de solution de stockage Google Cloud

• گزینه‌های مدیریت متادیتا در گوگل کلاود Options de gestion des métadonnées Google Cloud

• اشتراک‌گذاری مجموعه‌داده‌ها با Analytics Hub Partage d'ensembles de données à l'aide d'Analytics Hub

• معرفی کارگاه: بارگذاری داده‌ها در BigQuery Présentation de l'atelier : Charger des données dans BigQuery

• Coursera: شروع کار با Google Cloud Platform و Qwiklabs Coursera: Premiers pas avec Google Cloud Platform et Qwiklabs

تکثیر و انتقال داده‌ها Réplication et migration des données

• معرفی ماژول Présentation du module

• معماری تکثیر و انتقال Architecture de réplication et de migration

• ابزار خط فرمان gcloud Outil de ligne de commande gcloud

• انتقال مجموعه‌داده‌ها Migration d'ensembles de données

• سرویس Datastream Datastream

• معرفی کارگاه: Datastream: تکثیر PostgreSQL به BigQuery Présentation de l'atelier : Datastream : Réplication PostgreSQL vers BigQuery

مدل خط لوله استخراج و بارگذاری داده‌ها Modèle de pipeline d'extraction et de chargement de données

• معرفی ماژول Présentation du module

• معماری استخراج و بارگذاری Architecture d'extraction et de chargement

• ابزار خط فرمان bq Outil de ligne de commande bq

• سرویس انتقال داده‌های BigQuery Service de transfert de données BigQuery

• سرویس BigLake BigLake

• معرفی کارگاه: BigLake: شروع سریع Présentation de l'atelier : BigLake : Qwik Start

مدل خط لوله استخراج، بارگذاری و تبدیل داده‌ها (ELT) Modèle de pipeline d'extraction, de chargement et de transformation de données

• معرفی ماژول Présentation du module

• معماری ELT (استخراج، بارگذاری و تبدیل) Architecture ELT (extraction, chargement et transformation)

• نوشتن اسکریپت‌ها و زمان‌بندی SQL در BigQuery Écriture de scripts et planification SQL avec BigQuery

• سرویس Dataform Dataform

• معرفی کارگاه: ایجاد و اجرای گردش کار SQL در Dataform Présentation de l'atelier : Créer et exécuter un workflow SQL dans Dataform

مدل خط لوله استخراج، تبدیل و بارگذاری داده‌ها (ETL) Modèle de pipeline d'extraction, de transformation et de chargement de données

• معرفی ماژول Présentation du module

• معماری ETL (استخراج، تبدیل و بارگذاری) Architecture ETL (extraction, transformation et chargement)

• ابزارهای رابط کاربری گوگل کلاود برای خط لوله‌های ETL Outils IUG Google Cloud pour les pipelines de données ETL

• پردازش دسته‌ای داده‌ها با Dataproc Traitement des données par lot avec Dataproc

• معرفی کارگاه: استفاده از Dataproc Serverless برای Spark جهت بارگذاری جدول BigQuery Présentation de l'atelier : Utiliser Dataproc sans serveur pour Spark pour charger une table BigQuery

• گزینه‌های پردازش جریان داده (Streaming) Option de traitement de flux de données

• سرویس Bigtable و خط لوله‌های داده Bigtable et pipelines de données

• معرفی کارگاه: ایجاد خط لوله جریان داده برای داشبورد آنی با Dataflow Présentation de l'atelier : Créer un pipeline de flux de données pour un tableau de bord en temps réel avec Dataflow

تکنیک‌های اتوماسیون Techniques d'automatisation

• معرفی ماژول Présentation du module

• طرح‌ها و گزینه‌های اتوماسیون برای خط لوله‌ها Schémas et options d'automatisation pour les pipelines

• سرویس‌های Cloud Scheduler و Workflows Cloud Scheduler et Workflows

• سرویس Cloud Composer Cloud Composer

• سرویس Cloud Run Functions Cloud Run Functions

• سرویس Eventarc Eventarc

• معرفی کارگاه: استفاده از Cloud Run Functions برای بارگذاری در BigQuery Présentation de l'atelier : Utiliser Cloud Run Functions pour charger BigQuery

جمع‌بندی دوره Résumé du cours

• جمع‌بندی دوره Résumé du cours