آموزش تسلط بر Google Dataform: از مبتدی تا حرفه ای BigQuery

سرفصل ها و درس ها

مقدمه Introduction

• بیایید شروع کنیم Lets get started

• مقدمه Introduction

• Google DataForm چیست؟ What is Google DataForm

• Google Dataform در مقابل DBT Core در مقابل DBT Cloud Google Dataform vs. DBT Core vs. DBT Cloud

• آیا سوالی دارید؟ Do you have any questions ?

تنظیم فرم داده Dataform setup

• پروژه GCP ایجاد کنید Create GCP project

• مخزن Github را ایجاد کنید Create Github Repository

• توکن Github را ایجاد کنید Create Github Token

• مخزن خود را در Dataform راه اندازی کنید Setup your repository in Dataform

• Github را با Dataform پیوند دهید Link Github with Dataform

• مقداردهی اولیه فرم داده Dataform Initialization

• کار با DataForm در GCP Workspace Working with DataForm in GCP Workspace

• آیا سوالی دارید؟ Do you have any question?

• اتصال بین Google Dataform و Github را آزمایش کنید Test connection between Google Dataform and Github

برای دسترسی به BigQuery، DataForm Locally (CLI) و حساب های سرویس را راه اندازی کنید Setup DataForm Locally (CLI) and service accounts to access BigQuery

• نمای کلی Overview

• راه اندازی محیط محلی - CLI Setting up local environment - CLI

• ایجاد حساب سرویس Creating Service Account

• ایجاد اولین مدل داده فرم در GCP Creating First Dataform Model in GCP

• اجرای DataForm به صورت محلی و در GCP Running DataForm Locally and in GCP

کار با DataForm Working with DataForm

• نمای کلی Overview

• داده های نمونه را به BigQuery اضافه کنید Add Sample data to BigQuery

• ایجاد منابع داده در Dataform و مدیریت وابستگی ها Create data Sources in Dataform and Manage Dependencies

• ایجاد Views در BigQuery با استفاده از DataFrom (GCP & CLI) Create Views in BigQuery using DataFrom (GCP & CLI)

• BigQuery را کاوش کنید Explore BigQuery

• با استفاده از DataFrom، نماهای متریال شده را در BigQuery ایجاد کنید Create Materialized Views in BigQuery using DataFrom

مدل های افزایشی در فرم داده Incremental Models in Dataform

• متغیرها در Dataform Variables in Dataform

• مدل های افزایشی توضیح داده شده است Incremental models explained

• پیاده سازی مدل های افزایشی در Dataform - قسمت 1 Implementing Incremental models in Dataform - Part 1

• پیاده سازی مدل های افزایشی در Dataform - قسمت 2 Implementing Incremental models in Dataform - Part 2

تغییر آهسته ابعاد (SCD) با استفاده از Google Dataform Slowly Changing Dimensions (SCD) using Google Dataform

• تغییرات آهسته ابعاد (SCD) توضیح داده شده است Slowly Changing Dimensions (SCD) Explained

• پیاده سازی SCD با استفاده از Dataform Implementing SCD using Dataform

اظهارات با استفاده از Google Dataform - بررسی کیفیت داده ها Assertions using Google Dataform - Data Quality Checks

• افزودن اظهارات به مدل های Dataform Adding Assertions to Dataform models

• کار با ادعاهای سفارشی در Dataform Working with custom assertions in Dataform

کاوش و کار با Dataform Workflow در GCP Explore and work with Dataform Workflow in GCP

• برچسب ها در Dataform Tags in Dataform

• تغییرات محلی را با GitHub و Datafrom راه دور همگام کنید Sync local changes with remote GitHub and Datafrom

• نمودار فرم داده Dataform Graph

• یک گردش کار را در DataForm برنامه ریزی کنید Schedule a Workflow in DataForm

متشکرم Thank you

• به انجمن ما بپیوندید Join our community

• ممنون از حضور شما در این دوره Thank you for attending this course