آموزش اصول مهندسی داده (Data Engineering Essentials) - آخرین آپدیت

مبانی MLOps MLOps Fundamentals

• معرفی دوره Course Introduction

• شروع به کار با تیم یادگیری ماشین Getting Started with Machine Learning Team

• معرفی مهندس MLOps Introducing MLOps Engineer

• مقایسه DevOps و MLOps DevOps and MLOps - A Comparison

• چرخه حیات MLOps MLOps LifeCycle

• یکپارچه‌سازی مستمر (CI) و استقرار مستمر (CD) Continuous Integration (CI), Continuous Deployment (CD)

• آموزش مستمر (CT) و مانیتورینگ مستمر (CM) Continuous Training (CT), Continuous Monitoring (CM)

• یافتن و بررسی ابزارهای مناسب DevOps برای MLOps - بخش اول Finding and Exploring Right Tools from DevOps for MLOps - Part 1

• یافتن و بررسی ابزارهای مناسب DevOps برای MLOps - بخش دوم Finding and Exploring Right Tools from DevOps for MLOps - Part 2

• معماری MLOps MLOps Architecture

پایه‌های داده و تبدیل داده‌ها Data Foundations & Transformation

• جمع‌آوری و آماده‌سازی داده‌ها Data Collection and Preparation

• جذب داده‌ها و ETL Data Ingestion - ETL

• مفهوم دریاچه داده (Data Lake) Idea of Data Lake

• پاک‌سازی و تبدیل داده‌ها Data Cleaning and Data Transformation

• دموی اول: تبدیل مجموعه‌ داده‌های کوچک تا متوسط (Pandas, Polars) Demo 1: Small to Medium Datasets Transformation (Pandas, Polars)

• دموی دوم: تبدیل مجموعه‌ داده‌های کوچک تا متوسط (Pandas, Polars) Demo 2: Small to Medium Datasets Transformation (Pandas, Polars)

• دموی سوم: تبدیل مجموعه‌ داده‌های کوچک تا متوسط (Pandas, Polars) Demo 3: Small to Medium Datasets Transformation (Pandas, Polars)

داده‌های حجیم و استریمینگ برای یادگیری ماشین Big Data & Streaming for ML

• داده‌های حجیم: Apache Spark (PySpark) و Dask Large Datasets: Apache Spark (PySpark), Dask

• داده‌های استریمینگ: Apache Kafka و Apache Flink Streaming Datasets: Apache Kafka, Apache Flink

• دموی اول: استریم داده‌ها با استفاده از Apache Kafka Demo 1: Stream Data using Apache Kafka

• دموی دوم: استریم داده‌ها با استفاده از Apache Kafka Demo 2: Stream Data using Apache Kafka

• دموی سوم: استریم داده‌ها با استفاده از Apache Kafka Demo 3: Stream Data using Apache Kafka

• Feature Store چیست؟ What is Feature Store?

• مزایای استفاده از Feature Store Benefits of using a Feature Store

ارکستراسیون جریان کاری MLOps MLOps Workflow Orchestration

• ارکستراسیون خط لوله داده‌ها - Airflow و Prefect Data Pipeline Orchestration - Airflow, Prefect

• دموی اول: ارکستراسیون خط لوله داده‌ها Demo 1: Data Pipeline Orchestration

• دموی دوم: ارکستراسیون خط لوله داده‌ها Demo 2: Data Pipeline Orchestration

• دموی سوم: استریم داده‌ها با استفاده از Apache Kafka Demo 3: Stream Data Using Apache Kafka