آموزش مقدمه ای بر مهندسی داده

سرفصل ها و درس ها

معرفی Introduction

• این دوره به شما چه خواهد آموخت What Will This Course Teach You

شغل مهندسی داده Data Engineering Career

• مهندس داده چیست؟ What is a Data Engineer?

• چرخه عمر مهندسی داده Data Engineering Lifecycle

• مشاغل مشابه با مهندسی داده Similar Careers to Data Engineering

• مدل های خدمات مهندسی داده Data Engineering Service Models

• راهنمای سطح بندی مهندس داده Data Engineer Leveling Guide

• مهارت های فنی یک مهندس داده Technical Skills of a Data Engineer

• شغل مهندسی داده Data Engineering Career

معماری داده ها Data Architecture

• معماری داده چیست؟ What Is Data Architecture?

• نمونه معماری داده A Sample Data Architecture

• دریاچه‌های داده، مرداب‌ها، انبارها و مریخ‌ها Data Lakes, Swamps, Warehouses, and Marts

• پشته داده های مدرن Modern Data Stack

• اتصال به دیتا Connecting to Data

• معماری داده خوب Good Data Architecture

هماهنگ سازی داده ها Data Orchestration

• خطوط لوله داده و هماهنگ سازی داده ها Data Pipelines and Data Orchestration

• جریان هوای آپاچی Apache Airflow

پایگاه های داده رابطه ای Relational Databases

• مروری بر پایگاه داده رابطه ای Relational Database Overview

• سازماندهی پایگاه های داده رابطه ای Organizing Relational Databases

• انواع پایگاه داده رابطه ای Relational Database Types

• تعامل با پایگاه های داده رابطه ای: SQL Interacting with Relational Databases: SQL

• پایگاه های داده رابطه ای Relational Databases

پایگاه های داده غیر رابطه ای Non-relational Databases

• خواص اسید ACID Properties

• پایگاه های داده اسناد Document Databases

• پایگاه داده کلید-مقدار Key-Value Database

• ذخیره سازی اشیا Object Storage

• پایگاه داده ستونی Columnar Database

• پایگاه داده نمودار Graph Database

• سوالات پایگاه داده بدون SQL No-SQL Database Questions

مهندسی نرم افزار Software Engineering

• مقیاس افقی در مقابل مقیاس عمودی Horizontal Scaling vs Vertical Scaling

• پایتون Python

• API ها APIs

• پوسته اسکریپت Shell Scripting

• کرون Cron

• کنترل نسخه - Git - Mercurial Version Control - Git - Mercurial

• آزمایش کردن Testing

• Docker و Containerization Docker and Containerization

• مدیریت زیرساخت Infrastructure Management

مهندسی کلان داده Big Data Engineering

• کلان داده چیست؟ What is Big Data?

• هادوپ Hadoop

• جرقه Spark

• کافکا Kafka

مدل سازی داده ها Data Modeling

• مدل داده های فیزیکی منطقی Logical Physical Data Model

• نمودارهای رابطه موجودیت Entity Relationship Diagrams

• عادی سازی Normalization

• انبار داده کیمبال و اینمون Kimball and Inmon Data Warehousing

امنیت و حریم خصوصی Security and Privacy

• عدم اختیاری بودن امنیت و حریم خصوصی The Non-optionality of Security and Privacy

• PII PII

• اصل کمترین امتیاز Principle of Least Privilege