آموزش مبانی علوم داده: مهندسی داده

سرفصل ها و درس ها

مقدمه Introduction

• خوش آمدی Welcome

• آنچه باید قبل از تماشای این دوره بدانید What you should know before watching this course

• با استفاده از پرونده های تمرینی Using the exercise files

1. بررسی اجمالی اکوسیستم 1. Ecosystem Overview

• بررسی اجمالی سیستم علوم داده Data science system overview

• بررسی اجمالی طرحواره ستاره Star schema design overview

• مهندسی داده کجا مناسب است؟ Where does data engineering fit?

• مؤلفه های یک خط لوله داده خوب Components of a good data pipeline

• تنظیم محیط Environment setup

2. مرحله بندی داده ها 2. Staging Data

• بارگیری و نمایه داده ها Loading and profiling data

• تست کیفیت داده ها Data quality testing

3. پاک کردن داده ها 3. Cleansing Data

• افزودن انواع داده Adding data types

• رسیدگی به مقادیر گمشده Handling missing values

• تأیید آدرس ها Verifying addresses

4- سازگاری با داده ها 4. Conforming Data

• انجام جستجوی داده های اصلی Performing master data lookups

• رسیدگی به اعضای استنباط شده Handling inferred members

5. تحویل مجموعه داده های تحلیلی 5. Delivering Analytical Data Sets

• بارگیری طرحواره ستاره Loading the star schema

• جداول بعد بارگیری Loading dimension tables

• بارگیری جداول واقعیت Loading fact tables

• ایجاد نماها Creating views

نتیجه Conclusion

• مراحل بعدی Next steps