لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش مهندسی داده با Scala و Spark
- آخرین آپدیت
دانلود Data Engineering with Scala and Spark
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
این دوره برای تجهیز مهندسان داده به مهارتهای لازم جهت ساخت خطوط لوله داده (Data Pipelines) مقیاسپذیر و کارآمد با استفاده از Scala و Spark طراحی شده است. مهندسان داده در این دوره، بهترین روشهای توسعه، تست و استقرار در محیطهای ابری را با تمرکز بر بهینهسازی عملکرد و تضمین کیفیت دادهها میآموزند. این دوره ابزارهای ضروری برای تبدیل دادههای خام به بینشهای کاربردی را فراهم میکند و در دنیای دادهمحور امروز بسیار حیاتی است.
در طول این دوره، فراگیران با تسلط بر تکنیکهای ساخت خطوط لوله داده به صورت استریمینگ (Streaming) و دستهای (Batch)، مهارتهای مهندسی داده خود را ارتقا میدهند. محتوای دوره بر نتایج عملی مانند تنظیم عملکرد (Performance Tuning) و پروفایلینگ دادهها تأکید دارد. با مثالهای عملی و راهنماییهای گامبهگام، دانشجویان درک عمیقی از خطوط پردازش بلادرنگ و دستهای کسب خواهند کرد.
آنچه این دوره را منحصربهفرد میکند، ترکیب تئوریهای بنیادی و کاربردهای واقعی است. در پایان دوره، شما قادر خواهید بود از Scala و Spark برای پردازش مجموعهدادههای بزرگ و بهینهسازی موثر خطوط لوله در محیطهای ابری استفاده کنید.
این دوره برای مهندسان دادهای که تجربه اولیهای در پردازش داده دارند ایدهآل است. اگرچه پیشفرض بر آشنایی با مفاهیم مهندسی داده و فناوریهای ابری است، اما هر کسی که مشتاق بهبود مهارتهای خود در Scala و Spark باشد، از این رویکرد عملی و گامبهگام بهرهمند خواهد شد.
سرفصل ها و درس ها
ضروریات اسکالا برای مهندسان داده
Scala Essentials for Data Engineers
معرفی کلی دوره
Course Overview
ویدئوی کلی ضروریات اسکالا برای مهندسان داده
Scala Essentials for Data Engineers - Overview Video
راه اندازی محیط توسعه
Environment Setup
ویدئوی کلی راه اندازی محیط توسعه
Environment Setup - Overview Video
آشنایی با آپاچی اسپارک و APIهای آن (DataFrame، Dataset و Spark SQL)
An Introduction to Apache Spark and Its APIs DataFrame Dataset and Spark SQL
ویدئوی کلی آشنایی با آپاچی اسپارک و APIهای آن
An Introduction to Apache Spark and Its APIs DataFrame Dataset and Spark SQL - Overview Video
کار با پایگاههای داده
Working with Databases
ویدئوی کلی کار با پایگاههای داده
Working with Databases - Overview Video
ذخیرهسازهای شیء و دریاچههای داده
Object Stores and Data Lakes
ویدئوی کلی ذخیرهسازهای شیء و دریاچههای داده
Object Stores and Data Lakes - Overview Video
درک تبدیل دادهها (Data Transformation)
Understanding Data Transformation
ویدئوی کلی درک تبدیل دادهها
Understanding Data Transformation - Overview Video
پروفایلینگ و کیفیت دادهها
Data Profiling and Data Quality
ویدئوی کلی پروفایلینگ و کیفیت دادهها
Data Profiling and Data Quality - Overview Video
توسعه تستمحور، سلامت کد و قابلیت نگهداری
Test-Driven Development, Code Health, and Maintainability
ویدئوی کلی توسعه تستمحور و سلامت کد
Test-Driven Development, Code Health, and Maintainability - Overview Video
پیادهسازی CI/CD با گیتهاب
CI/CD with GitHub
ویدئوی کلی CI/CD با گیتهاب
CI/CD with GitHub - Overview Video
ارکستراسیون خطوط لوله داده
Data Pipeline Orchestration
ویدئوی کلی ارکستراسیون خطوط لوله داده
Data Pipeline Orchestration - Overview Video
تنظیم و بهینهسازی عملکرد
Performance Tuning
ویدئوی کلی تنظیم و بهینهسازی عملکرد
Performance Tuning - Overview Video
ساخت خطوط لوله دستهای (Batch) با Spark و Scala
Building Batch Pipelines Using Spark and Scala
ویدئوی کلی ساخت خطوط لوله دستهای با Spark و Scala
Building Batch Pipelines Using Spark and Scala - Overview Video
ساخت خطوط لوله استریمینگ (Streaming) با Spark و Scala
Building Streaming Pipelines Using Spark and Scala
ویدئوی کلی ساخت خطوط لوله استریمینگ با Spark و Scala
Building Streaming Pipelines Using Spark and Scala - Overview Video
نمایش نظرات