آموزش عملی آپاچی اسپارک: طراحی و اجرای خط‌لوله‌های ETL - آخرین آپدیت

دانلود Apache Spark: Design & Execute ETL Pipelines Hands-On

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: این دوره عملی، مهارت‌های لازم برای طراحی، ساخت و مدیریت جریان‌های کاری جامع ETL (استخراج، تبدیل و بارگذاری) را با استفاده از Apache Spark در محیط‌های واقعی مهندسی داده به обучаیندگان می‌آموزد. این دوره در دو ماژول جامع سازماندهی شده است و با مبانی راه‌اندازی آغاز می‌شود؛ به گونه‌ای که کاربران را در نصب اجزای ضروری مانند PySpark، Hadoop و MySQL راهنمایی می‌کند. شرکت‌کنندگان یاد می‌گیرند چگونه محیط خود را پیکربندی کنند، ساختارهای پروژه را سازماندهی نمایند و مجموعه‌داده‌های منبع را به طور موثر بررسی کنند. با پیشروی در دوره، کاربران برنامه‌های Spark را برای انجام بارگذاری‌های کامل و افزایشی داده‌ها با استفاده از یکپارچگی JDBC با MySQL توسعه می‌دهند. از طریق مثال‌های کاربردی، آن‌ها منطق تبدیل داده‌ها را با استفاده از Spark SQL اعمال کرده، داده‌ها را بر اساس قوانین کسب‌وکار فیلتر می‌کنند و با مشکلات رایجی مانند عدم تطابق نوع داده‌ها و مسائل ساختار پوشه‌ها در هنگام استقرار Spark مقابله می‌کنند. در پایان این دوره، обучаیندگان قادر خواهند بود خط‌لوله‌های ETL مبتنی بر Spark را که مقیاس‌پذیر و آماده تولید (Production-ready) هستند، طراحی، اجرا و بهینه کنند و بدین ترتیب بتوانند به طور موثر در نقش‌های مهندسی داده در دنیای واقعی فعالیت نمایند.

سرفصل ها و درس ها

راه‌اندازی زیرساخت‌ها Setting Up the Foundation

  • معرفی پروژه Introduction to Project

  • نصب پکیج‌ها Installation of Packages

  • ادامه نصب پکیج‌ها Installation of Packages Continue

  • تنظیم ساختار پروژه Setting up Project Structure

  • بررسی مجموعه‌داده‌ها Exploring Dataset

ساخت جریان‌های کاری ETL در آپاچی اسپارک Building ETL Workflows in Apache Spark

  • بارگذاری کامل و تبدیل‌ها - بخش اول Entire Load and Transformations Part 1

  • بارگذاری کامل و تبدیل‌ها - بخش دوم Entire Load and Transformations Part 2

  • بارگذاری کامل و تبدیل‌ها - بخش سوم Entire Load and Transformations Part 3

  • بارگذاری کامل و تبدیل‌ها - بخش چهارم Entire Load and Transformations Part 4

  • بارگذاری افزایشی Incremental Load

  • ادامه بارگذاری افزایشی Incremental Load Continue

نمایش نظرات

آموزش عملی آپاچی اسپارک: طراحی و اجرای خط‌لوله‌های ETL
جزییات دوره
4h 28m
11
(آخرین آپدیت)
370
5 از 5
دارد
دارد
دارد
Chris Croft
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Chris Croft Chris Croft

مربی مدیریت، سخنران، نویسنده