لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش اتوماسیون، بهینهسازی و بنچمارک خطوط لوله داده (Data Pipelines)
- آخرین آپدیت
دانلود Automate, Optimize, and Benchmark Data Pipelines
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
آیا میدانستید که دو خط لوله (Pipeline) که یک وظیفه مشابه را انجام میدهند، بسته به انتخابهای طراحی، میتوانند از نظر زمان اجرا بیش از ۱۰ برابر با هم تفاوت داشته باشند؟ بنچمارک و اتوماسیون برای ساخت سیستمهای دادهای سریع، مقیاسپذیر و مقرونبهصرفه ضروری هستند.
این دوره کوتاه برای کمک به مهندسان داده و معماران خط لوله طراحی شده است تا سیستمهای پردازش داده را از طریق بنچمارک عملکرد و اسکریپتهای اتوماسیون بهینه کنند و کارایی و مقیاسپذیری را در محیطهای سازمانی افزایش دهند.
با تکمیل این دوره، شما قادر خواهید بود طرحهای رقیب خط لوله را با استفاده از معیارهای زمان اجرا مقایسه کنید، کارآمدترین رویکرد را توجیه نمایید و ایجاد مدلهای تبدیل داده را با استفاده از اسکریپتهای مبتنی بر پیکربندی (Configuration-driven) خودکار کنید؛ مهارتهایی که به شما کمک میکند خطوط لوله داده هوشمندتر، سریعتر و قابلاعتمادتری بسازید.
در پایان این دوره، شما قادر خواهید بود:
۱. طرحهای رقیب خط لوله را با مقایسه آمارهای زمان اجرا ارزیابی کرده و گزینه سریعتر را توجیه کنید.
۲. یک اسکریپت خودکار برای ایجاد مدلهای تبدیل داده از روی فایلهای پیکربندی بسازید.
این دوره منحصربهفرد است زیرا مهندسی عملکرد را با اتوماسیون ترکیب میکند و به شما تجربه عملی در بنچمارک خطوط لوله واقعی و تولید برنامهریزیشده جریانهای کاری تبدیل داده برای پشتیبانی از عملیات داده در مقیاس بزرگ میدهد.
برای موفقیت در این پروژه، شما باید موارد زیر را داشته باشید:
- تجربه کار با SQL
- دانش تبدیل دادهها (Data Transformation)
- مهارتهای پایه در اسکریپتنویسی
- آشنایی با معماری خط لوله (Pipeline Architecture)
سرفصل ها و درس ها
ماژول ۱: ارزیابی عملکرد و بنچمارک خط لوله
Module 1: Pipeline Performance Evaluation and Benchmarking
هزینه عملکردی حدسهای اشتباه
The Performance Cost of Guessing Wrong
اصول اندازهگیری عملکرد خط لوله
Fundamentals of Pipeline Performance Measurement
ابزارها و تکنیکهای اندازهگیری زمان اجرا
Tools and Techniques for Runtime Measurement
تمرین عملی مقایسه عملکرد خط لوله با استفاده از SQL Profiling
Hands-On Pipeline Performance Comparison Using SQL Profiling
نمایش نظرات