لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش جریانسازی و بهینهسازی جریانهای دادههای آنی (Real-Time)
- آخرین آپدیت
دانلود Stream & Optimize Real-Time Data Flows
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
در این دوره، طراحی، پیادهسازی و بهینهسازی خط لولههای داده استریم (Streaming Data Pipelines) آماده برای محیط عملیاتی را با استفاده از Apache Kafka و Flink بیاموزید. این دوره در سطح متوسط، شما را قادر میسازد تا پیکربندیهای Log را بر اساس الزامات حاکمیتی (مانند PCI-DSS، GDPR، SOC2) و محدودیتهای هزینه ارزیابی کنید، توپولوژیهای پردازش استریم را برای اتصال و تجمیع دادهها در لحظه با معناشناسی Exactly-once طراحی نمایید و خط لولهها را از طریق تنظیم پارتیشنها، فشردهسازی و مدلسازی هزینه بهینه کنید. شما در آزمایشگاههای عملی که شبیهساز سناریوهای واقعی در شرکتهایی مانند DoorDash، Netflix و Robinhood هستند، فعالیت خواهید کرد؛ از جمله مقایسه سیاستهای نگهداری داده با قوانین انطباق، ساخت یک اپلیکیشن Kafka Streams برای اتصال سفارشات و پرداختها جهت محاسبه مجموع درآمد ۵ دقیقهای، و عیبیابی گلوگاههای عملکردی برای دستیابی به SLAها در چارچوب بودجه تعیین شده.
این دوره برای مهندسان داده سطح متوسط و مهندسان پلتفرم است که سیستمهای استریمینگ آنی را میسازند یا مدیریت میکنند و قصد دارند در حاکمیت Kafka/Flink، عملیات Join، پنجرهبندی (Windowing) و مقیاسپذیری بهینه از نظر هزینه تخصص یابند.
پیشنیازها: درک سیستمهای توزیعشده، دانش پایه Apache Kafka، آشنایی با SQL و مفاهیم استریمینگ، و تجربه برنامهنویسی با Python یا Java.
در پایان این دوره، شما قادر خواهید بود یک پلتفرم استریمینگ چندمستاجری (Multi-tenant) را با کنترلهای حاکمیتی طراحی و بهینه کنید؛ مهارتهایی که مستقیماً در نقشهای مهندس داده استریمینگ، مهندس پلتفرم آنی و زیرساخت داده کاربرد دارند.
سرفصل ها و درس ها
ارزیابی پیکربندیهای لاگ برای حاکمیت و هزینه
Evaluate Log Configurations for Governance and Cost
جریانسازی و بهینهسازی جریانهای دادههای آنی: معرفی دوره
Stream & Optimize Real-Time Data Flows: Course Overview
تاکسونومی رویدادها و استراتژیهای سطح لاگ
Event Taxonomy and Log Level Strategies
الزامات حاکمیتی و لایههای ذخیرهسازی
Governance Requirements and Storage Tiers
ارزیابی پیکربندیهای لاگ و مدلسازی هزینهها
Evaluating Log Configurations and Modeling Costs
طراحی توپولوژیهای پردازش استریم
Design Stream Processing Topologies
الگوهای پردازش استریم و انواع Join
Stream Processing Patterns and Join Types
پنجرهبندی و مدیریت وضعیت در پردازش استریم
Windowing and State Management in Stream Processing
ساخت توپولوژی Join در Kafka Streams با تجمیع پنجرهای
Building a Kafka Streams Join Topology with Windowed Aggregation
بهینهسازی جریانهای دادههای آنی
Optimize Real-Time Data Flows
گلوگاههای نرخ انتقال و استراتژیهای پارتیشنبندی
Throughput Bottlenecks and Partition Strategies
مانیتورینگ، فشردهسازی و بهینهسازی هزینه
Monitoring, Compression, and Cost Optimization
تست عملکرد و بهینهسازی با استفاده از متریکهای Kafka
Performance Testing and Optimization with Kafka Metrics
یکپارچهسازی حاکمیت و بهینهسازی در خط لولههای عملیاتی
Integrating Governance and Optimization in Production Pipelines
نمایش نظرات