آموزش بهینه سازی عملکرد در آپاچی اسپارک

استراتژی های پارتیشن بندی و ذخیره داده ها Partitioning Strategies and Data Caching

• آشنایی با پارتیشن های اسپارک و ترکیب داده ها Understanding Spark Partitions and Data Shuffling

• نسخه ی نمایشی: انجام تبدیل های گسترده و باریک Demo: Performing Wide and Narrow Transformations

• نسخه ی نمایشی: استفاده از repartition و coalesce برای کنترل پارتیشن Demo: Using repartition and coalesce for Partition Control

• نسخه ی نمایشی: تجسم مخلوط کردن داده ها با ابزارهای مانیتورینگ Demo: Visualizing Data Shuffling with Monitoring Tools

• نسخه ی نمایشی: Spark Caching و Persistence Demo: Spark Caching and Persistence

بهینه سازی جوین ها و پرس و جوها Optimizing Joins and Queries

• بررسی اتصالات کارآمد و اجرای پرس و جو تطبیقی ​​در Spark Exploring Efficient Joins and Adaptive Query Execution in Spark

• نسخه ی نمایشی: پیاده سازی Broadcast Joins Demo: Implementing Broadcast Joins

• نسخه ی نمایشی: بهینه سازی اتصالات با Bucketing Demo: Optimizing Joins with Bucketing

• نسخه ی نمایشی: مدیریت اتصالات کج با اجرای پرس و جو تطبیقی Demo: Handling Skewed Joins with Adaptive Query Execution

• نسخه ی نمایشی: استفاده از انتخاب پیوستن پویا Demo: Utilizing Dynamic Join Selection

• نسخه ی نمایشی: استفاده از ادغام پارتیشن پویا Demo: Applying Dynamic Partition Coalescing