آیا برای راهاندازی جریان هوا در AWS EKS تلاش میکنید؟
شما در جای مناسب هستید!
با بیش از 15000 دانشآموز، بازخوردهای زیادی درباره دشواری پیکربندی جریان هوا در AWS با نمودار رسمی Helm دریافت کردم.
حدس بزنید چیست؟ شما در شرف یادگیری هر چیزی هستید که برای راه اندازی یک معماری آماده تولید برای Apache Airflow در AWS EKS نیاز دارید
این دوره برای راهنمایی شما در مراحل مختلف ایجاد یک معماری دنیای واقعی طراحی شده است:
پیکربندی خوشه EKS بر اساس بهترین شیوه ها
استقرار خودکار با GitOps تغییر می کند
استفاده از Helm برای پیکربندی و تنظیم جریان هوا در Kubernetes
پیکربندی نمودار رسمی Helm of Airflow برای استفاده از Kubernetes Executor و بسیاری از ویژگیهای مختلف
استقرار DAG در جریان هوا با Git-Sync و AWS EFS
استقرار DAG/جریان هوا از طریق خطوط لوله CI/CD با AWS CodePipeline
آزمایش DAG به صورت خودکار
ایمن کردن اعتبار و داده های حساس خود در یک Backend مخفی
فعال کردن گزارش گیری از راه دور با AWS S3
ایجاد 3 محیط مختلف dev/staging و prod
محیط تولید را مقیاسپذیر و بسیار در دسترس میکنید
و بیشتر!
هشدار:
این دوره برای یادگیری اصول اولیه Airflow نیست، باید از قبل با آن آشنایی داشته باشید.
اگر قبلاً Kubernetes/Docker/AWS را میدانید، یادگیری شما آسانتر خواهد بود، اما نگران نباشید، هر آنچه را که نیاز دارید توضیح میدهم.
شما یاد نخواهید گرفت که چگونه با AWS در DAGهای خود تعامل داشته باشید. این دوره در مورد طراحی یک معماری است نه در مورد DAG.
این دوره واجد شرایط سطح رایگان نیست زیرا ما از بسیاری از خدمات AWS استفاده می کنیم و یک معماری دنیای واقعی راه اندازی می کنیم.
کارشناس جریان هوای آپاچی، مهندس کلان داده
نمایش نظرات