آموزش سری آپاچی کافکا - نظارت و عملیات کافکا

Apache Kafka Series - Kafka Monitoring & Operations

نکته: آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
نمونه ویدیوها:
توضیحات دوره: راه اندازی نظارت بر کافکا با پرومتئوس و گرافانا، عملیات کافکا و ارتقاء خوشه کافکا به صورت دستی. راه اندازی در AWS راه اندازی یک خوشه کافکا چند کارگزار بدون زمان در AWS (با استفاده از CloudFormation) ابزارهای مدیریت راه اندازی مانند Kafka Manager، ZooNavigator، نظارت بر راه اندازی مانیتور کافکا لینکدین با استفاده از Grafana و Prometheus یاد بگیرید که چگونه یک راه اندازی ایمن و خودکار Kafka را انجام دهید. کارگزاران پیکربندی های بروکرها را به روشی ایمن به روز می کنند تعادل مجدد پارتیشن ها در یک خوشه کافکا افزایش و کاهش ضریب تکرار موضوعات افزودن یک کارگزار به سرویس خوشه کافکا و جایگزینی کارگزار در خوشه کافکا حذف یک کارگزار در رابط خط فرمان نصب خوشه کافکا ( CLI) ابزارهایی برای خودکارسازی گردش کار ارتقاء یک خوشه کافکا بدون خرابی پیش نیازها: مبانی کافکا + دانش راه‌اندازی دانش لینوکس Windows/Linux/MacOS X خوب هستند رایانش ابری درک ترجیح داده شده بدون دانش AWS CloudFormation لازم نیست

یکی از بهترین دوره ها در سری آپاچی کافکا!

مدیریت کافکا، نظارت بر کافکا، عملیات کافکا و ارتقاء کافکا را در این دوره 5 ساعته بیاموزید. به صدها دانش‌آموز دانش‌آموز ملحق شوید تا برخی از مهم‌ترین دانش‌هایی را که هر مدیر کافکا باید بداند و تسلط داشته باشد، بیاموزید.

----------------------------

این دوره به دلایل زیر مهم است:

مدیریت آپاچی کافکا

راه اندازی ابزارهای رابط کاربری مانند Kafka Manager، ZooNavigator و Kafka Monitor برای مشاهده کامل خوشه خود
درک عملیات اساسی که می توانید با این ابزارها انجام دهید

نظارت بر آپاچی کافکا

کافکای که نظارت نمی‌شود یک بمب ساعتی است.
نظارت مناسب را برای Kafka Zookeeper تنظیم کنید
معیارهای خود را در Prometheus ذخیره کنید و در Grafana تجسم کنید

عملیات برای آپاچی کافکا

رایج‌ترین و دشوارترین عملیات مورد نیاز در Apache Kafka Cluster خود را انجام دهید
کارگزاران خود را تنها با یک دستور راه‌اندازی مجدد کنید
تنظیمات کافکا را ایمن و بدون توقف به‌روزرسانی کنید
پارتیشن‌ها را متعادل کنید و ضریب تکرار موضوعات خود را تغییر دهید.
افزودن، جایگزینی و حذف کارگزاران.

ارتقاء آپاچی کافکا

ظرافت ارتقاء یک خوشه کافکا را درک کنید
توضیح گام به گام در مورد ارتقاء یک خوشه بدون زمان توقف

----------------------------

پیش نیاز - این یک دوره پیشرفته است

درک خوب از راه اندازی Kafka Kafka
درک اولیه از AWS Cloud.
دانش نحوه تبدیل SSH به یک سرور
درک خوب از محاسبات لینوکس به طور کلی
توانایی قوی در استفاده از خط فرمان

-----------------------------


دوره مبتنی بر دست

توجه: این دوره پیشرفته است و زمان کمی صرف اصول اولیه می شود. هزینه آن در AWS

خواهد بود

این دوره اولین و تنها نظارت و عملیات کافکا در وب است. اکنون آن را دریافت کنید تا یک متخصص آپاچی کافکا شوید!

طرح کلی بخش:

  1. مقدمه دوره: بیایید یاد بگیریم که چرا به عملیات نظارت در آپاچی کافکا نیاز داریم

  2. راه اندازی سریع کافکا در AWS: کافکا را با استفاده از AWS CloudFormation راه اندازی کنید. نیازی به دانش CloudFormation نیست

  3. راه‌اندازی مدیریت کافکا: راه‌اندازی ابزارهای مدیریت و نظارت اولیه در کلاستر ما

  4. راه اندازی نظارت بر کافکا: گرافانا + پرومته: راه اندازی نظارت بر باغ وحش کافکا با استفاده از پرومتئوس و گرافانا

  5. عملیات کافکا: رایج ترین و دشوارترین عملیات کافکا را بیاموزید

  6. ارتقاء خوشه کافکا: مراحل ارتقاء صحیح خوشه کافکا را بدون زمان توقف بیاموزید

=============================

مربی

اسم من استفان معرک است و در این دوره مربی شما خواهم بود. من در مورد آپاچی کافکا، اکوسیستم کافکا و گواهینامه های کافکا با تمرکز همیشه بر کمک به دانش آموزانم برای بهبود مهارت های حرفه ای خود تدریس می کنم. من همچنین یکی از بنیانگذاران Conduktor هستم: یک رابط کاربری پلتفرم آپاچی کافکا برای کمک به همه در استفاده از کافکا.

در طول حرفه‌ام در طراحی و ارائه این گواهی‌ها و دوره‌ها، قبلاً به بیش از 1,000,000 دانش‌آموز آموزش داده‌ام و بیش از 350,000 نقد دریافت کرده‌ام!

با تبدیل شدن آپاچی کافکا به چیزی فراتر از یک کلمه رایج، من به این نتیجه رسیده ام که زمان آن فرا رسیده است که دانش آموزان به درستی یاد بگیرند که چگونه یک حرفه ای کافکا باشند. بنابراین، بیایید دوره را شروع کنیم! شما در دستان خوبی هستید!

=============================

این دوره همچنین همراه با:

است
  • دسترسی مادام العمر به همه به روز رسانی های آینده

  • یک مربی پاسخگو در بخش Q A

  • پیوندها به مقالات جالب و تعداد زیادی کد خوب برای پایه گذاری برنامه های بعدی شما

  • گواهی تکمیل Udemy برای دانلود آماده است

این دوره ای است که می تواند شغل شما را بهبود بخشد!

آپاچی کافکا مهارتی است که تقاضای زیادی دارد و افراد کافی برای انجام تمام موقعیت های باز وجود ندارند. شما می توانید درآمد خود را افزایش دهید، نقش های جدید و چالش های سرگرم کننده را بر عهده بگیرید. بسیاری از شاگردان من اکنون کارشناسان کافکای شرکت هایشان هستند! شما می توانید نفر بعدی باشید!

امیدوارم شما را در داخل دوره ببینم!

======================

توجه: به دنبال مفاهیم پیشرفته‌تر کافکا هستید؟ جلدهای زیادی در مجموعه آپاچی کافکا وجود دارد:

  • کافکا را برای مبتدیان نسخه 2 بیاموزید (برای شروع عالی است)

  • کافکا در حال یادگیری است

  • جریان های کافکا برای پردازش داده

  • KSQL در ksqlDB - Hands On!

  • مدیریت راه اندازی خوشه کافکا

  • Confluent Schema Registry Kafka REST Proxy

  • Kafka Security (SSL SASL ACL)

  • نظارت و عملیات کافکا

یادگیری مبارک!



سرفصل ها و درس ها

نمای کلی و مقدمه دوره Course Overview and Introduction

  • بررسی اجمالی دوره Course Overview

  • پیام مهم Important Message

  • در مورد مربی شما About your instructor

نمای کلی و مقدمه دوره Course Overview and Introduction

دانلود کد Code Download

  • دانلود کد Code Download

دانلود کد Code Download

راه اندازی سریع کافکا در AWS Kafka Quick Setup in AWS

  • AWS CloudFormation چیست؟ What is AWS CloudFormation

  • معماری و راه اندازی هدف Target Architecture and Setup

  • ایجاد حساب AWS و هزینه آموزش Create AWS Account & Cost of Tutorial

  • [Hands On] Zookeeper را با استفاده از CloudFormation مستقر کنید [Hands-On] Deploy Zookeeper Using CloudFormation

  • [Hands On] کافکا را با استفاده از CloudFormation مستقر کنید [Hands-On] Deploy Kafka Using CloudFormation

  • [دستی] مروری بر خوشه باغ وحش ما [Hands-On] Overview of our Zookeeper Cluster

  • [Hands On] مروری بر خوشه کافکا ما [Hands-On] Overview of our Kafka Cluster

  • [دست روی] توقف خوشه کافکا [Hands-On] Stopping the Kafka Cluster

راه اندازی سریع کافکا در AWS Kafka Quick Setup in AWS

راه اندازی مدیریت کافکا Kafka Administration Setup

  • [Hands-On] بررسی اجمالی و راه اندازی دستگاه مانیتورینگ [Hands-On] Overview and Setup of Monitoring Machine

  • مهم: امنیت IMPORTANT: Security

  • راه اندازی Zoonavigator [دست روی] [Hands-On] Setup Zoonavigator

  • [Hands On] راه اندازی Kafka Manager [Hands-On] Setup Kafka Manager

  • مانیتور کافکا را راه اندازی کنید [Hands-On] Setup Kafka Monitor

  • برگه تقلب دستورات Commands Cheat Sheet

راه اندازی مدیریت کافکا Kafka Administration Setup

راه اندازی مانیتورینگ کافکا: Grafana + Prometheus Kafka Monitoring Setup: Grafana + Prometheus

  • مروری بر نظارت Overview of Monitoring

  • [Hands On] راه اندازی Prometheus + Kafka Broker 1 [Hands-On] Setting up Prometheus + Kafka Broker 1

  • [تمرین] بروکر 2 و 3 راه اندازی پرومتئوس [Exercise] Broker 2 & 3 Prometheus Setup

  • [راه حل] بروکر 2 و 3 راه اندازی پرومتئوس [Solution] Broker 2 & 3 Prometheus Setup

  • [تمرین] راه اندازی Zookeeper & Prometheus [Exercise] Zookeeper & Prometheus Setup

  • [راه حل] راه اندازی Zookeeper & Prometheus [Solution] Zookeeper & Prometheus Setup

  • [Hands On] Grafana را روی سرور مدیریت راه اندازی کنید [Hands-On] Setup Grafana on Administration Server

  • [Hands On] داشبورد کافکا را در Grafana راه اندازی کنید [Hands-On] Setup Kafka Dashboard on Grafana

  • معیارهای مهم برای نظارت Important Metrics to monitor

  • [دستی] اضافه کردن نمودارها به Grafana [Hands-On] Adding Graphs to Grafana

  • [تمرین] اضافه کردن نمودارهای بیشتر به Grafana [Exercise] Adding more graphs to Grafana

  • [راه حل] اضافه کردن نمودارهای بیشتر به Grafana [Solution] Adding more graphs to Grafana

  • داشبورد Grafana را در کد پیدا کنید Find Grafana dashboard in the code

  • در مورد نظارت بر Kafka Connect، Kafka Streams و غیره چطور؟ What about monitoring Kafka Connect, Kafka Streams, etc?

  • [دست روی] مشاهده Grafana هنگامی که ما یک دلال را می کشیم [Hands-On] Observing Grafana when we kill a broker

  • ملاحظاتی برای آماده ساختن تولید راه اندازی Considerations to make the setup production-ready

راه اندازی مانیتورینگ کافکا: Grafana + Prometheus Kafka Monitoring Setup: Grafana + Prometheus

عملیات کافکا Kafka Operations

  • [Hands On] Agent Jolokia را روی Broker 1 نصب کنید [Hands-On] Install Jolokia Agent on Broker 1

  • [تمرین] Jolokia را روی Broker 2 و 3 نصب کنید [Exercise] Install Jolokia on Broker 2 & 3

  • [راه حل] Jolokia را در بروکر 2 و 3 نصب کنید [Solution] Install Jolokia on Broker 2 & 3

  • [Hands-On] اسکریپت Rolling Restart را نصب کنید [Hands-On] Install Rolling Restart Script

  • [Hands-On] اسکریپت راه اندازی مجدد رول را اجرا کنید [Hands-On] Run Roll Restart Script

  • [Hands On] به‌روزرسانی پیکربندی‌ها روش اول (راه‌اندازی مجدد چرخشی) [Hands-On] Updating Configurations 1st method (rolling restart)

  • [Hands On] به روز رسانی تنظیمات روش دوم (فرمان kafka-configs) [Hands-On] Updating Configurations 2nd method (kafka-configs command)

  • [Hands-On] تعادل مجدد پارتیشن ها با استفاده از دستورات ساده و JSON [Hands-On] Rebalancing Partitions using plain commands and JSON

  • [دستی] تعادل مجدد پارتیشن ها با استفاده از Kafka Manager [Hands-On] Rebalancing Partitions using Kafka Manager

  • [دستی] تعادل مجدد پارتیشن ها با استفاده از ابزارهای LinkedIn [Hands-On] Rebalancing Partitions using LinkedIn tools

  • [Hands-On] افزایش ضریب تکرار با استفاده از دستورات ساده و JSON [Hands-On] Increasing Replication Factor using plain commands and JSON

  • [Hands-On] افزایش ضریب تکرار با استفاده از ابزارهای LinkedIn [Hands-On] Increasing Replication Factor using LinkedIn tools

  • [Hands On] افزودن Broker 4 با استفاده از CloudFormation [Hands-On] Adding Broker 4 using CloudFormation

  • [تمرین] انتقال پارتیشن ها به Broker 4 با استفاده از ابزار CLI [Exercise] Moving partitions over to Broker 4 using the CLI tools

  • [راه حل] انتقال پارتیشن ها به Broker 4 با استفاده از ابزار CLI [Solution] Moving partitions over to Broker 4 using the CLI tools

  • [Hands-On] جایگزینی یک کارگزار با حفظ حجم EBS [Hands-On] Replacing a Broker keeping EBS Volume

  • [Hands On] جایگزینی بروکری که حجم EBS را از دست داده است [Hands-On] Replacing a Broker losing an EBS Volume

  • حذف نمای کلی کارگزار Removing a Broker Overview

  • [تمرین] حذف بروکر 4 [Exercise] Remove Broker 4

  • [راه حل] حذف بروکر 4 [Solution] Remove Broker 4

عملیات کافکا Kafka Operations

ارتقاء خوشه کافکا Kafka Cluster Upgrade

  • ارتقاء نمای کلی خوشه کافکا Upgrading a Kafka Cluster Overview

  • [پیشرفته] تبدیل صفر کپی، بالا و پایین [Advanced] Zero Copy, Up and Down Conversions

  • مرحله 1 ارتقاء بروکر کافکا [Hands-On] Kafka Broker Upgrade Step 1

  • مرحله 2 ارتقاء بروکر کافکا [Hands-On] Kafka Broker Upgrade Step 2

  • مرحله 3 ارتقاء بروکر کافکا [Hands-On] Kafka Broker Upgrade Step 3

  • مرحله 4 ارتقاء بروکر کافکا [Hands-On] Kafka Broker Upgrade Step 4

  • مرحله 5 ارتقاء بروکر کافکا [Hands-On] Kafka Broker Upgrade Step 5

ارتقاء خوشه کافکا Kafka Cluster Upgrade

مراحل بعدی Next Steps

  • تمیز کردن AWS Cleaning up AWS

  • مراحل بعدی و تبریک! Next Steps & Congratulations!

  • متشکرم! THANK YOU!

  • سخنرانی پاداش Bonus Lecture

مراحل بعدی Next Steps

نمایش نظرات

Udemy (یودمی)

یودمی یکی از بزرگ‌ترین پلتفرم‌های آموزشی آنلاین است که به میلیون‌ها کاربر در سراسر جهان امکان دسترسی به دوره‌های متنوع و کاربردی را فراهم می‌کند. این پلتفرم امکان آموزش در زمینه‌های مختلف از فناوری اطلاعات و برنامه‌نویسی گرفته تا زبان‌های خارجی، مدیریت، و هنر را به کاربران ارائه می‌دهد. با استفاده از یودمی، کاربران می‌توانند به صورت انعطاف‌پذیر و بهینه، مهارت‌های جدیدی را یاد بگیرند و خود را برای بازار کار آماده کنند.

یکی از ویژگی‌های برجسته یودمی، کیفیت بالای دوره‌ها و حضور استادان مجرب و با تجربه در هر حوزه است. این امر به کاربران اعتماد می‌دهد که در حال دریافت آموزش از منابع قابل اعتماد و معتبر هستند و می‌توانند به بهترین شکل ممکن از آموزش‌ها بهره ببرند. به طور خلاصه، یودمی به عنوان یکی از معتبرترین و موثرترین پلتفرم‌های آموزشی آنلاین، به افراد امکان می‌دهد تا به راحتی و با کیفیت، مهارت‌های مورد نیاز خود را ارتقا دهند و به دنبال رشد و پیشرفت شغلی خود باشند.

آموزش سری آپاچی کافکا - نظارت و عملیات کافکا
جزییات دوره
5 hours
65
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
14,809
4.5 از 5
ندارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Stephane Maarek  AWS Certified Cloud Practitioner,Solutions Architect,Developer Stephane Maarek AWS Certified Cloud Practitioner,Solutions Architect,Developer

مربی پرفروش، دارای گواهینامه AWS 10x، گورو کافکا

Conduktor Kafkademy Conduktor Kafkademy

پلت فرم سازمانی آپاچی کافکا برای توانمندسازی تیم های شما