آموزش مبانی آپاچی کافکا (Apache Kafka) - آخرین آپدیت

شروع کار با کلان‌داده‌ها و آپاچی کافکا Getting Started with Big Data and Apache Kafka

• معرفی دوره Course Introduction

• تکامل داده‌ها در طول زمان Data Evolution Over Time

• بررسی کلی کلان‌داده‌ها (Big Data) Big Data Overview

• تحلیل کلان‌داده‌ها Big Data Analytics

• سیستم‌های پیام‌رسان Messaging System

• معرفی و ویژگی‌های کافکا Introduction and Features of Kafka

• موارد استفاده از کافکا Kafka Use Cases

• اصطلاحات تخصصی کافکا Kafka Terminologies

• اجزای تشکیل‌دهنده کافکا Kafka Components

• معماری کافکا Kafka Architecture

• کلاسترهای کافکا Kafka Clusters

• کاربردهای صنعتی کافکا Kafka Industry Use Cases

• دمو: نصب Zookeeper DEMO: Install Zookeeper

• دمو: نصب Kafka DEMO: Install Kafka

• دمو: راه‌اندازی کلاستر تک‌گره تک‌بروکر DEMO: Set up a Single Node Single Broker Cluster

• دمو: راه‌اندازی کلاستر چندگره تک‌بروکر DEMO: Set up a Multi-Node Single Broker Cluster

تولیدکننده کافکا (Kafka Producer) Kafka Producer

• بررسی کلی Producer و معماری آن Overview of Producer and Architecture

• پیکربندی Kafka Producer Kafka Producer Configuration

• پیکربندی‌های اختیاری Kafka Producer Kafka Producer Optional Configuration

• اشیای پیکربندی Kafka Producer Kafka Producer Configuration Objects

• دمو: ساخت یک Kafka Producer DEMO: Create a Kafka Producer

• ارسال پیام‌ها Sending Messages

• سریالایزرها و سریالایزرهای سفارشی Serializers and Custom Serializers

• دمو: ساخت یک سریالایزر سفارشی DEMO: Creating a Custom Serializer

• چالش‌های سریالایز و استفاده از Apache Avro Serializers Challenges and Serializing Using Apache Avro

• دمو: سریالایز کردن با استفاده از Apache Avro DEMO: Serializing Using Apache Avro

• پارتیشن‌ها (Partitions) Partitions

• دمو: راه‌اندازی پارتیشن سفارشی DEMO: Set up Custom Partition

مصرف‌کننده کافکا (Kafka Consumer) Kafka Consumer

• بررسی کلی Kafka Consumer Overview of Kafka Consumer

• گروه‌های مصرف‌کننده (Consumer Groups) Consumer Groups

• بازتوزیع پارتیشن و ساخت مصرف‌کننده Partition Rebalance and Creating a Consumer

• حلقه Poll و نحوه عملکرد آن Poll Loop and Its Functioning

• پیکربندی مصرف‌کننده کافکا: fetch.min.bytes, fetch.max.wait.ms, max.partition.fetch.bytes, session.timeout.ms Configuring Kafka Consumer: fetch.min.bytes, fetch.max.wait.ms, max.partition.fetch.bytes, session.timeout.ms

• تنظیمات Kafka Consumer: auto.offset.reset, enable.auto.commit, partition.assignment.strategy, client.id, max.poll.records, receive.buffer.bytes, send.buffer.bytes Kafka Consumer Configuration: auto.offset.reset, enable.auto.commit, partition.assignment.strategy, client.id, max.poll.records, receive.buffer.bytes, send.buffer.bytes

• دمو: ساخت Kafka Consumer DEMO: Create Kafka Consumer

• مفهوم Commit و Offset Commit and Offset

• روش‌های Commit Offset: آفست خودکار Ways of Committing Offset - Automatic Offset

• روش‌های Commit Offset: کامیت آفست فعلی Ways of Committing Offset - Commit Current Offset

• روش‌های Commit Offset: کامیت غیرهمزمان (Asynchronous) Ways of Committing Offset - Asynchronous Commit

• روش‌های Commit Offset: آفست همزمان و غیرهمزمان Ways of Committing Offset - Synchronous and Asynchronous Offset

• روش‌های Commit Offset: کامیت آفست مشخص شده Ways of Committing Offset - Commit Specified Offset

• شنونده‌های بازتوزیع (Rebalance Listeners) Rebalance Listeners

• مصرف رکوردها با آفست مشخص Consuming Records with Specific Offset

• معرفی دسریالایزرها (Deserializers) Introduction to Deserializers

• دمو: ساخت و استفاده از یک دسریالایزر سفارشی DEMO: Create and Use a Custom Deserializer