آموزش Kafka for Developers - قراردادهای داده با استفاده از Schema Registry

سرفصل ها و درس ها

شروع دوره Getting Started with the Course

• معرفی Introduction

• پیش درخواست ها Pre-requestites

اسلایدهای دوره Course Slides

• اسلایدهای دوره Course Slides

قرارداد داده ها و سریال سازی در کافکا Data Contract and Serialization in Kafka

• قرارداد داده و سریال سازی در کافکا Data Contract & Serialization in Kafka

• فرمت های سریال سازی Serialization Formats

مقدمه ای بر AVRO - یک سیستم سریال سازی داده ها Introduction to AVRO - A data serialization system

• مقدمه ای بر AVRO - AVRO چیست و چرا AVRO؟ Introduction to AVRO - What is AVRO and Why AVRO?

• یک طرحواره AVRO ساده بسازید Build a simple AVRO Schema

راه اندازی و نمایش کافکا در محلی با استفاده از Docker Kafka Setup & Demo in Local Using Docker

• Kafka Broker و Zookeeper را با استفاده از Docker Compose راه اندازی کنید Set up Kafka Broker and Zookeeper using Docker Compose

• پیام های تولید کننده و مصرف کننده با استفاده از CLI Producer and Consumer Messages using CLI

• با استفاده از AVRO Console Producer & Consumer تولید و مصرف کنید Produce and Consume using AVRO Console Producer & Consumer

برنامه تبریک - پایه راه اندازی پروژه AVRO - Gradle Greeting App - Base AVRO Project SetUp - Gradle

• راه اندازی پروژه پایه برای برنامه تبریک Base Project SetUp for Greeting App

• AVRO Java Records را با استفاده از AVRO Schema Files ایجاد کنید Generate AVRO Java Records using AVRO Schema Files

برنامه تبریک - پایه راه اندازی پروژه AVRO - Maven Greeting App - Base AVRO Project SetUp - Maven

• راه اندازی پروژه پایه برای برنامه تبریک - Maven Base Project SetUp for Greeting App - Maven

• با استفاده از AVRO Schema Files - Maven، رکوردهای جاوا AVRO را ایجاد کنید Generate AVRO Java Records using AVRO Schema Files - Maven

تولید کننده و مصرف کننده AVRO را در جاوا بسازید Build AVRO Producer and Consumer in Java

• بیایید AVRO Kafka Producer بسازیم Lets build AVRO Kafka Producer

• بیایید AVRO Kafka Consumer را بسازیم Lets build AVRO Kafka Consumer

خدمات سفارش کافی شاپ با استفاده از AVRO - یک مورد استفاده در زمان واقعی CoffeeShop Order Service Using AVRO - A Real time Use Case

• بررسی اجمالی برنامه Application Overview

• راه اندازی پروژه برای کافی شاپ - Gradle Project SetUp for CoffeeShop - Gradle

• راه اندازی پروژه برای کافی شاپ - Maven Project SetUp for CoffeeShop - Maven

• با استفاده از AVRO یک طرح سفارش قهوه بسازید Build a Coffee Order Schema using AVRO

• ایجاد کلاس های AVRO با استفاده از Gradle Generating AVRO classes using Gradle

• ایجاد کلاس های AVRO با استفاده از Maven Generating AVRO classes using Maven

• تولید کننده سفارش کافی شاپ بسازید Build a CoffeeShop Order Producer

• یک مشتری سفارش کافی شاپ بسازید Build a CoffeeShop Order Consumer

انواع طرحواره های منطقی در AVRO Logical Schema Types in AVRO

• مقدمه ای بر انواع منطقی در AVRO Introduction to Logical Types in AVRO

• یک مهر زمانی، نوع منطقی اعشاری را به طرح قهوه سفارش اضافه کنید Add a timestamp, decimal logical type to the CoffeeOrder Schema

• افزودن UUID به‌عنوان کلید برای CoffeeOrder Adding the UUID as Key for CoffeeOrder

• نوع منطقی تاریخ Date Logical Type

AVRO Record- Under the Hood AVRO Record- Under the Hood

• داخل یک رکورد AVRO چیست؟ Whats inside an AVRO Record ?

تغییرات طرحواره در AVRO - مشکلات بدون رجیستری طرحواره Schema Changes in AVRO - Issues without Schema Registry

• در حال تحول طرحواره - مصرف کننده موفق به خواندن طرحواره جدید نمی شود Evolving the Schema - Consumer Fails to Read the new Schema

مقدمه ای بر Schema Registry Introduction to Schema Registry

• مقدمه ای بر Schema Registry Introduction to Schema Registry

• انتشار و ثبت مصرف کننده با استفاده از Schema Registry Publish and Consumer Record using Schema Registry

• داخلی رجیستری طرحواره و تعامل با رجیستری طرحواره با استفاده از نقطه پایانی REST Schema Registry internals & Interacting with Schema Registry using REST Endpoint

• انتشار و مصرف "کلید" به عنوان یک رکورد AVRO Publish and Consume "Key" as an AVRO record

تکامل داده ها با استفاده از رجیستری طرحواره Data Evolution using Schema Registry

• تکامل داده ها و تکامل طرحواره Data Evolution & Schema Evolution

• کد را برای تعامل با mavenLocal Repository - Gradle به روز کنید Update the code to interact with mavenLocal Repository - Gradle

• کد را برای تعامل با mavenLocal Repository - Maven به روز کنید Update the code to interact with mavenLocal Repository - Maven

• حذف یک فیلد در طرحواره - سازگاری BACKWARD Deleting a Field in Schema - BACKWARD Compatibility

• افزودن یک فیلد جدید در طرحواره - سازگاری FORWARD Adding a new Field in Schema - FORWARD Compatibility

• افزودن/حذف فیلدهای اختیاری - سازگاری کامل Add/Delete Optional Fields - FULL Compatibility

• تغییر نام فیلدها - سازگاری ندارد Modify Field Names - NONE Compatibility

استراتژی های نامگذاری طرحواره Schema Naming Strategies

• انواع مختلف استراتژی نامگذاری Different Types of Naming Strategies

• Coffee Update Event Schema AVRO Coffee Update Event AVRO Schema

• انتشار و مصرف CoffeeOrder UpdateEvent با استفاده از RecordNameStrategy Publish and Consume CoffeeOrder UpdateEvent using RecordNameStrategy

با استفاده از SpringBoot & Schema Registry یک سرویس سفارش قهوه بسازید Build a Coffee Order Service using SpringBoot & Schema Registry

• نمای کلی برنامه Overview of the app

• راه اندازی پروژه پایه - Gradle Setting up the base project - Gradle

• راه اندازی پروژه پایه - maven Setting up the base project - maven

• DTO ها را برای CoffeeOrderService بسازید Build the DTOs for the CoffeeOrderService

• ایجاد نقطه پایانی POST برای CoffeeOrderService -/coffee_orders Build the POST endpoint for the CoffeeOrderService - /coffee_orders

• لایه Service را بسازید تا شی دامنه DTO به AVRO را نگاشت کنید Build the Service layer to map the DTO to AVRO domain object

• ویژگی های تولید کننده کافکا را در سرویس سفارش قهوه پیکربندی کنید Configure the Kafka Producer properties in Coffee Order Service

• برای انتشار رویدادهای سفارش قهوه، KafkaProducer را بسازید Build KafkaProducer to publish the CoffeeOrder Events

• مصرف کننده سفارش قهوه را بسازید Build the Coffee Order Consumer

• ایجاد نقطه پایانی PUT برای CoffeeOrderService - PUT/coffee_orders/{id} Build the PUT endpoint for the CoffeeOrderService - PUT /coffee_orders/{id}