لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش Apache Druid: راهنمای کامل
Apache Druid : Complete Guide
نکته:
آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
نمونه ویدیوها:
توضیحات دوره:
یادگیری معماری دروید، جذب کافکا، تکامل طرحواره، تنظیم و ادغام Hive و Presto دانش عمیق در مورد اجزای دروید و معماری آن دریافت بیدرنگ دادهها از Apache Kafka با استفاده از برنامه تولید کننده توییتر تنظیم Apache Druid برای عملکرد بهتر دسترسی به جداول Apache DruidD از طریق آموزش Avatic. Schema Evolution Complete Druid Hive ادغام با تجربه عملی Presto Druid Connector پیش نیازها: مبانی Apache Kafka، Apache Hive، Presto Practical تجربه در Mysql، AWS
از این دوره چه چیزی یاد می گیرید؟
در این دوره، ویژگیهای برجسته دروید آپاچی و ادغام با Apache Hive، Prestodb (Trino)، Spark و Schema Registry را یک به یک یاد میگیریم.
ما این دوره را با کسب دانش نظری در مورد Druid و ویژگی های کلیدی آن شروع می کنیم. ما برنامه تولید کننده توییتر خود را می نویسیم که توییت ها را به صورت بلادرنگ از توییتر بیرون می کشد و توییت ها را به آپاچی کافکا می فرستد. ما یک وظیفه استریم کافکا در Druid ایجاد می کنیم که توییت ها را از کافکا می کشد و در Apache Druid ذخیره می کند. همچنین، نحوه اعمال تبدیل، فیلتر، پیکربندی طرحواره، تنظیم در حین مصرف کافکا را یاد میگیریم.
در ماژول سوم، روشهای Native و SQL Batch را به طور عمیق بررسی میکنیم. در یک خط لوله ETL پس از مرحله استخراج و تبدیل، اگر می خواهید مجموعه داده را در druid بارگیری کنید، باید این بخش را بررسی کنید. ما کل بارگیری را در قسمت دروید به طور خودکار انجام می دهیم.
در ماژول چهارم، نحوه خواندن جداول دروید را با استفاده از Spark و ایجاد Spark Dataframe از آن یاد می گیریم. ما همچنین ویژگیهای محمول و مجموع جرقه فشار پایین را بررسی میکنیم.
بخش 5، در مورد ثبت طرحواره صحبت کنید. ما می آموزیم که چگونه دروید با رجیستری طرحواره صحبت می کند و به اعتبار سنجی طرحواره دست می یابد. همچنین نحوه تجزیه دروید رکوردهای Avro.
بخش 6 7 قابلیت های خارج از جعبه دروید را نشان می دهد. که ادغام کندو و پرستو هستند. اگر دادههای سازمان شما در hive یا presto قرار دارند و میخواهید به جدول druid بپیوندید، باید یکپارچهسازی hive یا presto را انجام دهید.
سرفصل ها و درس ها
معرفی
Introduction
معرفی
Introduction
آپاچی دروید
Apache Druid
بررسی اجمالی دروید
Druid Overview
استقرار دروید مستقل
Standalone Druid Deployment
Mysql به عنوان متاستور
Mysql as Metastore
S3 به عنوان ذخیره سازی عمیق
S3 as Deep Storage
بررسی برنامه تولیدکننده کافکا
Kafka Producer App Walkthrough
دروید در نقش مصرف کننده کافکا
Druid as Kafka Consumer
تبدیل و فیلتر
Transform & Filter
دروید در نقش مصرف کننده کافکا ادامه دارد
Druid as Kafka Consumer Continued
معماری
Architecture
سازماندهی بخش ها در S3
Organising Segments on S3
تنظیم
Tuning
تنظیم ادامه دارد
Tuning Continued
Druid JDBC (Avatica)
Druid JDBC (Avatica)
تکامل طرحواره
Schema Evolution
تکامل طرحواره ادامه دارد
Schema Evolution Continued
بلع دسته ای
Batch Ingestion
بررسی اجمالی
Overview
دسته بومی
Native Batch
SQL
SQL
ادغام جرقه Druid
Druid Spark Integration
دسترسی به جداول دروید با اسپارک آپاچی
Accessing Druid Tables with Apache Spark
نمایش نظرات