آموزش کاربردی پرتو آپاچی در جاوا | چارچوب BigData

Learn Practical Apache Beam in Java | BigData framework

نکته: آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
توضیحات دوره: منبع باز Apache Beam با استفاده از جاوا | Big data Pipeline Learn پرتو منبع باز آپاچی با استفاده از جاوا و eclipse. نحوه ایجاد خط لوله داده با استفاده از پرتو Apache، AWS، Kafka، S3، BigQuery، GCP، Google Storage، Mysql، جریان داده Google 1-Apache Beam معرفی و نصب 2-PCollection & Lab. 3-عناصر عاقلانه و تبدیل تجمعی. 4-ادغام پرتو آپاچی با S3. 5-پرتو آپاچی خواندن و نوشتن فایل پارکت 6-ادغام پرتو آپاچی با MySQL،Hadoop و NoSQL. 7-پرتو آپاچی به هم می پیوندد. 8- با استفاده از کافکا، ETL جریانی بسازید. 9-پرتو آپاچی - SQL 10- ساخت دسته ای ETL با استفاده از Google Storage و BigQuery. پیش نیازها:Java8

این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.

در این آموزش، بخش‌های آزمایشگاهی AWS Google Cloud Platform، Kafka، MYSQL، Parquet File، BiqQuery، S3 Bucket، Streaming ETL، Batch ETL، Transformation را نشان داده‌ام.

این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.


این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.

در این آموزش، بخش‌های آزمایشگاهی AWS Google Cloud Platform، Kafka، MYSQL، Parquet File، BiqQuery، S3 Bucket، Streaming ETL، Batch ETL، Transformation را نشان داده‌ام.

این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.


این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.

در این آموزش، بخش‌های آزمایشگاهی AWS Google Cloud Platform، Kafka، MYSQL، Parquet File، BiqQuery، S3 Bucket، Streaming ETL، Batch ETL، Transformation را نشان داده‌ام.

این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.


این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.

در این آموزش، بخش‌های آزمایشگاهی AWS Google Cloud Platform، Kafka، MYSQL، Parquet File، BiqQuery، S3 Bucket، Streaming ETL، Batch ETL، Transformation را نشان داده‌ام.

این دوره در مورد یادگیری پرتو آپاچی با استفاده از جاوا از ابتدا است. این دوره برای افراد بسیار مبتدی و حرفه ای طراحی شده است. من نمونه های عملی را پوشش داده ام.


سرفصل ها و درس ها

معرفی Introduction

  • معرفی Introduction

  • پردازش دسته ای در مقابل پردازش بیدرنگ Batch processing vs Realtime processing

  • پرتو آپاچی Apache Beam

  • آزمایشگاه: نصب و راه اندازی Lab : Installation & Setup

معرفی Introduction

PCCollections PCollections

  • معرفی Introduction

  • آزمایشگاه: ایجاد یک مجموعه PC از سیستم فایل Lab : Creating a PCollection from file system

  • آزمایشگاه: ایجاد یک مجموعه PC از داده های درون حافظه Lab : Creating a PCollection from in-memory data

  • آزمایشگاه: PipelineOptions Lab : PipelineOptions

PCCollections PCollections

تبدیل - از نظر عنصر Transformation - Element-wise

  • PT تبدیل شود PTransform

  • آزمایشگاه: MapElements Lab :MapElements

  • آزمایشگاه: MapElements با استفاده از SimpleFunction Lab : MapElements using SimpleFunction

  • آزمایشگاه: ParDo Lab : ParDo

  • آزمایشگاه: فیلترها Lab : Filters

  • آزمایشگاه: صاف کردن Lab : Flatten

  • آزمایشگاه: پارتیشن Lab : Partition

  • آزمایشگاه: ورودی های جانبی Lab : Side Inputs

تبدیل - از نظر عنصر Transformation - Element-wise

تبدیل: تجمع Transformation : Aggregation

  • آزمایشگاه: متمایز Lab : Distinct

  • آزمایشگاه: نحوه شمارش PCCollection Lab : How to Count PCollection

  • GroupByKey GroupByKey

  • آزمایشگاه: GroupByKey Lab : GroupByKey

تبدیل: تجمع Transformation : Aggregation

پیوستن Join

  • آزمایشگاه: پیوستن داخلی (CoGroupByKey) Lab : Inner Join (CoGroupByKey)

  • آزمایشگاه: عضویت بیرونی سمت چپ Lab : Left Outer Join

  • آزمایشگاه: پیوستن به سمت راست بیرونی Lab : Right Outer Join

پیوستن Join

خط لوله ورودی/خروجی Pipeline I/O

  • آزمایشگاه: AWS S3 (قسمت 1) Lab : AWS S3 (Part 1)

  • آزمایشگاه: AWS S3 - (قسمت 2) Lab : AWS S3 - (Part 2)

  • آزمایشگاه : ParquetIO Write Lab : ParquetIO Write

  • آزمایشگاه: پارکت رید Lab : Parquet Read

خط لوله ورودی/خروجی Pipeline I/O

ادغام Integration

  • آزمایشگاه: ادغام پرتو با JDBC Lab : Beam integration with JDBC

  • آزمایشگاه: ادغام پرتو با MongoDB Lab : Beam integration with MongoDB

  • آزمایشگاه: ادغام پرتو با HDFS Lab : Beam integration with HDFS

ادغام Integration

جریان پرتو Beam Streaming

  • جریان - ETL Streaming- ETL

  • آزمایشگاه : استریمینگ ETL - 1 ( راه اندازی کافکا ) Lab : Streaming ETL - 1 ( Kafka Setup )

  • Lab:Streaming ETL -2 (ادغام کافکا با پرتو آپاچی) Lab:Streaming ETL -2 (Kafka integration with Apache beam)

  • آزمایشگاه: جریان ETL -3 (شمار ​​و پنجره) Lab:Streaming ETL -3 (Count & Window)

  • آزمایشگاه: جریان ETL -4 (بارگیری داده ها در MySQL) Lab: Streaming ETL -4 (Load data in MySQL)

جریان پرتو Beam Streaming

پرتو SQL Beam SQL

  • آزمایشگاه: BEAM SQL Lab : BEAM SQL

  • آزمایشگاه : BEAM SQL Count & Group By Lab : BEAM SQL Count & Group By

  • آزمایشگاه: Beam-SQL Inner Join Lab : Beam-SQL Inner Join

پرتو SQL Beam SQL

پرتو آپاچی با Google Cloud Platform Apache beam with Google Cloud Platform

  • معرفی Introduction

  • ایجاد حساب GCP Create GCP Account

  • آزمایشگاه: راه اندازی سطل ذخیره سازی GCP Lab : GCP Storage Bucket Setup

  • آزمایشگاه: داده‌ها را از Google Storage بخوانید Lab : Read data from Google Storage

  • آزمایشگاه: اعتبارسنجی داده ها Lab : Data Validation

  • آزمایشگاه: ورود به Google BigQuery Lab : Ingesting into Google BigQuery

پرتو آپاچی با Google Cloud Platform Apache beam with Google Cloud Platform

نمایش نظرات

نظری ارسال نشده است.

آموزش کاربردی پرتو آپاچی در جاوا | چارچوب BigData
خرید اشتراک و دانلود خرید تکی و دانلود | 160,000 تومان (5 روز مهلت دانلود) زمان تقریبی آماده سازی لینک دانلود این دوره آموزشی حدود 5 تا 24 ساعت می باشد.
جزییات دوره
5 hours
44
Udemy (یودمی) udemy-small
30 اسفند 1399 (آخرین آپدیت رو دریافت می‌کنید، حتی اگر این تاریخ بروز نباشد.)
1,553
4.3 از 5
دارد
دارد
دارد
A K Kumar

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

A K Kumar A K Kumar

معمار BigData

Udemy (یودمی)

یودمی یکی از بزرگ‌ترین پلتفرم‌های آموزشی آنلاین است که به میلیون‌ها کاربر در سراسر جهان امکان دسترسی به دوره‌های متنوع و کاربردی را فراهم می‌کند. این پلتفرم امکان آموزش در زمینه‌های مختلف از فناوری اطلاعات و برنامه‌نویسی گرفته تا زبان‌های خارجی، مدیریت، و هنر را به کاربران ارائه می‌دهد. با استفاده از یودمی، کاربران می‌توانند به صورت انعطاف‌پذیر و بهینه، مهارت‌های جدیدی را یاد بگیرند و خود را برای بازار کار آماده کنند.

یکی از ویژگی‌های برجسته یودمی، کیفیت بالای دوره‌ها و حضور استادان مجرب و با تجربه در هر حوزه است. این امر به کاربران اعتماد می‌دهد که در حال دریافت آموزش از منابع قابل اعتماد و معتبر هستند و می‌توانند به بهترین شکل ممکن از آموزش‌ها بهره ببرند. به طور خلاصه، یودمی به عنوان یکی از معتبرترین و موثرترین پلتفرم‌های آموزشی آنلاین، به افراد امکان می‌دهد تا به راحتی و با کیفیت، مهارت‌های مورد نیاز خود را ارتقا دهند و به دنبال رشد و پیشرفت شغلی خود باشند.