آموزش مبانی 빅‌دیتا: الگوهای جذب و انتقال داده‌ها - آخرین آپدیت

دانلود Big Data Foundations: Data Ingestion and Movement Patterns

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: پلتفرم‌های داده‌ای مدرن برای تامین نیازهای تحلیل، گزارش‌دهی و یادگیری ماشین به خط‌لوله‌های (Pipelines) جذب داده قابل اعتماد متکی هستند. درک نحوه حرکت داده‌ها از سیستم‌های منبع به دریاچه‌های داده (Data Lakes)، انبار داده‌ها (Warehouses) و پلتفرم‌های تحلیلی برای ساخت راهکارهای داده‌ای مقیاس‌پذیر و قابل اعتماد حیاتی است. در این دوره آموزشی با عنوان «مبانی 빅‌دیتا: الگوهای جذب و انتقال داده‌ها»، یاد خواهید گرفت که سیستم‌های مدرن داده‌های حجیم چگونه از روش‌های دسته‌ای (Batch)، میکرو-بچ (Micro-batch) و استریمینگ بلادرنگ (Real-time Streaming) برای جذب داده‌ها استفاده می‌کنند. در ابتدا، اصول کلیدی و چالش‌های جذب داده در مقیاس بالا، از جمله نرخ انتقال (Throughput)، ترتیب داده‌ها، داده‌های تاخیری، تغییرات طرح (Schema Drift) و تضمین‌های تحویل را بررسی خواهید کرد. سپس، دسته‌بندی‌های اصلی ابزارها و سرویس‌های جذب داده مانند لاگ‌های رویداد توزیع شده، خط‌لوله‌های ETL و ELT، کپچر تغییرات داده‌ها (CDC) و سرویس‌های مدیریت شده جذب داده در فضای ابری را تحلیل می‌کنید. در نهایت، الگوهای معماری مورد استفاده برای انتقال و همگام‌سازی داده‌ها بین سیستم‌ها، شامل تکثیر (Replication)، انتشار رویداد-محور، جریان‌های ارکستراسیون و الگوهای یکپارچه‌سازی میان دریاچه‌ها، انبارها و سیستم‌های عملیاتی را خواهید آموخت. در پایان این دوره، شما قادر خواهید بود در مورد انتخاب‌های مناسب برای جذب داده استدلال کنید، مزایا و معایب هر روش را توضیح دهید و درک کنید که پلتفرم‌های داده‌ای مدرن چگونه داده‌ها را در مقیاس بالا و به صورت قابل اطمینان منتقل می‌کنند.

سرفصل ها و درس ها

درک اصول کلیدی و چالش‌های جذب داده در مقیاس بالا Understand the Core Principles and Challenges of Ingesting Data at Scale

  • چرا جذب داده در مقیاس بالا دشوار است؟ Why Data Ingestion Is Hard at Scale

  • مدل‌های جذب دسته‌ای، میکرو-بچ و استریمینگ Batch, Micro-batch, and Streaming Ingestion Models

  • چالش‌های جذب: نرخ انتقال، ترتیب، داده‌های تاخیری و تغییرات طرح Ingestion Challenges: Throughput, Ordering, Late Data, Schema Drift

  • کانکتورها، مفاهیم تحویل و تضمین‌های قابلیت اطمینان Connectors, Delivery Semantics, and Reliability Guarantees

شناخت دسته‌های اصلی ابزارها و سرویس‌های پشتیبان جذب بیگ‌دیتا Understand the Major Categories of Tools and Services That Support Big Data Ingestion

  • لاگ‌های رویداد توزیع شده و سیستم‌های پیام‌رسان Distributed Event Logs and Messaging Systems

  • خط‌لوله‌های ETL، ELT و استریمینگ ETL, ELT, and Streaming Pipelines

  • کپچر تغییرات داده‌ها (CDC) و جذب داده‌های دیتابیس Change Data Capture (CDC) and Database Ingestion

  • سرویس‌های جذب داده مدیریت شده در مقابل خود-مدیریتی Managed vs. Self-managed Ingestion Services

درک الگوهای معماری بیگ‌دیتا برای انتقال و همگام‌سازی داده‌ها بین سیستم‌ها Understand Big Data Architectural Patterns for Moving and Synchronizing Data across Systems

  • تکثیر و انتقال زمان‌بندی شده داده‌ها Replication and Scheduled Data Movement

  • انتشار داده‌های رویداد-محور Event-driven Data Propagation

  • ارکستراسیون و هماهنگی جریان کاری (Workflow) Orchestration and Workflow Coordination

  • الگوهای یکپارچه‌سازی: نقطه به نقطه، هاب و اسپوک و رویکردهای غیرمتمرکز Integration Patterns: Point-to-point, Hub-and-spoke, and Decentralized Approaches

نمایش نظرات

آموزش مبانی 빅‌دیتا: الگوهای جذب و انتقال داده‌ها
جزییات دوره
45m
12
(آخرین آپدیت)
1
از 5
دارد
دارد
دارد
Harsh Karna
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Harsh Karna Harsh Karna

Harsh یک مهندس نرم افزار ماهر با بیش از 4 سال تجربه در مهندسی داده ها و توسعه نرم افزار است. او در فن آوری های داده های بزرگ مانند Hadoop ، Spark و SQL به همراه سیستم عامل های ابری مانند AWS و Azure تخصص زیادی دارد ، جایی که او ETL قوی و چارچوب های داده را بر روی سیستم عامل هایی مانند Snowflake و Databricks ساخته است. در زبانهای برنامه نویسی مانند پایتون ، SQL و جاوا مهارت دارد ، Harsh همچنین در چارچوب های Django و Flask تجربه دارد. کار وی شامل طراحی و اجرای خطوط لوله داده ، دریاچه های داده و انبارهای داده است. HARSH با سابقه ای در علوم داده ، یادگیری ماشین و آمار ، به پروژه های متنوعی از جمله پردازش زبان طبیعی و دید رایانه کمک کرده است. او به عنوان یک فریلنسر ، پروژه هایی را در مهندسی داده ها ، داده های بزرگ ، محاسبات ابری ، تجزیه و تحلیل داده ها و ژنرال هوش مصنوعی مقابله می کند. در خارج از کار ، سخت عاشق مسافرت ، یادگیری در مورد فرهنگ های جدید و ملاقات با مردم از سراسر جهان است. او مربیگری رایگان را به دانشجویان و افراد متقاضی شغل ارائه می دهد و به آنها کمک می کند تا در صنعت فناوری حرکت کنند.