لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش درک معماری آپاچی آیسبرگ (Apache Iceberg)
- آخرین آپدیت
دانلود Understanding Apache Iceberg Architecture
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
بسیاری از دورهها و مستندات درباره Apache Iceberg به خوبی توضیح میدهند که این فناوری چیست و چرا باید آن را به عنوان فرمت ذخیرهسازی برای دیتا لیک (Data Lake) یا پلتفرم Lakehouse خود در نظر بگیرید.
در این دوره، «درک معماری آپاچی آیسبرگ»، شما با جزئیات داخلی و نحوه عملکرد Apache Iceberg آشنا خواهید شد.
در ابتدا، رویکرد لایهبندی شده Apache Iceberg در ذخیرهسازی و مدیریت دادهها و متادادهها را بررسی میکنید و میآموزید که چگونه Iceberg میتواند ذخیرهسازی را بهطور کامل از موتور کوئری (Query Engine) و کاتالوگ جدا کند.
سپس، خواهید دید که Iceberg چگونه تکامل شمای دادهها (Schema Evolution) را بهطور بهینه و در عین حفظ انطباق کامل با استاندارد ACID مدیریت میکند؛ این قابلیت به مهندسان داده اجازه میدهد تا با پلتفرمهایی در مقیاس پتابایت، مشابه با پلتفرمهای سنتی مانند SQL Server یا Oracle کار کنند.
در نهایت، یاد میگیرید که Iceberg چگونه بهینهسازیهای ذخیرهسازی و کوئری مانند پارتیشنبندی (Partitioning)، فشردهسازی (Compaction) و جمعآوری زبالهها (Garbage Collection) را مدیریت و تسهیل میکند.
پس از اتمام این دوره، شما مهارتها و دانش لازم از معماری Apache Iceberg را خواهید داشت تا بتوانید بهطور کامل آن را در پروژههای دادهای خود ارزیابی و پیادهسازی کنید.
سرفصل ها و درس ها
درک نحوه مدیریت فایلهای داده و متاداده در آپاچی آیسبرگ
Understanding How Apache Iceberg Manages Data and Metadata Files
چهار لایه فرمت آپاچی آیسبرگ
The Four Layers of the Apache Iceberg Format
فایل JSON متادیتای جدول
The Table Metadata JSON
لیستهای مانیفست
The Manifest Lists
فایلهای مانیفست
The Manifest Files
فایلهای داده
The Data Files
درک نحوه پیادهسازی انواع دادهها، پارتیشنها و عملیات داخلی در آیسبرگ
Understanding How Iceberg Implements Data Types, Partitions, and Internal Operations
انواع دادههای پشتیبانی شده در آیسبرگ
Iceberg-supported Data Types
نحوه تکامل شما بدون ایجاد تغییرات مخرب
How a Schema Evolves without Breaking Changes
مزایای پارتیشنبندی پنهان
The Benefits of Hidden Partitioning
فشردهسازی و سایر عملیات بهینهسازی و پاکسازی
Compaction and Other Housecleaning Operations
در حال حاضر یک رهبر IT در بخش مالی دنور کلرادو Russ از سال 1997 در سراسر مایکروسافت بر توسعه پایگاه داده ، مدل سازی ، مدیریت و BI تمرکز کرده است. راس یک مربی پرشور و داوطلب جامعه SQL است که به طور منظم در رویدادهای PASS SQL شنبه و گروه های کاربری محلی در ایالات متحده شرکت می کند.
نمایش نظرات