آموزش بوت‌کمپ خط لوله‌های داده و مجموعه داده‌های Palantir Foundry - آخرین آپدیت

دانلود Palantir Foundry Pipelines and Dataset Bootcamp

نکته: ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره: تسلط بر خط لوله‌های Foundry با آموزش وارد کردن داده‌ها، تبدیل‌ها، بررسی‌های QA، زمان‌بندی و خروجی مجموعه داده‌ها. رابط کاربری Foundry Pipelines، مفاهیم محوری و گردش کار را بیاموزید تا بتوانید با اطمینان در محیط پیمایش کرده و اولین خط لوله خود را بسازید. یاد بگیرید چگونه داده‌های خام را از منابع مختلف وارد، متصل و آپلود کنید تا بتوانید مجموعه داده‌ها را به‌طور قابل اعتمادی به Foundry منتقل کنید. آموزش پاک‌سازی، افزودن، تقسیم، ادغام، تست و اعتبارسنجی داده‌ها با استفاده از تبدیل‌های Foundry برای ساخت خط لوله‌های شفاف و قابل نگهداری. یاد بگیرید چگونه مجموعه داده‌ها را منتشر کنید، حالت‌های نوشتن (Write Modes) را تنظیم کنید، زمان‌بندی ساخت را مدیریت کنید، تست‌ها را اجرا کرده و داده‌ها را برای استفاده در مراحل بعدی آماده کنید. پیش نیازها: هیچ تجربه برنامه‌نویسی مورد نیاز نیست. برای بهره‌مندی حداکثری از این دوره، دسترسی به Foundry برای تمرین مفاهیم کلیدی توصیه می‌شود. همچنین باید در کار با وب‌سایت‌ها و داده‌ها (مانند صفحات گسترده یا اکسل) راحت باشید.

ساخت خط لوله‌های داده‌ای قابل اعتماد و با ساختار مناسب، قلب تپنده کار موثر در Palantir Foundry است. در این دوره عملی، شما یاد می‌گیرید چگونه داده‌های خام را از منابع متنوع دریافت کرده، آن‌ها را با اطمینان تبدیل کنید و مجموعه داده‌های پاک و قابل اعتمادی را منتشر کنید که برای کاربردهای واقعی آماده باشند.

ما با بررسی رابط کاربری Foundry Pipelines شروع می‌کنیم تا بتوانید به‌راحتی پیمایش کنید و متوجه شوید که خط لوله‌ها، مجموعه داده‌ها و تبدیل‌ها چگونه در کنار هم قرار می‌گیرند. شما یاد می‌گیرید چگونه داده‌ها را از داخل Foundry وارد کنید، فایل‌های خصوصی را آپلود نمایید و مجموعه داده‌های عمومی را اضافه کنید و بدین ترتیب پایه‌ای محکم برای کار با انواع ورودی‌ها ایجاد کنید.

سپس، به سراغ تبدیل داده‌ها می‌رویم. شما با JSON و geoJSON کار خواهید کرد، مشکلات استخراج را عیب‌یابی می‌کنید، داده‌ها را با استفاده از تقسیم‌ها (Splits) و ستون‌های استاتیک بازسازی می‌کنید، منطق‌ها را با Regex و عبارات شرطی ترکیب کرده و خط لوله‌های خود را با Joinها، Unionها و توابع داخلی غنی می‌کنید. در این مسیر، یک مدل ذهنی قوی از نحوه تکامل شمای داده‌ها و زنجیره تبدیل‌ها به دست خواهید آورد.

در مرحله بعد، نحوه بارگذاری و عملیاتی کردن کارهای خود را می‌آموزید. ما حالت‌های نوشتن، زمان‌بندی، مدیریت خطا، انتظارات داده‌ای (Data Expectations) و تست‌های واحد (Unit Tests) را پوشش می‌دهیم تا بتوانید قبل از انتشار، از کیفیت داده‌ها مطمئن شوید. همچنین یاد می‌گیرید که چگونه با افزودن متادیتا، مدیریت دسترسی‌ها و اعمال حاکمیت داده (Governance)، قابلیت استفاده از مجموعه داده‌ها را بهبود ببخشید.

در نهایت، به مبحث Branching (شاخه‌بندی) می‌پردازیم تا به شما کمک کنیم تغییرات را به‌صورت ایمن در یک محیط کنترل‌شده توسعه دهید.

در پایان این دوره، شما قادر خواهید بود با اطمینان کامل، خط لوله‌های داده‌ای جامع را در Foundry بسازید، تست کنید و منتشر نمایید و در این مسیر با همکاران خود همکاری کنید.


سرفصل ها و درس ها

مقدمه Introduction

  • مقدمه Introduction

شروع به کار Getting Started

  • خط لوله‌های Foundry چیستند؟ What are Foundry Pipelines?

  • پیمایش در Foundry Pipelines Navigating Foundry Pipelines

  • ایجاد یک خط لوله خالی Creating an Empty Pipeline

  • کوییز بخش دوم Section 2 Quiz

استخراج (Extract) Extract

  • سرفصل‌های این بخش What this section will cover

  • وارد کردن داده‌ها از داخل Foundry Importing Data from within Foundry

  • وارد کردن داده‌های عمومی به Foundry Import Public Data into Foundry

  • وارد کردن داده‌های خصوصی به Foundry Import Private Data into Foundry

  • کوییز بخش سوم Section 3 Quiz

تبدیل (Transform) Transform

  • سرفصل‌های این بخش What this section will cover

  • گزینه‌های تبدیل و مدیریت JSON Transformation Options and Handling JSON

  • درک و تحلیل geoJSON Making Sense of geoJSON

  • پیمایش خط لوله‌ها و وارد کردن توابع Navigating Pipelines and Importing Functions

  • ایجاد تبدیل‌های پایه: تقسیم‌ها و ستون‌های استاتیک Creating Basic Transforms : Splits and Static Columns

  • زنجیره‌سازی دستورات در یک تبدیل واحد Chaining Commands in a Single Transformation

  • ترکیب تبدیل‌ها با Regex و عملگرهای And و Or Combining Transformations with Regex, Ands and Ors

  • ترکیب خروجی‌ها برای ایجاد ستون نهایی اعتبار‌سنجی Combining our Outputs to a Final Validity Column

  • بررسی Joins و Unions Exploring Joins and Unions

  • استفاده از توابع در خط لوله‌ها Using Functions in Pipelines

  • کوییز بخش چهارم Section 4 Quiz

بارگذاری (Load) Load

  • سرفصل‌های این بخش What this section will cover

  • ایجاد مجموعه داده با حالت نوشتن مناسب Creating a Dataset with the Right Write Mode

  • مدیریت خطا و کیفیت داده‌ها Error Handling and Data Quality

  • استفاده از زمان‌بندی‌های استقرار Using deployment schedules

  • درک تست‌های واحد (Unit Tests) Making sense of Unit tests

  • تضمین قابلیت استفاده از داده‌ها از طریق Datasets Ensuring Usability of your Data via Datasets

  • بررسی متادیتای سطح مجموعه داده Exploring Dataset-level Metadata

  • درک دسترسی و امنیت مجموعه داده‌ها Understanding Dataset Access and Security

  • استفاده از شاخه‌ها (Branches) در Pipeline Builder Using Branches in Pipeline Builder

  • کوییز بخش پنجم Section 5 Quiz

جمع‌بندی Conclusion

  • جمع‌بندی نهایی Conclusion

نمایش نظرات

آموزش بوت‌کمپ خط لوله‌های داده و مجموعه داده‌های Palantir Foundry
جزییات دوره
2 hours
28
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
132
4.2 از 5
ندارد
دارد
دارد
Emma Saunders
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Emma Saunders Emma Saunders

مشاور داده متخصص در تجسم داده ها در وب Emma Saunders یک مشاور مستقل داده در زمینه تجسم داده در وب است. وی در کارهای خود از HTML ، CSS ، D3 ، DC ، Crossfilter ، JavaScript ، PHP ، SQL و VBA استفاده می کند ، اما به اندازه یک رمزگذار یک طراح است. اما از یافتن داستان در داده ها لذت می برد و بهترین روش برای برقراری ارتباط با این داستان را می آموزد. اما ، فارغ التحصیل دانشگاه آکسفورد ، 15 سال تجربه کسب و کار دارد ، از طرح فارغ التحصیلان شل شروع می کند و به Credit Suisse ، تنظیم کننده مالی انگلیس می رود. ، و حتی طلسم مختصری را به عنوان روزنامه نگار در Financial Times در لندن کار می کرد. او هرگز در بخش فناوری اطلاعات کار نکرده است ، اما مهارت های کدنویسی را به خود آموخته است زیرا این مهارت ها از شغل به شغل دیگری مفید شده اند. او همچنین از سال 2006 برای چند سال تجارت آنلاین خود را اداره کرد و یک سایت تجارت الکترونیکی را برای آن سرمایه گذاری کدگذاری کرد. وی از طریق http://vizdata.co.uk به صورت حرفه ای در دسترس است.