ساخت خط لولههای دادهای قابل اعتماد و با ساختار مناسب، قلب تپنده کار موثر در Palantir Foundry است. در این دوره عملی، شما یاد میگیرید چگونه دادههای خام را از منابع متنوع دریافت کرده، آنها را با اطمینان تبدیل کنید و مجموعه دادههای پاک و قابل اعتمادی را منتشر کنید که برای کاربردهای واقعی آماده باشند.
ما با بررسی رابط کاربری Foundry Pipelines شروع میکنیم تا بتوانید بهراحتی پیمایش کنید و متوجه شوید که خط لولهها، مجموعه دادهها و تبدیلها چگونه در کنار هم قرار میگیرند. شما یاد میگیرید چگونه دادهها را از داخل Foundry وارد کنید، فایلهای خصوصی را آپلود نمایید و مجموعه دادههای عمومی را اضافه کنید و بدین ترتیب پایهای محکم برای کار با انواع ورودیها ایجاد کنید.
سپس، به سراغ تبدیل دادهها میرویم. شما با JSON و geoJSON کار خواهید کرد، مشکلات استخراج را عیبیابی میکنید، دادهها را با استفاده از تقسیمها (Splits) و ستونهای استاتیک بازسازی میکنید، منطقها را با Regex و عبارات شرطی ترکیب کرده و خط لولههای خود را با Joinها، Unionها و توابع داخلی غنی میکنید. در این مسیر، یک مدل ذهنی قوی از نحوه تکامل شمای دادهها و زنجیره تبدیلها به دست خواهید آورد.
در مرحله بعد، نحوه بارگذاری و عملیاتی کردن کارهای خود را میآموزید. ما حالتهای نوشتن، زمانبندی، مدیریت خطا، انتظارات دادهای (Data Expectations) و تستهای واحد (Unit Tests) را پوشش میدهیم تا بتوانید قبل از انتشار، از کیفیت دادهها مطمئن شوید. همچنین یاد میگیرید که چگونه با افزودن متادیتا، مدیریت دسترسیها و اعمال حاکمیت داده (Governance)، قابلیت استفاده از مجموعه دادهها را بهبود ببخشید.
در نهایت، به مبحث Branching (شاخهبندی) میپردازیم تا به شما کمک کنیم تغییرات را بهصورت ایمن در یک محیط کنترلشده توسعه دهید.
در پایان این دوره، شما قادر خواهید بود با اطمینان کامل، خط لولههای دادهای جامع را در Foundry بسازید، تست کنید و منتشر نمایید و در این مسیر با همکاران خود همکاری کنید.
Emma Saunders
مشاور داده متخصص در تجسم داده ها در وب Emma Saunders یک مشاور مستقل داده در زمینه تجسم داده در وب است. وی در کارهای خود از HTML ، CSS ، D3 ، DC ، Crossfilter ، JavaScript ، PHP ، SQL و VBA استفاده می کند ، اما به اندازه یک رمزگذار یک طراح است. اما از یافتن داستان در داده ها لذت می برد و بهترین روش برای برقراری ارتباط با این داستان را می آموزد. اما ، فارغ التحصیل دانشگاه آکسفورد ، 15 سال تجربه کسب و کار دارد ، از طرح فارغ التحصیلان شل شروع می کند و به Credit Suisse ، تنظیم کننده مالی انگلیس می رود. ، و حتی طلسم مختصری را به عنوان روزنامه نگار در Financial Times در لندن کار می کرد. او هرگز در بخش فناوری اطلاعات کار نکرده است ، اما مهارت های کدنویسی را به خود آموخته است زیرا این مهارت ها از شغل به شغل دیگری مفید شده اند. او همچنین از سال 2006 برای چند سال تجارت آنلاین خود را اداره کرد و یک سایت تجارت الکترونیکی را برای آن سرمایه گذاری کدگذاری کرد. وی از طریق http://vizdata.co.uk به صورت حرفه ای در دسترس است.
نمایش نظرات