آموزش یکپارچه سازی داده ها و ETL با Talend Open Studio Zero to Hero

Data Integration & ETL with Talend Open Studio Zero to Hero

نکته: آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
نمونه ویدیوها:
توضیحات دوره: به داده های خود ارزش بیافزایید - با Talend Open Studio for Data Integration، ETL، Data Warehousing، Data Migration، BI منابع داده خود را مانند فایل ها، پایگاه های داده، XML، خدمات وب، Google Drive و فرمت های دیگر را به یکدیگر متصل می کند. مثال‌های عملی و سناریوهای جامع بر مهم‌ترین تبدیل‌ها مانند نگاشت، اتصال، تجمیع و مرتب‌سازی فرآیندها به واحدهای بزرگ‌تر با استفاده از preJobs، postJobs، متغیر و سلسله مراتب تسلط دارند. رم و زمان اجرا فعلی جاوا

داده ها هر کجا. همه در محیط خودشان خوب رفتار می کنند. اما چه کسی در واقع به آنها اجازه می دهد با یکدیگر صحبت کنند؟ شما انجام می دهید. با یکپارچه سازی داده ها با ETL و دانش جدید خود به یک دانشمند داده تبدیل شوید و ارزش اضافه کنید!

Talend Open Studio یک راه حل باز و انعطاف پذیر برای یکپارچه سازی داده ها است. شما فرآیندهای خود را با یک ویرایشگر گرافیکی می‌سازید و بیش از 600 جزء انعطاف‌پذیری را فراهم می‌کند.

هر بخش دارای یک مثال عملی است و شما این مطالب کامل را در ابتدای دوره دریافت خواهید کرد. بنابراین می توانید نه تنها هر بخش را مشاهده کنید، بلکه آن را با راه حل خود مقایسه کنید. سناریوهای عملی گسترده ای نیز وجود دارد. بنابراین شما به خوبی برای تمرین مجهز خواهید شد!

بزرگترین موضوعاتی که می توانید انتظار داشته باشید چیست؟

  • نصب بر روی سیستم عامل های مختلف (ویندوز، لینوکس، مک)

  • درک و استفاده از انواع داده های مهم

  • خواندن و نوشتن از پایگاه داده

  • فرمت‌های فایل مختلف را پردازش کنید، مانند Excel، XML، JSON، محدود، موقعیتی

  • فرداده ایجاد و استفاده کنید

  • طرحواره بسازید

  • از میانبرهای صفحه کلید مفید استفاده کنید

  • بازیابی اطلاعات از WebServices/REST

  • به GoogleDrive متصل شوید و داده‌ها را واکشی کنید

  • استفاده از تکرار و حلقه ها

  • جریان داده ها را به تکرار تبدیل کنید

  • سلسله مراتب شغلی را بسازید و درک کنید

  • همه تبدیل‌های اصلی: نقشه، پیوستن، عادی‌سازی، محوری و جمع‌آوری داده‌ها

  • XML و JSON را ایجاد و استخراج کنید

  • از عبارات منظم استفاده کنید

  • سازمان‌دهی اجزاء در فرآیندها

  • بررسی و بهبود کیفیت داده

  • از تطبیق فازی و تطبیق فاصله

    استفاده کنید
  • از متغیرها برای محیط های مختلف استفاده کنید

  • اعتبار سنجی طرحواره را انجام دهید

  • داده‌های رد را جداگانه مدیریت کنید

  • به سرعت خطاها را پیدا و رفع کنید

  • گزارش‌های گزارش معنادار بنویسید

  • اخطارها و سقط‌ها را لحاظ کنید و به آنها واکنش نشان دهید

  • سلسله مراتب شغلی ایجاد کنید و داده ها را بین سطوح مختلف ارسال کنید

  • مفروضات خود را اجرا و آزمایش کنید

  • پروژه خود را برای ورود به سیستم، نسخه بندی و بارگیری زمینه پیکربندی کنید

  • بهترین شیوه ها را بیاموزید و خود را ایجاد کنید

  • موارد سند و مستندات ایجاد شده است

منتظر چه هستید؟ شما را در دوره می بینیم!


سرفصل ها و درس ها

بررسی اجمالی دوره Course Overview

  • بررسی اجمالی دوره Course Overview

بررسی اجمالی دوره Course Overview

  • بررسی اجمالی دوره Course Overview

  • نکات Udemy Udemy Tipps

  • نکات Udemy Udemy Tipps

چرا یکپارچه سازی داده ها؟ Why Data Integration?

چرا یکپارچه سازی داده ها؟ Why Data Integration?

  • چرا یکپارچه سازی داده ها؟ Why Data Integration?

  • چرا یکپارچه سازی داده ها؟ Why Data Integration?

  • آزمون یکپارچه سازی داده ها Data Integration Quiz

  • آزمون یکپارچه سازی داده ها Data Integration Quiz

تنظیم برای دوره Setup for the course

  • مقدمه Intro

  • Language of Talend Open Studio Language of Talend Open Studio

  • دانلود فایل های دوره Download course files

  • پروژه دوره را بررسی کنید Explore the course project

تنظیم برای دوره Setup for the course

  • مقدمه Intro

  • نصب بر روی ویندوز، مک یا لینوکس Installation on Windows, Mac or Linux

  • نصب بر روی ویندوز، مک یا لینوکس Installation on Windows, Mac or Linux

  • Language of Talend Open Studio Language of Talend Open Studio

  • پروژه دوره واردات Import course project

  • پروژه دوره واردات Import course project

  • دانلود فایل های دوره Download course files

  • پروژه دوره را بررسی کنید Explore the course project

مثال "سلام دنیا". "Hello world" example

  • مقدمه Intro

مثال "سلام دنیا". "Hello world" example

  • مقدمه Intro

  • "سلام جهان" با tMsgBox "Hello world" with tMsgBox

  • "سلام جهان" با tMsgBox "Hello world" with tMsgBox

با رابط کاربری (UI) آشنا شوید Get to know the User Interface (UI)

  • مقدمه Intro

  • یاران مفید Useful helpers

  • برگه من کجاست؟ Where is my tab?

با رابط کاربری (UI) آشنا شوید Get to know the User Interface (UI)

  • مقدمه Intro

  • با رابط کاربری آشنا شوید Get to know the user interface

  • با رابط کاربری آشنا شوید Get to know the user interface

  • یاران مفید Useful helpers

  • کتابخانه های خارجی را نصب کنید Install external libraries

  • کتابخانه های خارجی را نصب کنید Install external libraries

  • خطاها را پیدا کنید Find errors

  • خطاها را پیدا کنید Find errors

  • برگه من کجاست؟ Where is my tab?

اولین شغل ETL شما Your first ETL job

  • مقدمه Intro

  • اولین کار شما Your first job

  • دریافت راهنمای مؤلفه Get Component Help

اولین شغل ETL شما Your first ETL job

  • مقدمه Intro

  • اولین کار شما Your first job

  • دریافت راهنمای مؤلفه Get Component Help

مبانی پردازش فایل File Processing Basics

  • مقدمه Intro

  • خواندن فایل ها Read files

  • فایل ها را بنویسید Write files

  • فهرست محتویات پوشه List folder contents

  • سناریوی پردازش فایل File processing scenario

مبانی پردازش فایل File Processing Basics

  • مقدمه Intro

  • خواندن فایل ها Read files

  • فایل ها را بنویسید Write files

  • فهرست محتویات پوشه List folder contents

  • سناریوی پردازش فایل File processing scenario

خواص در Talend را درک کنید Understand properties in Talend

  • مقدمه Intro

  • طرحواره Schema

  • انواع داده ها Data types

  • مسابقه خصوصیات برای Talend Open Studio Properties quiz for Talend Open Studio

خواص در Talend را درک کنید Understand properties in Talend

  • مقدمه Intro

  • BuiltIn در مقابل مخزن BuiltIn vs. Repository

  • BuiltIn در مقابل مخزن BuiltIn vs. Repository

  • طرحواره Schema

  • انواع داده ها Data types

  • انواع اتصال Connection types

  • انواع اتصال Connection types

  • Ctrl + Spacebar Ctrl + Spacebar

  • Ctrl + Spacebar Ctrl + Spacebar

  • مسابقه خصوصیات برای Talend Open Studio Properties quiz for Talend Open Studio

پایگاه داده های رابطه ای فرآیندی Process relational databases

  • مقدمه Intro

  • به یک پایگاه داده متصل شوید Connect to a database

  • تکرار روی محتویات پایگاه داده Iterate over database contents

  • نمایش لیست جدول Show table list

پایگاه داده های رابطه ای فرآیندی Process relational databases

  • مقدمه Intro

  • پایگاه داده شما Your database

  • پایگاه داده شما Your database

  • به یک پایگاه داده متصل شوید Connect to a database

  • در یک پایگاه داده بنویسید Write to a database

  • در یک پایگاه داده بنویسید Write to a database

  • از پایگاه داده بخوانید Read from a database

  • از پایگاه داده بخوانید Read from a database

  • تکرار روی محتویات پایگاه داده Iterate over database contents

  • سناریوی پردازش پایگاه داده Database processing Scenario

  • سناریوی پردازش پایگاه داده Database processing Scenario

  • نمایش لیست جدول Show table list

پردازش فرمت های دیگر: Cloud، JSON، REST، … Process other formats: Cloud, JSON, REST, …

  • مقدمه Intro

  • سرویس REST را پرس و جو کنید Query REST service

  • دانلود فایل File downloads

  • فیدهای RSS را بخوانید Read RSS feeds

  • آزمون منابع داده Data Sources Quiz

پردازش فرمت های دیگر: Cloud، JSON، REST، … Process other formats: Cloud, JSON, REST, …

  • مقدمه Intro

  • JSON را پردازش کنید Process JSON

  • JSON را پردازش کنید Process JSON

  • XML را پردازش کنید Process XML

  • XML را پردازش کنید Process XML

  • دسترسی به گوگل درایو Google Drive access

  • دسترسی به گوگل درایو Google Drive access

  • از Google Cloud Storage استفاده کنید Use Google Cloud Storage

  • از Google Cloud Storage استفاده کنید Use Google Cloud Storage

  • سرویس REST را پرس و جو کنید Query REST service

  • دانلود فایل File downloads

  • فیدهای RSS را بخوانید Read RSS feeds

  • آزمون منابع داده Data Sources Quiz

از متغیرها در مشاغل استفاده کنید Use variables in jobs

  • مقدمه Intro

  • ایجاد محیط برای متغیرها Create environments for variables

  • انواع داده ها در زمینه Data types in context

  • زمینه مرکزی Central context

  • زمینه ای برای ابرداده ایجاد کنید Create context for metadata

  • متن را بنویسید و بارگذاری کنید Write and load context

  • متن را به طور ضمنی بارگیری کنید Load context implicitly

  • متغیرهای جهانی Global variables

  • آزمون متغیرها Variables Quiz

از متغیرها در مشاغل استفاده کنید Use variables in jobs

  • مقدمه Intro

  • ایجاد متغیرهای زمینه Create context variables

  • ایجاد متغیرهای زمینه Create context variables

  • ایجاد محیط برای متغیرها Create environments for variables

  • انواع داده ها در زمینه Data types in context

  • زمینه مرکزی Central context

  • زمینه ای برای ابرداده ایجاد کنید Create context for metadata

  • متن را بنویسید و بارگذاری کنید Write and load context

  • متن را به طور ضمنی بارگیری کنید Load context implicitly

  • متغیرهای جهانی Global variables

  • آزمون متغیرها Variables Quiz

  • بارگذاری متغیرهای خارجی Load external variables

  • بارگذاری متغیرهای خارجی Load external variables

اجزای تبدیل و استفاده Transformation components & usage

  • فیلتر کردن داده ها Filter data

  • مرتب سازی داده ها Sort data

  • داده های انبوه Aggregate data

  • نقشه برداری با Join Mapping with Join

  • نقشه برداری با فیلتر Mapping with filter

  • نقشه برداری با تبدیل Mapping with transformation

  • استخراج فیلد: JSON Field extraction: JSON

  • استخراج میدانی: Outro Field extraction: Outro

  • داده های نمونه تولید کنید Generate sample data

  • داده های محوری Pivot data

  • جمع آوری داده های فروش Aggregate sales data

اجزای تبدیل و استفاده Transformation components & usage

  • مقدمه Intro

  • فیلتر کردن داده ها Filter data

  • مرتب سازی داده ها Sort data

  • داده های انبوه Aggregate data

  • تبدیل انواع داده ها Convert data types

  • تبدیل انواع داده ها Convert data types

  • تقسیم داده ها Split data

  • تقسیم داده ها Split data

  • غیر عادی سازی De-Normalization

  • غیر عادی سازی De-Normalization

  • اتصالات ساده Simple joins

  • اتصالات ساده Simple joins

  • Sakila را نصب کنید Install Sakila

  • Sakila را نصب کنید Install Sakila

  • نقشه برداری با Join Mapping with Join

  • نقشه برداری با فیلتر Mapping with filter

  • نقشه برداری با تبدیل Mapping with transformation

  • استخراج میدانی: مقدمه Field extraction: Intro

  • استخراج میدانی: مقدمه Field extraction: Intro

  • استخراج فیلد: JSON Field extraction: JSON

  • استخراج میدانی: XML Field extraction: XML

  • استخراج میدانی: XML Field extraction: XML

  • استخراج میدانی: موقعیتی Field extraction: Positional

  • استخراج میدانی: موقعیتی Field extraction: Positional

  • استخراج میدانی: محدود شده است Field extraction: Delimited

  • استخراج میدانی: محدود شده است Field extraction: Delimited

  • استخراج میدانی: Regex Field extraction: Regex

  • استخراج میدانی: Regex Field extraction: Regex

  • استخراج میدانی: Outro Field extraction: Outro

  • فیلدهای XML و JSON را ایجاد کنید Generate XML and JSON fields

  • فیلدهای XML و JSON را ایجاد کنید Generate XML and JSON fields

  • داده های نمونه تولید کنید Generate sample data

  • داده های محوری Pivot data

  • آزمون تحولات Transformations Quiz

  • آزمون تحولات Transformations Quiz

  • جمع آوری داده های فروش Aggregate sales data

اجزای کیفیت داده Data quality components

  • مقدمه Intro

  • تعویض انجام دهید Make substitutions

  • کلید افزونگی Redundancy key

  • داده های آدرس را بررسی کنید Check address data

اجزای کیفیت داده Data quality components

  • مقدمه Intro

  • موارد تکراری را حذف کنید Remove duplicates

  • موارد تکراری را حذف کنید Remove duplicates

  • فواصل مسابقه Match intervals

  • فواصل مسابقه Match intervals

  • تعویض انجام دهید Make substitutions

  • بررسی طرحواره Schema checking

  • بررسی طرحواره Schema checking

  • کلید افزونگی Redundancy key

  • تطبیق فازی Fuzzy matching

  • تطبیق فازی Fuzzy matching

  • داده های آدرس را بررسی کنید Check address data

عملیات مدیریت فایل File Management operations

  • مقدمه Intro

  • عملیات اساسی Basic operations

  • مقایسه فایل File comparison

  • ویژگی های فایل File properties

  • فشرده سازی فایل File compression

  • فایل های موقت Temporary files

  • داده ها را با یک فایل موقت بارگیری کنید Load data with a temp file

عملیات مدیریت فایل File Management operations

  • مقدمه Intro

  • عملیات اساسی Basic operations

  • مقایسه فایل File comparison

  • ویژگی های فایل File properties

  • لیست های فایل File lists

  • لیست های فایل File lists

  • فشرده سازی فایل File compression

  • فایل های موقت Temporary files

  • داده ها را با یک فایل موقت بارگیری کنید Load data with a temp file

ارکستراسیون شغلی مانند سلسله مراتب و مشاغل فرعی Job orchestration like hierarchies and subjobs

  • مقدمه Intro

  • تکرار کنید و متحد شوید Replicate and unite

  • جریان داده به تکرار و بالعکس Data flow to iteration & vice versa

  • حلقه ها Loops

  • تعامل سیستم System interaction

  • سلسله مراتب شغلی Job hierarchies

  • محرک های شرطی Conditional Triggers

  • مقادیر پویا را به یک شغل کودک منتقل کنید Pass dynamic values to a child job

ارکستراسیون شغلی مانند سلسله مراتب و مشاغل فرعی Job orchestration like hierarchies and subjobs

  • مقدمه Intro

  • قبل و بعد از کار Pre- & Post-Job

  • قبل و بعد از کار Pre- & Post-Job

  • جعبه پیام MessageBox

  • جعبه پیام MessageBox

  • تکرار کنید و متحد شوید Replicate and unite

  • جریان داده به تکرار و بالعکس Data flow to iteration & vice versa

  • حلقه ها Loops

  • صبر کنید و اندازه بگیرید Wait and measure

  • صبر کنید و اندازه بگیرید Wait and measure

  • تعامل سیستم System interaction

  • سلسله مراتب شغلی Job hierarchies

  • محرک های شغلی Subjob Triggers

  • محرک های شغلی Subjob Triggers

  • محرک های مؤلفه Component Triggers

  • محرک های مؤلفه Component Triggers

  • محرک های شرطی Conditional Triggers

  • آزمون ارکستراسیون Orchestration Quiz

  • آزمون ارکستراسیون Orchestration Quiz

  • مقادیر پویا را به یک شغل کودک منتقل کنید Pass dynamic values to a child job

پیکربندی و اجزای گزارش Logging configuration and components

  • مقدمه Intro

  • ادعاهای آزمایشی Test assertions

  • خطاها و اخطارهای ثبت نام Log errors & warnings

  • اجرای لاگ Log executions

  • ثبت مشاغل Log jobs

  • کارها را بهتر ثبت کنید Log jobs better

  • ثبت پروژه ها Log projects

  • آزمون ورود به سیستم Logging Quiz

پیکربندی و اجزای گزارش Logging configuration and components

  • مقدمه Intro

  • اشکال زدایی داده ها Debug data

  • اشکال زدایی داده ها Debug data

  • ادعاهای آزمایشی Test assertions

  • حجم گزارش Log volumes

  • حجم گزارش Log volumes

  • خطاها و اخطارهای ثبت نام Log errors & warnings

  • اجرای لاگ Log executions

  • ثبت مشاغل Log jobs

  • کارها را بهتر ثبت کنید Log jobs better

  • ثبت پروژه ها Log projects

  • آزمون ورود به سیستم Logging Quiz

مستندات و بهترین شیوه ها Documentation & Best Practices

  • مقدمه Intro

  • از بهترین شیوه ها استفاده کنید Use best practices

مستندات و بهترین شیوه ها Documentation & Best Practices

  • مقدمه Intro

  • از بهترین شیوه ها استفاده کنید Use best practices

  • ایجاد مستندات Create documentation

  • ایجاد مستندات Create documentation

استقرار شغل در خارج از Talend Open Studio Job Deployment outside Talend Open Studio

  • مقدمه Intro

  • کد کار را ایجاد و اجرا کنید Create and execute job code

  • تغییر پارامترها Change parameters

  • استقرار با پارامترهای زمینه Deployment with context parameters

استقرار شغل در خارج از Talend Open Studio Job Deployment outside Talend Open Studio

  • مقدمه Intro

  • کد کار را ایجاد و اجرا کنید Create and execute job code

  • تغییر پارامترها Change parameters

  • استقرار با پارامترهای زمینه Deployment with context parameters

مدیریت پروژه Project Handling

  • مقدمه Intro

  • ایجاد و حذف پروژه ها Create and delete projects

  • تنظیمات پروژه Project Settings

مدیریت پروژه Project Handling

  • مقدمه Intro

  • ایجاد و حذف پروژه ها Create and delete projects

  • صادرات و واردات Export and Import

  • صادرات و واردات Export and Import

  • تنظیمات پروژه Project Settings

موارد استفاده Use Cases

  • مقدمه Intro

موارد استفاده Use Cases

  • مقدمه Intro

  • مقدمه Intro

  • یک فایل اکسل بنویسید Write a Excel file

  • یک فایل اکسل بنویسید Write a Excel file

  • XML چند طرحی را بخوانید Read a multi-schema XML

  • XML چند طرحی را بخوانید Read a multi-schema XML

  • به یک فایل متنی اضافه کنید Append to a text file

  • به یک فایل متنی اضافه کنید Append to a text file

  • همگام سازی جداول با استفاده از Talend Sync Tables Using Talend

  • همگام سازی جداول با استفاده از Talend Sync Tables Using Talend

نتیجه گیری دوره Course conclusion

نتیجه گیری دوره Course conclusion

  • تبریک می گویم Congratulations

  • تبریک می گویم Congratulations

مواد اضافی Extra Material

  • چت شیت Talend Talend Cheatsheet

  • یه تست کوچیک A small test

  • یک آزمون بزرگ A big test

  • کار قالب Template job

مواد اضافی Extra Material

  • چت شیت Talend Talend Cheatsheet

  • یه تست کوچیک A small test

  • یک آزمون بزرگ A big test

  • کار قالب Template job

  • سخنرانی پاداش Bonus Lecture

  • سخنرانی پاداش Bonus Lecture

نمایش نظرات

آموزش یکپارچه سازی داده ها و ETL با Talend Open Studio Zero to Hero
جزییات دوره
8 hours
133
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
5,483
4.4 از 5
دارد
دارد
دارد
جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

Samuel Lenk  Certified Talend Java SQL Data Integration ETL Developer Samuel Lenk Certified Talend Java SQL Data Integration ETL Developer

بیش از 6000 دانش‌آموز # 113+ کشور # آدم‌های بزرگ داده (-;