کانال تلگرام پشتیبانی تلگرام شماره تماس پشتیبانی: 0930 395 3766
ورود ثبت نام

آموزش Mastering Sqoop: RDBMS to Hadoop Integration Master

دانلود Mastering Sqoop: RDBMS to Hadoop Integration Mastery

نکته: آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
نمونه ویدیوها:
توضیحات دوره: آموزش یکپارچه‌سازی داده‌ها به ملزومات Sqoop و تکنیک‌های پیشرفته برای ادغام یکپارچه RDBMS به Hadoop. درک اصول اولیه Sqoop و نقش آن در یکپارچه سازی داده ها بین RDBMS و Hadoop. پیکربندی گزینه های Sqoop برای سناریوهای مختلف انتقال داده. اجرای دستورات Sqoop برای وارد کردن داده ها از MySQL به HDFS. استفاده از واردات افزایشی و افزودن ویژگی‌ها در Sqoop برای همگام‌سازی کارآمد داده‌ها. انجام وظایف پیچیده واردات داده با استفاده از دستورات و کارهای Sqoop. ادغام Sqoop با Hive برای تجزیه و تحلیل و پردازش داده ها. مدیریت مقادیر NULL، فرمت های داده و تکنیک های فشرده سازی در Sqoop. اجرای پروژه های دنیای واقعی مانند تجزیه و تحلیل داده های منابع انسانی با استفاده از Sqoop. استفاده از Sqoop در ارتباط با سایر ابزارهای اکوسیستم Hadoop مانند Hive، Pig و MapReduce. عیب یابی مشکلات رایج و بهینه سازی عملکرد Sqoop برای انتقال داده در مقیاس بزرگ. پیش نیازها: درک اولیه SQL و پایگاه داده های رابطه ای. آشنایی با اجزای اکوسیستم Hadoop مانند HDFS و MapReduce. تسلط به رابط خط فرمان لینوکس. آشنایی با مفاهیم اولیه برنامه نویسی ترجیحا به زبان جاوا. آشنایی با فرمت های داده مانند CSV، JSON و XML. دسترسی به کامپیوتری که Hadoop نصب شده است (ترجیحاً توزیع Hadoop مانند Cloudera یا Hortonworks) برای تمرینات عملی.

معرفی دوره:

به دوره جامع ادغام داده های Sqoop و Hadoop خوش آمدید! این دوره به منظور تجهیز شما به مهارت ها و دانش ضروری مورد نیاز برای انتقال ماهرانه داده ها بین Hadoop و پایگاه های داده رابطه ای با استفاده از Sqoop طراحی شده است. چه در یکپارچه سازی داده ها تازه کار باشید و چه به دنبال عمیق تر کردن درک خود باشید، این دوره شما را از طریق عملکردهای Sqoop، از واردات اولیه تا برنامه های کاربردی پروژه پیشرفته، راهنمایی می کند. شما با دستورات Sqoop تجربه عملی کسب خواهید کرد، بهترین روش‌ها برای انتقال داده‌های کارآمد را یاد می‌گیرید، و پروژه‌های دنیای واقعی را برای تقویت یادگیری خود کاوش می‌کنید.

بخش 1: Sqoop - مبتدیان

این بخش درک اساسی از Sqoop را ارائه می‌کند، ابزاری حیاتی در اکوسیستم Hadoop برای انتقال مؤثر داده‌ها بین Hadoop و پایگاه‌های داده رابطه‌ای. مفاهیم ضروری مانند گزینه‌های Sqoop، وارد کردن جدول بدون کلیدهای اصلی و پیکربندی‌های فهرست هدف را پوشش می‌دهد.

با تسلط بر مبانی ارائه‌شده در این بخش، زبان‌آموزان در استفاده از Sqoop برای انتقال داده‌های ساده مهارت کسب می‌کنند و گزینه‌ها و پیکربندی‌های اساسی آن را درک می‌کنند و زمینه‌ای محکم برای کارهای پیشرفته‌تر یکپارچه‌سازی داده‌ها ایجاد می‌کنند.

بخش 2: Sqoop - Intermediate

با تکیه بر مبانی بخش قبل، این سطح متوسط ​​به قابلیت‌های Sqoop عمیق‌تر می‌پردازد. این برنامه موضوعات پیشرفته ای مانند واردات افزایشی داده، ادغام با MySQL، و اجرای دستورات Sqoop برای موارد استفاده خاص مانند افزودن داده ها و آزمایش را بررسی می کند.

از طریق کاوش در عملکردهای میانی Sqoop، دانش آموزان توانایی خود را برای مدیریت سناریوهای پیچیده تر انتقال داده بین Hadoop و منابع داده خارجی افزایش خواهند داد. آن‌ها تکنیک‌هایی را برای مدیریت کارآمد داده‌ها یاد می‌گیرند و بینش‌های عملی در مورد ادغام Sqoop با سایر اجزای اکوسیستم Hadoop به دست خواهند آورد.

بخش 3: پروژه Sqoop - تجزیه و تحلیل داده های منابع انسانی

این بخش با تمرکز بر کاربرد عملی، فراگیران را از طریق یک پروژه جامع تجزیه و تحلیل داده های منابع انسانی با استفاده از Sqoop راهنمایی می کند. راه‌اندازی محیط‌های داده، مدیریت پارامترهای حساس، و اجرای دستورات Sqoop برای وارد کردن، تجزیه و تحلیل و پیوستن به زیرمجموعه‌های داده HR برای بینش در مورد روند حقوق و دستمزد و ریزش کارکنان را پوشش می‌دهد.

با تکمیل این بخش، دانش‌آموزان Sqoop را برای سناریوهای تحلیل منابع انسانی در دنیای واقعی، تسلط بر مهارت‌های دستکاری داده‌ها، اتوماسیون کار و عملیات پیچیده SQL در چارچوب Hadoop اعمال خواهند کرد. آنها به خوبی برای مقابله با چالش های یکپارچه سازی داده های مشابه در تنظیمات حرفه ای آماده خواهند شد.

بخش 4: پروژه Hadoop - تجزیه و تحلیل رسانه های اجتماعی با استفاده از HIVE/PIG/MapReduce/Sqoop

این بخش پیشرفته بر استفاده از چندین ابزار اکوسیستم Hadoop-Sqoop، Hive، Pig و MapReduce- برای تجزیه و تحلیل عمیق رسانه‌های اجتماعی تمرکز دارد. این شامل وارد کردن داده ها از پایگاه داده های رابطه ای با استفاده از Sqoop، پردازش فایل های XML با MapReduce و Pig، و انجام تجزیه و تحلیل های پیچیده برای درک رفتار کاربر و عملکرد کتاب می شود.

از طریق پروژه‌های عملی و مطالعات موردی در تحلیل رسانه‌های اجتماعی، دانش‌آموزان در ادغام اجزای مختلف Hadoop برای پردازش و تجزیه و تحلیل داده‌های جامع مهارت کسب می‌کنند. آن‌ها مهارت‌های عملی را در مدیریت کلان داده‌ها توسعه خواهند داد و برای استفاده از این تکنیک‌ها برای تجزیه و تحلیل مجموعه‌های داده متنوع در سناریوهای دنیای واقعی مجهز خواهند شد.

نتیجه‌گیری دوره:

تکمیل دوره ادغام داده های Sqoop و Hadoop را تبریک می گوییم! در طول این سفر، شما مهارت های اساسی و پیشرفته لازم برای مدیریت موثر انتقال داده ها بین Hadoop و پایگاه های داده رابطه ای با استفاده از Sqoop را کسب کرده اید. از درک گزینه‌های فرمان Sqoop گرفته تا استفاده از آن‌ها در پروژه‌های عملی مانند تجزیه و تحلیل منابع انسانی و تجزیه و تحلیل رسانه‌های اجتماعی، بینش ارزشمندی در مورد قدرت ابزارهای اکوسیستم Hadoop به دست آورده‌اید. با داشتن این دانش، اکنون آماده هستید تا با چالش های پیچیده یکپارچه سازی داده ها مقابله کنید و از قابلیت های Sqoop برای ایجاد بینش و نوآوری در پروژه های مبتنی بر داده خود استفاده کنید.

سرفصل ها و درس ها

Sqoop - مبتدیان Sqoop - Beginners

  • مقدمه ای بر اسکوپ Introduction to Scoop

  • نمای کلی اسکوپ با نمودار Scoop Overview with Diagram

  • مبانی گزینه Sqoop Sqoop Option Basics

  • توضیح گزینه Option Explanation

  • Sqoop Table Sub Option-M Sqoop Table Sub Option-M

  • میز Sqoop بدون کلید اصلی Sqoop Table With no Primary Key

  • Sqoop Target DIR Sqoop Target DIR

  • Sqoop Where Option Sqoop where Option

  • گزینه ستون Sqoop با نمای کلی Sqoop Column Option With Full Overview

  • نصب و راه اندازی Installation

  • نصب ادامه دارد Installation Continue

Sqoop - متوسط Sqoop - Intermediate

  • معرفی Sqoop Intro to Sqoop

  • قابلیت اتصال MYSQL MYSQL Connectivity

  • MYSQL به HDFS MYSQL to HDFS

  • مسیر پیش فرض MYSQL به HDFS MYSQL to HDFS Default Path

  • داده های MySQL به فهرست هدف MySQL Data to Target Directory

  • بند کجا Where Clause

  • افزایشی Append Sqoop Incremental Append Sqoop

  • Incremental Append Sqoop Continue Incremental Append Sqoop Continue

  • موارد تست Test Cases

  • Sqoop Hive Import Case Test Sqoop Hive Import Test Case

  • Sqoop Hive Import Test Case Continue Sqoop Hive Import Test Case Continue

  • Sqoop Export Test Case Sqoop Export Test Case

  • Sqoop Export Test Case ادامه دارد Sqoop Export Test Case Continue

پروژه Sqoop - تجزیه و تحلیل داده های منابع انسانی Sqoop Project - HR Data Analytics

  • مقدمه ای بر پروژه Introduction to Project

  • تنظیم داده ها Data Set Up

  • پارامتر فایل رمز عبور Password File Parameter

  • Basic Sqoop Cammand قسمت 1 Basic Sqoop Cammand Part 1

  • Basic Sqoop Cammand قسمت 2 Basic Sqoop Cammand Part 2

  • Basic Sqoop Cammand قسمت 3 Basic Sqoop Cammand Part 3

  • Basic Sqoop Cammand قسمت 4 Basic Sqoop Cammand Part 4

  • واردات زیر مجموعه تحلیل حقوق و دستمزد Salary Analysis Subset Import

  • ادامه واردات زیر مجموعه تجزیه و تحلیل حقوق Salary Analysis Subset Import Continue

  • مجتمع تحلیل ساییدگی JOIN Attrition Analysis Complex JOIN

  • Sqoop Jobs Sqoop Jobs

  • Sqoop Jobs ادامه دارد Sqoop Jobs Continue

  • مدیریت ارزش NULL NULL Value Handling

  • فرمت های داده و فشرده سازی Data Formats and Compression

پروژه Hadoop - تجزیه و تحلیل رسانه های اجتماعی با استفاده از HIVE/PIG/MapReduce/Sqoop Project on Hadoop - Social Media Analysis using HIVE/PIG/MapReduce/Sqoop

  • مقدمه ای بر صنعت رسانه های اجتماعی Introduction to Social Media Industry

  • وب سایت علامت گذاری کتاب Book Marking Website

  • سایت علامت گذاری کتاب ادامه دارد Book Marking Website Continues

  • درک Sqoop Understanding Sqoop

  • دریافت داده از RDMS به HDFS Get Data from RDMS to HDFS

  • برنامه کاهش نقشه را برای پردازش فایل XML اجرا کنید Execute Map Reduce Program in order to Process XML File

  • تجزیه و تحلیل عملکرد کتاب با بررسی با استفاده از کد Analyze Book Performance By Reviews Using Code

  • تجزیه و تحلیل عملکرد کتاب با بررسی با استفاده از کد ادامه دارد Analyze Book Performance By Reviews Using Code Continues

  • تجزیه و تحلیل کتاب بر اساس مکان Analyse Book By Location

  • نمونه تجزیه و تحلیل کتاب بر اساس مکان Example of Analyse Book By Location

  • تحلیل کتابخوان در مقابل نویسنده Analyse Book Reader Against Author

  • نحوه پردازش فایل XML در PIG How to process XML File in PIG

  • نحوه پردازش فایل XML در PIG ادامه دارد How to process XML File in PIG Continues

  • تجزیه و تحلیل عملکرد کتاب در فایل XML در PIG Analyze Book Performance in XML File in PIG

  • اطلاعات بیشتر در مورد تجزیه و تحلیل عملکرد کتاب در فایل XML در PIG More on Analyze Book Performance in XML File in PIG

  • خروجی فایل XML Pig با استفاده از کتاب Pig XML File Output Using Book

  • خروجی فایل XML Pig با استفاده از مکان Pig XML File Output Using Location

  • خروجی فایل XML Pig با استفاده از موقعیت مکانی ادامه دارد Pig XML File Output Using Location Continues

  • درک مجموعه داده های پیچیده با استفاده از Hive Understanding Complex Data Set Using Hive

  • درک مجموعه داده های پیچیده با استفاده از Hive ادامه دارد Understanding Complex Data Set Using Hive Continues

  • ایجاد آرایه در Map Reduce با استفاده از Hive Create Array in Map Reduce Using Hive

  • مجموعه داده نوع علامت گذاری کتاب با استفاده از نوع پیچیده Book Marking Type Data Set Using Complex Type

  • خروجی مجموعه داده نوع علامت گذاری کتاب Output of Book Marking Type Data Set

آموزش Oh My Gouache: مقدمه ای بر نقاشی پرتره با گواش

آموزش Oh My Gouache: مقدمه ای بر نقاشی پرتره با گواش

Oh My Gouache: Introduction to Painting Portraits with Gouache

آموزش Cisco CCNP Enterprise ENCOR (350-401) آزمایشات تمرینی 2023

آموزش Cisco CCNP Enterprise ENCOR (350-401) آزمایشات تمرینی 2023

Cisco CCNP Enterprise ENCOR (350-401) Practice Tests 2023

آموزش سوالات آزمون تمرینی Microsoft Azure AZ-303

آموزش سوالات آزمون تمرینی Microsoft Azure AZ-303

Microsoft Azure AZ-303 Practice Exam Questions

نمایش نظرات

آموزش Mastering Sqoop: RDBMS to Hadoop Integration Master
جزییات دوره
8 hours
61
Udemy (یودمی) Udemy (یودمی)
(آخرین آپدیت)
1,039
4.9 از 5
ندارد
دارد
دارد
EDU CBA

https://donyad.com/d/4cabf2

جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

Google Chrome Browser

Internet Download Manager

Pot Player

Winrar

EDU CBA EDU CBA

مهارت های دنیای واقعی را بصورت آنلاین بیاموزید EDUCBA یک ارائه دهنده جهانی آموزش مبتنی بر مهارت است که نیازهای اعضا را در بیش از 100 کشور برطرف می کند. ما بزرگترین شرکت فناوری پیشرفته در آسیا با نمونه کارهای 5498+ دوره آنلاین ، 205+ مسیر یادگیری ، 150+ برنامه شغل محور (JOPs) و 50+ بسته دوره حرفه ای شغلی هستیم که توسط متخصصان برجسته صنعت آماده شده است. برنامه های آموزشی ما برنامه های مبتنی بر مهارت شغلی است که توسط صنعت در سراسر امور مالی ، فناوری ، تجارت ، طراحی ، داده و فناوری جدید و آینده مورد نیاز صنعت است.