لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش بیگ دیتا با هادوپ: کاربرد MapReduce، Pig و Hive
- آخرین آپدیت
دانلود Big Data with Hadoop: Apply MapReduce, Pig & Hive
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
در پایان این دوره، فراگیران قادر خواهند بود مجموعهدادههای واقعی سنسورها را تحلیل کنند، فایلهای JSON را پیشپردازش نمایند، عملیات Hadoop MapReduce را به کار بگیرند، جریانهای داده را با Apache Pig پیادهسازی کرده و پرسوجوهای مشابه SQL را با استفاده از Apache Hive اجرا کنند. آنها همچنین بینشهای مربوط به جمعیتشناسی، درآمد و شاخصهای اجتماعی را برای پشتیبانی از تصمیمگیریهای مبتنی بر شواهد تفسیر خواهند کرد.
این دوره پروژه-محور و عملی، فراگیران را به مهارتهای ضروری بیگ دیتا (Big Data) برای پردازش و تحلیل دادههای سنسوری در مقیاس بزرگ مجهز میکند. برخلاف معرفیهای تئوریک، این دوره بر سناریوهای پروژههای واقعی تمرکز دارد که در آن فراگیران جریانهای کاری را طراحی کرده، خطاها را عیبیابی میکنند و نتایج معناداری خلق میکنند. از طریق بررسیهای موردی مانند نسبتهای جنسیتی، پیشبینی مالیات بر درآمد و تحلیل کار کودکان، فراگیران درک میکنند که چگونه تحلیل دادهها میتواند مستقیماً بر تصمیمات استراتژیک و سیاستگذاریها تأثیر بگذارد.
آنچه این دوره را منحصربهفرد میکند، رویکرد یکپارچه آن است؛ فراگیران تجربه عملی کار با MapReduce، Pig و Hive را در قالب یک پروژه ساختاریافته به دست میآورند. این امر تضمین میکند که شرکتکنندگان نهتنها بر ابزارهای فنی مسلط شوند، بلکه توانایی تبدیل دادههای خام به بینشهای کاربردی را برای ایجاد تأثیرات واقعی در دنیای واقعی توسعه دهند.
سرفصل ها و درس ها
مبانی دادههای سنسوری و MapReduce
Foundations of Sensor Data & MapReduce
مقدمهای بر تحلیل دادههای سنسوری
Introduction to Sensor Data Analysis
ادامه مقدمهای بر تحلیل دادههای سنسوری
Introduction to Sensor Data Analysis Continues
مثالی از تحلیل دادههای سنسوری
Example of Sensor Data Analysis
درک مفاهیم پایه بیگ دیتا و MapReduce
Understanding Basic of Big Data and MapReduce
توضیحات بیشتر درباره بیگ دیتا و MapReduce
More on Big Data and MapReduce
تبدیل فایل JSON به فرمت متنی ساده
Converting Json File into Simple Text Format
ادامه تبدیل فایل JSON به فرمت متنی ساده
Converting Json File into Simple Text Format Continues
خروجی فرمت فایل JSON
Output for Json File format
محاسبه نسبت زنان و مردان در MapReduce
Ratio of Male and Female in MapReduce
خروجی نسبت زنان و مردان
Output of Ratio of Male and Female
تولید شمارش زنان سالمند
Generate Old Aged Woman Count
مالیات بر درآمد مورد انتظار در MapReduce
Expected Income Tax in MapReduce
مالیات بر درآمد واقعی در MapReduce
Actual Income Tax in MapReduce
مالیات بر درآمد سال آینده در MapReduce
Coming Year Income Tax In MapReduce
نسبت تحصیلکردهها به غیرتحصیلکردهها در MapReduce
Educated Vs Non Educated Ratio in MapReduce
گزارشهای مربوط به بومیان در MapReduce
Native People Reports in MApReduce
گزارش تخلفات قانون کار کودکان در MapReduce
Report Against the Child Labour law in MapReduce
پردازش دادههای سنسوری با Pig
Sensor Data Processing with Pig
تفاوت بین Pig MapReduce و Hive
Difference Between Pig MapReduce and Hive
توضیحات تکمیلی درباره Pig، MapReduce و Hive
More on Pig, MapReduce and Hive
پردازش دادههای سنسوری در Pig
Sensor Data Processing in Pig
کار با توابع Pig
Working With Pig Function
انواع توابع در Pig
Types of Function in Pig
مثالی از توابع Pig
Example of Pig Function
کار بر روی موارد کاربردی با استفاده از توابع در Pig
Working on Use Cases Using Functions in PIG
جریان دادههای مورد کاربردی در Pig
Use Case Data Flow in Pig
جریان دادههای مربوط به نسبتها در Pig
Ratio Data Flow in Pig
توضیحات بیشتر درباره موارد کاربردی در Pig
More on Use Case in Pig
ادامه موارد کاربردی در Pig
More on Use Case in Pig Continues
مثالی از نسبت تحصیلات در Pig
Example od Ratio Education in Pig
تحلیل پیشرفته با Hive
Advanced Analysis with Hive
رویکرد پردازش فایل JSON در Hive
Approach Process the Json File in Hive
ویژگیها و پرسوجوها در Hive
Features and Query in Hive
کار بر روی موارد کاربردی JSON با استفاده از Hive
Work on Json Use Cases Using Hive
ادامه کار بر روی موارد کاربردی JSON با استفاده از Hive
Work on Json Use Cases Using Hive Continues
خروجی موارد کاربردی JSON در Hive
Output of Json Usecases Using Hive
توضیحات تکمیلی درباره موارد کاربردی JSON در Hive
More on Json Usecses in Hive
جمعبندی پردازش دادههای سنسوری
Summary of Sensor Data Processing
نمایش نظرات