لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش مبانی هادوپ و اسپارک: واحد ۲
- آخرین آپدیت
دانلود Hadoop and Spark Fundamentals: Unit 2
نکته:
ممکن هست محتوای این صفحه بروز نباشد ولی دانلود دوره آخرین آپدیت می باشد.
نمونه ویدیوها:
توضیحات دوره:
این دوره مبانی پردازش دادههای مدرن را برای مهندسان داده، تحلیلگران و متخصصان IT معرفی میکند. شما مفاهیم پایه Hadoop MapReduce، نحوه عملکرد آن، روش کامپایل و اجرای برنامههای Java MapReduce و همچنین نحوه عیبیابی و گسترش آنها با استفاده از زبانهای دیگر را خواهید آموخت. این دوره شامل تمرینات عملی مانند شمارش کلمات در چندین فایل، تحلیل فایلهای لاگ و پردازش متون در مقیاس بزرگ با مجموعهدادههایی مانند ویکیپدیا است. همچنین ویژگیهای پیشرفته MapReduce و ابزارهایی مانند Yarn و Job Browser را پوشش خواهید داد. در ادامه، ابزارهای سطح بالاتری مانند Apache Pig و Hive QL برای مدیریت جریانهای داده و اجرای کوئریهای مشابه SQL آموزش داده میشوند. در نهایت، با Apache Spark و PySpark کار خواهید کرد تا در پلتفرمهای مدرن تحلیل داده تجربه کسب کنید. در پایان این دوره، شما مهارتهای عملی لازم برای کار با دادههای حجیم (Big Data) در محیطهای مختلف را به دست خواهید آورد.
سرفصل ها و درس ها
مبانی هادوپ و اسپارک: واحد ۲
Hadoop and Spark Fundamentals: Unit 2
اهداف یادگیری
Learning objectives
درک پارادایم MapReduce
Understand the MapReduce paradigm
توسعه و اجرای یک اپلیکیشن Java MapReduce
Develop and run a Java MapReduce application
درک نحوه عملکرد MapReduce
Understand how MapReduce works
اهداف یادگیری
Learning objectives
استفاده از رابط Streaming
Use the Streaming Interface
استفاده از رابط Pipes
Use the Pipes interface
اجرای مثال Hadoop grep
Run the Hadoop grep example
عیبیابی MapReduce
Debugging MapReduce
درک MapReduce در نسخه ۲ هادوپ
Understand Hadoop Version 2 MapReduce
استفاده از ویژگیهای نسخه ۲ هادوپ - بخش ۱
Use Hadoop Version 2 features—Part 1
استفاده از ویژگیهای نسخه ۲ هادوپ - بخش ۲
Use Hadoop Version 2 features—Part 2
اهداف یادگیری
Learning objectives
نمایش مثالی از Pig
Demonstrate a Pig example
نمایش مثالی از Hive
Demonstrate a Hive example
نمایش مثالی از Oozie - بخش ۱
Demonstrate an Oozie example—Part 1
نمایش مثالی از Oozie - بخش ۲
Demonstrate an Oozie example—Part 2
اهداف یادگیری
Learning objectives
یادگیری مبانی زبان Spark
Learn Spark language basics
نمایش مثالی از خط فرمان PySpark
Demonstrate a PySpark command line example
نمایش نظرات