آموزش مبانی Apache Spark

Apache Spark Fundamentals

Video Player is loading.
Current Time 0:00
Duration 0:00
Loaded: 0%
Stream Type LIVE
Remaining Time 0:00
 
1x
    • Chapters
    • descriptions off, selected
    • subtitles off, selected
      نکته: آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
      نمونه ویدیویی برای نمایش وجود ندارد.
      توضیحات دوره: این دوره به شما می آموزد که چگونه از Apache Spark برای تجزیه و تحلیل داده های بزرگ خود با سرعت سریع استفاده کنید. ترک هادوپ در غبار! برای یک غوطه وری عمیق در SQL و Streaming ، عاقبت را بررسی کنید ، مدیریت داده های سریع با Apache Spark SQL و جریان. دنیای همیشه متصل ما در حال ایجاد داده ها سریعتر از آن است که قانون مور بتواند ادامه دهد ، و این باعث می شود که ما در هوشمندانه تر باشیم تصمیم گیری در مورد چگونگی تجزیه و تحلیل آن. قبلاً ما چارچوب MapReduce Hadoop را برای پردازش دسته ای داشتیم ، اما تقاضای مدرن پردازش داده های بزرگ ، این چارچوب را پشت سر گذاشته است. همان جایی است که Apache Spark وارد عمل می شود ، با سرعت 10-100 برابر سریعتر از Hadoop و رکورد جهانی در مرتب سازی در مقیاس بزرگ ، به خود می بالد. انتزاع عمومی Spark به این معنی است که می تواند فراتر از پردازش دسته ای ساده گسترش یابد ، و آن را قادر به مواردی مانند الگوریتم های سریع ، تکراری و دقیقاً یک بار جریان معانی معنایی می کند. در این دوره ، شما Spark را از ابتدا یاد خواهید گرفت ، قبل از ایجاد یک برنامه تجزیه و تحلیل ویکی پدیا به عنوان یکی از ابزارهای یادگیری دامنه گسترده ای از API اصلی ، با تاریخچه آن شروع می کنید. این دانش اصلی ، جستجوی سایر کتابخانه های Spark مانند جریان و API های SQL را آسان تر می کند. سرانجام ، شما یاد خواهید گرفت که چگونه از چند لبه خشن Spark جلوگیری کنید. این دوره را با کمربند ابزاری که قادر به ایجاد برنامه Spark با حداکثر عملکرد خود است ، ترک خواهید کرد.

      سرفصل ها و درس ها

      شروع شدن Getting Started

      • چرا جرقه؟ Why Spark?

      • انفجار Hadoop به یکپارچه سازی جرقه Hadoop Explosion to Spark Unification

      • پیشینه جرقه Spark's Background

      • نصب و راه اندازی Installation

      • زبان های برنامه نویسی Spark Spark Programming Languages

      • سلام به داده های بزرگ! Hello Big Data!

      • لجستیک Logistics

      • منابع Resources

      • خلاصه Summary

      Spark Core: قسمت 1 Spark Core: Part 1

      • معرفی Intro

      • جرقه زدن Spark Appification

      • RDD چیست؟ What Is an RDD?

      • در حال بارگیری داده ها Loading Data

      • لامبدا Lambdas

      • تبدیل داده ها Transforming Data

      • تحولات بیشتر More Transformations

      • اقدامات و املاک مشارکتی Actions and the Associative Property

      • اقدام به داده ها Acting on Data

      • ماندگاری Persistence

      • منابع Resources

      • خلاصه Summary

      Spark Core: قسمت 2 Spark Core: Part 2

      • معرفی Intro

      • تبدیل های ضمنی Implicit Conversions

      • روشهای ارزش کلیدی Key Value Methods

      • ذخیره اطلاعات Caching Data

      • جمع آوری داده ها Accumulating Data

      • جاوا در Spark Java in Spark

      • منابع Resources

      • خلاصه Summary

      توزیع و ابزار دقیق Distribution and Instrumentation

      • معرفی Intro

      • جرقه ارسال Spark Submit

      • مدیریت خوشه Cluster Management

      • اسکریپت های خوشه ای مستقل Standalone Cluster Scripts

      • راه اندازی AWS AWS Setup

      • جرقه در نخ در EMR Spark on Yarn in EMR

      • Spark UI Spark UI

      • منابع Resources

      • خلاصه Summary

      جرقه کتابخانه ها Spark Libraries

      • معرفی Intro

      • Spark SQL Spark SQL

      • Spark SQL نسخه ی نمایشی Spark SQL Demo

      • Spark SQL Demo - سمت SQL Spark SQL Demo - The SQL Side

      • جریان Streaming

      • پخش آزمایشی Streaming Demo

      • فراگیری ماشین Machine Learning

      • نسخه ی نمایشی یادگیری ماشین Machine Learning Demo

      • GraphX GraphX

      • نسخه نمایشی GraphX GraphX Demo

      • منابع Resources

      • خلاصه Summary

      بهینه سازی ها و آینده Optimizations and the Future

      • معرفی Intro

      • تعطیلات Closures

      • صدا و سیما Broadcasting

      • بهینه سازی پارتیشن بندی Optimizing Partitioning

      • آینده جرقه Spark's Future

      • منابع Resources

      • خلاصه Summary

      نمایش نظرات

      آموزش مبانی Apache Spark
      جزییات دوره
      4h 15m
      57
      Pluralsight (پلورال سایت) Pluralsight (پلورال سایت)
      (آخرین آپدیت)
      300
      3.9 از 5
      دارد
      دارد
      دارد
      Justin Pihony
      جهت دریافت آخرین اخبار و آپدیت ها در کانال تلگرام عضو شوید.

      Google Chrome Browser

      Internet Download Manager

      Pot Player

      Winrar

      Justin Pihony Justin Pihony

      جاستین یک مسافر نرم افزار است ، که به طور مداوم مهارت های خود را یاد می گیرد و عالی می کند. بیشتر اوایل کار حرفه ای او در C # و MSSQL بود ، اما او عاشق یادگیری زبانهای مختلف ، به ویژه Scala است. این علاقه به اسکالا باعث شد تا او به تیم لایتبند (Typesafe سابق) بپیوندد و حتی بیشتر در عمق کره زمین اسکالا فرو رود. و همانطور که دوست دارد یاد بگیرد ، دوست دارد دانش خود را از طریق آموزش و کمک به دیگران گسترش دهد. او یک پاسخ دهنده بسیار فعال در StackOverflow است و هم جلسات پیتزبورگ اسکالا و نهار ناهار خوری پیتسبورگ را برگزار می کند (یک جلسه ناهار نیمه منظم با محوریت فروشگاه گفتگو).