آموزش Master Apache Spark - Hands On!

سرفصل ها و درس ها

معرفی Introduction

• چرا اسپارک Why Spark

• اجزای سطح بالا اسپارک Spark High Level Components

• ایجاد پروژه Spark Maven Creating a Spark Maven Project

• پشتیبانی اختصاصی TA Dedicated TA Support

• کد منبع را به Eclipse وارد کنید Import Source Code into Eclipse

• اولین برنامه Spark First Spark Application

• معماری خوشه مستقل جرقه Spark Standalone Cluster Architecture

Spark Java Dataset API Basics Spark Java Dataset API Basics

• در حال مصرف فایل‌های CSV و JSON Ingesting CSV and JSON Files

• نحوه کاهش ورود به سیستم در کنسول How to reduce logging in the console

• نمونه دنیای واقعی Dataframes Real World Dataframes Example

• چارچوب های داده اتحادیه و سایر تبدیل های مجموعه Union Dataframes and Other Set Transformations

• تبدیل بین مجموعه داده و دیتافریم Converting Between Datasets and Dataframes

غواصی عمیق تر با مجموعه داده ها، فریم های داده، تبدیل ها و DAG Diving Deeper with Datasets, Dataframes, Transformations and the DAG

• نقشه و کاهش توابع تبدیل Map and Reduce Transformation Functions

• استفاده از مجموعه داده با POJO های تعریف شده توسط کاربر Using Datasets with User Defined POJOs

• استفاده از مجموعه داده با داده های متنی بدون ساختار Using Datasets with Unstructured Textual Data

• پیوستن به Dataframe ها و استفاده از تبدیل های مختلف فیلتر Joining Dataframes and Using Various Filter Transformations

• تحولات تجمع + تکلیف پیوستن Aggregation Transformations + Join Assignment

• بیشتر در مورد تحولات، اقدامات و DAG More on Transformations, Actions and the DAG

اجرای Spark Jobs در ابر Running Spark Jobs on the Cloud

• استفاده از Spark برای تجزیه و تحلیل نظرات Reddit Using Spark to Analyze Reddit Comments

• اجرای برنامه Reddit Spark بر روی خوشه EMR Running the Reddit Spark Application on an EMR Cluster

• دستورالعمل های پیکربندی یک کلاستر مستقل Spark Instructions for Configuring a Spark Stand-alone Cluster

برنامه های کاربردی جریان اسپارک Spark Streaming Applications

• نمونه سوکت شبکه جریانی Streaming Network Socket Example

• نمونه جریانی فایل های بورس Stock Market Files Streaming Example

• استفاده از کافکا با اسپارک استریمینگ Using Kafka with Spark Streaming

یادگیری ماشین با Spark MLlib Machine Learning with Spark MLlib

• منابع یادگیری ماشین Machine Learning Resources

• مروری بر رگرسیون خطی Overview of Linear Regression

• مثال رگرسیون خطی جاوا Spark Spark Java Linear Regression Example

• مروری بر رگرسیون لجستیک Overview of Logistic Regression

• رگرسیون لجستیک اسپارک جاوا (الگوریتم طبقه بندی) Spark Java Logistic Regression (Classification Algorithm)

• مروری بر K-Means Clustering Overview of K-Means Clustering

• Spark Java K-Means Clustering مثال Spark Java K-Means Clustering Example

• به تمام دوره های فعلی و آینده من دسترسی پیدا کنید! Get Access to All of my current and future courses!