آموزش اسپارک و پایتون برای داده های بزرگ با PySpark

سرفصل ها و درس ها

مقدمه دوره Introduction to Course

• معرفی Introduction

• بررسی اجمالی دوره Course Overview

• سوالات متداول Frequently Asked Questions

• اسپارک چیست؟ چرا پایتون؟ What is Spark? Why Python?

مقدمه دوره Introduction to Course

• معرفی Introduction

• بررسی اجمالی دوره Course Overview

• سوالات متداول Frequently Asked Questions

• اسپارک چیست؟ چرا پایتون؟ What is Spark? Why Python?

راه اندازی پایتون با اسپارک Setting up Python with Spark

• نمای کلی راه اندازی Set-up Overview

• توجه به بخش های نصب Note on Installation Sections

راه اندازی پایتون با اسپارک Setting up Python with Spark

• نمای کلی راه اندازی Set-up Overview

• توجه به بخش های نصب Note on Installation Sections

راه اندازی Databricks Databricks Setup

• راه اندازی توصیه شده Recommended Setup

• راه اندازی Databricks Databricks Setup

راه اندازی Databricks Databricks Setup

• راه اندازی توصیه شده Recommended Setup

• راه اندازی Databricks Databricks Setup

راه اندازی VirtualBox محلی Local VirtualBox Set-up

• نصب محلی VirtualBox قسمت 1 Local Installation VirtualBox Part 1

• نصب محلی VirtualBox قسمت 2 Local Installation VirtualBox Part 2

• راه اندازی PySpark Setting up PySpark

راه اندازی VirtualBox محلی Local VirtualBox Set-up

• نصب محلی VirtualBox قسمت 1 Local Installation VirtualBox Part 1

• نصب محلی VirtualBox قسمت 2 Local Installation VirtualBox Part 2

• راه اندازی PySpark Setting up PySpark

راه اندازی PySpark AWS EC2 AWS EC2 PySpark Set-up

• راهنمای تنظیم AWS EC2 AWS EC2 Set-up Guide

• ایجاد نمونه EC2 Creating the EC2 Instance

• SSH با مک یا لینوکس SSH with Mac or Linux

• نصب بر روی EC2 Installations on EC2

راه اندازی PySpark AWS EC2 AWS EC2 PySpark Set-up

• راهنمای تنظیم AWS EC2 AWS EC2 Set-up Guide

• ایجاد نمونه EC2 Creating the EC2 Instance

• SSH با مک یا لینوکس SSH with Mac or Linux

• نصب بر روی EC2 Installations on EC2

راه اندازی خوشه AWS EMR AWS EMR Cluster Setup

• راه اندازی AWS EMR AWS EMR Setup

راه اندازی خوشه AWS EMR AWS EMR Cluster Setup

• راه اندازی AWS EMR AWS EMR Setup

دوره سقوط پایتون Python Crash Course

• مقدمه ای بر دوره سقوط پایتون Introduction to Python Crash Course

• بررسی اجمالی نوت بوک Jupyter Jupyter Notebook Overview

• دوره اول سقوط پایتون Python Crash Course Part One

• دوره دوم سقوط پایتون Python Crash Course Part Two

• دوره سوم سقوط پایتون Python Crash Course Part Three

• تمرینات دوره سقوط پایتون Python Crash Course Exercises

• راه حل تمرینات دوره سقوط پایتون Python Crash Course Exercise Solutions

دوره سقوط پایتون Python Crash Course

• مقدمه ای بر دوره سقوط پایتون Introduction to Python Crash Course

• بررسی اجمالی نوت بوک Jupyter Jupyter Notebook Overview

• دوره اول سقوط پایتون Python Crash Course Part One

• دوره دوم سقوط پایتون Python Crash Course Part Two

• دوره سوم سقوط پایتون Python Crash Course Part Three

• تمرینات دوره سقوط پایتون Python Crash Course Exercises

• راه حل تمرینات دوره سقوط پایتون Python Crash Course Exercise Solutions

مبانی Spark DataFrame Spark DataFrame Basics

• مقدمه ای بر Spark DataFrames Introduction to Spark DataFrames

• مبانی Spark DataFrame Spark DataFrame Basics

• Spark DataFrame Basics قسمت دوم Spark DataFrame Basics Part Two

• Spark DataFrame Basic Operations Spark DataFrame Basic Operations

• عملیات Groupby و Aggregate Groupby and Aggregate Operations

• داده های از دست رفته Missing Data

• تاریخ و مهر زمان Dates and Timestamps

مبانی Spark DataFrame Spark DataFrame Basics

• مقدمه ای بر Spark DataFrames Introduction to Spark DataFrames

• مبانی Spark DataFrame Spark DataFrame Basics

• Spark DataFrame Basics قسمت دوم Spark DataFrame Basics Part Two

• Spark DataFrame Basic Operations Spark DataFrame Basic Operations

• عملیات Groupby و Aggregate Groupby and Aggregate Operations

• داده های از دست رفته Missing Data

• تاریخ و مهر زمان Dates and Timestamps

تمرین پروژه Spark DataFrame Spark DataFrame Project Exercise

• تمرین پروژه DataFrame DataFrame Project Exercise

• راهکارهای تمرین پروژه DataFrame DataFrame Project Exercise Solutions

تمرین پروژه Spark DataFrame Spark DataFrame Project Exercise

• تمرین پروژه DataFrame DataFrame Project Exercise

• راهکارهای تمرین پروژه DataFrame DataFrame Project Exercise Solutions

مقدمه ای بر یادگیری ماشین با MLlib Introduction to Machine Learning with MLlib

• مقدمه ای بر یادگیری ماشین و ISLR Introduction to Machine Learning and ISLR

• یادگیری ماشین با اسپارک و پایتون با MLlib Machine Learning with Spark and Python with MLlib

مقدمه ای بر یادگیری ماشین با MLlib Introduction to Machine Learning with MLlib

• مقدمه ای بر یادگیری ماشین و ISLR Introduction to Machine Learning and ISLR

• یادگیری ماشین با اسپارک و پایتون با MLlib Machine Learning with Spark and Python with MLlib

رگرسیون خطی Linear Regression

• تئوری رگرسیون خطی و خواندن Linear Regression Theory and Reading

• نمونه مستندسازی رگرسیون خطی Linear Regression Documentation Example

• ارزیابی رگرسیون Regression Evaluation

• کد مثال رگرسیون خطی در امتداد Linear Regression Example Code Along

• پروژه مشاوره رگرسیون خطی Linear Regression Consulting Project

• راه حل های پروژه مشاوره رگرسیون خطی Linear Regression Consulting Project Solutions

رگرسیون خطی Linear Regression

• تئوری رگرسیون خطی و خواندن Linear Regression Theory and Reading

• نمونه مستندسازی رگرسیون خطی Linear Regression Documentation Example

• ارزیابی رگرسیون Regression Evaluation

• کد مثال رگرسیون خطی در امتداد Linear Regression Example Code Along

• پروژه مشاوره رگرسیون خطی Linear Regression Consulting Project

• راه حل های پروژه مشاوره رگرسیون خطی Linear Regression Consulting Project Solutions

رگرسیون لجستیک Logistic Regression

• تئوری رگرسیون لجستیک و خواندن Logistic Regression Theory and Reading

• کد مثال رگرسیون لجستیک همراه Logistic Regression Example Code Along

• کد رگرسیون لجستیک همراه Logistic Regression Code Along

• پروژه مشاوره رگرسیون لجستیک Logistic Regression Consulting Project

• راه حل های پروژه مشاوره رگرسیون لجستیک Logistic Regression Consulting Project Solutions

رگرسیون لجستیک Logistic Regression

• تئوری رگرسیون لجستیک و خواندن Logistic Regression Theory and Reading

• کد مثال رگرسیون لجستیک همراه Logistic Regression Example Code Along

• کد رگرسیون لجستیک همراه Logistic Regression Code Along

• پروژه مشاوره رگرسیون لجستیک Logistic Regression Consulting Project

• راه حل های پروژه مشاوره رگرسیون لجستیک Logistic Regression Consulting Project Solutions

درختان تصمیم گیری و جنگل های تصادفی Decision Trees and Random Forests

• نظریه و خواندن روش های درختی Tree Methods Theory and Reading

• نمونه‌های مستندسازی روش‌های درختی Tree Methods Documentation Examples

• ترس تصمیم و کد جنگل تصادفی همراه با مثال ها Decision Tress and Random Forest Code Along Examples

• جنگل تصادفی - پروژه مشاوره طبقه بندی Random Forest - Classification Consulting Project

• راه حل های پروژه مشاوره طبقه بندی تصادفی جنگل Random Forest Classification Consulting Project Solutions

درختان تصمیم گیری و جنگل های تصادفی Decision Trees and Random Forests

• نظریه و خواندن روش های درختی Tree Methods Theory and Reading

• نمونه‌های مستندسازی روش‌های درختی Tree Methods Documentation Examples

• ترس تصمیم و کد جنگل تصادفی همراه با مثال ها Decision Tress and Random Forest Code Along Examples

• جنگل تصادفی - پروژه مشاوره طبقه بندی Random Forest - Classification Consulting Project

• راه حل های پروژه مشاوره طبقه بندی تصادفی جنگل Random Forest Classification Consulting Project Solutions

K-به معنای خوشه بندی است K-means Clustering

• K-به معنای نظریه و خواندن خوشه بندی است K-means Clustering Theory and Reading

• نمونه مستندات خوشه بندی KMeans KMeans Clustering Documentation Example

• خوشه بندی کد مثال در کنار Clustering Example Code Along

• پروژه مشاوره خوشه بندی Clustering Consulting Project

• راه حل های پروژه مشاوره خوشه بندی Clustering Consulting Project Solutions

K-به معنای خوشه بندی است K-means Clustering

• K-به معنای نظریه و خواندن خوشه بندی است K-means Clustering Theory and Reading

• نمونه مستندات خوشه بندی KMeans KMeans Clustering Documentation Example

• خوشه بندی کد مثال در کنار Clustering Example Code Along

• پروژه مشاوره خوشه بندی Clustering Consulting Project

• راه حل های پروژه مشاوره خوشه بندی Clustering Consulting Project Solutions

فیلتر مشارکتی برای سیستم های توصیه کننده Collaborative Filtering for Recommender Systems

• مقدمه ای بر سیستم های توصیه گر Introduction to Recommender Systems

• سیستم توصیه کننده - کد در طول پروژه Recommender System - Code Along Project

فیلتر مشارکتی برای سیستم های توصیه کننده Collaborative Filtering for Recommender Systems

• مقدمه ای بر سیستم های توصیه گر Introduction to Recommender Systems

• سیستم توصیه کننده - کد در طول پروژه Recommender System - Code Along Project

پردازش زبان طبیعی Natural Language Processing

• مقدمه ای بر پردازش زبان طبیعی Introduction to Natural Language Processing

• ابزار NLP قسمت اول NLP Tools Part One

• ابزار NLP قسمت دوم NLP Tools Part Two

• کد پردازش زبان طبیعی در طول پروژه Natural Language Processing Code Along Project

پردازش زبان طبیعی Natural Language Processing

• مقدمه ای بر پردازش زبان طبیعی Introduction to Natural Language Processing

• ابزار NLP قسمت اول NLP Tools Part One

• ابزار NLP قسمت دوم NLP Tools Part Two

• کد پردازش زبان طبیعی در طول پروژه Natural Language Processing Code Along Project

اسپارک استریم با پایتون Spark Streaming with Python

• مقدمه ای بر استریمینگ با اسپارک! Introduction to Streaming with Spark!

• مثال مستندات جریان جرقه Spark Streaming Documentation Example

• پروژه توییتر اسپارک استریمینگ - قسمت Spark Streaming Twitter Project - Part

• پروژه توییتر اسپارک استریم - قسمت دوم Spark Streaming Twitter Project - Part Two

• پروژه توییتر اسپارک استریم - قسمت سوم Spark Streaming Twitter Project - Part Three

اسپارک استریم با پایتون Spark Streaming with Python

• مقدمه ای بر استریمینگ با اسپارک! Introduction to Streaming with Spark!

• مثال مستندات جریان جرقه Spark Streaming Documentation Example

• پروژه توییتر اسپارک استریمینگ - قسمت Spark Streaming Twitter Project - Part

• پروژه توییتر اسپارک استریم - قسمت دوم Spark Streaming Twitter Project - Part Two

• پروژه توییتر اسپارک استریم - قسمت سوم Spark Streaming Twitter Project - Part Three

جایزه Bonus

• سخنرانی پاداش: Bonus Lecture:

جایزه Bonus

• سخنرانی پاداش: Bonus Lecture: