لطفا جهت اطلاع از آخرین دوره ها و اخبار سایت در
کانال تلگرام
عضو شوید.
آموزش تشخیص تقلب کارت اعتباری در زمان واقعی با استفاده از Spark 2.2
Real-time Credit card Fraud Detection using Spark 2.2
نکته:
آخرین آپدیت رو دریافت میکنید حتی اگر این محتوا بروز نباشد.
نمونه ویدیوها:
توضیحات دوره:
شناسایی تقلب در کارت اعتباری در زمان واقعی با استفاده از Spark Streaming، Spark ML، Kafka، Cassandra و Airflow دانشجویان میتوانند پروژه دادههای بزرگ End to End را با استفاده از Spark، Kafka، Cassandra، Scala و Java بسازند. , Cassandra, برنامه نویسی IDE مانند Intellij یا Eclipse, Java, Scala
تشخیص تقلب کارت اعتباری در زمان واقعی با استفاده از Spark Kafka و Cassandra اجرا میشود.
مراحل Pipeline Spark ML مانند String Indexer، One Hot Encoder و Vector Assembler برای پیش پردازش استفاده می شود
مدل یادگیری ماشین با استفاده از الگوریتم جنگل تصادفی
ایجاد شده است
تعادل داده ها با استفاده از الگوریتم K-means
انجام می شود
ادغام Spark Streaming Job با کافکا و کاساندرا
معناشناسی دقیقاً یک بار با استفاده از مدیریت افست سفارشی Spark Streaming بدست میآید
چارچوب Airflow Automation برای خودکارسازی Spark Jobs در Spark Standalone Cluster استفاده میشود.
سرفصل ها و درس ها
معرفی
Introduction
درمورد من
About Me
مقدمه ای بر کافکا
Introduction to Kafka
آشنایی با کاساندرا
Introduction to Cassandra
معماری تشخیص تقلب در زمان واقعی
Real-time Fraud Detection Architecture
معرفی
Introduction
هدف دوره
Course Objective
هدف دوره
Course Objective
درمورد من
About Me
مقدمه دستور کار
Introduction Agenda
مقدمه دستور کار
Introduction Agenda
پیش نیازها
Prerequisites
پیش نیازها
Prerequisites
اجزاء
Components
اجزاء
Components
مقدمه ای بر اسپارک
Introduction to Spark
مقدمه ای بر اسپارک
Introduction to Spark
مقدمه ای بر کافکا
Introduction to Kafka
آشنایی با کاساندرا
Introduction to Cassandra
معماری تشخیص تقلب در زمان واقعی
Real-time Fraud Detection Architecture
نمایش تشخیص تقلب در زمان واقعی
Real-time Fraud Detection Demonstration
دستور جلسه
Agenda
سرورها را راه اندازی کنید
Start Servers
پاک کردن
Clean Up
اتوماسیون جریان هوا
Airflow Automation
نمایش تشخیص تقلب در زمان واقعی
Real-time Fraud Detection Demonstration
دستور جلسه
Agenda
دستور جلسه
Agenda
VirtualBox و Image را نصب کنید
Install VirtualBox and Image
VirtualBox و Image را نصب کنید
Install VirtualBox and Image
تنظیم کد
Code Setup
تنظیم کد
Code Setup
سرورها را راه اندازی کنید
Start Servers
Spark Jobs را از Intellij اجرا کنید
Run Spark Jobs from Intellij
Spark Jobs را از Intellij اجرا کنید
Run Spark Jobs from Intellij
پاک کردن
Clean Up
پیکربندی جریان هوا
Airflow Configuration
پیکربندی جریان هوا
Airflow Configuration
پروژه بسازید و سرورها را شروع کنید
Build Project and Start Servers
پروژه بسازید و سرورها را شروع کنید
Build Project and Start Servers
اتوماسیون جریان هوا
Airflow Automation
مرور کد
Code Walkthrough
دستور جلسه
Agenda
ساختار پروژه
Project Structure
کار واردات اولیه اسپارک
Spark Initial Import Job
شروع جریان جرقه و مصرف
Spark Streaming Initialization and Consumption
Spark Streaming Exactly Once Semantics
Spark Streaming Exactly Once Semantics
نمایش نظرات