آموزش تجزیه و تحلیل شاخص های توسعه جهانی پروژه Apache Spark
Apache Spark Project World Development Indicators Analytics
آنچه یاد خواهید گرفت
- در این دوره آموزشی، تجزیه و تحلیل داده ها (داده های شاخص های توسعه جهانی) را در Apache Spark با استفاده از Databricks Notebook (نسخه انجمن) می آموزید
- شاخص‌های توسعه جهانی از بانک جهانی حاوی بیش از هزار شاخص سالانه توسعه اقتصادی از صدها کشور در سراسر جهان است.
- جریان اولیه داده ها در Apache Spark، بارگیری داده ها و کار با داده ها، این دوره به شما نشان می دهد که چگونه Apache Spark برای کار تجزیه و تحلیل داده های بزرگ مناسب است.
- با ثبت نام در سرور رایگان Community Edition با اصول نوت بوک Databricks آشنا شوید
- تجزیه و تحلیل شاخص‌های توسعه جهانی نمونه‌هایی از دنیای واقعی را پروژه می‌دهد.
- نمایش گرافیکی داده ها با استفاده از نوت بوک Databricks.
- تبدیل داده های ساختار یافته با استفاده از SparkSQL و DataFrames
- پروژه را در وب منتشر کنید تا استخدام کننده خود را تحت تاثیر قرار دهید
مقدمه Introduction
-
مقدمه Introduction
دانلود منابع Download Resources
-
دانلود منابع Download Resources
پروژه آغاز می شود Project Begins
-
جزئیات سطح فایل File level details
-
ایجاد حساب رایگان (قدیمی) در Databricks (Old) Free Account creation in Databricks
-
(جدید) ایجاد حساب کاربری رایگان در Databricks (New) Free Account creation in Databricks
-
وارد کردن Databricks Notebook Importing Databricks Notebook
-
نمای کلی و هدف پروژه Overview and Project Objective
-
توضیح محتوای فایل File Content Explaination
-
Spark Cluster را راه اندازی کنید Launch Spark Cluster
-
مبانی نوت بوک اسپارک Spark Notebook Basics
-
بارگذاری داده ها در Spark Dataframe Loading data into Spark Dataframe
-
شاخص جینی GINI Index
-
میزان سواد جوانان Youth Literacy Rate
-
تجارت به عنوان درصدی از تولید ناخالص داخلی برای چین و هند Trade as a percentage of GDP for China and India
-
صادرات کالا و خدمات Exports of goods and services
-
واردات کالا و خدمات Import of goods and services
-
تولید ناخالص داخلی سرانه GDP per capita
-
فقرزدایی Poverty Alleviation
-
امید به زندگی در بدو تولد، کل (سال) Life Expectancy at birth, total (years)
-
رشد جمعیت شهری Urban Population growth
-
مرگ و میر نوزادان Infant Mortality
-
10 کشور با کمترین میانگین درآمد در سال 1962/2014 The 10 Countries with Lowest Average Income in 1962/2014
-
10 کشور با بالاترین میانگین درآمد The 10 Countries with Highest Average Income
-
میانگین درآمد 1960-2014 در کشورهای ثروتمند Average Income from 1960-2014 in Rich Countries
-
میانگین درآمد 1960-2014 در کشورهای فقیر Average Income from 1960-2014 in Poor Countries
-
متوسط درآمد در سال 1962 Average Income in 1962
-
میانگین درآمد در سال 2014 Average Income in 2014
-
امید به زندگی در فرانسه 1960-2013 Life Expectancy in France 1960-2013
-
نرخ تولد کشور G-7 1960-2013 G-7 Country Birth Rates 1960-2013
-
درآمد سرانه جهانی در سال 2013 World Per Capita Income in 2013
-
نوت بوک را در وب منتشر کنید Publish Notebook to the Web
-
سخنرانی پاداش Bonus Lecture
https://donyad.com/d/7812
Bigdata Engineer
مهندس Bigdata من معمار راه حل هستم با 12 سال تجربه در صنعت بانکداری ، ارتباطات از راه دور و خدمات مالی در طیف متنوعی از نقش ها در برنامه های کارت اعتباری ، پرداخت ها ، انبار داده و مرکز داده نقش من به عنوان Bigdata و Cloud Architect به عنوان بخشی از تیم Bigdata برای ارائه راه حل نرم افزاری کار می کنم. مسئولیت ها شامل - از همه مسائل مربوط به Hadoop پشتیبانی کنید - معیار سیستم های موجود ، تجزیه و تحلیل چالش های سیستم موجود/گلوگاه ها و پیشنهاد راه حل های مناسب برای از بین بردن آنها بر اساس فن آوری های مختلف Big Data - تجزیه و تحلیل و تعریف جوانب مثبت و منفی فناوری ها و سیستم عامل های مختلف - موارد استفاده ، راه حل ها و توصیه ها را تعریف کنید - استراتژی Big Data را تعریف کنید - انجام تجزیه و تحلیل دقیق از مشکلات کسب و کار و محیط های فنی - راه حل عملی بزرگ داده را بر اساس تجزیه و تحلیل نیازهای مشتری تعریف کنید - توصیه های عملی Big Big Cluster را تعریف کنید - به مشتریان در مورد فن آوری های مختلف Big Data آموزش دهید تا به آنها در درک نکات مثبت و منفی Big Data کمک کند - حاکمیت داده ها - ساخت ابزارهایی برای بهبود بهره وری توسعه دهنده و اجرای روشهای استاندارد
نمایش نظرات