پیشنهاد فرادرس

آموزش Spark و Python برای کلان داده با PySpark

دسته بندی ها: آموزش آپاچی اسپارک (Apache Spark) ، کلان داده (Big Data) ، آموزش پایتون (Python) ، آموزش های یودمی (Udemy) ، پایگاه داده

شرکت های بزرگ در زمینه  فن آوری مانند گوگل، فیس بوک، Netflix، Airbnb، آمازون، ناسا و بیشتر همه از Spark برای حل مشکلات داده های بزرگ خود استفاده می کنند. در این دوره نحوه ی استفاده از Spark با Python که شامل Spark Streaming، یادگیری ماشینی و DataFrame های Spark 2.0 می شود را فرا خواهید گرفت.

سرفصل ها:

  • معرفی دوره
  • راه اندازی پایتون با Spark
  • راه اندازی محلی VirtualBox
  • راه اندازی AWS EC2 PySpark
  • راه اندازی Databricks
  • راه اندازی AWS EMR Cluster
  • دوره Python
  • مبانی Spark DataFrame
  • پروژه تمرینی Spark DataFrame
  • معرفی یادگیری ماشینی با MLlib
  • رگرسیون خطی
  • رگرسیون منطقی
  • درختان تصمیم گیری و جنگل های تصادفی
  • K-means Clustering
  • فیلتر همکاری برای سیستم های توصیه گر
  • پردازش زبان طبیعی
  • Spark Streaming با پایتون
به این نوشته امتیاز دهید 1 2 3 4 5 بدون امتیاز
Spark and Python for Big Data with PySpark Publisher:Udemy Author:Jose Portilla Duration:10:16:52

Learn how to use Spark with Python, including Spark Streaming, Machine Learning, Spark 2.0 DataFrames and more!
Learn the latest Big Data Technology - Spark! And learn to use it with one of the most popular programming languages, Python!

Introduction to Course
4 Lectures
30:12
Introduction
Preview
03:08
Course Overview
07:54
Frequently Asked Questions
00:13
What is Spark? Why Python?
18:57

Setting up Python with Spark
2 Lectures
06:11
Let's explain the set-up for the course!
Set-up Overview
05:58
Note on Installation Sections
00:13

Local VirtualBox Set-up
3 Lectures
31:09
Let's walk through the local installation of Ubuntu
Local Installation VirtualBox Part 1
11:25
Local Installation VirtualBox Part 2
13:59
Setting up PySpark
05:45

AWS EC2 PySpark Set-up
4 Lectures
38:58
Let's show you how to use Amazon Web Services' EC2 Instances for Spark!
AWS EC2 Set-up Guide
02:46
Creating the EC2 Instance
16:18
SSH with Mac or Linux
04:49
Installations on EC2
15:05

Databricks Setup
1 Lecture
11:41
Databricks Setup
11:41

AWS EMR Cluster Setup
1 Lecture
17:16
AWS EMR Setup
17:16

Python Crash Course
7 Lectures
58:50
Introduction to Python Crash Course
01:33
Jupyter Notebook Overview
06:49
Python Crash Course Part One
16:07
Python Crash Course Part Two
12:07
Python Crash Course Part Three
11:19
Python Crash Course Exercises
01:29
Python Crash Course Exercise Solutions
09:26

Spark DataFrame Basics
7 Lectures
01:04:52
Introduction to Spark DataFrames
02:26
Learn the basics of Spark DataFrames!
Spark DataFrame Basics
10:51
Spark DataFrame Basics Part Two
09:54
Learn some basic operations with Spark 2.0
Spark DataFrame Basic Operations
10:15
Groupby and Aggregate Operations
12:27
Missing Data
Preview
08:55
Dates and Timestamps
10:04

Spark DataFrame Project Exercise
2 Lectures
20:06
DataFrame Project Exercise
03:13
DataFrame Project Exercise Solutions
16:53

Introduction to Machine Learning with MLlib
2 Lectures
19:25
Introduction to Machine Learning and ISLR
10:21
Machine Learning with Spark and Python with MLlib
09:04
8 More Sections

پیشنهاد فرادرس