Über diesen Kurs
76,996 kürzliche Aufrufe

100 % online

Beginnen Sie sofort und lernen Sie in Ihrem eigenen Tempo.

Flexible Fristen

Setzen Sie Fristen gemäß Ihrem Zeitplan zurück.

Stufe „Mittel“

Ca. 44 Stunden zum Abschließen

Empfohlen: 6 weeks of study, 6-8 hours/week...

Englisch

Untertitel: Englisch

Kompetenzen, die Sie erwerben

Python ProgrammingApache HadoopMapreduceApache Spark

100 % online

Beginnen Sie sofort und lernen Sie in Ihrem eigenen Tempo.

Flexible Fristen

Setzen Sie Fristen gemäß Ihrem Zeitplan zurück.

Stufe „Mittel“

Ca. 44 Stunden zum Abschließen

Empfohlen: 6 weeks of study, 6-8 hours/week...

Englisch

Untertitel: Englisch

Lehrplan - Was Sie in diesem Kurs lernen werden

Woche
1
24 Minuten zum Abschließen

Welcome

8 Videos (Gesamt 14 min), 1 Lektüre
8 Videos
What is BigData Essentials?2m
Course Structure2m
Meet Emeli1m
Meet Alexey2m
Meet Ivan1m
1 Lektüren
Slack Channel is the quickest way to get answers to your questions10m
8 Stunden zum Abschließen

What are BigData and distributed file systems (e.g. HDFS)?

18 Videos (Gesamt 136 min), 9 Lektüren, 5 Quiz
18 Videos
File content exploration 213m
Processes4m
Scaling Distributed File System9m
Block and Replica States, Recovery Process 16m
Block and Replica States, Recovery Process 27m
HDFS Client9m
Web UI, REST API4m
Namenode Architecture8m
Introduction10m
Text formats9m
Binary formats 18m
Binary formats 28m
Compression7m
How to submit your first assignment3m
How to Install Docker on Windows 7, 8, 104m
9 Lektüren
Basic Bash Commands10m
HDFS Lesson Introduction10m
Gentle Introduction into "curl"10m
File formats extra (optional)10m
Grading System: Instructions and Common Problems10m
Docker Installation Guide10m
Programming Assignment: Instructions and Common Problems10m
FAQ How to show your code to teaching staff10m
Slack channel "Bigdata-coursera" - the quickest to solve technical problems.10m
2 praktische Übungen
Distributed File Systems16m
Big Data and Distributed File Systems25m
Woche
2
3 Stunden zum Abschließen

Solving Problems with MapReduce

17 Videos (Gesamt 94 min), 1 Lektüre, 3 Quiz
17 Videos
Distributed Shell8m
Fault Tolerance7m
Fault Tolerance. Live Demo3m
Streaming7m
Streaming in Python3m
WordCount in Python5m
Distributed Cache4m
Environment, Counters4m
Testing5m
Combiner5m
Partitioner7m
Comparator1m
Speculative Execution / Backup Tasks3m
Compression4m
1 Lektüren
Hadoop Streaming Assignments: Intro and Code Samples10m
3 praktische Übungen
Hadoop MapReduce Intro26m
MapReduce Streaming26m
Hadoop Streaming Final30m
Woche
3
4 Stunden zum Abschließen

Solving Problems with MapReduce (practice week)

1 Videos (Gesamt 3 min), 5 Lektüren, 5 Quiz
5 Lektüren
Hadoop Streaming Assignments: Intro and Code Samples10m
Hints to Debug Hadoop Streaming Applications10m
Grading System and Grading System Sandbox User Guide10m
Hadoop Streaming Assignments: Instructions10m
Hint to the "Stop words" programming assignment10m
Woche
4
3 Stunden zum Abschließen

Introduction to Apache Spark

16 Videos (Gesamt 95 min), 2 Lektüren, 2 Quiz
16 Videos
Transformations 27m
Actions5m
Resiliency6m
Execution & Scheduling6m
Caching & Persistence5m
Broadcast variables5m
Accumulator variables5m
Getting started with Spark & Python6m
Working with text files6m
Joins4m
Broadcast & Accumulator variables5m
Spark UI4m
Cluster mode3m
2 Lektüren
Spark Assignments Intro10m
Instructions for Spark programming assignment10m
2 praktische Übungen
Lesson 1 Quiz20m
Lesson 2 Quiz24m
4.0
97 BewertungenChevron Right

57%

nahm einen neuen Beruf nach Abschluss dieser Kurse auf

27%

ziehen Sie für Ihren Beruf greifbaren Nutzen aus diesem Kurs

14%

erhalten Sie eine Gehaltserhöhung oder Beförderung

Top-Bewertungen von Big Data Essentials: HDFS, MapReduce and Spark RDD

von YHNov 22nd 2018

Everything in this course is new to me, but it provides me with many practice so I can gradually get familiar with all these new stuff. I find it a bit challenging, but overall it's quite good.

von SHMay 10th 2019

The course takes you from basic level , step level .But It is quite fast for beginners , you may need pause video in between and try to understand the concept.

Dozenten

Avatar

Ivan Puzyrevskiy

Technical Team Lead
Avatar

Alexey A. Dral

Founder and Chief Executive Officer
BigData Team

Über Yandex

Yandex is a technology company that builds intelligent products and services powered by machine learning. Our goal is to help consumers and businesses better navigate the online and offline world....

Über den Spezialisierung Big Data for Data Engineers

This specialization is made for people working with data (either small or big). If you are a Data Analyst, Data Scientist, Data Engineer or Data Architect (or you want to become one) — don’t miss the opportunity to expand your knowledge and skills in the field of data engineering and data analysis on the large scale. In four concise courses you will learn the basics of Hadoop, MapReduce, Spark, methods of offline data processing for warehousing, real-time data processing and large-scale machine learning. And Capstone project for you to build and deploy your own Big Data Service (make your portfolio even more competitive). Over the course of the specialization, you will complete progressively harder programming assignments (mostly in Python). Make sure, you have some experience in it. This course will master your skills in designing solutions for common Big Data tasks: - creating batch and real-time data processing pipelines, - doing machine learning at scale, - deploying machine learning models into a production environment — and much more! Join some of best hands-on big data professionals, who know, their job inside-out, to learn the basics, as well as some tricks of the trade, from them. Special thanks to Prof. Mikhail Roytberg (APT dept., MIPT), Oleg Sukhoroslov (PhD, Senior Researcher, IITP RAS), Oleg Ivchenko (APT dept., MIPT), Pavel Akhtyamov (APT dept., MIPT), Vladimir Kuznetsov, Asya Roitberg, Eugene Baulin, Marina Sudarikova....
Big Data for Data Engineers

Häufig gestellte Fragen

  • Sobald Sie sich für ein Zertifikat angemeldet haben, haben Sie Zugriff auf alle Videos, Quizspiele und Programmieraufgaben (falls zutreffend). Aufgaben, die von anderen Kursteilnehmern bewertet werden, können erst dann eingereicht und überprüft werden, wenn Ihr Unterricht begonnen hat. Wenn Sie sich den Kurs anschauen möchten, ohne ihn zu kaufen, können Sie womöglich auf bestimmte Aufgaben nicht zugreifen.

  • Wenn Sie sich für den Kurs anmelden, erhalten Sie Zugriff auf alle Kurse der Spezialisierung und Sie erhalten nach Abschluss aller Arbeiten ein Zertifikat. Ihr elektronisches Zertifikat wird zu Ihrer Seite „Errungenschaften“ hinzugefügt – von dort können Sie Ihr Zertifikat ausdrucken oder es zu Ihrem LinkedIn Profil hinzufügen. Wenn Sie nur lesen und den Inhalt des Kurses anzeigen möchten, können Sie kostenlos als Gast an dem Kurs teilnehmen.

Haben Sie weitere Fragen? Besuchen Sie das Hilfe-Center für Teiln..