Huqdkw8frqmvcl0pvy3g

Big Data, Hadoop oraz MapReduce w języku Python (7.5h)

Opanuj budowanie MapReduce Jobs używając biblioteki MRJob oraz usługi Amazon Elastic MapReduce!

   Obejrzyj promo   Zapisz się na kurs

Odnajdź się w świecie big data!

Umiejętność analizowania dużych zbiorów danych (Big Data) jest niezwykle gorącym tematem i zarazem jedną z najbardziej poszukiwanych umiejętności na rynku. Ponieważ cały ekosystem rozwiązań Big Data jest ogromny w tym kursie skupimy się głównie na paradygmacie programowania MapReduce, który jest podwaliną analiz Big Data.

Zbudujemy kilkanaście MapReduce Jobów, m. in. przeanalizujemy ruch lotniczy nad Stanami Zjednoczonymi, czy ruch taksówek w Nowym Jorku. Znajdziemy średni dystans pokonywamy przez połączenia lotnicze, czy chociażby najbardziej popularny punkt odbioru nowojorskich taksówek.

W celu uruchomienia naszych Jobów postawimy klaster Hadoopowy w chmurze Amazona wykorzystując usługę EMR - Elastic MapReduce.



Promo Video

Czego między innymi nauczysz się na kursie?

  • Paradygmat programowania MapReduce do rozwiązań Big Data
  • Omówienie podstawowych elementów ekosystemu Hadoop
  • Budowanie MapReduce Jobs w oparciu o bibliotekę MRJob
  • Debugging MapReduce Jobs
  • Uruchomienie programów MapReduce lokalnie
  • Uruchomienie programów MapReduce z wykorzystaniem chmury - Amazon Web Services (AWS)
  • Usługa Amazon Elastic MapReduce
  • Analiza zawartości tekstowej Iliady
  • Analiza danych dotyczących linii lotniczych
  • Analiza danych dotyczących ruchu taksówek
  • Analiza danych dotyczących recenzji produktów na sklepie internetowym Amazon
  • Przykład użycia Big Data oraz technik NLP w przetwarzaniu języka

Przykładowa lekcja - Jak składowany jest plik w systemie plików HDFS?

(lekcja typu wykład)


Przykładowa lekcja - Eksploracja wyników - Google Maps

(lekcja typu ćwiczenie)


Czy istnieją jakieś wymagania dotyczące kursu?

Recenzje uczestników


Program szkolenia


  MapReduce: Map + Combine + Reduce
Dostępne w dni
dni po rejestracji

Twój instruktor


Paweł Krakowiak
Paweł Krakowiak

Data Scientist, Securities Broker

Założyciel platformy e-smartdata.org

Autor kilkunastu szkoleń online z zakresu języka python, analizy danych, data science, uczenia maszynowego, uczenia głębokiego, sieci neuronowych czy sztucznej inteligencji.

Miłośnik nowych technologii, szczególnie w obszarze sztucznej inteligencji, big data oraz rozwiązań chmurowych.

Absolwent podyplomowych studiów na Polsko-Japońskiej Akademii Technik Komputerowych na kierunku Informatyka, spec. Big Data.

Absolwent studiów magisterskich z matematyki finansowej i aktuarialnej na wydziale Matematyki i Informatyki Uniwersytetu Łódzkiego.

Od 2015 roku posiadacz licencji maklera papierów wartościowych z uprawnieniami do czynności doradztwa inwestycyjnego.

Wykładowca w Fundacji GPW prowadzący szkolenia dla inwestorów z zakresu analizy technicznej, finansów behawioralnych i zasad zarządzania portfelem instrumentów finansowych.

Z doświadczeniem w prowadzeniu zajęć dydaktycznych na wyższej uczelni z przedmiotów związanych z rachunkiem prawdopodobieństwa i statystyką.

Kilkadziesiąt wystąpień publicznych o tematyce rynków finansowych, czy data science.

Główne obszary zainteresowań to sztuczna inteligencja, uczenie maszynowe, uczenie głębokie i rynki finansowe.


 

NIE WIESZ GDZIE ZACZĄĆ?

REKOMENDOWANE ŚCIEŻKI UCZENIA

ALL-IN-ONE

PYTHON DEVELOPER:

DATA SCIENTIST / MACHINE LEARNING ENGINEER:

DATA SCIENTIST / DEEP LEARNING ENGINEER:

BI ANALYST / DATA ANALYST:

BIG DATA ANALYST:

C DEVELOPER:

C++ DEVELOPER:

Chcesz być na bieżąco? Dołącz do społeczności e-smartdata na Facebooku!

Ucz się, komentuj, pytaj, nawiązuj znajomości!


Planujesz zakup większej ilości kursów na platformie?

Odezwij się do nas, damy solidną zniżkę!

Pozdrawiamy,
Zespół e-smartdata.org
[email protected]

Często zadawane pytania (FAQ)


Kiedy zaczyna i kończy się kurs?
Kurs zaczyna się od momentu zakupu i nigdy się nie kończy! Ty decydujesz, kiedy zaczynasz i kiedy kończysz.
Jak długo mam dostęp do kursu?
Po rejestracji masz nieograniczony dostęp do tego kursu tak długo, jak chcesz - na dowolnym urządzeniu, które posiadasz.
Co jeśli jestem niezadowolony z kursu?
Jeśli nie jesteś zadowolony z zakupu, skontaktuj się z nami w ciągu pierwszych 14 dni, a my damy ci zwrot pieniędzy w zależności od procentu zaawansowania danego kursu/ścieżki.

Zacznij teraz!