HDFS w praktyce – poradnik DLA POCZĄTKUJĄCYCH (HDFS Shell i budowa) [wideo] [jesień]

HDFS w praktyce – poradnik DLA POCZĄTKUJĄCYCH (HDFS Shell i budowa) [wideo] [jesień]

W poprzednim wideo poznaliśmy to czym jest Hadoop. Dzisiaj pociągniemy temat, ale już dużo bardziej praktycznie. Zależało mi bardzo na tym, żeby pokazać jak ta praktyka ma się do rzeczywistości. Pokazałem więc między innymi jak architektura którą omawiałem w poprzednim wideo, ma się do mojego klastra z którego korzystam na co dzień.

Przede wszystkim jednak – wskazałem w jaki sposób popracować z plikami wykorzystując do tego HDFS Shell.

Zapraszam do oglądania!

Jak działa HDFS? Sama praktyka

Poniżej wideo o którym mówię. Poprzednie wprowadzające do Hadoopa – można obejrzeć pod tym linkiem.

Tutaj pobierzesz maszynę wirtualną, która będzie pomocna przy ćwiczeniach Hadoopa.

Zachęcam do subskrypcji kanału na YouTube!

Dzięki temu nie przegapisz żadnego wideo z serii jesiennej!

Wideo obejrzysz tutaj:

 

Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

 

Loading
Z “wiedzy tajemnej” robimy “wiedzę użyteczną” – czyli jak kursanci oceniają szkolenia Big Data w RDF?

Z “wiedzy tajemnej” robimy “wiedzę użyteczną” – czyli jak kursanci oceniają szkolenia Big Data w RDF?

Niezależnie od samopoczucia, ego i tego co myślimy o sobie sami – końcem końców, najważniejsze jest to, jaki jest obiektywny finał naszej pracy. Jeśli chodzi o szkolenia Big Data, to uważam, że “finał” składa się z dwóch czynników:

  • Co kursanci uważają o szkoleniu
  • Jak kursanci radzą sobie po szkoleniu w “prawdziwym życiu”

Z niektórymi utrzymuję kontakt do dzisiaj. Czasami bliski, czasami bardzo sporadyczny. Ostatnio poprosiłem niektórych z nich, czy mogą podzielić się opiniami na temat szkoleń, które dostali w RDF. Co prawda opinie ciągle spływają, jednak już teraz chcę się podzielić pierwszymi kilkoma.

To tylko niektóre z nich. Całą listę znajdziesz pod tym linkiem.

Przepis na sukces w szkoleniach Big Data? Solidne przygotowanie to podstawa…

“Szkolenie przygotowane i przeprowadzone bardzo sprawnie i profesjonalnie. Doskonałe wyważenie teorii i praktyki co pozwoliło praktycznie natychmiast utrwalić nowo zdobytą, niełatwą, wiedzę. Zadania praktyczne niebanalne {dla początkujących} wymagające nie tylko prostego zastosowania wiedzy teoretycznej, ale także samodzielnego rozwiązywania problemów, co zachęca, po ukończenia zadania, do dalszej pracy nad właśnie rozpoczętym “projektem”. Całość spinają doskonałe przygotowanie środowiska oraz wysoka wiedza i, co nie mniej ważne, znakomita umiejętność jej przekazania przez prowadzącego który z “wiedzy tajemnej” robi “wiedzę użyteczną”. Jedno z najlepszych szkoleń w jakich brałem udział.

Dariusz Zygmunt-Broda
Big Data Engineer

“Zdecydowanie rekomenduję szkolenia z zakresu Big Data prowadzone przez firmę Riotech Data Factory. Prowadzący posiadają duże doświadczenie i obszerną wiedzę, którą w sposób profesjonalny i przystępny przekazują uczestnikom. Podczas przygotowania i realizacji szkoleń kadra wykazała się profesjonalizmem zarówno, jeśli chodzi o zakres merytoryczny, przystępność przekazywanej wiedzy, jak i jakość dostarczonych materiałów.

Piotr Lipiński
Big Data Engineer

…ale pasja i zaangażowanie jest niemniej ważne;-)

“Miałem okazję uczestniczyć w kilkudniowych warsztatach poświęconych oprogramowaniu Apache Spark prowadzonych przez Marka. Jego ogromna wiedza i pasja pozwoliły mi lepiej poznać świat technologii Big Data. Marek w przystępny sposób opowiedział, na czym polega rozproszone przetwarzanie danych, a następnie – jak działa i do czego służy Spark. Solidne podstawy teoretyczne posłużyły jako punkt wyjścia do zmierzenia się z zadaniami praktycznymi o różnym poziomie zaawansowania. Część zadań wykonywana była lokalnie, a część na klastrze obliczeniowym w chmurze. Na zajęciach znalazł się czas zarówno na pracę indywidualną, jak i wspólne rozwiązywanie problemów. Marek cały czas służył radą i z dużym zaangażowaniem odpowiadał na wszystkie nurtujące mnie pytania. Warsztaty były fascynujące i co najważniejsze pozwoliły mi na rozpoczęcie samodzielnej pracy ze Sparkiem.”
Wojtek Kazanecki
Big Data Engineer
“Kilka miesięcy temu brałam udział w szkoleniu na temat Big Data wraz z Markiem jako prowadzącym szkolenie. Był to intensywny, ale dobrze wykorzystany czas, który przygotował mnie do pracy w roli Big Data Developera. W trakcie szkolenie położony jest nacisk nie tylko na wiedze teoretyczna, ale także na część praktyczna, dzięki czemu przyswajanie wiedzy jest szybsze i skuteczniejsze. Sam Marek jest świetnym nauczycielem i prowadzącym — ciekawie opowiada o temacie, ma wiedzę, a także potrafi ją w efektywny sposób przekazać. Właściwy człowiek na właściwym miejscu :)!
Justyna Replin
Big Data Engineer

Dołącz do naszej społeczności!

Zdobywanie wiedzy nie musi być nudne. Wręcz przeciwnie – z natury jest fascynujące! Jeśli masz podobne zdanie i chcesz poznawać Big Data, czas najwyższy zapisać się do newsletera RDF. Na start dostaniesz… prawie 140 stron wiedzy w postaci ebooka.

Z pewnością spodoba Ci się także podcast “Big Data Po Polsku”, w którym uczę się świata przez pryzmat danych.

Na koniec – zachęcam do zajrzenia na kanał YouTube. Znajdziesz tam treści i techniczne i biznesowe!

 

Loading
Co to jest (i jak działa) Hadoop? DLA KOMPLETNIE ZIELONYCH [Wideo] [jesień]

Co to jest (i jak działa) Hadoop? DLA KOMPLETNIE ZIELONYCH [Wideo] [jesień]

Niedawno zacząłem nową serię – serię jesienną, gdzie zgłębiamy podstawy technologii Big Data. Będziemy kroczek po kroczku poznawać absolutne podstawy. Celem jest “zahaczka” dla każdego, kto chce ruszyć z tematem, ale nie ma pomysłu jak to zrobić:-).

W pierwszym wideo odpowiadałem na pytanie “co to jest Big Data?”obejrzysz pod tym linkiem.

Co to jest Hadoop?

Drugie wideo to rozpoczęta miniseria o Hadoopie. Konkretnie:

  • Co to jest Hadoop
  • Jakie komponenty zawiera Hadoop
  • Jak działa Hadoop
  • Jak powstał – czemu jest tak bardzo ważny?
  • Jaka jest architektura HDFS?

Zachęcam do subskrypcji kanału na YouTube!

Dzięki temu nie przegapisz żadnego wideo z serii jesiennej!

Wideo obejrzysz tutaj:

 

Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

 

Loading
Jak wyglądają szkolenia Big Data w RDF? [Wideo]

Jak wyglądają szkolenia Big Data w RDF? [Wideo]

Jak wyglądają szkolenia Big Data? Jakie są rodzaje szkoleń Big Data? Co sprawia, że szkolenia w Riotech Data Factory są skuteczne? Na co stawiamy akcent?

O tym wszystkim w najnowszym wideo;-). Zachęcam nie tylko do obejrzenia, ale także subskrypcji kanały RDF na YouTube!

Szkolenia Big Data – jak to wygląda?

 

 

Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

 

Loading

 

Jak przeżyć jesień z Big Data, żeby była fenomenalnym wsparciem zamiast depresantem? (Big Data Po Polsku) [Audio]

Jak przeżyć jesień z Big Data, żeby była fenomenalnym wsparciem zamiast depresantem? (Big Data Po Polsku) [Audio]

Być może jesień to dla Ciebie czas przygnębienia. W dzisiejszym odcinku “Big Data Po Polsku” staram się pokazać, że może być dokładnie na odwrót. Przeżyjmy jesień “na własnych zasadach” – roziwjajac się, ucząc i… czerpiąc z tego przyjemność. Odcinek(4) to także miejsce, które będzie punktem wyjścia do poznania kilku kluczowych technologii – a więc przegląd technologii Big Data! Nowy odcinek co drugą środę. Zostań na dłużej! Subskrybuj kanał tam gdzie słuchasz oraz zapisz się na newsletter.

Odcinek(4) – co robić w jesień, żeby nie była depresyjna?

Gdzie znajdziesz ten odcinek?

Podcast znajdziesz w kilku miejscach. Linki będą sukcesywnie dochodzić.

  1. Spotify
  2. YouTube
  3. Podbean
  4. Tutaj!
  5. Apple podcast (niebawem)
  6. Google Podcast (niebawem)

    Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

     

    Loading

 

Nowe podejście do inflacji dzięki danym (Big Data Po Polsku) [Audio]

Nowe podejście do inflacji dzięki danym (Big Data Po Polsku) [Audio]

Chociaż inflacja to temat ostatnio dość przykry – warto szukać systemowych pomysłów “jak to ugryźć”. Tak się składa, że dzięki danym jesteśmy w stanie podejść do wyliczania inflacji w sposób niezwykle nowatorski. W dzisiejszym odcinku podcastu “Big Data Po Polsku” o tym jak moglibyśmy to zrobić. I o tym, że U NAS, W POLSCE to nie musi być takie odległe.

Nowe odcinki w co drugą środę. Zostań na dłużej! Subskrybuj kanał oraz zapisz się na newsletter;-)

Odcinek(2) – jak wyliczać dokładną inflację dzięki Big Data?

Gdzie znajdziesz ten odcinek?

Podcast znajdziesz w kilku miejscach. Linki będą sukcesywnie dochodzić.

  1. Spotify
  2. YouTube
  3. Podbean
  4. Tutaj!
  5. Apple podcast (niebawem)
  6. Google Podcast (niebawem)

Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

 

Loading
Poznaj nowy podcast o Big Data! (Big Data Po Polsku) [Audio]

Poznaj nowy podcast o Big Data! (Big Data Po Polsku) [Audio]

Wreszcie, nastała ta chwila. Co prawda trzeba było przepłynąć naprawdę wzburzone morze, ale jest – mój pierwszy pełnowartościowy podcast! I – mam nadzieję – pierwszy taki podcast o Big Data. Przygotowywałem się (a może raczej – “zbierałem się”) do tego długo i tak naprawdę to było moje marzenie. Liczę, że jego spełnienie pozwoli Ci odkryć nieznane lądy;-).

Odcinek(0) – Jak poznawać świat dzięki Big Data?

Co czeka nas w zerowym odcinku? To “pilot” – chciałem dać pewien przedsmak tego co nas czeka. Co więc tu znajdziesz?

  1. Będzie o ciekawości – czyli jednej z najważniejszych naszych cech.
  2. O tym, że nasz świat jest zbudowany z danych i… rządzony jest przez algorytmy.
  3. Poznasz jednego z dwóch najmłodszych członków mojej rodziny!
  4. Dowiesz się kim jestem i o czym będzie ten podcast.
  5. No i… wyruszymy w podróż! Najpierw na wakacje, zobaczyć że nawet tam towarzyszy nam Big Data. Potem w podróż szlakiem Big Data;-)

Odcinek(1) – Jedna rzecz, która pomoże Ci (lepiej) zrozumieć branżę

Automatycznie wypuściłem dwa odcinki – na zachętę;-). Tym razem w odcinku:

  1. Jakie jest moje “małe” marzenie, które zmieni Polskę w “kraj big datowy”?
  2. Jaka jest najważniejsza rzecz w branży Big Data?
  3. Jak to jest realizowane technologicznie?

Czym nie będzie ten podcast?

Przede wszystkim – będzie tu mało technikaliów. Nie chcę mówić że ich nie będzie. Jeśli się jednak pojawią, to w bardzo prostej, strawnej formie;-). O co chodzi? Oczywiście nie będę cytował kodu. Z drugiej strony, nie wyobrażam sobie mówić o Big Data na tyle ogólnie, żeby nie dotknąć choćby “mięsa”, czyli budulca całości. Takie ogólne gadanie zostawiam badaczom z uniwersytetów. My tu przede wszystkim robimy Big Data, potem poznajemy szerszy kontekst;-).

Mam nadzieję jednak, że taka zdrowa dawka technikaliów ubogaci każdego. Bez zbędnych szczegółów, ale hej! Poznajmy jak to działa!

Czemu “Big Data Po Polsku”? Czyli o pierwszym takim podcascie.

No więc mamy tu grę słów. Z jednej strony chcę uwypuklić, że cały podcast jest po polsku. I że całe to środowisko (RDF) jest “po polsku” – co jest pewną odmiennością w świecie IT, szczególnie tej branży. Z drugiej strony – to nawiązanie do “mów po polsku!” – czyli po prostu “mów zrozumiale”. Mamy problem w branży ze zrozumiałym opowiadaniem i technologii. A jak ktoś już umie, to potem okazuje się, że średnio umie samą technologię. Tu postaramy się mówić o tym co rozumiemy w prostych słowach. Prostych, ale bez banalizowania!

Kolejna rzecz –  ten podcast nie będzie wykładem nauczyciela do ucznia. Sam widzę jaki ogrom wiedzy mam do poznania. I chcę wyruszyć w podróż po światowym oceanie widzianym przez pryzmat danych. Nie chcę jednak wyruszać sam. Dlatego zapraszam Cię na pokład – zaciągnij się do mojej załogi i płyńmy razem!

Co dokładnie, kiedy i jak?

Tematycznie podcast będzie dzielił się na 3 części:

  1. Poznawanie świata – oczywiście przez pryzmat danych. Niemniej dowiemy się jak dane zmieniają nasze społeczeństwo, wojnę, jak mogą zmienić medycynę czy… jak moglibyśmy zapanować nad tematem inflacji;-).
  2. Poznawanie branży – tak jak powiedziałem, będzie nieco technicznych odcinków. Nie chcę od tego uciekać. Chcę się z tym zmierzyć żeby pokazać, że można o tym opowiadać przystępnie.
  3. Szkolenia i biznes – RDF to firma szkoleniowo-doradcza. Będę opowiadał o “kuchni” tej roboty. O tym jak szkoli się adeptów Big Data, o swoich wpadkach z tworzeniem szkoleń czy… o tym jak samemu możemy się lepiej uczyć!

Jaka forma?

Podcastu “Big Data Po Polsku” będziesz mógł/mogła wysłuchać w dwóch formatach:

  1. Monolog – czyli spotkasz się sam na sam ze mną;-). Takie odcinki będą trwały około 20-30 minut.
  2. Rozmowa lub wywiad – jestem przekonany, że uda mi się przekonać do rozmowy fascynujących gości. Takie odcinki będą trwały dłużej. Ile? Cóż… no-limit!

Kiedy? W co drugą środę. Przynajmniej póki co – do końca roku;-). Uznajmy, że to pierwszy sezon. Jeśli się powiedzie, drugi będzie częstszy.

Gdzie znajdziesz podcast?

Podcast znajdziesz w kilku miejscach. Linki będą sukcesywnie dochodzić.

  1. Spotify
  2. YouTube
  3. Podbean
  4. Tutaj!
  5. Apple podcast (niebawem)
  6. Google Podcast (niebawem)

Przypominam jeszcze, jeśli nie jesteś członkiem newslettera, po zaciągnięciu się na nasz okręt dostajesz na wejściu prawie 140 stron ebooka o Big Data! Nie zwlekaj;-)

 

Loading
Jak wygląda klaster Big Data, na którym uczą się kursanci? [Wideo]

Jak wygląda klaster Big Data, na którym uczą się kursanci? [Wideo]

Po miesiącach materiałów (wideo i artykułów) technicznych, chciałbym uchylić rąbka “tajemnicy” dotyczącej szkoleń RDF. Konkretnie, na wideo opowiadam (i pokazuję) dość szczegółowo jaka jest infrastruktura technologiczna na której szkolą się kursanci RDF.

Klaster RDF do szkoleń – czyli na czym pracują kursanci?

Poniżej wklejam wideo i zapraszam do subskrybowania kanału RDF na YouTube;-)

Zapraszam na nasz profil LinkedIn oraz do newslettera;-).

UWAGA! Pierwszy polski ebook o Big Data już dostępny! Zapisz się na listę newslettera i podążaj “Szlakiem Big Data”. Więcej tutaj.

 

Loading
Jak ogarnąć architekturę systemu Big Data? [Wideo] [Big Data w podróży]

Jak ogarnąć architekturę systemu Big Data? [Wideo] [Big Data w podróży]

Ostatnio zdałem sobie sprawę, że kiedy jadę autem, marnuję czas. Zamiast słuchać bzdetów w aucie, mogę po prostu podzielić się z Wami czymś sensownym. No więc pierwszy eksperyment! Zapiąłem smartfona i popłynąłem z tematem “jak ogarnąć architekturę systemu Big Data?”. Wszak często to naprawdę złożone tematy, trudna i skomplikowana architektura. Wiele komponentów i mechanizmów.

Architektura Big Data to oczywiście złożona kwestia i nie da się w 8 minut wyczerpać tematu. Mam jednak nadzieję, że wyjaśniłem sensownie to o co mi chodziło;-).

Jak ugryźć złożoność? Architektura Big Data z lotu ptaka

Poniżej wklejam wideo i zapraszam do subskrybowania kanału RDF na YouTube;-)

 

Zapraszam na nasz profil LinkedIn oraz do newslettera;-).

UWAGA! Pierwszy polski ebook o Big Data już dostępny! Zapisz się na listę newslettera i podążaj “Szlakiem Big Data”. Więcej tutaj.

 

Loading
Jak zaindeksować dane w Solr z użyciem Spark? [wideo]

Jak zaindeksować dane w Solr z użyciem Spark? [wideo]

Po EKSTREMALNYM sukcesie poradnikowego wideo na temat tworzenia kolekcji w Solr (prawie 50 wyświetleń w pierwszych dniach. SZOK. Hollywood stuka puka do drzwi!), pociągnąłem temat. Ciągle poradnikowo, ciągle Solr. Tym razem jednak zaindeksujemy więcej dokumentów niż tradycyjnie robi się to w tutorialach. I zrobimy to znacznie przyjemniej, niż robi się to zwykle w tutorialach;-). Czas zaprzęgnąć Sparka do indeksacji danych w Solr!

How to index data in Solr with Apache Spark?

Poniżej wklejam wideo i zapraszam do subskrybowania kanału RDF na YouTube;-)

Dodatkowe materiały

Kod który widzisz na wideo jest dostępny publicznie. Znajdziesz go na otwartym repozytorium RDF – a dokładniej tutaj;-). Powodzenia!

Zapraszam na nasz profil LinkedIn oraz do newslettera;-).

UWAGA! Pierwszy polski ebook o Big Data już dostępny! Zapisz się na listę newslettera i podążaj “Szlakiem Big Data”. Więcej tutaj.

 

 

Loading