Data Engineer from zero to Junior - bezplatný kurz od Skillboxu, školenie, Termín: 29.11.2023.
Rôzne / / November 30, 2023
Pre začiatočníkov
Naučte sa Python a SQL od začiatku. Naučte sa zbierať, analyzovať a spracovávať dáta. Vyriešte problémy na základe skutočných prípadov a pridajte ich do svojho portfólia. Kariéru v dátovom inžinierstve môžete začať už počas štúdia.
Pre programátorov
Zlepšite svoje znalosti SQL pre prácu s databázami. Prejdete si celú cestu dátového inžiniera od zberu nespracovaných dát až po nasadenie modelu. Skúsenosti s programovaním vám pomôžu rýchlo pochopiť novú profesiu a zmeniť váš odbor.
Pre začínajúcich analytikov
Naučte sa všetky fázy práce s údajmi. Naučte sa zhromažďovať informácie z rôznych zdrojov, zostavovať architektúru na ich ukladanie a vizualizovať zostavy. Budete schopní samostatne pripraviť dáta pre následnú analýzu.
Autor kurzu strojového učenia. Senior Data Scientist, vedúci tímu v SberData, Sber. 5+ rokov v odbore
Rektor kurzu, riaditeľ výskumu a vývoja, UBIC Tech. Viac ako 15 rokov skúseností vo vývoji
Data Scientist v Sberbank, matematik vo Výpočtovom centre Ruskej akadémie vied. Blok „Základy matematiky pre vedu o údajoch“. Viac ako 4 roky praxe vo výučbe vyššej matematiky
Prvá úroveň: základný výcvik
Zoznámte sa s hlavnými oblasťami Data Science, trénujte a implementujte svoj prvý model ML. Získať základné znalosti z matematiky, štatistiky a teórie pravdepodobnosti. To všetko vám pomôže pochopiť základné princípy práce s dátami. Priemerná doba dokončenia je 6 mesiacov.
Úvod do vedy o údajoch
Prejdete všetkými fázami práce s dátami. Naučte sa identifikovať problémy, zbierať obchodné požiadavky. Stiahnete si údaje z rôznych zdrojov, vykonáte prieskumnú analýzu a pripravíte súbor údajov na ďalšie použitie. Trénujte a implementujte hotový model ML, vyskúšajte sa ako produktový a marketingový analytik. Naučte sa formulovať a testovať hypotézy. Osvojte si základné nástroje pre prácu: Python, SQL, Excel, Power Bi, Airflow.
Základná matematika pre vedu o údajoch
Získajte základné znalosti z matematiky pre prácu so strojovým učením. Pochopíte, čo sú aproximácia, interpolácia, funkcie, regresie, matice a vektory. Naučte sa pracovať s matematickými entitami v knižnici SymPy Python.
Základy štatistiky a teórie pravdepodobnosti
Pochopíte princípy práce s náhodnými premennými a udalosťami. Oboznámte sa s niektorými typmi distribúcií a štatistických testov, ktoré sú užitočné pri vytváraní modelov a testovaní hypotéz.
Možnosť stáže
Na získanie praxe stačia základné vedomosti a zručnosti – v štúdiu na kurze a zároveň vo firme môžete pokračovať.
Druhá úroveň: Data Engineer Junior
Naučte sa zhromažďovať komplexné súbory údajov, pripravovať ukážky a budovať kanály pre prácu, nasadzovať projekty DS od začiatku a testovať kód. Budete pripravení pracovať ako Junior Data Engineer. Priemerná doba dokončenia je 6 mesiacov.
Úvodný blok
Zistite, čo robí dátový inžinier, akú úlohu hrá v projekte Data Science a aké sú jeho kariérne cesty. Pochopíte, ako je kurz štruktúrovaný a aké témy budete študovať.
SQL
Naučte sa manipulovať s údajmi v existujúcich tabuľkách, vykonávať operácie vkladania, vymazávania a aktualizácie. Údaje z databázy môžete ukladať v rôznych formátoch. Získajte informácie o funkciách okien a základoch prípravy dátových trhov pomocou SQL. Naučte sa zabezpečiť správne vkladanie informácií v režime transakcie. Budete schopní čítať a porozumieť protokolu transakcií. Zistite, čo sú indexy, architektúra indexov a kde sa používajú. Naučte sa techniky na urýchlenie dopytov.
Python. LVL 2
Zvážte typy údajov, ako ich možno konvertovať a ako Python a SQL spolupracujú – získavanie údajov z databázy, práca s údajmi a spúšťanie dotazov. Naučte sa základné koncepty dátových schém JSON a XML. Budete môcť konfigurovať ladenie aplikácií, zapisovať testy, anonymizovať a šifrovať dáta.
Knižnice pre Python
Dozviete sa, čo sú to knižnice pre prácu s grafmi, riadené učenie, vizualizácia metrík a zdroje datasetov. Naučte sa používať Python a knižnice na prácu s údajmi. Môžete pokračovať v učení Pandy.
Prúd vzduchu
Prečítajte si kľúčové koncepty a postupy pre prácu s Airflow. Naučte sa základy architektúry a interoperability od používateľského rozhrania po CLI. Zostavte si svoj prvý dátový kanál.
Základy Sparku
Master Spark: zistite, s akými výpočtovými prostriedkami pracuje, ako ukladá dáta a pracuje s pamäťou a diskom. Postavte si svoj prvý lokálny stánok. Naučte sa základy RDD: základné pojmy, práca so zdrojmi, akcie. Naučte sa pracovať s Dataframe API. Naučte sa problémy s výkonom a optimalizáciou pri používaní Dataframe, dátové zdroje a typy, prácu s platnými/neplatnými dátami, spracovanie chýb, UDF, interakciu s Pythonom a SQL.
Základy algoritmov strojového učenia
Pochopíte hlavné typy modelov strojového učenia, kľúčové pojmy a definície. Naučte sa regresné algoritmy a klastrovacie algoritmy.
Nasadenie
Naučte sa hlavné fázy prípravy modelu na nasadenie, prístupy k budovaniu API a spôsoby spracovania chýb a ladenia aplikácií. Budete schopní odstraňovať problémy s nasadením a ovládať základné nástroje chvastania. Zoznámte sa s kľúčovými procesmi bash: písanie skriptov, práca s premennými a textové editory sed a awk.
Záverečné projekty
Po absolvovaní prvej úrovne pripravte úvodný projekt. Na konci kurzu odprezentujete svoju záverečnú prácu.
Úvod do vedy o údajoch
Upevnite svoje nové znalosti na individuálnom projekte – prejdete od načítania dát až po implementáciu modelu. Vyriešte problémy dátového inžiniera, ML inžiniera a dátového analytika, aby ste sa rozhodli pre svoju špecializáciu.
dátový inžinier
Záverečný projekt na juniorskej úrovni. Vykonajte kohortovú analýzu a stiahnite si referencie API. Vytvárajte informačné panely na základe prijatých údajov.
Bonusové kurzy
Kariéra vývojára: Zamestnanosť a rozvoj
Dozviete sa, ako si vybrať vhodné voľné pracovné miesto, pripraviť sa na pohovor a vyjednávať so zamestnávateľom. Budete môcť rýchlo získať pozíciu, ktorá spĺňa vaše očakávania a schopnosti.
Systém riadenia verzií Git
Naučte sa meniť kód verzie, vytvárať a spravovať archívy, vetvy a riešiť konflikty verzií. Naučte sa užitočné pravidlá pre prácu s Git.
Angličtina pre IT špecialistov
Získajte jazykové znalosti, ktoré vám pomôžu absolvovať pohovor v zahraničnej spoločnosti a pohodlne komunikovať v zmiešaných tímoch.