Duomenų inžinierius nuo nulio iki jaunesniojo – nemokami kursai iš Skillbox, mokymai, Data: 2023 m. lapkričio 29 d.
įvairenybės / / November 30, 2023
Pradedantiesiems
Išmokite Python ir SQL nuo nulio. Išmokite rinkti, analizuoti ir apdoroti duomenis. Išspręskite problemas pagal realius atvejus ir įtraukite jas į savo portfelį. Duomenų inžinerijos karjerą galite pradėti studijuodami.
Programuotojams
Pagerinkite savo žinias apie SQL, kad galėtumėte dirbti su duomenų bazėmis. Jūs pereisite visą duomenų inžinieriaus kelią nuo neapdorotų duomenų rinkimo iki modelio diegimo. Patirtis programavimo srityje padės greitai perprasti naują profesiją ir pakeisti savo sritį.
Pradedantiesiems analitikams
Išmokite visus darbo su duomenimis etapus. Išmokite rinkti informaciją iš įvairių šaltinių, sukurti jos saugojimo architektūrą ir vizualizuoti ataskaitas. Galėsite savarankiškai paruošti duomenis tolesnei analizei.
Mašininio mokymosi kurso autorius. Vyresnysis duomenų mokslininkas, „SberData“, „Sber“ komandos vadovas. 5+ metai profesijoje
Kurso pranešėjas, tyrimų ir plėtros direktorius, UBIC Tech. Daugiau nei 15 metų kūrimo patirtis
„Sberbank“ duomenų mokslininkas, Rusijos mokslų akademijos skaičiavimo centro matematikas. Blokas „Matematikos pagrindai duomenų mokslui“. Daugiau nei 4 metų aukštosios matematikos mokymo patirtis
Pirmas lygis: bazinis mokymas
Susipažinkite su pagrindinėmis duomenų mokslo sritimis, apmokykite ir įgyvendinkite savo pirmąjį ML modelį. Įgykite pagrindinių matematikos, statistikos ir tikimybių teorijos žinių. Visa tai padės suprasti pagrindinius darbo su duomenimis principus. Vidutinis užbaigimo laikas yra 6 mėnesiai.
Įvadas į duomenų mokslą
Jūs pereisite visus darbo su duomenimis etapus. Išmokite atpažinti problemas, rinkti verslo reikalavimus. Atsisiųsite duomenis iš įvairių šaltinių, atliksite tiriamąją analizę ir paruošite duomenų rinkinį tolesniam naudojimui. Išmokykite ir įgyvendinkite paruoštą ML modelį, išbandykite save kaip produktų ir rinkodaros analitiką. Sužinokite, kaip formuluoti ir patikrinti hipotezes. Įvaldykite pagrindinius darbo įrankius: Python, SQL, Excel, Power Bi, Airflow.
Pagrindinė duomenų mokslo matematika
Įgykite pagrindinių matematikos žinių, kad galėtumėte dirbti su mašininiu mokymusi. Suprasite, kas yra aproksimacija, interpoliacija, funkcijos, regresijos, matricos ir vektoriai. Išmokite dirbti su matematiniais objektais SymPy Python bibliotekoje.
Statistikos ir tikimybių teorijos pagrindai
Suprasite darbo su atsitiktiniais dydžiais ir įvykiais principus. Susipažinkite su kai kuriais paskirstymo tipais ir statistiniais testais, kurie yra naudingi kuriant modelius ir tikrinant hipotezes.
Galimybė atlikti praktiką
Norint gauti praktiką pakanka bazinių žinių ir įgūdžių – galite tęsti studijas kurse ir vienu metu įmonėje.
Antrasis lygis: Duomenų inžinierius jaunesnysis
Išmokite rinkti sudėtingus duomenų rinkinius, paruošti vitrinas ir kurti vamzdynus darbui, diegti DS projektus nuo nulio ir išbandyti kodą. Būsite pasirengę dirbti jaunesniuoju duomenų inžinieriumi. Vidutinis užbaigimo laikas yra 6 mėnesiai.
Įvadinis blokas
Sužinokite, ką veikia duomenų inžinierius, kokį vaidmenį jis atlieka duomenų mokslo projekte ir kokie jo karjeros keliai. Suprasite kurso struktūrą ir kokias temas studijuosite.
SQL
Išmokite valdyti esamų lentelių duomenis, atlikti įterpimo, išvalymo ir atnaujinimo operacijas. Duomenis iš duomenų bazės galite išsaugoti įvairiais formatais. Sužinokite apie langų funkcijas ir duomenų rinkinių rengimo naudojant SQL pagrindus. Išmokite užtikrinti teisingą informacijos įterpimą operacijos režimu. Galėsite perskaityti ir suprasti operacijų žurnalą. Sužinokite, kas yra indeksai ir indekso architektūra bei kur jie naudojami. Išmokite technikų, kaip pagreitinti užklausas.
Python. 2 Lt
Apsvarstykite duomenų tipus, kaip juos galima konvertuoti ir kaip Python ir SQL veikia kartu – gauti duomenis iš duomenų bazės, dirbti su duomenimis ir vykdyti užklausas. Sužinokite pagrindines JSON ir XML duomenų schemų sąvokas. Galėsite konfigūruoti programų derinimą, rašyti testus, anonimizuoti ir šifruoti duomenis.
Python bibliotekos
Sužinosite, kas yra bibliotekos darbui su grafikais, prižiūrimas mokymasis, metrikų ir duomenų rinkinių šaltinių vizualizavimas. Išmokite naudoti Python ir bibliotekas dirbti su duomenimis. Galite toliau mokytis pandų.
Oro srautas
Peržiūrėkite pagrindines darbo su „Airflow“ koncepcijas ir praktiką. Išmokite architektūros ir sąveikumo pagrindų nuo vartotojo sąsajos iki CLI. Sukurkite pirmąjį duomenų srautą.
„Spark“ pagrindai
„Master Spark“: sužinokite, kokius skaičiavimo išteklius ji naudoja, kaip saugo duomenis ir dirba su atmintimi bei disku. Sukurkite savo pirmąjį vietinį stendą. Išmokite RDD pagrindus: pagrindines sąvokas, darbą su šaltiniais, veiksmus. Išmokite dirbti su Dataframe API. Sužinokite našumo ir optimizavimo problemas, kai naudojate duomenų rėmelį, duomenų šaltinius ir tipus, dirbate su tinkamais / netinkamais duomenimis, klaidų tvarkymą, UDF, sąveiką su Python ir SQL.
Mašininio mokymosi algoritmų pagrindai
Suprasite pagrindinius mašininio mokymosi modelių tipus, pagrindinius terminus ir apibrėžimus. Išmokite regresijos algoritmus ir grupavimo algoritmus.
Diegimas
Sužinokite pagrindinius modelio parengimo diegimui etapus, API kūrimo metodus ir būdus, kaip elgtis su klaidomis ir derinti programas. Galėsite pašalinti diegimo problemas ir įvaldyti pagrindinius „swagger“ įrankius. Susipažinkite su pagrindiniais bash procesais: scenarijų rašymu, darbu su kintamaisiais ir teksto redaktoriais sed ir awk.
Galutiniai projektai
Įveikę pirmąjį lygį, paruoškite įvadinį projektą. Kurso pabaigoje pristatysite savo baigiamąjį darbą.
Įvadas į duomenų mokslą
Įtvirtinkite savo naujas žinias individualiame projekte – nuo duomenų įkėlimo pereisite prie modelio įgyvendinimo. Išspręskite duomenų inžinieriaus, ML inžinieriaus ir duomenų analitiko problemas, kad nuspręstumėte dėl savo specializacijos.
Duomenų inžinierius
Galutinis jaunesniojo lygio projektas. Atlikite kohortos analizę ir atsisiųskite API nuorodas. Kurkite prietaisų skydelius pagal gautus duomenis.
Papildomi kursai
Kūrėjo karjera: užimtumas ir plėtra
Sužinosite, kaip pasirinkti tinkamą laisvą darbo vietą, pasiruošti pokalbiui ir derėtis su darbdaviu. Greitai galėsite užimti Jūsų lūkesčius ir įgūdžius atitinkančią poziciją.
Git versijos valdymo sistema
Išmokite keisti versijos kodą, kurti ir tvarkyti saugyklas, šakas ir išspręsti versijų konfliktus. Išmokite naudingų darbo su Git taisyklių.
Anglų kalba IT specialistams
Įgykite kalbų įgūdžių, kurie padės išlaikyti interviu užsienio įmonėje ir patogiai bendrauti mišriose komandose.