Hvala što ste poslali upit! Jedan od naših članova tima će vas uskoro kontaktirati.
Hvala što ste poslali rezervaciju! Jedan od naših članova tima će vas uskoro kontaktirati.
Trajanje 35 sati
Sadržaj kursa
Osnove uskladištenja podataka
- Namena, komponente i arhitektura skladišta
- Martovi podataka, preduzeća skladišta i lakehouse obrasci
- Osnove OLTP-a i OLAP-a i razdvajanje opterećenja
Dimenziono modelovanje
- Činjenice, dimenzije i zrnaste veličine
- Zvezdasta šema u odnosu na pahuljastu šemu
- Vrste spori menjajućih dimenzija i njihov tretman
ETL i ELT procesi
- Strategije ekstrakcije iz OLTP baza i API-ja
- Transformacije,čišćenje podataka i usaglašavanje
- Obrasci učitavanja, orkestracija i upravljanje zavisnostima
Kvalitet podataka i upravljanje metapodacima
- Profiliranje podataka i pravila validacije
- Usaglašavanje master i referentnih podataka
- Poteklost, katalozi i dokumentacija
Analitika i performanse
- Koncepti kocke (cubing), agregacija i materijalizovani pogledi
- Podela (partitioning), klasterovanje i indeksiranje za analitiku
- Upravljanje opterećenjem, keširanje i podešavanje upita
Bezbednost i upravljanje
- Kontrola pristupa, uloge i bezbednost na nivou redova
- Razmatranja poštovanja propisa i revizija
- Kopiranje (backup), oporavak i prakse pouzdanosti
Moderne arhitekture
- Oblačna skladišta podataka i elastičnost
- Strim ingestija i gotovo real-time analitika
- Optimizacija troškova i praćenje
Završni projekat: Od izvora do zvezdaste šeme
- Modelovanje poslovnog procesa u činjenice i dimenzije
- Izgradnja end-to-end ETL ili ELT toka rada
- Objašnjavanje (publishing) dasborda i validacija metrika
Rezime i sledeći koraci
Uslovi
- Znanje o relacionim bazama podataka i SQL-u
- Iskustvo u analizi podataka ili izveštavanju
- Osnovno upoznavanje sa oblakom ili lokalnim platformama za podatke
Publika
- Analitičari podataka koji prelaze u uskladištenje podataka
- BI programeri i inženjeri ETL-a
- Arhitekte podataka i lideri timova
Iskustva korisnika (3)
Prikazivanje različitih načina optimizacije naših PySpark upita.
Ivan Abrashev - UBB + DZI (KBC GROUP)
Kurs - Efficient Data Processing on Kubernetes with PySpark, Pandas & Polars
Mašinski prevedeno
Putovanje kroz svet Sparka: veoma intenzivan kurs. DSL, Spark SQL, particioniranje u odnosu na bukete.
Georgiana Elisabeta
Kurs - Apache Spark Fundamentals
Mašinski prevedeno
Vježbe iz prakse. Nastava je trebala trajati 5 dana, ali 3 dana su mi pomogla da razjasnim mnogo pitanja koja sam imao/imala tokom rada sa NiFi.
James - BHG Financial
Kurs - Apache NiFi for Administrators
Mašinski prevedeno