KOC usposabljanja   /   Podatkovno skladiščenje in ETL za MSP
KOC 4.0 · Data Warehouse · ETL · PostgreSQL

Podatkovno skladiščenje in ETL za MSP

Kako podatke iz ERP-ja, CRM-ja, proizvodnje, Excelov in drugih sistemov pretvoriti v urejeno, zanesljivo podatkovno osnovo za analitiko in BI?

Od razpršenih podatkov do ene analitične osnove
Poslovni sistem ERP
Prodaja CRM
Datoteke Excel / CSV
Operativa Proizvodnja
Extract · Transform · Load ETL → PODATKOVNO SKLADIŠČE
Analitika OLAP
Uporaba BI / Dashboardi
Najprej bistveno vprašanje

Zakaj sploh potrebujemo podatkovno skladišče?

Ker podatki v podjetju običajno niso na enem mestu. Prodaja je v enem sistemu, finance v drugem, proizvodnja v tretjem, del podatkov pa pogosto še vedno živi v Excelovih datotekah.

Podatkovno skladišče te podatke združi, očisti in strukturira tako, da lahko uporabniki analizirajo eno konsistentno različico podatkov namesto različnih številk iz različnih virov.

Tipičen izziv MSP

Ko trije sistemi pokažejo tri različne številke

Brez podatkovnega skladišča

“Katera številka je prava?”

  • podatki so razpršeni med sistemi
  • Exceli se ročno združujejo
  • isti kazalnik je izračunan na več načinov
  • poročila zahtevajo veliko ročnega dela
  • napake se pogosto odkrijejo prepozno
S podatkovnim skladiščem

Enotna analitična osnova

  • podatki iz različnih virov so povezani
  • poslovna pravila so določena enkrat
  • ETL avtomatizira pripravo podatkov
  • kakovost podatkov je nadzorovana
  • BI in OLAP uporabljata pripravljene podatke
Dimenzijsko modeliranje

Kaj je zvezdna shema?

Zvezdna shema je eden ključnih načinov organizacije podatkov za poslovno analitiko.

V središču so fakti oziroma meritve, kot so prodaja, količina, strošek ali prihodek. Okoli njih so dimenzije, ki povedo, kdo, kaj, kdaj in kje.

Tako lahko na primer isto prodajo analiziramo po kupcu, izdelku, času ali lokaciji.

Dimenzija IZDELEK
Dimenzija KUPEC
Faktna tabela PRODAJA
Dimenzija ČAS
Dimenzija LOKACIJA
ETL v praksi

Kaj ETL dejansko naredi s podatki?

ETL ni samo premikanje podatkov iz sistema A v sistem B. V procesu se podatki zajamejo, preverijo, preoblikujejo in pripravijo za zanesljivo uporabo.

E

Extract

Podatke zajamemo iz ERP-ja, CRM-ja, datotek, proizvodnih sistemov, API-jev ali drugih virov.

T

Transform

Podatke očistimo, pretvorimo, povežemo in nad njimi izvedemo potrebna poslovna pravila.

L

Load

Pripravljene podatke zapišemo v podatkovno skladišče, kjer postanejo osnova za analitiko.

Kaj pa, če podatek manjka, je napačen ali pride dvakrat?
01   preveri vir podatka
02   validiraj zapis
03   izvedi transformacijo
04   obravnavaj napako
05   zapiši rezultat
06   evidentiraj izvajanje ETL
KOC usposabljanje

16 PU praktičnega dela s podatki

Program je namenjen IT kadru v MSP, ki želi razumeti načrtovanje, postavitev in vzdrževanje podatkovnega skladišča.

Obseg 16 pedagoških ur
Izvedba 3 delavnice
Oblika Fizično · delo na računalnikih
Tehnologije PostgreSQL + prenosljive dobre prakse
Kompetence Napredne tehnične digitalne kompetence
01
Arhitektura podatkovnega skladišča in dimenzijsko modeliranje

Razumevanje arhitekture in načrtovanje podatkov za učinkovito poslovno analitiko.

4 PU
02
Dimenzije, fakti in SCD

Faktne in dimenzijske tabele ter počasi spreminjajoče se dimenzije.

3 PU
03
ETL procesi

Zajem, transformacija, polnjenje in sistematična obravnava napak.

4 PU
04
Kakovost podatkov in optimizacija

Validacija podatkov, indeksiranje ter optimizacija delovanja skladišča.

3 PU
05
Povezava z OLAP in BI slojem

Kako podatkovno skladišče postane zanesljiv vir za analitiko in poslovno inteligenco.

2 PU
Kakovost podatkov Kaj pomaga popoln dashboard, če so podatki pod njim napačni?
Manjkajoče vrednosti

Naučimo se prepoznati in ustrezno obravnavati nepopolne podatke.

Podvojeni zapisi

Preprečimo, da isti poslovni dogodek v analitiki nastopa večkrat.

Neusklajene šifre

Podatke iz različnih sistemov povežemo v skupno poslovno strukturo.

Zmogljivost

Z indeksiranjem in optimizacijo poskrbimo za učinkovite poizvedbe.

Končni cilj

Kako podatkovno skladišče pride do dashboarda?

Ko je podatkovna osnova pravilno postavljena, lahko nad njo gradimo OLAP modele, poslovne analize, poročila in nadzorne plošče.

Zaledje Podatkovno skladišče

Preverjeni, strukturirani in zgodovinsko konsistentni podatki.

Uporaba OLAP · BI · Dashboardi

Analize, KPI-ji in poročila, ki temeljijo na isti podatkovni osnovi.

Po zaključku

Kaj boste znali narediti?

01

Načrtovati zvezdno shemo

Za svojo poslovno domeno določiti faktne tabele, dimenzije in povezave.

02

Izdelati ETL proces

Podatke zajeti, transformirati, preveriti in naložiti v podatkovno skladišče.

03

Vzdrževati in optimizirati

Razumeti kakovost podatkov, obravnavo napak, indeksiranje in osnovno optimizacijo skladišča.

KOC 4.0 · napredne tehnične kompetence

Imate podatke v več sistemih in želite zgraditi boljšo podatkovno osnovo?

Usposabljanje lahko prilagodimo vašemu tehnološkemu okolju, poslovni domeni in primerom podatkov, s katerimi dela vaša IT ekipa.

Od razpršenih podatkov do zanesljive analitične osnove

Predstavite nam svoje vire podatkov, obstoječe okolje in cilje. Program prilagodimo tako, da bo znanje čim bolj uporabno za vašo IT ekipo.

Menu
ResEvo D.O.O.
Finžgarjeva 1a
4248 Lesce, SLOVENIJA
MŠ: 2296896
DŠ: SI13015702
TRR: SI56 0400 0027 8985 327
Srce podjetja ResEvo je ekipa, ki jo tvorijo izjemni ljudje.
Prodaja
prodaja@resevo.com
Tel: +386 41 911 523
Podpora
podpora@resevo.com
Made on
Tilda