U sklopu prve faze implementirano je standardno rješenje tvrtke Neos d. o. o. za automatizaciju i nadzor ETL procesa, te samo skladište podataka koje se temelji na OneView HP modelu a služi kao podloga za različite analize u područjima: segmentacije i analize korisnika, naplate, prometa, iskorištenja mrežnih kapaciteta, radnih naloga i ostalih pokazatelja interesantnih u Telco industriji.

Kvalitetan dizajn skladišta i posljedično procesa obrade i prijenosa podataka (ETL proces) smanjuju probleme koji se tipično pojavljuju.

ETL proces - Koristi se za izvlačenje podataka iz izvorišnih sustava, transformaciju podataka i Load podataka u Data Warehouse

Organizacijski odbor TITANS Europske Triatlon Lige ugostio Gordana Kožulja Organizacijski Odbor Titans European Triathlon League (ETL) ugostio je Gordana Kožulja, proslavljenog hrvatskog plivača, danas sportskog djelatnika i poslovnog savjetnika.

Gordan je otprije upoznat sa projektom organizacije međunarodne triatlon utrke Titans ETL Zagreb koja će se održati 9. lipnja ove godine.

Kreirali smo ETL (extract, transform, load) module u SAS DI Studiu pomoću kojih smo skupili podatke iz različitih aplikacija u jedinstveni repozitorij podataka (DDS ⠀ Detail Data Store).

Microsoft SQL Server je vjerojatno najviše korišteni komercijalni RDBMS danas; koristimo ga za transakcijske i OLAP baze podataka, te za izvješćivanje i kao ETL alat, a od nedavno i za pohranu GIS podataka.

Iz izrađenog modela jednoznačno slijedi i model DWH (korištenjem odgovarajućih pravila imenovanja objekata u bazi podataka) koji kao takav predstavlja osnovu za izradu ETL procedura.

ETL je moguće izvesti i ručnim putem, kreiranjem SQL, PL SQL ili sličnih procedura.

Ovaj način u većini slučajeva još uvijek predstavlja jeftiniju varijantu izrade ETL-a, prvenstveno zbog samih cijena ETL alata koja je u pravilu u direktnom odnosu s njihovim kvalitetama.

ALFATEC Group u mogućnosti je podržati korisnika u svim modelima pristupa izrade ETL procedura, s obzirom da posjedujemo tim ljudi koji posjeduje znanje za rad sa svim vodećim ETL alatima, kao i znanje ručne izrade ETL procedura na svim skriptnim jezicima.

Naše poznavanje svih modela pristupa izrade ETL procedura rezultat je brojnih Business Intelligence/Data Warehouse projekata koje je naš tim konzultanata uspješno izveo tijekom zadnjih 12 godina bavljenja ovim područjem.

Arhitektura rješenja podrazumijeva uključivanje svih relevantnih izvora podataka u ETL (Extract Transform and Load) proces koji svakodnevno, u noćnim obradama, puni Skladište podataka.

Zbog svih tih mogućnosti, Streams može biti temelj za ETL (Extracting/Transforming/Loading) procese kod skladišta podataka.

Istodobno, postoji potreba za pohranu i prikazivanje trenutnih podataka - točaka-u-vremenu, kako bi se podržale DW/BI " dashboard " aplikacije, situacijski značajne funkcionalnosti, pa čak i ETL - load processing. Dakle, kako se dizajnira skladište podatke za spremanje i prezentiranje obje slike podataka (tj. vremenski promjenljive i trenutno aktualne)?

Unutar nje nalaze se Integration services za ETL (Extract-transform-load), Reporting services i Analysing services.

ALFATEC Group čišćenje podataka nudi kao zasebnu uslugu ali i kao sastavni dio u izgradnji Business Intelligence/Data Warehouse sustava gdje u sklopu izrade ETL procedura kreiramo i procedure za čišćenje podataka čime se osigurava prijenos konzistentnih i pročišćenih podataka iz izvorišnih sustava u Data Warehouse.

ETL predstavlja niz procedura za izdvajanje (eng.

Izrada ETL procedura u pravilu predstavlja najzahtjevniji dio Business Intelligence projekta u smislu angažmana ljudskih resursa Business Intelligence konzultanata.

Često se prilikom izrade ETL-a koriste ETL alati koji osiguravaju bržu ali i dugoročno prihvatljiviju izvedbu ove faze Business Intelligence projekta.

Prvenstveni razlog iz kojeg se koriste ETL alati leži u tome što se na taj način olakšava buduće održavanje, nadogradnja ali i dokumentiranje samog procesa.

Sam sustav predstavlja relativno kompleksnu cjelinu s više od deset različitih izvornih sustava koji se temelje na različitim tehnološkim platformama, te preko 300 dnevnih ETL procesa.

Velike domaće i međunarodne tvrtke dale su nam povjerenje u projektima iz domene dizajna baza podataka, strategije oporavka od katastrofe i kontinuiteta poslovanja (DR/BCP), dohvatu, transformaciji i pohrani podataka iz drugih sustava (ETL) tijekom migracije ili proširenja sustava, čišćenja i održavanja kvalitete podataka (DQM), kao i izgradnje sustava izvještavanja (OLAP, BI).

Titan ETL kao sportaš i kao purger, dajem svoju punu moralnu podršku ovoj utrci.

Iz modula transakcijskih aplikacija se ETL postupcima (Extraction Transformation Loading) podaci transformiraju i sele u skladište podataka (DW - Data Warehouse).

Naručitelji sustava mogu biti (neugodno) iznenađeni situacijom u kojoj se opet govori o razvoju ETL-a, umjesto da se podatke u skladištu jednostavno koristi.

U sustavu kojeg smo razvili informacije sadržane u takvoj tabličnoj specifikaciji koriste se za automatsko generiranje strukture ciljnih tablica te ETL procedura potrebnih za njihovo punjenje.

Time je preskočen korak ručne izrade ETL-a, a sve kasnije promjene u specifikaciji realiziraju se u sustavu automatski i trenutačno.

Oni u potpunosti zadovoljavaju sve ANSI/TIA/EIA 568 A 568 B and ISO/IEC 11801 standarde.; verifikacija laboratorija UL/ETL SAD i 3 P - Nizozemska.

Kratka biografija autora: ETL expert znanje stekao u različitim sektorima i industriji, počevši od trgovine, telekomunikacija, bankarstva.