Dátová kvalita a dátové sklady
Skúsenosti s vývojom kontrol kvality a spracovaním chýb v prostrediach Azure Data Factory a Databricks s použitím Pythonu a SQL.
O MCIFT a Martinovi Kasalovi
MCIFT je nezávislý aplikovaný výskum a verejný výskumný softvér, ktorý vyvíja Martin Kasala. Spája skúsenosti zo softvérového vývoja, dátovej kvality, testovania dátových skladov, analýzy procesov, Pythonu a cloudového vývoja s transparentným výskumom kandidátnych príznakov.
Relevantné skúsenosti
Praktické zázemie pre aplikovaný výskum.
Martin pôsobil ako softvérový inžinier, full-stack vývojár, konzultant, vedúci tester a analytik. Pre MCIFT sú podstatné najmä skúsenosti s kvalitou dát, automatizovaným testovaním, cloudovým vývojom a prevodom prevádzkových požiadaviek na merateľné kontroly.
Testovanie a merateľné porovnanie
Vedenie testovania medzinárodného bankového dátového skladu, automatizácia dátových kontrol a systematické reportovanie výsledkov zainteresovaným stranám.
Full-stack a cloudový vývoj
Vývoj webových a API riešení s Reactom, FastAPI a Dockerom, nasadzovanie v Azure a dôraz na bezpečnosť, testovanie a technickú dokumentáciu.
Analýza procesov a systémov
Modelovanie AS-IS a TO-BE procesov, návrh databázových a workflow modelov a preklad prevádzkových požiadaviek do testovateľných IT riešení.
Účel projektu
Cieľom je prekladať verziované matematické pravidlá do kontrolovateľných kandidátnych príznakov pre technické a digitálne systémy.
Vedecké vymedzenie
MCIFT je experimentálny deterministický výskumný softvér. Vizualizácie a ukážky nie sú všeobecnou validáciou, certifikovanou diagnostikou ani zárukou výkonu.
Spôsob vývoja
Mapovania majú byť transparentné, pred hodnotením zmrazené a porovnané s jednoduchými aj zavedenými metódami na reálnych dátach.
Záväzok k výsledkom
Správa z validácie má uvádzať zlepšenia, zlyhania, neutrálne výsledky, falošné poplachy, nezachytené udalosti a neistotu.
Aktuálne modely, interpretácie a limity.
Verejné poznámky vysvetľujú vybrané výpočtové modely a ich obmedzenia. Každá poznámka oddeľuje vizualizáciu, výpočtovú interpretáciu a požiadavky validácie.