Duomenų kūrėjas

Pagrindinės pareigos

• Apdorokite sudėtingus finansinius duomenis - tvarkykite didelės apimties finansinių duomenų rinkinius iš įvairių šaltinių, įskaitant bankus, mokėjimo vartus ir tvarkytojus, užtikrindami duomenų vientisumą įvairiuose formatuose ir struktūrose.
• Kurkite ir prižiūrėkite sudėtingus vamzdynus - kurkite ir optimizuokite vamzdynus, kuriuose taikomos sudėtingos verslo taisyklės, finansiniai skaičiavimai ir transformacijos, kad sandoriai būtų apdorojami tiksliai.
• Laiku ir įvykiais grindžiamas apdorojimas - kurkite įvykiais grindžiamas architektūras, kad būtų laikomasi griežtų SLA, taikomų sandorių apdorojimui, atsiskaitymams ir derinimui su bankais ir mokėjimo partneriais.
• Suteikite galimybę teikti ataskaitas ir AI įžvalgas - struktūrizuokite ir paruoškite duomenis pažangiai analizei, ataskaitoms ir AI įžvalgoms, kad pagerintumėte mokėjimo sėkmės rodiklius, aptiktumėte sukčiavimą ir optimizuotumėte sandorių srautus.

Ką atsinešite

• Programavimas: Programavimas: gerai išmanyti Python ir OOPS sąvokas, gebėti rašyti modulinį ir struktūrizuotą kodą ir puikiai spręsti problemas.
• Didžiųjų duomenų technologijos: Praktinė patirtis naudojant tokias sistemas kaip Spark (PySpark), Kafka, Apache Hudi, Iceberg, Apache Flink ar panašias priemones, skirtas paskirstytam duomenų apdorojimui ir srautiniam duomenų perdavimui realiuoju laiku.
• Debesų platformos: AWS, "Google Cloud Platform" (GCP) arba "Microsoft Azure" duomenų infrastruktūrai kurti ir valdyti.
• Duomenų saugyklos ir modeliavimas: Duomenų sandėliavimo koncepcijų ir duomenų modeliavimo principų išmanymas.
• ETL sistemos: Patirtis naudojant ETL įrankius, tokius kaip "Apache Airflow" ar panašios duomenų transformavimo sistemos.
• Duomenų ežerai ir saugykla: "Amazon S3", "Google Cloud Storage" arba "Azure Blob Storage".
• Versijų kontrolė: Git versijų valdymo ir bendro kodavimo ekspertizė.
• Sudėtingos sistemos tvarkymas: Turėtų turėti patirties dirbant su sudėtingomis sistemomis ir kuriant sudėtingas sistemas nuo nulio, turėtų būti gerai susipažinęs su sudėtingų problemų sprendimu.

Patirtis ir reikalavimai

• Informatikos, informacinių technologijų bakalauro laipsnis arba lygiavertė patirtis.
• 1-5 metų patirtis duomenų inžinerijos, ETL kūrimo arba duomenų bazių valdymo srityje.
• Labai pageidautina ankstesnė patirtis debesų aplinkoje (pvz., AWS, GCP, Azure).
• Patirtis dirbant su sudėtingomis sistemomis ir kuriant sudėtingas sistemas nuo nulio, daugiausia dėmesio skiriant našumo derinimui ir optimizavimui.