Viši inženjer podataka

Opis posla

Naš klijent traži visokokvalificiranog Višeg inženjera podataka za podršku naprednoj obradi podataka i inženjerskim inicijativama u automobilskom okruženju. Uloga se fokusira na dizajniranje i optimizaciju robusnih cjevovoda podataka, rukovanje velikim količinama testnih podataka i doprinos arhitekturi distribuiranih sistema.

Idealan kandidat donosi stručnost u razvoju temeljenom na Pythonu, praksama inženjerstva podataka i cloud infrastrukturi, uz iskustvo rada u složenim produkcijskim okruženjima.

Ključne odgovornosti

• Dizajniranje, razvoj i održavanje skalabilnih ETL/ELT cjevovoda za obradu velikih podataka
• Upravljanje unosom i transformacijom velike količine testnih podataka u više formata
• Izgradnja i optimizacija distribuiranih sistema za obradu podataka s fokusom na performanse i pouzdanost
• Implementacija objektno orijentiranih rješenja korištenjem naprednih programskih obrazaca i tehnika konkurencije
• Saradnja s interdisciplinarnim timovima na podršci aplikacijama i radnim tokovima vođenim podacima
• Implementacija i upravljanje aplikacijama u Windows Server okruženjima
• Razvoj i održavanje CI/CD cjevovoda korištenjem alata poput GitHub Actions
• Praćenje performansi sistema i implementacija rješenja za evidentiranje, uključujući integraciju s alatima za nadzor poput Grafana
• Rukovanje operacijama sa sistemom datoteka, uključujući konfiguracije mrežnih diskova i NAS interakcije
• Osiguravanje efikasne integracije i upravljanja bazama podataka u Oracle, SQL i MongoDB sistemima

Potrebno iskustvo

• Iskustvo na višem nivou u inženjerstvu podataka ili srodnim ulogama
• Jako praktično iskustvo u razvoju produkcijskih ETL cjevovoda
• Provjerena stručnost u dizajniranju distribuiranih sistema i rukovanju velikom obradom podataka
• Iskustvo rada u korporativnim okruženjima, poželjno u automobilskom ili testnom području
• Dobro razumijevanje tehnika konkurencije, obrade više procesa i optimizacije performansi
• Poznavanje okruženja za implementaciju i sistem na Windows platformi

Potrebne vještine

• Napredno poznavanje Pythona (verzije 3.9–3.11)
• Jako poznavanje principa objektno orijentiranog programiranja
• Iskustvo s ETL/ELT cjevovodima i unosom velikih podataka
• Poznavanje SQL-a i tehnologija baza podataka uključujući Oracle i MongoDB
• Praktično iskustvo s Microsoft Azure
• Poznavanje CI/CD praksi i alata (npr. GitHub Actions)
• Poznavanje obrade datoteka u više formata podataka
• Iskustvo s PowerShell skriptiranjem i implementacijom Windows servisa

Poželjne / Dodatne vještine

• Iskustvo s domen-specifičnim okvirima za podatke (npr. Sympathy za podatke)
• Poznavanje automobilskih testnih sistema i povezanih radnih tokova
• Razumijevanje mrežnih sistema datoteka (SMB/CIFS, NAS)
• Iskustvo s rješenjima za evidentiranje i nadzor na nivou sistema datoteka i infrastrukture

Obrazovanje

• Diploma prvog ili drugog ciklusa iz računarskih nauka, inženjerstva podataka ili srodnog područja

Zahtjev za jezik

• Engleski jezik – profesionalno znanje