Data Engineer

MDS je u potrazi za iskusnim Data inženjerom koji će preuzeti ključnu ulogu u razvoju, implementaciji i održavanju ETL procesa, automatizaciji i prikupljanju podataka sa različitih izvora, sa posebnim akcentom na optimizaciji. Kao član našeg tima, radićete u dinamičnom okruženju, na velikim projektima i kontinuiranoj integraciji, uz doprinos i razvoja stabilnih, skalabilnih i efikasnih softverskih rešenja na savremenim tehnologijama.USLOVI KOJE TREBA DA ISPUNJAVA KANDIDATPoznavanje programskih jezika – posebno rad u SQL-u i poznavanje Python-a (standardne biblioteke, package managera, upravljanje verzijama td) ili R za obradu podatakaDobro poznavanje OOP principa i design pattern-aAutomatizacija i skriptovanje tj. pisanje Bash/Python skripti za automatizaciju procesaIskustvo u integraciji sa eksternim sistemima (RPC/SOAP/REST)Iskustvo u radu sa sa relacionim bazama podataka (PostgreSQL, MySQL, MS SQL)Razumevanje rada OLAP baza i razlike u odnosu na OLTP sistemePoznavanje načina rada Data WareHouse (DWH) sistemaData analiza i pisanje SQL upita (Oracle/MySQL/Postgres/ClickHouse)Upravljanje skladištem podataka i održavanje Data Warehouse i analitičke platformeIskustvo u radu sa relacionim bazama podataka (PostgreSQL, Oracle, ClickHouse, MySQL, SQL Server ili slične tehnologije)Poznavanje funkcionisanja CI/CD alata: Docker-a, Kubernetes-a i Git-aRad sa REST/SOAP API web servisimaKomforan rad na Linux/Unix operativnim sistemima (bash/sed/awk)Minimum 3 godine iskustva u programiranjuPOŽELJNA ZNANJABig Data alati kao što su Apache Spark, Apache Airflow, dbtKafka event streaming ekosistem (Kafka Connect, Flink)NoSQL baze: Cassandra/ScyllaDB, RedisKubernetesR programski jezik za statističku obradu podatakaZnanje više SQL dijalekata (T-SQL, PL/SQL, SQL standarda)Iskustvo u radu sa BI alatima i pripremi izveštajaOPIS RADNIH ZADATAKAImplementacija i održavanje softverskih infrastrukturnih komponentiRazvoj ETL/ELT procesa – Implementacija i optimizacija tokove podataka iz različitih izvoraUpravljanje skladištem podataka i održavanje Data Warehouse i analitičke platformeIntegracija različitih softverskih servisa prilikom razvoja proizvoda (Redis, Elastic, RabbitMQ, database migrations)Upotreba skripting jezika (Bash, Python) i korišćenje kontejnerskih tehnologija kao što su Docker i KubernetesImplementacija OOP koncepata prilikom razvoju softveraSaradnja sa DevOps i AppSec timovima - Bliska saradnja sa razvojnim timovima na dizajnu rešenja i infrastrukturnim potrebamaRad sa Linux/Unix operativnim sistemima