Data Engineer jest odpowiedzialny za projektowanie, rozwj i utrzymanie rozwiazan integracji danych wspierajacych procesy biznesowe i analityczne. Rola ta polega na pracy nad procesami ETL/ELT, zapewniajac, ze dane sa dokladnie i efektywnie pobierane, transformowane i ladowane z rznych systemw zrdlowych do systemw docelowych.
responsibilities :
Rozwj i optymalizacja przeplyww danych: Projektowanie, budowanie i utrzymywanie wydajnych, skalowalnych i niezawodnych potokw danych ETL/ELT w celu pozyskiwania, przetwarzania i przeksztalcania duzych ilosci ustrukturyzowanych i nieustrukturyzowanych danych z rznych zrdel.
Modelowanie i architektura danych: Projektowanie i wdrazanie modeli danych w celu ich optymalnego przechowywania i wyszukiwania. Odgrywanie kluczowej roli w architekturze, projektowaniu i wdrazaniu naszych rozwiazan data lake i lakehouse, zapewniajac skalowalnosc, wydajnosc i bezpieczenstwo.
Hurtownie danych i technologie Big Data: Opracowywanie i zarzadzanie rozwiazaniami wykorzystujacymi nowoczesne platformy hurtowni danych i technologie Big Data (np. Apache Spark, hurtownie danych w chmurze, systemy przetwarzania rozproszonego). Doswiadczenie z technologiami takimi jak Snowflake lub Databricks jest bardzo cenne.
Full-Stack Development dla aplikacji danych: Opracowywanie i utrzymywanie interfejsw API umozliwiajacych dostep do danych i integracje z innymi aplikacjami i uslugami.
Jakosc danych i zarzadzanie danymi: Wdrazanie kontroli jakosci danych, procesw walidacji i monitorowania w celu zapewnienia dokladnosci, spjnosci i niezawodnosci danych. Przestrzeganie najlepszych praktyk w zakresie zarzadzania danymi.
Dostrajanie i optymalizacja wydajnosci: Monitorowanie i optymalizacja wydajnosci potokw danych, zapytan i systemw przechowywania danych.
requirements-expected :
Co najmniej 5 lat doswiadczenia w rozwoju ETL, integracji danych lub inzynierii danych
Doswiadczenie w projektach integracji systemw, obejmujacych wiele zrdel i docelowych systemw danych
Bieglosc w jezyku Python (opcjonalnie Java lub Scala) oraz dialekty SQL
Znajomosc frameworkw zwiazanych z procesowaniem danych np. Apache Spark, Apache Flink
Znajomosc rozwiazan chmurowych do przechowywania danych np. Snowflake, Databricks, Amazon Redshift, Google Big Querry, Azure Synapse Analytics lub podobnych
Znajomosc roznych technologii magazynw danych (relacyjne i NoSQL DB, obiektowe: S3 ,Blob Storage)
Umiejetnosc tworzenia (REST) API oraz integrowania danych
Silne umiejetnosci rozwiazywania problemw i dbalosc o szczegly
Doskonale umiejetnosci komunikacyjne i wsplpracy
Zdolnosc do samodzielnej pracy oraz pracy w zespole w dynamicznym srodowisku
offered :
Mozliwosc pracy zdalnej
Prywatna opieke medyczna z pakietem stomatologii, rehabilitacji i usluga wsparcia psychologicznego
Ubezpieczenie na zycie
Karte Multisport
Zajecia z jezyka angielskiego/niemieckiego
Szkolenia zewnetrzne i wewnetrzne
80h na samorozwj
Programy wellbeingowe i inicjatywy integracyjne
benefits :
dofinansowanie zajec sportowych
prywatna opieka medyczna
dofinansowanie nauki jezykw
ubezpieczenie na zycie
mozliwosc pracy zdalnej
owoce
spotkania integracyjne
firmowa biblioteka
brak dress codeu
gry wideo w pracy
kawa / herbata
parking dla pracownikw
Advertisement
Click here to apply and get more details about this job!
It will open in a new tab.