EU remote
Senior Data Engineer (Azure | Databricks)
About this role
Senior Data Engineer (Azure | Databricks) 1dea Daily tasks: - Budowa i optymalizacja potoków: Tworzenie skalowalnych procesów przetwarzania danych (batch i real-time) w środowisku chmurowym. - Praca z Databricks i Azure: Projektowanie notebooków w Databricks (łączenie danych, formaty SFF) oraz konfiguracja Ingestion Framework. - Migracje i transformacje: Pobieranie, oczyszczanie i przenoszenie danych ze starych systemów (legacy) do nowoczesnych platform chmurowych (Data Lake Core).
- Praca z bazami i SQL: Tworzenie struktur danych (DDL, tabele, widoki w MS Cloud SQL Server) oraz optymalizacja zapytań SQL pod kątem wydajności. - Współpraca w zespole: Ścisła praca z analitykami biznesowymi i architektami danych (mapowanie źródeł), a także działanie w zwinnych zespołach Agile/Scrum. - Automatyzacja i jakość: Wdrażanie automatyzacji w przepływach danych, dbanie o jakość danych (testowanie) oraz współtworzenie katalogu danych (Data Governance).
- Dokumentacja: Tworzenie dokumentacji technicznej i prototypów na podstawie wymagań biznesowych. Musts: ETL, Azure, Databricks, Data Lake, Cloud, SQL Server, Azure Data Factory, PySpark, Spark, SQL, Python Czego oczekujemy ? Minimum 5 lat doświadczenia w roli Data Engineera, ze skupieniem na ETL i narzędziach chmurowych. Certyfikatów (warunek konieczny): Certified Azure Data Engineer oraz Databricks Certified Data Engineer .
Świetnej znajomości technologii: Azure Data Factory, Azure Databricks, PySpark, Spark SQL, ADLS, MS Cloud SQL Server. Bardzo dobrej znajomości: Python, Java lub Scala oraz zaawansowanego SQL. Znajomości narzędzi: PowerBI, SSIS, SSRS. Doświadczenia z CI/CD w kontekście procesów danych. Umiejętności analitycznego myślenia, dobrej komunikacji i nastawienia na współpracę w zespole. Posługiwania się językiem angielskim w codziennej pracy (swobodnie w mowie i piśmie).
Senior Data Engineer (Azure | Databricks) Szukamy doświadczonego Senior Data Engineer , który dołączy do naszego zespołu danych. Jeśli sprawnie poruszasz się w procesach ETL, znasz chmurę Azure oraz Databricks jak własną kieszeń i chcesz budować stabilne, wydajne potoki danych – to oferta dla Ciebie. Prosimy o aplikacje CV w języku angielskim. --- Warunki zaangażowania: Obszar: Consulting IT Lokalizacja: hybrydowo (Wrocław - 2 dni w tyg z biura, reszta zdalnie) Start: ASAP (akceptujemy kandydatury z max 3msc okresem wypowiedzenia) Stawka (ustalana indywidualnie): 155 - 165 PLN netto + VAT / h Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo Oferujemy Stabilna współpraca B2B z perspektywą wieloletniej relacji Rozwój w strukturach dojrzałej organizacji o ugruntowanej renomie i silnej pozycji rynkowej Kompletne stanowisko pracy: dostarczamy nowoczesny, spersonalizowany sprzęt oraz pełne zaplecze software'owe gotowe do działania Pełna elastyczność i balans: praca częściowo zdalnie, częściowo z biura we Wrocławiu (2 dni / tyg) - dzień zaczynasz tak, jak lubisz – ruchomy start między 6:00 a 10:00 Dedykowany mentoring: stała opieka i partnerskie wsparcie w kreowaniu Twojej ścieżki zawodowej od zespołu ekspertów 1dea Stawiamy na relacje – budujemy kulturę opartą na wzajemnym szacunku, grze do jednej bramki i dzieleniu się wiedzą Realny wpływ na projekty: u nas nie ma sztywnych schematów.
Masz pełną przestrzeń na zgłaszanie własnych inicjatyw, a Twoje pomysły kształtują nasze rozwiązania
Source listing: nofluffjobs_main