Data EngineerScalo Sp. z o.o. • Wrocław, dolnośląskie, Polska

Data Engineer

Scalo Sp. z o.o. • Wrocław, dolnośląskie, Polska

Ponad 30 dni temu

Opis pracy

technologies-expected :

Apache Kafka
Spark
Python
PySpark

about-project :

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Jesteśmy firmą, która wykorzystuje szerokie spektrum usług IT, żeby pomagać klientom.

Obszary naszego działania to m.in. : doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły developerskie.

responsibilities :

udział w międzynarodowym projekcie mającym na celu rozwój skalowalnej platformy Customer Data Platform (CDP) przetwarzającej setki milionów rekordów dziennie,

projektowanie i rozwój pipeline’ów ETL opartych o Apache Kafka i Spark,

budowa i utrzymanie architektury data lakehouse (Apache Iceberg, Nessie, MinIO),

praca nad automatycznymi mechanizmami wdrożeń środowisk,

implementacja rozwiązań multi-tenancy,

ścisła współpraca z zespołami data, DevOps oraz zespołami biznesowymi,

rozwój i utrzymanie CI / CD ze szczególnym naciskiem na versioning i branching w Nessie,

praca z narzędziami : Metabase, FastAPI, Dremio,

udział w długofalowym projekcie,

praca w modelu zdalnym,

stawka do 170 zł / h przy B2B.

requirements-expected :

posiadasz doświadczenie w projektowaniu i implementacji pipeline’ów danych opartych o Apache Kafka i Spark,

masz solidne doświadczenie w pracy z architekturą data lakehouse (Apache Iceberg, Nessie, MinIO),

pracujesz z procesami ETL dla dużych wolumenów danych (setki milionów rekordów dziennie),

dobrze znasz Python i PySpark,

masz praktyczne doświadczenie w budowie i utrzymaniu CI / CD,

rozumiesz zagadnienia versioningu i branchingu danych (w szczególności Nessie),

masz doświadczenie w automatyzacji wdrożeń w środowiskach zabezpieczonych (on-premise, firewalle),

potrafisz diagnozować problemy związane z wydajnością, bezpieczeństwem i stabilnością systemów rozproszonych,

cenisz współpracę zespołową i potrafisz działać w środowisku cross-funkcyjnym,

swobodnie komunikujesz się w języku angielskim (min. B2+).

offered :

stabilną współpracę i różnorodne projekty (Software, Embedded, Data, Cloud Services),

możliwość rozwoju kompetencji jako Ambasador Scalo - doskonal skille techniczne i presalesowe w społeczności naszych ekspertów, wpływaj na rozwój organizacji, wspieraj innych,

przestrzeń do budowania marki osobistej - twórz wartościowe treści, dziel się wiedzą i doświadczeniem, występuj jako prelegent na wydarzeniach (np. ProMeet),

prywatną opiekę medyczną - Luxmed,

kafeteryjny system benefitów - Motivizer,

dostęp do karty Multisport,

program poleceń pracowniczych z nagrodami,

integracje i wydarzenia firmowe.

benefits :

dofinansowanie zajęć sportowych

prywatna opieka medyczna

dofinansowanie szkoleń i kursów

ubezpieczenie na życie

spotkania integracyjne

paczki świąteczne

program rekomendacji pracowników

inicjatywy dobroczynne

Utwórz powiadomienie o ofertach pracy dla tego wyszukiwania

Data Engineer • Wrocław, dolnośląskie, Polska

Podobne stanowiska

Senior Data Engineer (Databricks)

Addepto • Wrocław, Lower Silesia, Poland

As a Senior Data Engineer, you will have the exciting opportunity to work with a team of technology experts on challenging projects across various industries, leveraging cutting-edge technologies.H...Pokaż więcej

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer (Spark)

Addepto • Wrocław, Lower Silesia, Poland

As a Data Engineer, you will have the exciting opportunity to work with a team of technology experts on challenging projects across various industries, leveraging cutting-edge technologies.Here are...Pokaż więcej

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer remote

Schaeffler Global Services Europe Sp. z o.o. • Wrocław, PL

Job Title : Data Engineer (All Genders).Schaeffler is a dynamic global technology company and its success has been a result of its entrepreneurial spirit and long history of private ownership.Does t...Pokaż więcej

Ostatnia aktualizacja: 7 dni temu • Promowane

Data Science / AI Engineer (m / f / d)

UPVANTA SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ • Wrocław, Lower Silesia, Poland

We are looking for a Data Science / AI Engineer to work at the intersection of data science, data engineering, AI engineering, and operations. In this role, you will collaborate closely with deliver...Pokaż więcej

Ostatnia aktualizacja: 6 dni temu • Promowane

Data Engineer (Databricks)

Addepto • Wrocław, Lower Silesia, Poland

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer hybrid

Schaeffler Global Services Europe Sp. z o.o. • Wrocław, PL

Ostatnia aktualizacja: 7 dni temu • Promowane

Senior Data Platform Engineer – Trading & Data Infrastructure

ITDS Polska Sp. z o.o. • Wrocław, Lower Silesia, Poland

As a Senior Data Platform Engineer, you will be working for our client, a global quantitative and systematic investment manager leveraging cutting-edge technology and data science to drive innovati...Pokaż więcej

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer All Genders

Schaeffler Global Services Europe Sp. z o.o. • Wrocław, PL

Developing data pipelines and applying methods and tools to collect, store, process and analyze complex data sets globally for assigned operations or functions. Designing, governing, building and op...Pokaż więcej

Ostatnia aktualizacja: 7 dni temu • Promowane

Data Engineer (with Snowflake / Databricks)

Sollers Consulting • Wrocław, Lower Silesia, Poland

Versatility is the keyword when it comes to what we do in IT.Data Competency is one of our initiatives to support digital transformation of financial sector, enabling our customers to become truly ...Pokaż więcej

Ostatnia aktualizacja: 12 dni temu • Promowane

Senior Data Engineer (Spark)

Addepto • Wrocław, Lower Silesia, Poland

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer (Aviation Industry)

Atos Poland Global Services Sp. z o.o. • Wrocław, Lower Silesia, Poland

We are currently looking for a Data Engineer who wishes to join our project.You will have an opportunity to become a part of the delivery team for one of our key Customers in the Airspace Industry,...Pokaż więcej

Ostatnia aktualizacja: 6 dni temu • Promowane

Senior Data Engineer with AWS and Snowflake

Sii Sp. z o.o. • Wrocław, Lower Silesia, Poland

We are looking for a Data Engineer with expertise in Snowflake, AWS, and ETL processes, who will work closely with AI scientists and data analysts to design, develop, and maintain data pipelines an...Pokaż więcej

Ostatnia aktualizacja: ponad 30 dni temu • Promowane

Data Engineer with Databricks (f / m / x)

Sii Sp. z o.o. • Wrocław, Lower Silesia, Poland

Be part of a cutting-edge biotech project that combines advanced data engineering with real-world impact.You will work on creating scalable data systems and infrastructure that support groundbreaki...Pokaż więcej

Ostatnia aktualizacja: 2 dni temu • Promowane

Data Engineer / Data Ops

VikingCo Poland sp. z o.o. • Wrocław, dolnośląskie, Polska

Dołączysz do zespołu Data & Research, który odpowiada za fundamenty analityczne całej organizacji.Będziesz odpowiedzialny za projektowanie, rozwój i utrzymanie nowoczesnej infrastruktury danych.Nie...Pokaż więcej

Ostatnia aktualizacja: 21 dni temu • Promowane

Lead Data Engineer (Spark)

Addepto • Wrocław, Lower Silesia, Poland

As a Lead Data Engineer, you will have the exciting opportunity to work with a team of technology experts on challenging projects across various industries, leveraging cutting-edge technologies.Her...Pokaż więcej

Ostatnia aktualizacja: 22 dni temu • Promowane

Senior Databricks Data Engineer

Be in IT • Wrocław, dolnośląskie, Polska

Długofalowa współpraca z międzynarodową, topową firmą consultingową, świadcząca usługi IT dla dużych i średnich firm z różnorodnych sektorów jak automotive, healthcare, finanse, bankowość czy produ...Pokaż więcej

Ostatnia aktualizacja: 23 dni temu • Promowane

Data Security Engineer

Sii Sp. z o.o. • Wrocław, Lower Silesia, Poland

We are looking for an experienced Data Security Engineer to join a global automotive company.You will work on advanced data protection solutions and support cybersecurity teams in improving securit...Pokaż więcej

Ostatnia aktualizacja: 15 dni temu • Promowane

Data Engineer with Snowflake and DBT – pharmaceutical industry

Sii Sp. z o.o. • Wrocław, Lower Silesia, Poland

We are looking for a Data Engineer to join our project for one of the largest pharmaceutical companies.In this role, you will work closely with AI scientists and data analysts to design, develop, a...Pokaż więcej

Ostatnia aktualizacja: ponad 30 dni temu • Promowane