Senior Data Engineer / ML

B2B.NET S.A.Sopot, pomorskie, Polska

30+ days ago

Job description

technologies-expected :

Python
Apache Spark
AWS
Microsoft Azure
Google Cloud Platform
SQL

technologies-optional :

TensorFlow

PyTorch

Hadoop

Hive

about-project :

Jako Senior Data Engineer / ML będziesz odpowiedzialny za kompleksowe zarządzanie cyklem życia modeli uczenia maszynowego — od etapu rozwoju, poprzez wdrożenie i monitorowanie, aż po zapewnienie ich optymalnej wydajności i niezawodności.

Hybrydowo (3 dni w tygodniu z biura)

responsibilities :

Implementacja zasad MLOps (CI / CD, testowanie, monitoring) w celu usprawnienia operacji związanych z uczeniem maszynowym.

Praca z Apache Spark i Pythonem przy definiowaniu i utrzymaniu procesów pobierania oraz transformacji danych — zarówno w trybie rzeczywistym, jak i wsadowym.

Budowa rozproszonych, wysoce równoległych potoków przetwarzania danych obsługujących ogromne ilości danych (strukturalnych i niestrukturalnych) w trybie near real-time.

Wykorzystanie Sparka do wzbogacania i transformacji danych korporacyjnych w celu umożliwienia ich wyszukiwania, wizualizacji oraz zaawansowanej analizy.

Współpraca z zespołami interdyscyplinarnymi (Data Science, DevOps, IT) w celu dostarczania wysokiej jakości rozwiązań opartych na ML.

Ścisła współpraca z analitykami i interesariuszami biznesowymi przy opracowywaniu modeli analitycznych.

Wsparcie w optymalizacji i rozwoju praktyk oraz bibliotek MLOps, również poza obszar modeli predykcyjnych.

Badanie i wdrażanie rozwiązań chmurowych w obszarze AI / ML.

requirements-expected :

Minimum 5 lat doświadczenia w pracy z Pythonem i Apache Spark.

Bardzo dobra znajomość algorytmów, struktur danych, statystyki oraz algebry liniowej.

Doświadczenie z frameworkami TensorFlow lub PyTorch (trenowanie, ulepszanie, wdrażanie modeli).

Dobra znajomość systemów rozproszonych i technologii Big Data (Hadoop / Hive lub podobne).

Umiejętność pracy z bazami danych i platformami chmurowymi (AWS, Azure, Google Cloud) — zapewnienie skalowalności i bezpieczeństwa infrastruktury.

Biegłość w SQL (Spark / Hive SQL) oraz doświadczenie w tworzeniu przepływów danych.

Doświadczenie w pracy z BitBucket i GIT (wersjonowanie, strategia branchowania).

Znajomość metodyk Agile / SAFe.

Bardzo dobra znajomość języka angielskiego (w mowie i piśmie).

benefits :

dofinansowanie zajęć sportowych

prywatna opieka medyczna

Create a job alert for this search

Senior Data Engineer • Sopot, pomorskie, Polska