DataBricks Engineer

Forma pracy : fulltime, 100% zdalnie

Start : ASAP

Cześć!

Dla naszego klienta z USA poszukujemy Azure DataBrick Engineerów. Prace dotyczą działań w obszarach m.in . migracji, zbierania danych i optymalizacji rozwiązań opartych na DataBricks. Klient posiada stałe zapotrzebowanie na specjalistów. Projekty, które prowadzą przeważnie są krótkoterminowe (ze sporym prawdopodobieństwem na przedłużenia), a ze względu na stałość zapotrzebowania klient jest w stanie zaproponować nowy temat po zakończeniu danego projektu.

Obecnie poszukiwany jest specjaliści do 3 projektów :

• dwa dotyczą migracji do DataBricks (SageMaker do AWS, oraz wewnętrzna platforma do Azure)
• jeden dotyczy prac nad platformą do analizy danych medycznych (również w oparciu o DataBricks)

Dla klienta kluczowe jest obycie w środowisku Azure (i / lub) AWS oraz znajomość DataBricks i Apache Spark. Projekty prowadzone przez klienta przede wszystkim dla firm z USA - w większości przypadków wymagana jest praca jedynie z niewielką zakładką godzinową (np. od 10 : 00 do 18 : 00) natomiast jesteśmy otwarci na kandydatów preferujących pracę w innych godzinach.

Ogólny zakres obowiązków :

Planowanie prac i dobór odpowiednich narzędzi

Integracja baz danych w czasie zbliżonym do rzeczywistego

Tworzenie procesów ETL

Przeprowadzanie migracji baz danych / platform / modelil ML

Optymalizacja oraz automatyzacja platform

cisła współpraca z zespołem data engineerów, data scientistów oraz architektów

Wymagania :

Solidne doświadczenie w pracy w roli data engineera lub pokrewnych rolach (8+ lat)

Bardzo dobra znajomość platformy DataBricks oraz Apache Spark

Bardzo dobra znajomość Python

Doświadczenie w przeprowadzaniu migracji danych

Doświadczenie w pracy w środowisku Microsoft Azure (np. Data Factory, Synapse, Logic Apps, Data Lake)

Doświadczenie w pracy w środowisku AWS

Umiejętności interpersonalne i zespołowe

Umiejętność podejmowania inicjatywy i samodzielność

Angielski na poziomie umożliwiającym swobodną komunikację w zespole

Mile widziane :

Doświadczenie w projektowaniu i optymalizacji przepływów danych za pomocą, DBT, SSIS, TimeXtender lub podobnych rozwiązań (ETL, ELT)

Doświadczenie z dowolnymi platformami big data lub noSQL (Redshift, Hadoop, EMR, Google Data itp.)

Jak działamy i co oferujemy?

Stawiamy na otwartą komunikację zarówno w procesie rekrutacji jak i po zatrudnieniu - zależy nam na klarowności informacji dotyczących procesu i zatrudnienia

Do rekrutacji podchodzimy po ludzku, dlatego upraszczamy nasze procesy rekrutacyjne, żeby były możliwie jak najprostsze i przyjazne kandydatowi

Pracujemy w imię zasady "remote first", więc praca zdalna to u nas norma, a wyjazdy służbowe ograniczamy do minimum

Oferujemy prywatną opiekę medyczną (Medicover) oraz kartę Multisport dla kontraktorów