This job offer is not available in your country.

Solution Architect (AWS, Spark)

CRESTT sp. z o.o.Warszawa, mazowieckie, Polska

30+ days ago

Job description

technologies-expected :

AWS S3
Apache Spark
PySpark
Glue
Databricks
Synapse
Parquet
Python
Airflow
Hive
Metastone

technologies-optional :

CloudFormation

Terraform

Ansible

GitHub

GitLab

Jenkins

TeamCity

AWS Glue

AWS Lambda

Redshift

HDFS

Scala

Data Lake

Vault

about-project :

Szukamy osoby z doświadczeniem technicznym i biznesowym, która dobrze odnajdzie się w bezpośrednim kontakcie z klientem. Kluczowa jest samodzielność, inicjatywa i gotowość do zaangażowania w działania zarówno projektowe, jak i wewnętrzne / organizacyjne.

Lokalizacja : Warszawa lub zdalnie (na początku współpracy wymagane 2 dni onboardingu w biurze, w późniejszym etapie oczekujemy wizyt w biurze raz na miesiąc / dwa miesiące)

responsibilities :

Projektowanie rozwiązań opartych o usługi chmurowe (AWS) z uwzględnieniem wymagań klienta i najlepszych praktyk architektonicznych

Współtworzenie i rozwój nowoczesnych procesów przetwarzania danych (ETL / ELT) z wykorzystaniem Apache Spark (głównie PySpark)

Udział w spotkaniach z klientem – prezentowanie rozwiązań, zbieranie wymagań, doradztwo techniczne

Wspieranie zespołów developerskich w implementacji rozwiązań (code review, konsultacje, rozwiązywanie problemów)

Tworzenie i utrzymywanie dokumentacji architektonicznej

Wdrażanie rozwiązań CI / CD oraz zarządzanie infrastrukturą jako kodem (IaC)

Zapewnienie jakości i spójności danych poprzez dobór odpowiednich narzędzi i mechanizmów kontrolnych

Inicjowanie i udział w działaniach usprawniających procesy wewnętrzne oraz dzielenie się wiedzą w zespole

requirements-expected :

AWS S3 – znajomość różnych klas przechowywania, versioning, struktura bucketów i prefixów

Apache Spark (w szczególności PySpark), np. w usługach : Glue, EMR, Databricks, Synapse

Git – zarządzanie branchami, rozwiązywanie konfliktów, code review

Format Parquet – wiedza o strukturze kolumnowej, ewolucji schematu, partycjonowaniu danych

Python – doświadczenie programistyczne

SQL – zaawansowane zapytania (CTE, funkcje okienkowe, procedury składowane)

Hive Metastore (np. Glue Catalog, Databricks, Nifi, Presto itd.)

Airflow

benefits :

dofinansowanie zajęć sportowych

prywatna opieka medyczna

ubezpieczenie na życie

możliwość pracy zdalnej

elastyczny czas pracy

spotkania integracyjne

Create a job alert for this search

Solution Architect • Warszawa, mazowieckie, Polska

Related jobs

Solution Architect

Blue YonderWarsaw

Blue Yonder is seeking creative, high-energy talent who has both.The candidate will be a part of the Manufacturing Industries organization and work closely in conjunction with Product Mgmt / Product ...Show moreLast updated: 30+ days ago

Promoted

Solution Architect

B2B.NET S.A.Warszawa, mazowieckie, Polska

Enterprise Architekt i UML, znajomość technologii konteneryzacji.Show moreLast updated: 9 days ago

Promoted

Solution Architect

Polkomtel Sp. z o.o.Warszawa, mazowieckie, Polska

Weryfikacja produktów analizy biznesowej pod kątem spełnienia wymagań jakościowych, kompletności i technicznej wykonalności. Tworzenie rozwiązań technicznych (architektura logiczna) na podstawie pro...Show moreLast updated: 10 days ago

Solution Architect

Scalo Sp. z o.o.Warszawa, mazowieckie, Polska

Wykorzystywany stos technologiczny w projekcie : Power Platform, Oracle, MS SQL, JIRA, systemy klasy BPMS,.Software Services, Embedded Services, Data Services, Cloud Services),.B2B w zależności od d...Show moreLast updated: 25 days ago

Solution Architect

Primaris Services Sp. z o.o.Warszawa, Polska

Poszukujemy osoby na stanowisko.Projekt który będziemy gotowi Ci zaproponować dotyczy.Projekt zakłada bliską współpracę z zespołami operacyjnymi i technologicznymi oraz projektowanie rozwiązań odpo...Show moreLast updated: 4 days ago

Solution Architect

ALIOR BANKWarszawa, mazowieckie, Polska

Alior Bank konsekwentnie pracuje na miano innowatora.Stały rozwój bankowości mobilnej i regularne wdrażanie najbardziej nowatorskich na rynku rozwiązań wymaga potężnego zaplecza IT - zarówno w zakr...Show moreLast updated: 12 days ago

GCP Solution Architect

EndavaWarsaw

Working with Endava’s customers to analyze existing systems and prepare a plan for migrating the systems to cloud.Architect, design, deploy and maintain large Kubernetes clusters.Defining and imple...Show moreLast updated: 30+ days ago

Promoted

Data Architect (Spark)

AddeptoWarszawa, Masovian, Poland

As a Data Architect, you will have the exciting opportunity to work with a team of technology experts on challenging projects across various industries, leveraging cutting-edge technologies.Here ar...Show moreLast updated: 30+ days ago

Solution Architect

Arche Consulting Sp z o.o.Warszawa, mazowieckie, Polska

The client is an IT services provider specializing in software development, IT consulting and digital transformation.It helps businesses improve operations and customer experiences through custom s...Show moreLast updated: 17 days ago

Software Solution Architect

apreel Sp. z o.o.Warszawa, mazowieckie, Polska

As a solution architect, you will collaborate with a team of international experts in technology, business, and the healthcare industry. Software development is one of the core strengths of the DHEC...Show moreLast updated: 8 days ago

Solution Architect (AWS, Spark) @ Crestt

CresttWarszawa, Polish

Szukamy osoby z doświadczeniem technicznym i biznesowym, która dobrze odnajdzie się w bezpośrednim kontakcie z klientem.Kluczowa jest samodzielność, inicjatywa i gotowość do zaangażowania w działan...Show moreLast updated: 30+ days ago

Promoted

Solution Architect

Primaris ServicesWarszawa, mazowieckie, Polska

Forma współpracy : kontrakt B2B.Poszukujemy osoby na stanowisko Solution Architect, która posiada min.Projekt który będziemy gotowi Ci zaproponować dotyczy opracowania kompleksowej strategii archite...Show moreLast updated: 2 days ago

Solution Architect

ERGO Technology & Services S.A.Warszawa, mazowieckie, Polska

As a Solution Architect, you’ll be responsible for designing and delivering integration architectures that enable conversational and voice AI experiences across ERGO Group’s digital insurance platf...Show moreLast updated: 25 days ago

Solution Architect

SCALOWarszawa, Polska

W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu.Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w...Show moreLast updated: 30+ days ago

Solution Architect

b2bnetworkWarszawa, Polska

Znajomość wzorców projektowych oraz architektonicznych IT;.Znajomość zagadnień komunikacji i integracji między systemami IT (szyny danych, kolejki, komunikacja asynchroniczna);.Znajomość technologi...Show moreLast updated: 6 days ago

Solution Architect

ALTEN PolskaWarszawa, mazowieckie, Polska

We are looking for an experienced Solution Architect to support team in a dynamic, multi-cultural environment.Compile High Level and Detailed architecture designs from business requirements.Use com...Show moreLast updated: 17 days ago

Promoted

Functional Solution Architect

INNOVECS POLAND SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄWarszawa, Masovian, Poland

We are looking for an experienced Functional Solution Architect (part-time) to support us with WMS Integration, Implementation projects and Consulting projects. Provide recommendations on how to orc...Show moreLast updated: 24 days ago

Solution Architect

AlgotequeWarsaw, Pologne

ALGOTEQUE to firma doradcza IT, która wspiera startupy, średnie i duże przedsiębiorstwa w tworzeniu i wdrażaniu innowacyjnych technologii. Nasz zespół ma udokumentowane sukcesy w projektowaniu, rozw...Show moreLast updated: 30+ days ago