- BlueSoft
- Warsaw, 14
- Full-Time
- 17 days ago
Python Developer z ETL.
Before you go
Before you leave us, sign up for our email alerts
We don't do job spam, just the best digital jobs delivered straight to your inbox.
Python Developer z ETL: our view in 3 lines...
- The Role:This role is for a Python developer who builds and maintains ETL and data pipelines that feed data warehouses on Google Cloud for a banking project.
- The Person:The person will create and develop batch and streaming ETL/ELT data pipelines, integrate data from databases, files and APIs, optimise SQL queries and processing costs, diagnose pipeline problems, and write technical documentation.
- Requirements:The ideal candidate has senior-level experience in Python programming, experience building ETL/ELT processes and data pipelines, good knowledge of SQL, practical knowledge of BigQuery, and experience with Kafka or Pub/Sub.
About the role
Model współpracy: zespół spotyka się 1-2 razy w miesiącu w Warszawskim biurze
Opis projektu:
Długoterminowy projekt z sektora bankowości z obszaru inżynierii danych, Big Data i Google Cloud. Dołączysz do zespołu rozwijającego procesy zasilania hurtowni danych, platform Big Data, środowiska GCP oraz systemów kampanijnych.
W ramach projektu tworzysz i rozwijasz procesy ETL/ELT oraz pipeline’y danych działające w trybie batch i streaming. Twoje rozwiązania będą zasilać m.in. BigQuery, hurtownie danych, Data Lake i platformy kampanijne. Dane są wykorzystywane do analiz, raportowania, budowy datamartów, segmentacji klientów oraz przygotowywania spersonalizowanych ofert i kampanii.
Zadania:
- Tworzenie i rozwój procesów ETL/ELT oraz pipeline’ów danych w Pythonie.
- Integracja danych z baz, plików, API oraz systemów chmurowych.
- Budowa procesów batch i streaming z wykorzystaniem Kafka lub Pub/Sub.
- Praca z BigQuery, hurtowniami danych, Data Lake i datamartami.
- Optymalizacja zapytań SQL oraz wydajności i kosztów przetwarzania.
- Zapewnianie jakości, monitoringu i niezawodności procesów.
- Diagnozowanie problemów, wsparcie wdrożeń i tworzenie dokumentacji technicznej.
Poziom wiedzy i kwalifikacje:
- doświadczenie na poziomie Senior w programowaniu w Pythonie,
- doświadczenie w budowie procesów ETL/ELT i pipeline’ów danych,
- dobra znajomość SQL oraz pracy z dużymi wolumenami danych,
- praktyczna znajomość BigQuery, w tym partycjonowania, klastrowania i optymalizacji zapytań,
- znajomość przetwarzania batch i streaming,
- doświadczenie z Kafka lub Pub/Sub,
- znajomość relacyjnych baz danych, np. Oracle lub PostgreSQL,
- znajomość systemu Linux,
- umiejętność przekładania wymagań biznesowych na rozwiązania techniczne,
- dbałość o jakość, wydajność i utrzymywalność kodu.
Mile widziana jest znajomość usług GCP, takich jak Dataflow, Dataproc, Cloud Storage i Pub/Sub, a także Apache Spark, Apache Beam, Kubernetes, Docker, CI/CD, narzędzi ETL, data observability oraz systemów kampanijnych. Znajomość Rusta będzie dodatkowym atutem, ale nie jest konieczna.
Co zyskujesz dołączając do BlueSoft:
współpracę w zespole interdyscyplinarnych ekspertów – entuzjastów technologii, ceniących bezpośredniość i partnerskie relacje;
długoterminowe zaangażowanie projektowe w firmie, która nieprzerwanie od ponad 20 lat rozwija się na rynku IT;
udział w różnorodnych projektach IT realizowanych dla rozpoznawalnych klientów – liderów w swoich branżach;
dostęp do najnowszych technologii i środowisko oparte na najwyższych standardach inżynieryjnych;
️ elastyczne warunki realizacji usług – hybrydowo lub w pełni zdalnie, dopasowane indywidualnie do charakteru współpracy (każdy zespół ustala to samodzielnie);
ekosystem wymiany wiedzy i rozwoju: szkolenia wewnętrzne, gildie tematyczne, szkolenia i certyfikacje Cloud w ramach partnerstw technologicznych z czterema dostawcami chmury;
dostęp do nauki języka angielskiego lub niemieckiego online oraz grupowe zajęcia językowe;
️ ️ możliwość przystąpienia do Multisport i prywatnej opieki medycznej na preferencyjnych warunkach wynegocjowanych przez Bluesoft;
️ morskie przygody – rejsy po Morzu Karaibskim, Śródziemnym i Północnym z dofinansowaniem ze strony Bluesoft.
Rekrutujemy zdalnie. Indywidualny onboarding całkowicie online !

