Mid Data Engineer

Tech Stack

PYTHON
PYSPARK
SQL
TYPESCRIPT

Job Description

W tej roli będziesz pełnić kluczową funkcję, współpracując z zespołem inżynierów danych nad projektowaniem, rozwojem i utrzymaniem zaawansowanych systemów przetwarzania danych.

Idealny kandydat powinien posiadać solidne doświadczenie w technologiach chmurowych, architekturze danych i rozwiązywaniu złożonych problemów związanych z danymi.Kluczowe obowiązki:Tworzenie, wdrażanie i utrzymywanie skalowalnych przepływów danych, zapewniając ich integralność i optymalizację.

Współpraca z zespołami międzydziałowymi w celu zbierania wymagań dotyczących danych i przekładanie ich na efektywne rozwiązania, z wykorzystaniem inżynierii danych w chmurze.

Rozwój i optymalizacja procesów ETL, aby zapewnić terminowe i precyzyjne dostarczanie danych do aplikacji biznesowych, z zachowaniem najlepszych praktyk w zakresie bezpieczeństwa danych.

Rozwiązywanie problemów związanych z przepływami danych, zapewniając ciągłą ich dostępność i niezawodność.

Monitorowanie najnowszych technologii i trendów, wprowadzanie innowacyjnych rozwiązań oraz dokumentowanie procesów technicznych.Narzędzia i technologie:PythonPySparkSQLTypeScriptWymagania:Minimum 2,5-3 lata doświadczenia w inżynierii danych, ze szczególnym uwzględnieniem rozwiązań chmurowychZaawansowana znajomość Pythona i PySparkaPraktyczne doświadczenie z chmurowymi usługami przetwarzania danychZnajomość TypeScript oraz umiejętność jego wykorzystania w projektachDoświadczenie w modelowaniu i optymalizacji danychZnajomość technologii Big Data będzie dodatkowym atutemSilne umiejętności analityczne, rozwiązywania problemów oraz współpracy w zespoleDodatkowe atuty:Certyfikaty w zakresie technologii chmurowychDoświadczenie z konteneryzacją (np. Docker, Kubernetes)Znajomość API oraz technologii wyszukiwaniaZnajomość przepisów dotyczących ochrony danych i regulacji branżowych