Expert Data Engineer
B2B.NET S.A.
120 - 150 PLN / HOUR
Hybrid
B2B
Status
Hexjobs Insights
Stanowisko: Expert Data Engineer. Odpowiedzialności: budowanie pipeline'ów Big Data, automatyzacja procesów, współpraca z analitykami. Wymagania: umiejętność obsługi technologii Big Data, SQL, Python, Scala, Spark.
Schlüsselwörter
Big Data
ETL
Data Testing
SQL
Hadoop
Python
Scala
Spark
Spark SQL
Technologies we use
Your responsibilities
- Building distributed and highly parallelized Big data processing pipeline which process massive amount of data (both structured and unstructured data) in near real-time
- Leveraging Spark to enrich and transform corporate data to enable searching, data visualization, and advanced analytics
- Working closely with analysts and business stakeholders to develop analytics models
- Continuous delivering on Hadoop and other Big Data Platforms
- Automating processes where possible and are repeatable and reliable
- Working closely with QA team
Our requirements
- Big Data
- ETL
- Data Testing
- SQL
- Hadoop stack: YARN, EMR, Sqoop, Hive, Oozie
- Hive, Oozie
- Python
- Scala
- Spark and Spark SQL
Benefits
Anmelden, um vollständige Details zu sehen
Erstellen Sie ein kostenloses Konto, um auf die vollständige Stellenbeschreibung zuzugreifen und sich zu bewerben.
Aufrufe: 5
| Veröffentlicht | vor 7 Tagen |
| Läuft ab | in 23 Tagen |
| Art des Vertrags | B2B |
| Arbeitsmodus | Hybrid |
Ähnliche Jobs, die für Sie von Interesse sein könnten
Basierend auf "Expert Data Engineer"
Keine Angebote gefunden, versuchen Sie, Ihre Suchkriterien zu ändern.