עדיין מחפשים עבודה במנועי חיפוש? הגיע הזמן להשתדרג!
במקום לעבור לבד על אלפי מודעות, Jobify מנתחת את קורות החיים שלך ומציגה לך רק משרות שבאמת מתאימות לך.
מעל 80,000 משרות • 4,000 חדשות ביום
חינם. בלי פרסומות. בלי אותיות קטנות.
Key Responsibilities:
Optimize processes for scalability and efficiency in distributed environments.
Ensure data quality, integrity, and performance across workflows.
Work with cloud-native solutions and containerized environments (Docker/Kubernetes).
Implement and manage orchestration frameworks (Airflow/Dagster/etc.).
Collaborate with cross-functional teams to support business and research needs.
Develop and enforce CI/CD processes and data testing frameworks (pytest, GE, or similar).
Monitor, troubleshoot, and continuously improve pipeline reliability and performance.
Youll be a great fit if you have
4+ years of professional experience with Python and SQL.
Proven experience building and maintaining ETL/ELT pipelines (batch/streaming) with orchestration frameworks (Airflow, Dagster, or similar).
Hands-on experience with distributed computing frameworks (Spark, Dask, Beam) and large-scale data processing.
Experience with major cloud platforms (AWS, GCP, or Azure); GCP/BigQuery is an advantage.
Proficiency with Docker/Kubernetes and CI/CD pipelines (GitLab CI, GitHub Actions, or similar).
Solid understanding of software engineering practices (data structures, algorithms, TDD, code quality).
Familiarity with data testing and monitoring frameworks (pytest, Great Expectations, observability tools).
Nice to Have:
Experience with dbt, ClickHouse, or Ray.
Familiarity with Python data libraries (pandas, NumPy, Apache Arrow, Jinja).
Background in functional programming.
במקום לעבור לבד על אלפי מודעות, Jobify מנתחת את קורות החיים שלך ומציגה לך רק משרות שבאמת מתאימות לך.
מעל 80,000 משרות • 4,000 חדשות ביום
חינם. בלי פרסומות. בלי אותיות קטנות.
משרות נוספות מומלצות עבורך
-
Data Engineer
-
ירושלים
Prologic משרדי ממשלה
-
-
מומחה/ית Databricks
-
תל אביב - יפו
Nogamy
-
-
Senior Azure Data Engineer
-
פתח תקווה
Experis Israel
-
-
Senior Data Engineer
-
תל אביב - יפו
ONE datAI
-
-
Senior / Data & AI Solutions Engineer – Automation, Analytics & AI
-
הוד השרון
MSD
-
-
Data Engineer – ירושלים
-
ירושלים
Matrix
-
ערב