Data Engineer

קצת על התפקיד:

מהנדס.ת נתונים בעל.ת רקע טכני ותשתיתי חזק, האחראי.ת על תכנון, הקמה ותחזוקה של ארכיטקטורת הנתונים בארגון.

התפקיד כולל הבנת צרכי הלקוח ותרגומם לפתרונות נתונים מקצה לקצה, בניית תהליכי ETL/ELT מורכבים, ומימוש מודלים מתקדמים (AI/ML) על גבי פלטפורמת הנתונים הארגונית לצורך הפקת תובנות עסקיות, תוך ניהול המערכת (Docker & Kubernetes) ושימוש בקונטיינרים בסביבת Linux.

במסגרת התפקיד:

• ניתוח דרישות והסקת משמעויות: עבודה צמודה מול לקוחות (פנימיים) להבנת הצרכים העסקיים, אפיון מקורות הנתונים ותרגומם לדרישות טכניות ומבני נתונים אופטימליים.
• תכנון ומימוש תהליכי Data Pipeline: תכנון ופיתוח Pipeline רובסטים, סקלאביליים ויעילים לאיסוף, עיבוד וניקוי נתונים ממקורות מגוונים.
• תשתיות וקונטיינרים: ניהול ופריסת תהליכי נתונים בסביבות Docker ו-Kubernetes, עבודה שוטפת בסיבת Linux (Bash/Shell) והגדרת משאבים וביצועים לקונטיינרים.
• מימוש פתרונות על גבי הפלטפורמה: יישום פתרונות מבוססי נתונים כגון:
• "צ'אט מומחה" (LLM-based),הטמעת תהליכי זיהוי אנומליות, ותיוג אוטומטי של נתונים וכו'
• אופטימיזציה ותחזוקה : שיפור ביצועי שאילתות וניהול מחזור החיים של הנתונים בסביבת Production .

מה אנחנו מחפשים?

• ניסיון מוכח בפיתוח Python ו-SQL ברמה גבוהה
• שליטה במערכות הפעלה Linux (שרתים, סקריפטים)
• ניסיון מעמיק בתכנון ובניית Pipeline של נתונים בסביבות Big Data
• הכרה וניסיון עם כלי תזמון (Orchestration) כגון Airflow, Prefect או דומים
• יכולת עבודה עצמאית מול לקוח וניתוח תהליכים עסקיים מורכבים
• הבנה ב-CI/CD עבור עולמות ה-Data-יתרון
• ניסיון מעשי בעבודה עם Docker ו Kubernetes(פריסת קונטיינרים, ניהול תצורות) -יתרון
• היכרות עם עולמות ה- GenAI עבודה עם (Vector Databases, RAG)-יתרון
• ניסיון במימוש מודלים לזיהוי אנומליות סיווג ותיוג- יתרון

למה כדאי לך להצטרף אלינו?

אם את/ה מחפש/ת אתגר טכנולוגי בסביבה דינמית ומתקדמת, ויש לך את הניסיון והתשוקה ל-AI, אנו מזמינים אותך לשלוח אלינו את קורות החיים שלך.