Data Engineer

לארגון ממשלתי בירושלים דרוש/ה Data Engineer שישתלב ביחידת ה- Data&AI

היחידה פועלת להנגשת מידע ומינופו, בשימוש יכולות AI, לטובת סיוע בקבלת החלטות מדיניות, שיפור הבקרה וייעול תהליכים על מנת לעצב בצורה פרואקטיבית את מדיניות המשרד

במסגרת התפקיד:
תכנון וביצוע אופטימיזציה של תהליכי עיבוד נתונים
פיתוח ותחזוקה של תשתיות נתונים מורכבות בענן וב Premise On
בניית מערכות לבקרת איכות נתונים
תכנון וביצוע שדרוגים ושיפורים בתשתיות הנתונים
פתרון בעיות מורכבות במסדי הנתונים
תמיכה בצוותי האנליטיקה והמדע נתונים
תיעוד תהליכים ותחזוקת הידע הטכני
דרישות התפקיד
4 שנות ניסיון בפיתוח ותחזוקת תשתיות נתונים בענן וב 3S/MongoDB /SQL (Premise On)
ניסיון באופטימיזציה של שאילתות מורכבות
ניסיון מוכח בבניית Data Pipelines ותהליכי ETL
ניסיון בעבודה עם מסדי נתונים רלציוניים ו-NoSQL
ידע וניסיון בפיתוח בPython
הבנה מעמיקה בארכיטקטורת Data Big ומערכות מבוזרות
ניסיון בעבודה עם כלי Engineering Data כגון Airflow ,Spark Apache
היכרות עם פלטפורמות ענן (בדגש על GCP/ AWS) ושירותי נתונים בענן
ניסיון בעבודה עם Lakehouse /Warehouses Data
היכרות עם כלי ניטור ובקרת איכות נתונים
-הבנה במודלים של AI/ML