מהנדס נתונים Data Engineer

ארגון ממשלתי מחפש מהנדס נתונים לירושלים ותל אביב!
תיאור התפקיד: עיצוב, פיתוח ואופטימיזציה של תשתיות המאפשרות עיבוד וניתוח של כמויות גדולות של מידע בצורה יעילה וסקלאבילית. המטרה היא לאפשר קבלת החלטות מבוססת נתונים בכל הארגון תוך שמירה על איכות, אבטחה וביצועים גבוהים.
אחריות ותחומי עיסוק מרכזיים:
בנייה ותחזוקה: תחזוקה ואופטימיזציה של פלטפורמת ה- LakeHouse Data הקיימת וממשקי הנתונים.
אינטגרציה: תכנון והטמעה של פתרונות אינטגרציית נתונים (Incremental Data Integration) תוך דגש על יעילות בעלויות וביצועים.
חדשנות: התנסות בכלים וטכנולוגיות חדשים והמלצה על שיפורים לפלטפורמה והיכרות מעמיקה עם כלי AI.
שיתוף פעולה: עבודה צמודה עם צוותי דאטה , אנליסטים ואופרציה (Ops).
אבטחה ואיכות: הבטחת שלמות הנתונים (Data Integrity) ), דיוקם ואבטחת מידע בכל המערכות.
פיתרון תקלות: איתור ופתרון בעיות בתשתית הנתונים להבטחת פעילות רציפה.
דרישות התפקיד:
ניסיון רלוונטי של 4 שנים ומעלה
ניסיון בשירותי דאטה של S3 , Lambda , Glue , Redshift , , Bedrock , EMR , Agents - AWS של שנתיים ומעלה.
הבנה מעמיקה בארכיטקטורת אגם נתונים בענן.
יכולת כתיבה שאילתות מורכבות ופרוצדורות בSQL.
ניסיון עבודה עם Terraform / GitLab, CloudFormation, Docker, Kubernetes.
יכולת כתיבת קוד Python.