Data Engineer

אנחנו מחפשים Data Engineer לארגון פיננסי מוביל

התפקיד כולל:

השתלבות בצוות Data R&D העוסק בפרויקטים חדשניים בתחום ה-AI, פיתוח והובלת תהליכי Data מורכבים, עבודה עם כמויות מידע גדולות במיוחד ושיתוף פעולה צמוד עם צוותי Data Science.

אחריות על תכנון, פיתוח ואופטימיזציה של תהליכי ETL ופתרונות Data מתקדמים בסביבות Cloud ו-On-Prem, תוך עבודה עם טכנולוגיות Big Data ותשתיות מתקדמות

דרישות התפקיד:

ניסיון של לפחות 3 שנים כ-Data Engineer.

ניסיון של לפחות 3 שנים בפיתוח Python.

ניסיון בפיתוח בשפות Object-Oriented Programming (OOP).

ניסיון מעשי בעבודה עם Spark לעיבוד נתונים בהיקפים גדולים.

ניסיון בעבודה בסביבת Cloud, בדגש על AWS.

ניסיון בפיתוח תהליכי ETL/ELT מורכבים.

ניסיון בעבודה עם Docker, Linux, Kubernetes וכלי CI/CD.

ניסיון עם Airflow, Kubeflow או כלי Data Pipelines.

הבנה מעמיקה בתכנון ואופטימיזציה של פתרונות Data.

תואר ראשון במדעי המחשב, הנדסה, מתמטיקה או סטטיסטיקה.

יתרון משמעותי:

ניסיון עם שירותי AWS כגון Glue, Step Functions, Lambda, Athena, EMR, Redshift ו-RDS.

ניסיון בעבודה עם Kafka ו-APIs.

ניסיון בפיתוח Microservices.

ניסיון בפריסת שירותים וב-SageMaker.

היכרות עם Machine Learning ופתרונות GenAI / Prompt Engineering.