Data engineer- משרה היברידית

דרוש/ה Data Engineer להצטרפות לצוות בתחום ה-AI
תיאור התפקיד:
אנו מחפשים Data Engineer מנוסה להשתלבות בצוות מקצועי ולקיחת חלק בפרויקטים חדשניים בתחום ה-AI.
התפקיד כולל אחריות על קליטה ועיבוד כמויות גדולות של נתונים, עבודה צמודה עם Data Scientists, וכן עיצוב ופיתוח של תהליכי דאטה קריטיים – הן בסביבות ענן והן ב־On-Prem.
דרישות התפקיד
ניסיון של לפחות 3 שנים כ־Data Engineer – חובה

ניסיון של 3 שנים בפיתוח ב־Python, כולל עבודה עם קבצי JSON ועבודה מול בסיסי נתונים – חובה

ניסיון מעשי של שנתיים לפחות ב־AWS עם שירותים כגון Athena, Glue, StepFunction, EMR, Redshift, RDS – חובה

ניסיון בעבודה מול קבצי טקסט לצרכי AI ו־LLM – יתרון משמעותי

ניסיון מעשי עם Spark עבור Large Scale Data – יתרון משמעותי

ניסיון בעבודה מול שירותי REST API – יתרון משמעותי

היכרות עם טכניקות אופטימיזציה ו־Partitions (Parquet, Avro, HDFS, Delta Lake)

ניסיון עם Docker, Linux, CI/CD Tools, Kubernetes