Data Engineer

אנחנו מגייסים Data Engineer להצטרפות ליחידה טכנולוגית בארגון ביטחוני מוביל!
התפקיד כולל תכנון, פיתוח ותחזוקה של תשתיות נתונים סקיילביליות בסביבת Cloudera On-Premise, בניית תהליכי קליטה ועיבוד (Pipelines) בנפחים גבוהים, והנחת התשתית ליישומי אנליטיקה מתקדמים ומודלי AI.
דרישות התפקיד
לפחות 4 שנות ניסיון טכנולוגי כולל, מתוכן לפחות 3 שנות ניסיון מעשי כ-Data Engineer או בפיתוח Big Data.
ניסיון מוכח בכלי פיתוח מבית Apache Ecosystem (בדגש על Spark, Hive, Impala).
שליטה גבוהה בפיתוח קוד ותהליכי נתונים באחת מהשפות: Python, Scala, או Java.
מומחיות בכתיבת שאילתות SQL אנליטיות מורכבות ואופטימיזציה בסביבות מבוזרות.
הבנה מעמיקה בארכיטקטורת נתונים מבוזרת (Distributed Systems) ומידול נתונים.

יתרונות משמעותיים:
ניסיון עם כלי אורקסטרציה כגון Apache Airflow.
ניסיון בעיבוד נתונים בזרימה (Streaming) מבוססי Apache Kafka.
ניסיון בהכנת תשתיות נתונים לפרויקטי ML/AI.
היכרות עם סביבות ענן (GCP) או תצורת Hybrid.