Data Engineer

• פיתוח ותחזוקה של תהליכי ETL מורכבים באמצעות Apache NiFi ו-Apache Spark
• פיתוח תהליכי Streaming Real-time באמצעות Apache Flink
• עיבוד, ניהול וטיפול בנתונים עם ElasticSearch
• כתיבת שאילתות מורכבות וייעול ביצועים על בסיסי נתונים רלציוניים ולא רלציוניים
• פיתוח פתרונות דאטה בשפת Python
• עבודה בשיתוף פעולה צמוד עם צוותי BI, Data Science ופיתוח מערכות מידע
דרישות התפקיד
-לפחות 4 שנות ניסיון כמהנדס/ת נתונים (Data Engineer)
-לפחות 3 שנות ניסיון עם אחד או יותר מהשירותי stream הבאים:
Apache Spark, Apache NiFi, Apache Flink
-ניסיון מוכח בפיתוח Python לעיבוד נתונים ובניית Data Flow
-הבנה עמוקה בארכיטקטורת Big Data ותשתיות נתונים
-שליטה מלאה ב-SQL