Data Engineer

תיאור המשרה

שבט ניהול סיכונים הינו גוף ה- Delivery של האסטרטגיה והדרישות הרגולטוריות של חטיבת ניהול הסיכונים.

השבט אחראי על פיתוחם של מערכות בטכנולוגיות מתקדמות מבוססות דאטה, טכנולוגיות ענניות ואפליקציות בטכנולוגיות Angular, Java, .net.

בנוסף השבט אחראי על הטמעתם של מוצרי מדף טכנולוגים מתקדמים בתחום ציות, איסור הלבנת הון, הלימות הון ועולמות תוכן עסקיים נוספים בניהול סיכונים.

אהה ועוד דבר – הזדמנות להיות חלק מטרנספורמציה טכנולוגית מודרנית

מהות התפקיד:

פיתוח data pipeline בסביבת DATA LAKE מקצה לקצה

פיתוח תהליכי שינוע נתונים בעולמות רלציונים

פיתוח סקריפטים ב python (בדגש על (PySpark

פיתוח ותחקור נתונים ב SQL

ביצוע בדיקות (unit/integration)

CI/CD

מעל שנתיים ניסיון ב- Python

מעל שנתיים ניסיון ב- Big Data בדגש על SPARK ו-HIVE

יכולות קריאה וכתיבת שאילתות SQL מורכבות

לפחות שלוש שנות ניסיון בעולמות ה-Data של מיקרוסופט (SSIS, SQL Server)

היכרות עם עולם ה-DWH, DL ותהליכי ETL, ELT

עבודה בתהליכי CI/CD

עבודה מול CTRLM

עבודה עם בסיס נתונים TERADATA – יתרון

היכרות עם Qlik Sense, Quilliup – יתרון

היכרות עם העולם הבנקאי – יתרון

אחריות, עצמאות וכושר ארגון, "ראש גדול", יוזמה, חריצות ואנרגיה

ראש גדול ורעב ללמוד ולהתפתח טכנולוגית ואישית

יכולת עבודה בצוות ויחסי אנוש מעולים

**Job Description**

The Risk Management Tribe is the delivery body for the strategy and regulatory requirements of the Risk Management Division.

The tribe is responsible for developing systems using advanced data-based technologies, cloud technologies, and applications using Angular, Java, and .NET technologies.

Additionally, the tribe is responsible for implementing advanced technological products in compliance, anti-money laundering, capital adequacy, and additional business content areas in risk management.

Oh, and one more thing - an opportunity to be part of a modern technological transformation.

**Role Essence:**

Developing end-to-end data pipelines in a DATA LAKE environment

Developing data transport processes in relational environments

Developing scripts in Python (with emphasis on PySpark)

Developing and investigating data in SQL

Performing tests (unit/integration)

CI/CD

**Job Requirements**

More than two years of experience in Python

More than two years of experience in Big Data with emphasis on SPARK and HIVE

Ability to read and write complex SQL queries

At least three years of experience in Microsoft Data environments (SSIS, SQL Server)

Familiarity with DWH, DL and ETL, ELT processes

Working with CI/CD processes

Working with CTRLM

Working with TERADATA database - advantage

Familiarity with Qlik Sense, Quilliup - advantage

Familiarity with the banking world - advantage

Responsibility, independence and organizational skills, "big head", initiative, diligence and energy

Big thinker and hungry to learn and develop technologically and personally

Ability to work in a team and excellent interpersonal skills