עדיין מחפשים עבודה במנועי חיפוש? הגיע הזמן להשתדרג!
במקום לעבור לבד על אלפי מודעות, Jobify מנתחת את קורות החיים שלך ומציגה לך רק משרות שבאמת מתאימות לך.
מעל 80,000 משרות • 4,000 חדשות ביום
חינם. בלי פרסומות. בלי אותיות קטנות.
A significant part of the role involves building end-to-end integration flows and tests, particularly around token generation pipelines and system orchestration, as well as contributing to intelligent system behavior such as hardware selection and execution strategies. The role also includes developing system-level logic in Python for multi-tenant management, caching strategies, and service lifecycle management across the platform.
***This is not a Data Science position***
Responsibilities:
Build and maintain end-to-end integration flows across the AI inference pipeline (serving, orchestration, APIs, and infrastructure)
Design, implement, and optimize LLM inference workflows, including prefill and decode stages
Improve system performance with focus on throughput, latency, and interactivity
Write production-grade components in Python and integrate them into the broader system
Contribute to system-level logic such as smart hardware selection and execution strategies
Integrate models (open source and custom), services, and APIs into cohesive, reliable end-to-end application pipelines
4+ years of experience in software engineering or machine learning engineering
Strong proficiency in Python
Strong experience with LLM inference systems and performance optimization
Hands-on experience with system integration and end-to-end workflows
Experience with inference frameworks such as vLLM, TensorRT, SGLang etc
Experience working with GPU/accelerator-based systems
Preferred Qualifications:
Hands-on experience with Dynamo and LLM-D for LLM inference and serving
Familiarity with Kubernetes and cloud environments
במקום לעבור לבד על אלפי מודעות, Jobify מנתחת את קורות החיים שלך ומציגה לך רק משרות שבאמת מתאימות לך.
מעל 80,000 משרות • 4,000 חדשות ביום
חינם. בלי פרסומות. בלי אותיות קטנות.
משרות נוספות מומלצות עבורך
-
Senior ML Software Engineer, Data Plane
-
תל אביב - יפו
Amazon Web Services (AWS)
-
-
Senior ML Algorithm Engineer
-
תל אביב - יפו
פרוטאנטקס
-
-
Software Engineer, ML (Technical Leadership)
-
תל אביב - יפו
פייסבוק
-
-
Senior Machine Learning Engineer
-
תל אביב - יפו
Ethosia
-
-
Senior Deep Learning Researcher, LLM Inference
-
תל אביב - יפו
Nvidia
-
-
Senior Applied AI Evaluation Engineer - RAN Ticket Intelligence
-
כפר סבא
Parallel Wireless
-
ערב