Data Engineer
תיאור המשרה
השכלה אקדמאיתבתחום – הנדסת תוכנה/מדעי המחשב – חובה
ניסיון עבודה של ארבע שנים ומעלה בפיתוחבשפת פייתון וSQL – חובה
ניסיון עבודה של שנתיים ומעלה עם HDFS, Hive, Spark, Kafka– חובה
ניסיון בבסיסי נתונים לא רלציוניים כמו Elastic, Neo4J.
ניסיון בפיתוח ועיצוב תהליכי ETL – יתרון
דרישות התפקיד
להיות חלק מצוות האחראי על פיתוח אנליטיקה מתקדמתוהצגת תובנות מנתונים, פיתוח של מודלי MachineLearning ו NLP, חילוץטקסט ממסמכים, פיתוח תהליכי Big Dataבסביבת Hadoop מעל Spark ו KAFKA הכוללת עבודה עם מבנה נתונים כגון JSON ו Parquet,בסיס נתונים גרפי, ועוד.
התפקיד כולל:
הובלה של הצוות מבחינה מקצועית כולל ביצוע CODE REVIEW
שימוש כ SCRUM MASTER - ניהול ותכנון המשימות לחברי הצוות
עבודה צמודה עם DataScientists בצוות לפיתוח פאנלים עבור מודלי MachineLearning בתחומי הרפואה.
מידול דאטה ועיצוב אפליקציות בתחומי ה Big Data
· פיתוח של תהליכי דאטה בזמןאמת.
· ביצוע של אנליזה בסיסית על דאטה.