לחברת Mertens-Malam Team דרוש/ה data Engineer למשרד ממשלתי בירושלים.
תיאור התפקיד:
גורם אחראי על תכנון ופיתוח תהליכי ETL, ELT ובניית data Pipelines בסביבת LakeHouse. התוויית דרכי מידול ובחירת כלי ואופן הפיתוח בהתאם לסביבת עבודה, נפח המידע,מקורות נתונים ודרישה עסקית.
התפקיד כולל תכנון,פיתוח וניהול תהליכי אינטגרציה ובניית data Pipelines מורכבים,בניה וניהול תהליכי הכנת,טיוב והעשרה של הנתונים. הגדרה וביצוע תהליכי גישה, הפקה, זרימה,תכלול וקליטה בין מקורות נתונים ופלטפורמות אנליטיות, מתן הדרכה והנחיה לפתחים ומהנדסי נתונים בארגון.
עבודה בשיתוף פעולה עם DBA,צוותי תשתיות של הארגון, אנשי data ומדעני נתונים.
תיאור התפקיד:
גורם אחראי על תכנון ופיתוח תהליכי ETL, ELT ובניית data Pipelines בסביבת LakeHouse. התוויית דרכי מידול ובחירת כלי ואופן הפיתוח בהתאם לסביבת עבודה, נפח המידע,מקורות נתונים ודרישה עסקית.
התפקיד כולל תכנון,פיתוח וניהול תהליכי אינטגרציה ובניית data Pipelines מורכבים,בניה וניהול תהליכי הכנת,טיוב והעשרה של הנתונים. הגדרה וביצוע תהליכי גישה, הפקה, זרימה,תכלול וקליטה בין מקורות נתונים ופלטפורמות אנליטיות, מתן הדרכה והנחיה לפתחים ומהנדסי נתונים בארגון.
עבודה בשיתוף פעולה עם DBA,צוותי תשתיות של הארגון, אנשי data ומדעני נתונים.
דרישות:
ניסיון של חמש שנים לפחות כ- data Engineer.
ניסיון מוכח במידול נתונים.
ניסיון בתכנון ובניית data Pipelines מורכבים.
שליטה בשפת SQL ברמה גבוהה.
שליטה בפיתוח ב- Python /R/ JAVA.
ניסיון בעבודה עם טכנולוגיות Big Data כגון Kafka, Spark, Hadoop.
ניסיון בעבודה מול כלים ותשתיות בענן. המשרה מיועדת לנשים ולגברים כאחד.
ניסיון של חמש שנים לפחות כ- data Engineer.
ניסיון מוכח במידול נתונים.
ניסיון בתכנון ובניית data Pipelines מורכבים.
שליטה בשפת SQL ברמה גבוהה.
שליטה בפיתוח ב- Python /R/ JAVA.
ניסיון בעבודה עם טכנולוגיות Big Data כגון Kafka, Spark, Hadoop.
ניסיון בעבודה מול כלים ותשתיות בענן. המשרה מיועדת לנשים ולגברים כאחד.
