למרכז רפואי במרכז הארץ דרוש.ה Data Engineer
תחומי אחריות עיקריים:
תכנון, פיתוח, הטמעה ותחזוקה של תהליכי ETL/ELT מורכבים לאיסוף, טרנספורמציה וטעינה של נתונים ממקורות שונים (Databases, APIs, Files, Streaming) אל Data Lake (S3) ו-Data Warehouse.
אופטימיזציה של תהליכי Data Pipelines לשיפור ביצועים וסקיילביליות.
יישום Best Practices לטיפול בנתונים (Data Quality, Data Validation, Error Handling).
עבודה שוטפת עם Apache Spark באמצעות Databricks Notebooks
פיתוח וניהול Workflows ב-Databricks.
שימוש ב-Databricks SQL לניתוח נתונים ופיתוח שכבות סמנטיות.
הטמעת Data Governance וניהול הרשאות באמצעות Unity Catalog.
כתיבת שאילתות SQL מורכבות ומתקדמות
תכנון ופיתוח מודלי נתונים (Dimensional Modeling, Star/Snowflake Schemas) עבור Data Warehouses ו-Data Marts. יצירה ואופטימיזציה של Stored Procedures, Views, Functions ו- Materialized Views.
אחריות על הבטחת איכות, שלמות ועקביות הנתונים לאורך כל ה-Pipeline.
עבודה צמודה עם אנליסטים עסקיים, מדעני נתונים, מפתחי תוכנה וצוותי תפעול.
BI|הייטק-תוכנה|מהנדס/ת תוכנה
אריאלמעלה אדומיםפתח תקווהראש העיןראשון לציון
מלאה
רמת שכר
22,000
פורסם לפני יום 1
פורסמה ברשת
מידת ההתאמה שלי
כישוריםמשקף את הכישורים שמופיעים בפרופיל שלך ביחס לכישורים הנדרשים למשרה.0%
יש לך 0 מתוך 15 הכישורים הנדרשים
כישורים חסרים:
Apache SparkData GovernanceData Pipeline OptimizationData QualityDatabricks NotebooksDatabricks SqlDimensional ModelingEtl Elt ProcessesFunctionsMaterialized ViewsSQLStar And Snowflake SchemasStored ProceduresUnity CatalogViews
התאמתך למשרה מחושבת על פי כישוריך וניסיונך (כפי שסיפרת לנו עליהם) מול דרישות המעסיק - אין בכך כדי להעיד על קבלתך לעבודה (זה יחליט המעסיק)
מידע על תפקיד
מהנדסי נתונים מתכננים, בונים ומתחזקים צינורות נתונים וארכיטקטורות ניתנות להרחבה. הם מבטיחים זרימת נתונים יעילה ונגישות לניתוח ודיווח. שליטה ב-SQL, Python וכלי ביג דאטה כמו Hadoop או Spark היא חיונית. היכרות עם פלטפורמות ענן כמו AWS או Azure היא יתרון.
קורסים והכשרות להגיע לתפקיד
