Software Engineer, Lakehouse (Data Platform Group)
מהנדס תוכנה בצוות Lakehouse שבקבוצת פלטפורמת נתונים, אחראי על בניית שכבת הנתונים האנליטית ושירותי עיבוד נתונים בחברה.
מה תעשו
- אחזקת שכבת אחסון אנליטית בקנה מידה גדול
- תכנון ופיתוח עיבוד אצוות על Spark/EMR ב-Java ו-PySpark
- פיתוח שירותי Java/Spring Boot המחשפים APIs לנתונים
- אופטימיזציה של ביצועים ועלות: קבצים, קומפקטציה וגודל צברים
- מחקר והטמעת טכנולוגיות Lakehouse ועמידה בצוותים טכניים
את מי הם מחפשים
- 5+ שנות ניסיון בעיצוב ומערכת נתונים מבוזרות ופרודקשן
- מומחיות מעשית ב-ClickHouse או Spark ברמה גבוהה
- ניסיון בפורמטים פתוחים כמו Iceberg, Delta או Hudi
- ניסיון בטכנולוגיות נתיקה כמו Parquet, S3 ו-SQL engines
- חזק ב-Java ועיצוב מונחה עצמים, Kubernetes ו-AWS (EMR, S3, Glue)
כישורים
סיכום שהכין StartupJobs על סמך המודעה של החברה. המודעה המלאה נמצאת באתר החברה.
המשרה הזו מגיעה מעמוד הקריירה של Cato Networks. אנחנו מקשרים ישירות למקור.