Senior Trino Power User Analyst
- Tipo di contratto
- Tempo pieno
- Percentuale
- 100%
- Luogo
- Zürich
- Azienda
- EPAM Systems (Switzerland) GmbH, Boulevard Lilienthal 2, 8152 Glattpark (Opfikon)
- Lingue
- Inglese (fluente)
- Prima pubblicazione
Siamo alla ricerca di un Senior Trino Power User Analyst da inserire nel nostro team a Zurich, Switzerland, in modalità di lavoro ibrida. In questo ruolo, progetterai, implementerai e ottimizzerai cluster Trino per ambienti di dati su larga scala. Garantirai l'alta disponibilità, le prestazioni e la tolleranza ai guasti dei sistemi distribuiti, consentendo un'esecuzione efficiente delle query attraverso diverse fonti di dati. Questa posizione offre l'opportunità di lavorare a stretto contatto con data engineer, architetti e analisti nel dare forma a moderne architetture di dati, inclusi lakehouse e soluzioni di query federate.
Responsabilità
Progettare, implementare e gestire cluster Trino in ambienti Kubernetes on-premise
Configurare cataloghi e connettori Trino per fonti di dati eterogenee come Hive, Iceberg, Kafka e object storage
Ottimizzare le prestazioni delle query attraverso la regolazione di memoria, allocazione CPU, strategia di spill e partizionamento
Implementare strategie di gestione del carico di lavoro utilizzando resource groups e controlli di concorrenza
Garantire la scalabilità e la tolleranza ai guasti dei cluster Trino per carichi di lavoro analitici critici
Monitorare la latenza delle query, le prestazioni del cluster e lo stato del sistema utilizzando strumenti di osservabilità
Risolvere problemi relativi a fallimenti delle query, contesa delle risorse e problemi a livello di sistema
Collaborare con i team di analisi per promuovere le migliori pratiche per un accesso efficiente ai dati
Contribuire al processo decisionale per l'architettura relativa ai data lakehouse e all'analisi distribuita
Requisiti
Oltre 5 anni di esperienza in piattaforme di dati distribuite o infrastrutture big data
Esperienza pratica nella distribuzione e gestione di cluster Trino o Presto
Competenza con Kubernetes e carichi di lavoro containerizzati
Esperienza nell'integrazione di fonti di dati come Hive Metastore, tabelle Iceberg e Kafka
Solida esperienza nell'ottimizzazione delle query distribuite e nel tuning delle prestazioni
Conoscenza di strumenti di monitoraggio come Prometheus, Grafana o Dynatrace
Familiarità con i meccanismi di sicurezza e controllo degli accessi (LDAP, Kerberos, RBAC)
Forte comprensione dell'architettura Trino, inclusi i ruoli coordinator/worker, la pianificazione delle query e i resource groups
Competenze di scripting in Python o Bash per attività di automazione
Eccellenti capacità comunicative, con fluidità in inglese; la conoscenza del tedesco è un plus
Tradotto automaticamente dall’originale.
Pubblicato 1 settimana fa