← Tutte le offerte

Senior Trino Power User Analyst

EPAM Systems (Switzerland) GmbH

Tipo di contratto
Tempo pieno
Percentuale
100%
Luogo
Zürich
Azienda
EPAM Systems (Switzerland) GmbH, Boulevard Lilienthal 2, 8152 Glattpark (Opfikon)
Lingue
Inglese (fluente)
Prima pubblicazione
Candidati ora

Siamo alla ricerca di un Senior Trino Power User Analyst da inserire nel nostro team a Zurich, Switzerland, in modalità di lavoro ibrida. In questo ruolo, progetterai, implementerai e ottimizzerai cluster Trino per ambienti di dati su larga scala. Garantirai l'alta disponibilità, le prestazioni e la tolleranza ai guasti dei sistemi distribuiti, consentendo un'esecuzione efficiente delle query attraverso diverse fonti di dati. Questa posizione offre l'opportunità di lavorare a stretto contatto con data engineer, architetti e analisti nel dare forma a moderne architetture di dati, inclusi lakehouse e soluzioni di query federate.

Responsabilità
Progettare, implementare e gestire cluster Trino in ambienti Kubernetes on-premise
Configurare cataloghi e connettori Trino per fonti di dati eterogenee come Hive, Iceberg, Kafka e object storage
Ottimizzare le prestazioni delle query attraverso la regolazione di memoria, allocazione CPU, strategia di spill e partizionamento
Implementare strategie di gestione del carico di lavoro utilizzando resource groups e controlli di concorrenza
Garantire la scalabilità e la tolleranza ai guasti dei cluster Trino per carichi di lavoro analitici critici
Monitorare la latenza delle query, le prestazioni del cluster e lo stato del sistema utilizzando strumenti di osservabilità
Risolvere problemi relativi a fallimenti delle query, contesa delle risorse e problemi a livello di sistema
Collaborare con i team di analisi per promuovere le migliori pratiche per un accesso efficiente ai dati
Contribuire al processo decisionale per l'architettura relativa ai data lakehouse e all'analisi distribuita
Requisiti
Oltre 5 anni di esperienza in piattaforme di dati distribuite o infrastrutture big data
Esperienza pratica nella distribuzione e gestione di cluster Trino o Presto
Competenza con Kubernetes e carichi di lavoro containerizzati
Esperienza nell'integrazione di fonti di dati come Hive Metastore, tabelle Iceberg e Kafka
Solida esperienza nell'ottimizzazione delle query distribuite e nel tuning delle prestazioni
Conoscenza di strumenti di monitoraggio come Prometheus, Grafana o Dynatrace
Familiarità con i meccanismi di sicurezza e controllo degli accessi (LDAP, Kerberos, RBAC)
Forte comprensione dell'architettura Trino, inclusi i ruoli coordinator/worker, la pianificazione delle query e i resource groups
Competenze di scripting in Python o Bash per attività di automazione
Eccellenti capacità comunicative, con fluidità in inglese; la conoscenza del tedesco è un plus

Tradotto automaticamente dall’originale.

Pubblicato 1 settimana fa

Luogo

Vedi su Google Maps

Questa pagina su jobszurich.ch