Principal Engineer, Compute Fleet Management

P-725

In Databricks, siamo appassionati dell'abilitazione dei team di dati a risolvere i problemi più difficili del mondo — dal rendere realtà la prossima modalità di trasporto all'accelerare lo sviluppo di scoperte mediche. Lo facciamo costruendo e gestendo la migliore piattaforma di infrastruttura dati e AI al mondo, in modo che i nostri clienti possano utilizzare approfonditi insight sui dati per migliorare il proprio business.

Informazioni sul Team: Unisciti al Core di Databricks Infrastructure

Il Compute Infra Team è il motore dietro tutti i prodotti di Databricks e i servizi del Control Plane. Costruiamo e scaliamo l'infrastruttura di calcolo fondamentale che consente a ogni cliente Databricks di avere successo, gestendo uno dei cloud di dati e AI più grandi e dinamici al mondo.

Missione: Definire il Futuro dell'Efficienza e della Scalabilità del Cloud Compute

In qualità di Technical Lead per Compute Fleet Management, non gestirai solo una flotta — stabilirai lo standard su come Databricks consuma e ottimizza il calcolo attraverso tutti e tre i principali cloud (AWS, Azure e GCP). Questo è un ruolo mission-critical con un impatto diretto sul nostro margine lordo e sull'esperienza del cliente. Il tuo mandato include:

• Pioneering Fleet Optimization: Provisioning e pooling di O(Billion)s di risorse cloud per raggiungere le massime prestazioni del carico di lavoro, un'efficienza leader del settore e un robusto isolamento delle risorse.
• Delivering Hyper-Scale Resilience: Costruire l'architettura che garantisce la scalabilità orizzontale e la resilienza contro guasti zonali o persino a livello di account cloud, assicurando che Databricks sia sempre attivo.
• Owning the Critical Path: Guidare lo sviluppo dei sistemi con la minor dipendenza possibile richiesti per avviare e gestire la nostra massiccia piattaforma di calcolo.

Risultati: L'Impatto che Porterai

Questo ruolo è rivolto a un ingegnere che prospera nell'assumere la responsabilità dei risultati più impegnativi e d'impatto:

• High Availability: Raggiungere e mantenere una disponibilità del 99.99% per tutti i carichi di lavoro batch e di serving.
• Stellar Efficiency: Spingere l'utilizzo al 60% o superiore — una metrica cruciale che richiede di bilanciare l'alta efficienza con un'incrollabile tolleranza ai guasti del cloud.
• Best-in-Class Isolation: Progettare e imporre un forte isolamento della sicurezza e delle prestazioni attraverso una vasta gamma di carichi di lavoro dei clienti.

Requisiti: Sei Pronto per questa Sfida?

Cerchiamo un Principal Engineer esperto che non abbia solo costruito, ma gestito con successo sistemi di infrastruttura mission-critical su larga scala in produzione. Devi avere un track record di:

• Leading Transformative Projects: Assumersi la responsabilità di iniziative ingegneristiche strategiche complesse, cross-team, cross-layer e multi-trimestrali, dal concetto all'esecuzione.
• Distributed Systems Mastery: Profonda esperienza pratica nello sviluppo e nella gestione di sistemi distribuiti ad alta scala su almeno un importante cloud pubblico.
• Influence Without Authority: Comprovata capacità di guidare il consenso, stabilire la direzione tecnica e guidare grandi sforzi tecnici attraverso i confini organizzativi.
• Execution Discipline: Eccezionale forza nella pianificazione, nel monitoraggio dei progressi del progetto e nella gestione di complesse dipendenze cross-organizzative.

Il Vantaggio: Esperienza Altamente Desiderabile

• Esperienza nella gestione e scalabilità di una flotta massiccia di GPU per carichi di lavoro AI/ML.
• Esperienza nello sviluppo e nella gestione di sistemi distribuiti su larga scala attraverso tutti i principali cloud (AWS, Azure e GCP).

Trasparenza dell'Intervallo di Retribuzione

Databricks si impegna per pratiche di compensazione eque e giuste. L'intervallo di retribuzione per questo ruolo è elencato di seguito e rappresenta l'intervallo salariale previsto per ruoli non commissionabili o i guadagni target per ruoli commissionabili. I pacchetti di compensazione effettivi si basano su diversi fattori unici per ogni candidato, tra cui, a titolo esemplificativo ma non esaustivo, le competenze relative al lavoro, la profondità dell'esperienza, certificazioni e formazione pertinenti e la specifica posizione lavorativa. In base ai fattori sopra indicati, Databricks prevede di utilizzare l'intera ampiezza dell'intervallo. Il pacchetto di compensazione totale per questa posizione può anche includere l'idoneità per bonus annuali sulle prestazioni, equity e i benefici elencati sopra. Per ulteriori informazioni su quale intervallo appartiene la tua posizione, visita la nostra pagina qui (https://www.databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf).

Local Pay Range

$264,300—$322,300 USD

Informazioni su Databricks

Databricks è l'azienda di Data e AI. Più di 20.000 organizzazioni in tutto il mondo — tra cui adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever e il 70% delle Fortune 500 — si affidano alla Databricks Data + AI Platform per costruire e scalare app di dati e AI, analytics e agent. Con sede a San Francisco e oltre 30 uffici in tutto il mondo, Databricks offre una piattaforma unificata che include Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse e Unity Catalog. Per saperne di più, segui Databricks su LinkedIn (https://www.linkedin.com/company/databricks), X (https://x.com/databricks), YouTube (https://www.youtube.com/@Databricks) e Instagram (https://www.instagram.com/databricksinc/?hl=en).

Benefit

In Databricks, ci sforziamo di fornire benefit e vantaggi completi che soddisfino le esigenze di tutti i nostri dipendenti. Per dettagli specifici sui benefit offerti nella tua regione clicca qui (https://docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing).

Il Nostro Impegno per la Diversità e l'Inclusione

In Databricks, ci impegniamo a promuovere una cultura diversificata e inclusiva in cui tutti