B&A
Databricks
Ingeniero de Software Staff - Infraestructura de Investigación de IA
Sobre la oportunidad
INGENIERO DE SOFTWARE STAFF - INFRAESTRUCTURA DE INVESTIGACIÓN DE IA
En Databricks, nos obsesiona capacitar a los equipos de datos para resolver los problemas más difíciles del mundo, desde la detección de amenazas de seguridad hasta el desarrollo de fármacos contra el cáncer. Hacemos esto construyendo y ejecutando la mejor plataforma de datos e IA del mundo para que nuestros clientes puedan centrarse en los desafíos de alto valor que son centrales para sus propias misiones.
La organización de Investigación de IA de Databricks permite a las empresas desarrollar modelos y agentes de IA utilizando sus propios datos, con tecnologías que van desde LLMs de código abierto post-entrenamiento hasta el desarrollo de arquitecturas avanzadas multiagente. Databricks AI lo hace produciendo ciencia novedosa y poniéndola en producción. Databricks AI está comprometida con la creencia de que los modelos y agentes de IA de una empresa son tan valiosos como cualquier otra IP central, y que la IA de alta calidad debe estar disponible para todos.
Transparencia del rango salarial
P-1215
Databricks está comprometida con prácticas de compensación justas y equitativas. Los rangos salariales para este puesto se enumeran a continuación y representan el rango salarial esperado para puestos no comisionables o los ingresos objetivo para puestos comisionables. La compensación real se basa en varios factores que son únicos para cada candidato, incluyendo, entre otros, las habilidades relacionadas con el puesto, la profundidad de la experiencia, las certificaciones y la formación relevantes, y la ubicación de trabajo específica.
Según los factores anteriores, Databricks anticipa utilizar el ancho completo del rango. El paquete de compensación total para este puesto también puede incluir la elegibilidad para bonificación anual por rendimiento, acciones y los beneficios enumerados anteriormente.
Para más información sobre en qué rango se encuentra su ubicación, visite nuestra página aquí databricks.com/sites/default/files/2024-08/us-pay-zone-mapping.pdf.
Rango salarial local
$199,000—$270,000 USD
Nuestro compromiso con la diversidad y la inclusión
En Databricks, estamos comprometidos a fomentar una cultura diversa e inclusiva donde todos puedan sobresalir. Ponemos gran cuidado en asegurar que nuestras prácticas de contratación sean inclusivas y cumplan con los estándares de igualdad de oportunidades de empleo. Las personas que buscan empleo en Databricks son consideradas sin distinción de edad, color, discapacidad, etnia, estado civil o familiar, identidad o expresión de género, idioma, origen nacional, capacidad física y mental, afiliación política, raza, religión, orientación sexual, estatus socioeconómico, condición de veterano y otras características protegidas.
Cumplimiento
Si se requiere acceso a tecnología o código fuente controlado por exportación para el desempeño de las funciones del puesto, queda a discreción del Empleador solicitar una licencia del gobierno de EE. UU. para dichos puestos, y el Empleador puede negarse a proceder con un solicitante basándose únicamente en esto.
Descripción del puesto
Como Ingeniero de Software Staff, Infraestructura de Investigación de IA, desarrollarás y ejecutarás la pila de investigación que potencia la Investigación de IA de Databricks. Diseñarás y construirás servicios que programan, orquestan y observan cargas de trabajo de experimentos de entrenamiento e inferencia a gran escala en miles de GPUs, mejorarás nuestras herramientas de desarrollo y garantizarás que los investigadores puedan iterar rápidamente sin sacrificar la fiabilidad, la eficiencia o la seguridad.
Colaborarás estrechamente con científicos de investigación, ingenieros de ML y equipos de plataforma para convertir las cargas de trabajo experimentales en pipelines robustos y repetibles, y para superar los límites de lo que nuestra infraestructura puede soportar.
El impacto que tendrás
Como Ingeniero de Software Staff en el Equipo de Infraestructura de Investigación de IA en Databricks, tú:
- Diseñarás e implementarás infraestructura que soporte experimentos a gran escala, procesamiento de datos y entrenamiento de modelos (por ejemplo, clústeres HPC, flotas de GPUs o sistemas basados en la nube).
- Permitirás a los investigadores pasar de la idea a un experimento a gran escala en minutos, no en días, construyendo abstracciones potentes para la presentación de trabajos, la programación y la monitorización.
- Crearás herramientas que mejoren la productividad de los desarrolladores de investigación, como sistemas de gestión de experimentos, infraestructura de CI/pruebas para código de investigación y flujos de trabajo que reduzcan el tiempo de iteración.
- Influirás en la hoja de ruta a largo plazo para la computación de investigación, dando forma a cómo Databricks AI Research entrena, evalúa y lanza modelos a los clientes.
- Servirás como mentor técnico y multiplicador de fuerza para otros ingenieros que trabajan en sistemas de cómputo, infraestructura y IA.
Lo que buscamos
- BS/MS o PhD en Informática o campo relacionado.
- Más de 5 años de experiencia en ingeniería de software, incluyendo un tiempo sustancial trabajando en sistemas distribuidos o infraestructura a gran escala.
- Tener una profunda experiencia en la construcción y operación de sistemas distribuidos, pipelines de datos o servicios backend a gran escala, idealmente involucrando GPUs, clústeres o proveedores de nube importantes.
- Ser competente en uno o más lenguajes de programación de sistemas (por ejemplo, C++, Rust, Go, Java, Scala) y poder diseñar, implementar y depurar servicios complejos.
- Haber construido o contribuido significativamente a planificadores de clústeres, gestores de recursos o sistemas de orquestación de trabajos a gran escala (por ejemplo, Kubernetes, Slurm, Ray, sistemas internos personalizados).
- Comprender los flujos de trabajo modernos de entrenamiento e inferencia de ML (por ejemplo, entrenamiento distribuido, paralelismo de modelos, ajuste fino, evaluación), incluso si no eres principalmente un científico de investigación.
- Poder moverse rápido y ser pragmático para hacer las cosas, mientras se cuida la excelencia operativa. Haber impulsado sistemas complejos desde el prototipo hasta servicios estables y bien gestionados.
- Comunicarse claramente tanto con investigadores como con ingenieros, y disfrutar traduciendo entre las necesidades de investigación y las realidades de la infraestructura.
Acerca de Databricks
Databricks es la empresa de Datos e IA. Más de 20,000 organizaciones en todo el mundo —incluyendo adidas, AT&T, Bayer, Block, Mastercard, Rivian, Unilever, y el 70% de las Fortune 500— confían en la Plataforma de Datos + IA de Databricks para construir y escalar aplicaciones, análisis y agentes de datos e IA. Con sede en San Francisco y más de 30 oficinas en todo el mundo, Databricks ofrece una plataforma unificada que incluye Genie, Lakebase, Agent Bricks, Lakeflow, Lakehouse y Unity Catalog. Para saber más, sigue a Databricks en LinkedIn linkedin.com/company/databricks, X x.com/databricks, YouTube youtube.com/@Databricks e Instagram instagram.com/databricksinc/?hl=en.
Beneficios
En Databricks, nos esforzamos por ofrecer beneficios y ventajas integrales que satisfagan las necesidades de todos nuestros empleados. Para obtener detalles específicos sobre los beneficios ofrecidos en su región, haga clic aquí docs.google.com/document/d/154un3e8Xav4BceOSlcYFZRGEuQI54xMxVydRwQn54eQ/edit?usp=sharing.
