Estados Unidos
CONCEPT SOLUTIONS LLC
Paramount
Engenheiro(a) Líder de Operações de Machine Learning
Estados Unidos
Burbank, California, Estados Unidos · New York, New York, Estados Unidos
SQL
Tradução automática. Consulte o original.
Visão Geral
#WeAreParamount em missão para liberar o poder do conteúdo… você vem?
Temos as marcas, temos as estrelas, temos o poder para alcançar nossa missão de entreter o planeta – agora tudo o que nos falta é… VOCÊ!
Tornar-se parte da Paramount significa juntar-se a uma equipe de pessoas apaixonadas que não só reconhecem o poder do conteúdo, mas também desfrutam de um toque de diversão e singularidade. Juntos, co-criamos momentos que importam – tanto para nosso público quanto para nossos funcionários – e visamos deixar uma marca positiva na cultura.
Engenheiro(a) Líder de Operações de Machine Learning
Sistemas de Personalização e Recomendação
Estamos contratando um(a) Engenheiro(a) Líder de Operações de Machine Learning para ser responsável pela excelência operacional, observabilidade, confiabilidade e camada de governança em torno de nossos sistemas de ML de personalização e recomendação.
Nossos modelos de recomendação retreinam e implantam com frequência. Você definirá como detectamos mudanças no comportamento do modelo, diagnosticamos problemas rapidamente e evitamos que implantações ruins cheguem aos clientes.
Esta é uma função de liderança IC (Individual Contributor): você definirá a direção técnica e impulsionará a adoção em Engenharia de ML, DevOps, Engenharia de Plataforma, Engenharia de Dados e Produto.
Integrado(a) à Plataforma e Infraestrutura de ML, você fará parceria com engenheiros de ML que são responsáveis pelo desenvolvimento de modelos. Não se espera que você construa infraestrutura do zero, mas você definirá o que é bom, avaliará ferramentas e será responsável pela camada operacional do dia a dia.
O que o Sucesso Parece
- Dentro dos primeiros 90 dias, você terá avaliado o cenário operacional atual de ML em produção, identificado as lacunas de maior risco e estabelecido um roteiro priorizado para observabilidade, rastreabilidade, segurança de implantação e resposta a incidentes.
- Em seis meses, nossos sistemas de recomendação em produção terão linhagem de modelo mais clara, cobertura de monitoramento mais forte, fluxos de trabalho de diagnóstico melhores e portões de implantação mais confiáveis.
- Em um ano, as operações de ML serão uma função repetível e confiável: as equipes saberão o que está em execução, por que foi promovido, como está performando, quando algo está errado e como se recuperar rapidamente.
Sinal de Nivelamento
O(a) candidato(a) ideal define a estratégia, lidera a execução multifuncional e estabelece padrões de engenharia, mantendo-se prático(a) o suficiente para investigar problemas de produção diretamente.
O que você fará
Ser responsável pela estratégia de confiabilidade de produção de ML
- Definir e liderar a estratégia operacional para sistemas de ML em produção, incluindo monitoramento, rastreabilidade, segurança de implantação, resposta a incidentes e validação pós-implantação.
- Estabelecer os padrões que as equipes de ML usam para avaliar a saúde, o desempenho e a confiabilidade do modelo em produção.
Ser responsável pela rastreabilidade e governança de modelos
- Garantir que cada modelo em produção tenha linhagem clara (dados, recursos, código, artefatos, validação, histórico de implantação) e impulsionar a adoção de ferramentas de registro de modelos e metadados em todas as equipes de ML.
Construir observabilidade de ML de ponta a ponta
- Projetar e implementar monitoramento em todo o caminho do sinal de ML: chegada de dados, frescor de recursos, estabilidade de distribuição, geração de candidatos, comportamento de classificação, métricas de modelo, latência de serviço e desempenho de SLA.
Definir métricas de saúde de produção
- Colaborar com stakeholders de ML, dados, produto e negócios para definir métricas pós-implantação que cubram qualidade do modelo, confiabilidade do sistema, salvaguardas de negócios e indicadores de degradação.
Detectar desvios e degradação proativamente
- Detectar desvios de dados, desvios de recursos, mudanças no comportamento do modelo e falhas silenciosas antes que afetem os clientes por meio de limiares, alertas, detecção de anomalias e monitoramento de lançamento a lançamento.
Liderar ferramentas de diagnóstico e análise de causa raiz
- Construir dashboards, logs e fluxos de trabalho de diagnóstico que progridam rapidamente de "recomendações estão erradas" para a causa raiz, com contexto capturado entre candidatos, recursos, pontuações, decisões de classificação e resultados downstream.
Ser responsável pela segurança de implantação de ML
- Definir e operar portões automatizados que impeçam que modelos ruins ou dados ruins sejam promovidos para produção. Colaborar com MLEs para estabelecer verificações de validação, critérios de reversão, estratégias de canary, testes sombra e revisões de saúde de lançamento.
Liderar resposta a incidentes de ML
- Ser responsável pelas práticas de resposta a incidentes para sistemas de ML, incluindo playbooks de reversão, estratégias de hotfix, definições de gravidade, frameworks de trade-off, comunicações e post-mortems. Impulsionar o fechamento de lacunas sistêmicas após incidentes, em vez de apenas resolver o problema imediato.
Colaborar com Plataforma de ML, Dados e ML
- Colaborar com DevOps/Plataforma em necessidades de infraestrutura e observabilidade; com Engenharia de Dados em qualidade de dados, desvios e frescor; e com Engenharia de ML para incorporar requisitos operacionais em fluxos de trabalho de desenvolvimento e implantação.
Estabelecer padrões e mentorar outros
- Atuar como líder técnico para operações de ML: estabelecer padrões reutilizáveis, playbooks e diretrizes, e mentorar engenheiros em confiabilidade, observabilidade e rigor operacional.
Qualificações Básicas
- 5+ anos de experiência em engenharia de machine learning, plataforma de ML, ML aplicada, MLOps, plataforma de dados, engenharia de confiabilidade ou função técnica relacionada.
- Experiência comprovada na operação de sistemas de ML em produção, incluindo monitoramento, implantação, resposta a incidentes, validação de modelos, qualidade de dados ou responsabilidade pela confiabilidade.
- Experiência em liderar iniciativas técnicas em várias equipes de engenharia, especialmente onde o sucesso exigiu influenciar arquitetura, ferramentas, padrões ou adoção.
- Experiência prática com registros de modelos, stores de recursos, sistemas de metadados de ML, monitoramento de produção, pipelines de implantação de modelos ou plataformas de observabilidade de ML.
- Sólido conhecimento de sistemas de ML de ponta a ponta, incluindo dados de treinamento, recursos, artefatos de modelo, validação offline, serviço online, métricas pós-implantação e medição de resultados de negócios.
- Capacidade de raciocinar sobre modos de falha operacional de ML: recursos desatualizados, mudança de distribuição, assimetria de treinamento-serviço, rótulos atrasados e lacunas de métricas offline-online.
- Sólidas habilidades em SQL e conforto em investigar qualidade de dados, distribuições de recursos, saídas de modelos, comportamento de pipeline e anomalias de produção.
- Histórico de colaboração multifuncional com Engenharia de Plataforma, Dados e ML para entregar capacidades operacionais de nível de produção.
- Sólidas habilidades de comunicação escrita e verbal, incluindo a capacidade de explicar a saúde do sistema de ML, riscos, incidentes e trade-offs tanto para stakeholders técnicos quanto não técnicos.
Qualificações Adicionais
- Experiência operando sistemas de ML de recomendação, personalização, classificação, busca, anúncios, descoberta de conteúdo ou marketplace em escala.
- Experiência com sistemas de serviço de modelos em tempo real ou quase em tempo real.
- Experiência com stores de recursos, registros de modelos, stores de metadados, rastreamento de experimentos, ferramentas de qualidade de dados, sistemas de linhagem ou plataformas de observabilidade.
- Experiência projetando portões de validação automatizados, implantações canary, estratégias de reversão, implantações sombra ou fluxos de trabalho de entrega progressiva para sistemas de ML.
- Experiência com testes A/B, salvaguardas de experimentos, avaliação contrafactual ou alinhamento de métricas offline-para-online.
- Experiência com ambientes de produção nativos da nuvem, pipelines de dados distribuídos, frameworks de orquestração ou sistemas de streaming.
- Experiência liderando revisões de incidentes, post-mortems, programas de confiabilidade ou iniciativas de excelência operacional.
- Experiência definindo padrões, playbooks ou frameworks de governança para sistemas de ML em produção.
Paramount Streaming, uma divisão dentro da Paramount Global, é o lar dos serviços diretos ao consumidor da empresa, abrangendo gratuitos e pagos na forma de Pluto TV e Paramount+. Pluto TV é o líder global em TV gratuita com suporte de anúncios, entregando mais de 1,400 canais globais e uma extensa biblioteca de conteúdo de streaming, incluindo canais ao vivo e originais. Paramount+, serviço de vídeo sob demanda e streaming ao vivo por assinatura digital, combina esportes ao vivo, notícias de última hora e uma Montanha de Entretenimento™. Paramount+ apresenta uma biblioteca expansiva de séries originais, sucessos e filmes populares em todos os gêneros de marcas e estúdios de produção de renome mundial, incluindo SHOWTIME®.
INFORMAÇÕES ADICIONAIS
Faixa Salarial de Contratação: $156,800.00 - 235,200.00.
A faixa salarial de contratação para esta posição se aplica a Nova York, Califórnia, Colorado, estado de Washington e a maioria das outras geografias. O salário inicial para o(a) candidato(a) selecionado(a) depende de uma variedade de fatores relacionados ao trabalho, incluindo, mas não se limitando a, localização geográfica, demandas do mercado, experiência, treinamento e educação.
Paramount é um empregador que oferece igualdade de oportunidades (EOE), incluindo pessoas com deficiência/veteranos.
Na Paramount, o espírito de inclusão alimenta tudo o que fazemos, dentro e fora das telas. Desde a programação e os filmes que criamos até os benefícios/programas para funcionários e iniciativas de alcance de impacto social, acreditamos que oportunidades, acesso, recursos e recompensas devem estar disponíveis para e em benefício de todos. A Paramount tem orgulho de ser um local de trabalho com igualdade de oportunidades. Estamos comprometidos com a igualdade de oportunidades de emprego, independentemente de raça, cor, etnia, ancestralidade, religião, credo, sexo, origem nacional, orientação sexual, idade, status de cidadania, estado civil, deficiência, identidade de gênero, expressão de gênero e status de veterano.
Se você é um indivíduo qualificado com deficiência ou um veterano com deficiência, pode solicitar uma acomodação razoável se estiver impossibilitado ou limitado em sua capacidade de usar ou acessar paramount.com/careers como resultado de sua deficiência. Você pode solicitar acomodações razoáveis ligando para 212.846.5500 ou enviando um e-mail para paramountaccommodations@paramount.com. Apenas mensagens deixadas para este fim serão respondidas.
O que oferecemos
Os benefícios disponíveis para esta posição incluem plano médico, odontológico, oftalmológico, plano 401(k), cobertura de seguro de vida, benefícios de invalidez, programa de assistência educacional e PTO ou, se aplicável, conforme ditado pelo Acordo Coletivo de Trabalho apropriado.
Esta posição é elegível para bônus.
- Pacotes de remuneração atraentes e benefícios abrangentes. Confira nossa lista completa de benefícios aqui: paramount.com/careers/benefits
- Generoso tempo de folga remunerado.
- Uma oportunidade emocionante e gratificante de fazer parte de uma das equipes mais dinâmicas da Paramount.
- Oportunidades para eventos de engajamento presenciais e virtuais.
- Oportunidades únicas para fazer conexões significativas e construir uma comunidade vibrante, dentro e fora do local de trabalho.
- Explore a vida na Paramount: paramount.com/careers/life-at-paramount
Mais oportunidades com um só perfil
Quer aparecer para várias vagas sem repetir todo o processo? Crie seu perfil e seja encontrado pelas empresas que usam a Nort.
Criar meu perfil