Cientista de Dados Sênior; Testes A​/B na Logística)

Position: Cientista de Dados Sênior (Testes A/B na Logística)

Vaga aberta de Cientista de Dados Sênior (Testes A/B na Logística). A empresa contratante é confidencial neste anúncio, e a seleção é conduzida pela Sylision.

Sobre a vaga:

Uma empresa de logística muda o tempo todo a experiência de quem contrata e acompanha uma entrega: o jeito de cotar frete, o aviso de previsão de chegada, o fluxo de agendamento de entrega, a forma de comunicar atraso. Cada mudança parece boa e algumas pioram o resultado. Para saber qual é qual, é preciso testar de forma controlada, e isso é mais difícil do que parece.

Seu trabalho cobre o desenho e a análise dos experimentos, da métrica principal e as métricas de proteção, ao tamanho de amostra, à duração e à unidade de aleatorização e verificar se a divisão ocorreu como planejado. Em logística, a unidade nem sempre é o usuário: a entrega, o motorista, a rota e o centro de distribuição interagem, e a mudança em um grupo pode afetar o outro, o que quebra a suposição de independência.

Também há erros clássicos para evitar: olhar o resultado todo dia e parar quando agrada, testar muitas métricas até uma dar significativa, ignorar o efeito de novidade. A entrega é uma decisão recomendada, com efeito estimado, incerteza e custo da decisão errada, e uma cultura de teste que melhora o time.

O que você vai fazer:

• Desenhar experimentos com hipótese, métrica principal, métricas de proteção e critério de decisão registrados antes do início
• Calcular poder, tamanho de amostra e duração e escolher a unidade de aleatorização
• Verificar a divisão dos grupos e identificar problemas de implementação durante o teste
• Tratar interferência entre unidades quando entregas e rotas compartilham recursos
• Aplicar redução de variância e correção para múltiplas comparações com critério
• Analisar efeito por segmento sem transformar a análise em pesca de resultado
• Escrever a recomendação de decisão e orientar produto e operação a planejar bons testes

Requisitos:

• Planejamento e análise de experimentos controlados, com poder estatístico e testes sequenciais
• Estatística inferencial sólida e honestidade na leitura de resultados ambíguos
• Python com Pandas e SQL avançado para montar as bases do experimento
• Detecção de erros de implementação, como grupos desbalanceados
• Capacidade de dizer não a um teste mal desenhado e propor uma alternativa
• Comunicação objetiva da decisão para produto e operação

Diferenciais:

• Experimentos em operações físicas, com interferência entre unidades
• Desenho com aleatorização por blocos ou por região
• Métodos quase experimentais para quando o teste não é possível
• Construção de ferramenta ou biblioteca interna de análise de experimentos
• Experiência em ensinar estatística de experimentos a não especialistas

Como é trabalhar aqui:

Vaga 100% remota, com contratação CLT, para cliente da Sylision com sede em São Paulo, SP. Todo experimento tem um plano escrito e revisado antes de começar, e o resultado é arquivado em um registro que o time consulta. Testes que não deram em nada também ficam documentados, para a empresa aprender com eles. Na candidatura, informe a sua pretensão salarial.

Benefícios

oferecidos pela empresa contratante:

• Ambiente colaborativo, com senso de comunidade e conquistas celebradas em equipe
• Trabalhe de qualquer lugar, com liberdade e flexibilidade
• Conexão global: convivência com times de diferentes países e culturas
• Apoio à saúde física com Total Pass e Mediquo
• Cuidado com a saúde mental pelo programa Team Care
• Contratação e jornada definidas com a empresa contratante

Tecnologias envolvidas:

• Python
• Testes A/B
• Estatística
• Pandas
• SQL
• Análise de experimentos
• Jupyter
• Comunicação de resultados

Seus dados: tratados conforme a LGPD, com remoção a qualquer momento, a pedido.