SR Desenvolvimento Python (com foco em dados)
Aqui na ília nossas vagas estão sempre abertas para todas as pessoas e não se restringem quanto a gênero, etnia, orientação sexual, fatores sociais, condições físicas ou intelectuais (PCD) etc. Incentivamos a candidatura de integrantes de todos os grupos minoritários! Sobre a ília Somos especialistas em tecnologia, dados e design, impulsionando a transformação digital de grandes players do mercado há mais de 10 anos, nos setores financeiro, seguros e mobilidade. Com mais de 450 profissionais, estamos presentes no Brasil e Europa, atendendo aos mercados da América Latina, Europa e América do Norte, desenvolvendo produtos digitais de alta qualidade e com foco em resultados de negócios. Somos uma equipe inovadora, criativa e apaixonada por tecnologia. Certificada pelo 7° ano consecutivo como Great Place to work aqui na ília acreditamos que pessoas mudam o mundo, e investimos nelas. Nossas awesome deliveries são feitas de pessoas para pessoas, afinal awesome people make awesome deliveries! #Vempraília! Sobre a vaga: Buscamos um desenvolvedor Python com sólida experiência em dados que saiba escrever código de produção — APIs, pipelines, integrações — e que entenda profundamente o dado que trafega por ele. Buscamos quem já viveu os dois lados e se move entre eles com naturalidade. O time trabalha com um fluxo completo de dados: extração de bases relacionais, processamento em camadas na AWS (arquitetura medalhão) e disponibilização para microsserviços e BI. A pessoa precisará atuar com autonomia, propor o melhor caminho técnico e transitar entre diferentes stacks conforme a demanda do projeto. Responsabilidades: Ingestão e Extração: Desenvolver scripts (Python puro ou PySpark) para consultar bases SQL Server, tratar os dados e publicá-los em buckets AWS S3. Processamento (Arquitetura Medalhão): Construir pipelines para mover e refinar dados entre as camadas Bronze e Prata utilizando Python, PySpark e AWS Glue. Disponibilização de Dados: Garantir a entrega de dados em OpenSearch (Fast Data) e no Amazon Redshift (para suporte ao time de BI). Integração com Microsserviços: Colaborar com a camada de consumo, onde microsserviços em Node.js consultam o OpenSearch para servir as aplicações finais. Visão Consultiva: Atuar de forma autônoma, indicando os melhores caminhos técnicos e arquiteturais para o projeto. Criar e consumir APIs dentro do ecossistema AWS (Lambda, Glue, S3) Requisitos: Python sólido: código estruturado, orientado a objetos e com testes (Pytest ou similar) Experiência real com pipelines de dados: PySpark, AWS Glue, Mage.ai ou equivalente AWS na prática: S3, Lambda, Redshift, Glue Vivência com microsserviços e APIs — criação, integração e arquitetura SQL e integração com bases relacionais (SQL Server, PostgreSQL ou similar) CI/CD e versionamento: GitHub Actions, GitLab, Terraform ou equivalente Perfil adaptável: confortável em trabalhar com diferentes stacks conforme o projeto exige Diferenciais: Node.js — o microsserviço de consulta de dados do projeto está em Node Apache Kafka ou experiência com mensageria assíncrona OpenSearch ou Elasticsearch Atuação em contextos de alta criticidade ou volume de dados Benefícios e Incentivos: Esta contratação será no modelo PJ, atuando no modelo remoto. Apply To This Job