Engenheiro de Dados Pleno

  

Engenheiro de Dados Pleno
Definir soluções tecnicamente flexíveis e escaláveis. Organização e planejamento, bem como documentação das atividades diárias. Resiliência para shift entre projetos e repriorizações. Antecipação dos pontos de incerteza em projetos. Desenhar e implementar soluções técnicas dentro do time de atuação. Utilizar-se de revisões de código e melhores práticas para estruturação e desenvolvimento.

Tempo Integral

A combinar

  
Outras Competências:Capacidade de trabalho em equipe com passagem de conhecimento. Boa comunicação para agendas técnicas e de negócio. Experiência em atuação técnica comprovada com Cloud AWS. Experiência em atuação técnica comprovada com modelagem de dados. Experiência em atuação técnica comprovada no desenvolvimento de pipeline de dados (ETL / ELT) e integrações (preferencialmente DMS, NiFi e Airflow). Experiência com cenários de captura, ingestão e consumo de dados. Experiência na criação e manutenção de datalakes e data lakehouses. Conhecimentos avançados em SQL. Conhecimentos intermediários em MySQL. Conhecimentos intermediários em Python (necessário a utilização de bibliotecas de dataframes, limpeza de dados e conversões). Conhecimentos intermediários em PySpark. Experiência com tecnologias de armazenamento e processamentos de BigData na AWS (preferencilamente S3, RedShift e Athena). Experiência com metodologia ágil (Kanban e/ou Scrum). Competências em Apache Nifi. Experiência com uso e criação de containers e APIs RESTful. Experiência com Databricks. Experiência com NoSQL. Experiência com governança de dados (Data Discovery, Data Lineage e Data Quality).