Daniel Toni

Experience

• 

  BAT

  Jun 2021 - Oct 2021

  Estagiário de Performance
• 

  Santander

  Jan 2023 - Jun 2024

  Engenheiro de dados

  - Design e implementação de pipelines de dados utilizando PySpark e SQL.- Monitoramento de pipelines de dados com o Azure Data Factory, garantindo uma elevada disponibilidade e confiabilidade dos processos de ingestão e transformação de dados.- Criação de clusters otimizados para a execução de trabalhos utilizando Databricks, melhorando o desempenho geral do processamento de dados.- Colaboração com as equipes comerciais para identificar casos de utilização de dados, traduzindo os requisitos comerciais em soluções técnicas e propondo estratégias de dados inovadoras para obter insights.- Responsável pela democratização dos dados dentro da empresa, capacitando os funcionários não técnicos a utilizar o Databricks e o SQL para atividades de rotina.- Atualizei 200 milhões de registros no banco de dados NoSQL CosmosDB, garantindo tempo de inatividade zero e nenhuma intermitência, mantendo a disponibilidade do serviço e a integridade dos dados.- Participei em um projeto com Apache Spark Streaming para desenvolver um pipeline de dados em tempo real que recebe payloads brutos, transforma-os e carrega-os em tabelas para alimentar painéis de BI, permitindo que as equipes de negócios tenham insights atualizados. Show less

• 

  XP Inc.

  Jul 2024 - now

  Data Engineer