Rafaella Duarte
Prazer, meu nome é

Rafaella Duarte

Engenheira de Dados Júnior

Mais sobre mim

Web Site em Desenvolvimento

Sobre mim

Entusista em Big Data

Profile Picture

Graduanda em Ciências Econômicas e entusiasta em Big Data, com foco em engenharia e arquitetura de dados. Apaixonada por processamento e modelagem de dados, busco constantemente aprimorar minhas habilidades em tecnologias das ultimas tendências, como Spark, Aiflow, Ecossistema Hadoop e computação em nuvem. Tenho interesse em projetos de processamento distribuído e orquestração de dados. Com entusiasmo e dedicação, busco contribuir para inovações e decisões fundamentadas por meio do poder dos dados.

Perfil

Atuo há 3 anos com processamento de dados com a linguagem de programação Python. Possuo experiência de 3 anos em desenvolvimento e manutenção de rotinas de ETL/ELT, web scraping para coleta de informações na internet; APIs Rest para uso interno e externo; pipelines de dados para ingestão de dados em buckets e Bancos de dados relacionais e nao-relacionais. Além disso, já tive contato com atividades de provisionamento de VMs na Embratel e Brascloud, e deploy de Cron Jobs no Kubernetes. Por fim, sou artesã nas horas vagas, apaixonada por corrida de rua e xadrez, e amo ensinar o pouco que sei em matemática e física para crianças.

  • Ultimo Nome: Carvalho
  • Data de Nascimento: Março 07, 1997
  • Ocupação: Universitária, Engenheria de Dados Junior
  • Email: rafaella.d.d.carvalho@gmail.com

Hard Skills

"Sei que sou pouco e que sei pouco. Mas dentro do pouco que sei e que sou me dou por inteiro." Thiago de Mello

Técnicas

    Python Logo PostgreSQL Logo MongoDB Logo Git Logo Shell Logo Elastic Logo RabbitMQ Logo FastApi Logo Docker Logo Airflow Logo

Generalistas

  • ETL/ELT Pipeline
  • Web Scraping
  • Modelagem de dados
  • Integração de sistemas
  • Desenvolvimento de APIs
Contato Download CV
Curriculo

Um pouco das minhas conquistas.

"Transportai um punhado de terra todos os dias e fareis uma montanha". Confúcio

Educação

Ciências Econômicas/ Em andamento

Universidade Federal de Uberlândia - UFU

Julho 2019 - Março 2025

Engenharia Aeronáutica/ Interrompida

Universidade Federal de Uberlândia - UFU

Julho 2015 - Junho 2019

Experiência

Engenharia de Dados Júnior

Janeiro 2025- Atualmente

Legal Data | E-xyon

Freelancer em Engenharia de Dados Junior

Janeiro 2024 - Atualmente

Flow2Go

  • Desenvolveu projetos de Web Scraping com resolução de captchas, coletando dados de advogados e associações de advogados nos sites da CNA e CNSA.
  • Criou scripts Python para integração e correção de bases de dados no MongoDB, garantindo a qualidade e consistência dos dados.
  • Integração de bases de dados públicas do governo, como CNPJ, IBGE, CEP e SFN, para análise e enriquecimento de dados.
  • Desenvolveu API Python para sumarização de dados e criação de dashboards para visualização e análise.o de sistemas.

Engenharia de Dados Junior

Novembro 2022 - Outubro 2023

Linx | StoneCo

  • Desenvolveu e manteve rotinas de Web Scraping em Python, expandindo a coleta de dados para novos marketplaces (Amazon, Mercado Livre, Magalu, Americanas, Casas Bahia, Droga Raia).
  • Criou bibliotecas internas em Python para automatizar operações repetitivas nas rotinas de Web Scraping.
  • Replicou dados do catálogo de produtos do Elasticsearch para o BigQuery, utilizando rotinas de carga em Python para análises.
  • Monitorou e gerenciou filas no RabbitMQ, garantindo o fluxo contínuo de dados entre os sistemas.
  • Desenvolveu e manteve APIs REST internas em Python, integrando sistemas e processos de dados.
  • Realizou ingestão de dados no Google Cloud Storage e Amazon S3, otimizando a gestão de grandes volumes de dados.
  • Gerenciou e manteve Cron Jobs no Kubernetes, garantindo a execução contínua das pipelines de dados.
  • Provisionou VMs na Embratel e Brascloud, escalando o processamento das rotinas de Web Scraping.

Estagiário de Análise de Dados

Janeiro 2021 - Novembro 2022

Nodis Tecnologia | StoneCo

  • Desenvolveu e manteve rotinas de Web Scraping em Python para extrair dados de marketplaces (Amazon, Mercado Livre, Magalu) e enriquecer o catálogo de produtos.
  • Implementou e gerenciou processos de ETL em Python, atualizando bases de dados no PostgreSQL, MongoDB e Elasticsearch, e realizando cargas de dados.
  • Monitorou e gerenciou filas no RabbitMQ, garantindo o fluxo adequado dos dados entre os processos de ETL.
  • Desenvolveu e manteve APIs REST internas em Python, integrando sistemas e processos de dados.
  • Gerenciou e atualizou bases de dados em PostgreSQL, MongoDB e Elasticsearch, além de realizar integração de dados com a plataforma VTEX via API.
  • Desenvolveu dashboards no Google Data Studio, visualizando dados do PostgreSQL e Elasticsearch para análise interna.

Iniciação Pesquisa Cientifica/ Bolsista

Agosto 2021 - Agosto 2022

CNPq

    Tema: A Dinâmica da Taxa de Inflação no Brasil e o Papel das Políticas Monetária e Fiscal
  • Extrai e tratou dados macroeconômicos do IPEA DATA (CSV), utilizando Excel para deflacionamento, normalização e cálculo de médias móveis.
  • Estimou Modelos Autorregressivos de Defasagens Distribuídas (ARDL) no EViews, analisando a relação entre inflação e desemprego sobre as perspectivas de políticas monetária e fiscal.
  • Realizou testes estatísticos (multicolinearidade, heterocedasticidade e autocorrelação) para validar os modelos.
  • Interpretou os resultados e elaborou relatórios estatísticos sobre a dinâmica da inflação no Brasil.
Portfolio

Confira alguns de meus trabalhos.

Em desenvolvimento

The Data Girls

CNPJ Pipeline: Extração e Visualização de Dados

A3 Data Hackthon, ELT
Contato

Eu adoraria ouvir de você.

Em desenvolvimento

Enviando...
Sua mensagem foi enviada, obrigada!
Localização

Uberlândia, MG
Brasil

Email

rafaella.d.d.carvalho@gmail.com

Telefone

(34) 9 9119 5202