ResidenciaTICBrisa/04_PipelineTCU

Orquestrar script de extração para dados do IEA

Closed this issue · 3 comments

Descrição

Desenvolver script em Python para extração de dados das fontes disponibilizadas pelo IEA.
Dados que devem ser extraídos:
Participação Matriz Energética Países Mundo

Tarefas

  • Criar Scripts de extração dos dados em python
  • Criar Scripts de limpeza dos dados em python
  • Configurar o github actions para executar o código
  • Criar testes para o código
  • Enviar para revisão

Critérios de Aceitação

  • Script Baixando planilha
  • Script limpando a planilha
  • Scripts sendo executados pelo github actions
  • Scripts sendo aprovados em testes
  • Código revisado

Informações Adicionais

@Victor-oss @ubrando alguém poderia acessar o site do IEA e verificar se estão sendo dispostos os gráficos do energy suply
link do IEA

Aparentemente está tendo algum erro ou bug no site do IEA que não está disponibilizando os gráficos ou o arquivo csv sobre os dados.

O script consegue extrair o xlsx do site do IEA e limpá-lo para conter apenas os dados de interesse (Total Energy Supply (TES) de cada Product). Falta configurar o github actions para executar os scripts