Datalake

Caio Jacintho, Judite Cypreste, Ramon Carnaval

10

de

August

de

2022

Envolvidos

Escritório de Dados, Iplan-Rio, SEGOVI, Seconserva, SMFP, SMTR, SEOP, COR.


Necessidade

O uso de dados na administração pública para elaboração, monitoramento e aperfeiçoamento de políticas públicas tem se tornado algo cada vez mais praticado. Entretanto, o controle social dessas políticas também está em constante crescente, a sociedade civil participa ativamente das discussões. Portanto, a transparência ativa também deve possibilitar aos agentes sociais o acesso aos dados oficiais.

Entretanto, foi verificado que alguns órgãos tinham dificuldade em acessar dados institucionais e em interagir com dados de outros órgãos. Além da infraestrutura, por vezes, não suporta o alto volume de demandas, dada sua capacidade e tempo de vida útil.

Solução 

Mapeamento das bases de dados que pudessem ajudar diretamente os órgãos em algum projeto próprio, para que em seguida fosse possível extrair e armazenar em repositório em nuvem para processamento e uso contínuo, sobretudo, processo totalmente automatizado.

Dados

  • Dados Institucionais de cada órgão envolvido

Tecnologia

BigQuery, Prefect e DBT