TRANSFORMANDO DADOS PÚBLICOS SEMIESTRUTURADOS EM UM BANCO DE DADOS DE DOCUMENTOS NOSQL

Abstract

Atualmente a Plataforma ECA busca auxiliar na extração de amostras de dados econômicos e em algumas análises voltadas para os economistas, focando em dados públicos dos programas sociais do Governo Federal. O Governo Federal disponibiliza mensalmente dados de todos os programas sociais em formato CSV (Comma-separated values), contudo, estudos econômicos normalmente envolvem a análise de dados complexos, fazendo uso de ferramentas estatísticas, onde amostras devem ser elaboradas. O objetivo deste trabalho é apresentar a ferramenta de transformação de dados de CSV para documentos JSON (JavaScript Object Notation), que alimenta a Plataforma ECA. O importado da Plataforma ECA é responsável por transformar todos os dados do Governo Federal de CSV para o SGBD MongoDB, utilizando-se de uma aplicação de IO implementada em Java e Python.