CNPJ aberto: 251 GB em downloads mensais e carga em MongoDB
Quase toda análise de mercado precisa saber quantas empresas existem, onde estão, em que atividade (CNAE) e sob qual regime tributário. A organização publica isso em dezenas de arquivos mensais de gigabytes, em Latin-1, sem chave pronta para cruzar com municípios do IBGE. Sem uma carga organizada, cada projeto refaz o trabalho.
O que o projeto precisava entregar
Baixar os arquivos mensais do CNPJ e dos regimes tributários, carregar empresas, estabelecimentos, sócios e tabelas auxiliares no MongoDB e gerar contagens de CNPJs por CNAE e município por setor econômico.
Como este case aparece aqui
Por acordo com o cliente, a empresa é identificada apenas pela atividade econômica — Contabilidade e Tributos. O resultado não aparece porque não foi apurado nos arquivos do projeto; onde houve apuração, ela está publicada nos casos em destaque.
Veja também
Pipeline baixa microdados do CAGED e da RAIS e carrega 86 milhões de linhas
Setor Público: Os microdados da organização formal do CAGED e da RAIS saem em arquivos.7z de centenas de MB, em…
Ler →Base de comércio exterior brasileiro por produto, município e empresa de 1997 a 2019
Educação e Pesquisa: Os dados oficiais de importação e exportação vêm em muitos arquivos soltos, com códigos de…
Ler →Inventário de 17 bases do SISÁGUA sobre qualidade da água para consumo humano
Saneamento e Utilities: Concessionárias, reguladores e consultorias precisam de dados de qualidade da água (cloro,…
Ler →