8000 GitHub - kevinlucasvaz/dw-br: Brazilian Data Warehouse
[go: up one dir, main page]
More Web Proxy on the site http://driver.im/
Skip to content

kevinlucasvaz/dw-br

 
 

Repository files navigation

DW-BRA

Introdução

Um Data Warehouse (DW) de conjuntos de dados abertos Brasileiros.

Implantação e Utilização

Provisionamento da Infraestrutura

O DW-BRA poussui scripts para configuração da infra estrutura, utilizando a ferramenta Ansible.

Para confirugação do servidor utilizando estes scritps, inicialmente deve-se definir uma máquina (física, VM, Container) com o sistema operacional Debian e um usuário com poderes de sudo definidos.

O arquivo ansible/inventory deve ser configurado com o IP do(s) servidor(es), nome do usuário, bem como o caminho para chave pública ssh autorizada.

Em seguida, basta-se executar o playbook Ansible

$ cd ansible
$ playbook -i inventory main.yml

Após a execução, o servidor estará configurado para execução das ferramentas 6200 do DW-BRA

Parâmetros de conexões

Para configurar o banco de dados que irá receber o DW, as variáveis do arquivo config.ini devem ser definidas.

Iniciar o SGBD do DW

$ docker-compose up -d

Construir/Atualizar o DW

conda activate dwbra && ./get_ds.py && ./extract_ds.py && ./update-dw

Referências

About

Brazilian Data Warehouse

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 95.9%
  • Makefile 1.8%
  • Dockerfile 1.5%
  • Shell 0.8%
0