Eduardo Cuducos

Decompress util

1

This PR implements `rows.utils.decompress` as suggested in #230. The API is: ```python import rows from rows.utils import decompress table1 = rows.import_from_csv(decompress('filename.csv.gz')) table2 = rows.import_from_csv(decompress('filename.csv.xz')) table3 = rows.import_from_csv(decompress('filename.csv.bz2')) ``` A `RunTime`...

Automatização da atualização do banco de dados

10

O processo de atualização do servidor minhareceita.org é basicamente composto por três etapas com diferentes gargalos. **Essa _issue_ tem como objetivo discutir a automatização do *terceiro* desses passos**: | |...

Creates Docker image to easily update prodution

2

Esse PR é um rascunho para algumas ferramentas que ajudem a atualizar o banco de dados de produção: #132 Ele depende da [recém criada imagem Docker](https://docs.minhareceita.org/instalacao/#imagem-docker). Com ela, criamos uma...

Salvar informação da data dos datasets originais

15

No [site oficial da Receita Federal](https://www.gov.br/receitafederal/pt-br/assuntos/orientacao-tributaria/cadastros/consultas/dados-publicos-cnpj) existe a informação sobre quando os dados foram atualizados:  Seria interessante essa informação fazer parte do ETL e da API. Uma **sugestão** de...

Referência: [GoatCounter](https://github.com/arp242/goatcounter). Questões: * _Self-hosted_ ou não? * Como implementar em uma API (talvez um _wrapper_ no servidor HTTP)?

Os dados são disponibilizados (e já baixados pela Minha Receita) no [Dados Abertos Sítio RFB Extracao 20.10.2021.zip](http://200.152.38.155/CNPJ/anual/Dados%20Abertos%20S%c3%adtio%20RFB%20Extracao%2020.10.2021.zip). Creio que o ideal seria: - Criar um campo para _forma de tributação_...

Substituir `github.com/go-pg/pg`

4

Atualmente o projedo depende do [`go-pg`](https://github.com/go-pg/pg), mas esse projeto diz no [`README.md`](https://github.com/go-pg/pg/blob/4d138f1d67f89ee13bcc8fa8f1a4204af6b8e8ae/README.md): > go-pg is in a maintenance mode and only critical issues are addressed. New development happens in [**Bun**](https://bun.uptrace.dev/guide/pg-migration.html)...

Write tests

3

Probably a good way to learn abouk `unittest.mock` (for Portuguese speakers, I have a [YouTube video about mocks](https://youtu.be/oITM2W6h-gg)).

Adicionamos no #408 o `jsonchema==3.2.0` no `requirements.txt` pois: * ele é uma dependência do `spidermon` (outro pacote) * a versão 4 do `jsonschema` saiu há uns dias e quebrou o...

Based on [this comment](https://github.com/datasciencebr/serenata-de-amor/pull/247#issuecomment-317208238).