suspeitando
suspeitando copied to clipboard
rafapetter
Website fora
O site http://www.suspeitando.com está fora. Vocês ainda mantêm o projeto?
Oi @tcelestino, infelizmente sim. Não conseguimos apoio para manter o projeto no ar.
@rafapetter já pensaram em utilizar o Now da Zeit? Existe um limites, mas pode atender bastante a demanda e ainda eles dão bastante suporte a projetos open source. Valeria a pena fazer um teste.
@rafapetter Vocês seguem procurando apoio ou já tomaram a decisão de arquivar o projeto?
@tcelestino entao, recentemente acabei ganhando varios creditos na AWS. Tendo um tempo vou colocar o site de volta no ar.
@Irio seria bom ter apoio sim. Infelizmente no momento nao estou tendo tempo para realizar novas analises nos contratos mais recentes.
@rafapetter o apoio necessário é financeiro ou de efetivo? se for financeiro seria legal abrir uma iniciativa como Patreon ou similar. se for de efetivo, visto que o projeto é OSS acho que uma divulgacao maior colocaria outros desenvolvedores no loop
@rafapetter trabalho com data science no TCE-RS e fiquei muito empolgado com este projeto, simples e eficaz, já tive várias ideias do que desenvolver/implementar por aqui, parabéns! Cheguei até aqui pelo twit do @Irio , se estiver precisando de ajuda eu adoraria colaborar com código/tempo.
@cezaraugusto seria efetivo. Infelizmente no momento nao vou conseguir dedicar tempo ao projeto.
@alexgand que legal, obrigado mesmo.
Sobre ajudar, oq acham de definirmos aqui umas etapas para darmos andamento no projeto. Iria sugerir que a etapa inicial seria verificar aonde acessar os dados atuais sobre esses contratos. Como faz mais de 1 ano que não faço estas analises e consultas, seria interessante primeiro confirmarmos aonde pegar os dados, e em seguida como tratá-los.
Fiquem a vontade para dar a opiniao de vcs sobre como definiremos estas etapas. Mas creio que uma vez que tivermos isso definido, conseguiremos mensurar melhor como cada um pode ajudar.
@rafapetter Pra prefeitura de SP encontrei as tabelas de licitações a partir de 2010 até o mês atual em http://transparencia.prefeitura.sp.gov.br/contas/Paginas/ComprasLicitacoes.aspx Foram esses dados que tu usou no projeto?
O TCE RS tem um sistema chamado LICITACON, através do qual todos os órgãos públicos (municípios, empresas/autarquias e o próprio estado e suas secretrias) tem que enviar os dados de todas as licitações. Começou há uns três anos, e já tem uma base considerável lá. Está em desenvolvimento a API pra requisitar os dados diretamente, mas por enquanto o acesso externo ainda é pelo site: http://www1.tce.rs.gov.br/aplicprod/f?p=50500:1:::::: Pelo menos dá pra baixar as tabelas em csv, excel, etc. Aliás, no LICITACON tem muito mais informação que na transparência/SP, mas gostei da abordagem inicial, da similaridade dos textos dos objetos. Não adianta querer fazer muita coisa sem ter um modelo simples funcionando.
Eu posso ficar responsável por adaptar os dados/modelo pra trabalhar com os dados do RS.
Claro que o ideal é que a atualização pro suspeitando fosse automática, mas de qualquer forma, se tiver que ter intervenção humana pode ser feita periodicamente, a cada 15 dias, um mês, etc.
Em relação à análise e limpeza, tu fazia mais alguma coisa extra além do pre-processing que está documentado nos notebooks? Chegou a analisar quantidade comprada pra licitações que tem o mesmo objeto (em geral objetos simples, com poucas palavras)?
@rafapetter posso publicar o projeto em algum serviço como now ou netlify, você ainda tem o domínio?
Grande @wendelnascimento . Nao tenho mais, acabei nao renovando o dominio.
@alexgand me perdoe pelo atraso na resposta pra vc...
Sobre o site do portal da transparencia de SP, foi exatamente esse site que fizemos as consultas dos dados no projeto.
Sobre a analise e limpeza dos dados, nao fazia nada alem do que estao nos notebooks. Mas com certeza, tendo uma massa boa de dados, devem aparecer algumas combinaçoes de parametros interessantes sobre estas licitaçoes.