[Gastosabertos] Contratos com a Prefeitura de São Paulo em 2014

Edgar Zanella Alvarenga e em vaz.io
Terça Maio 12 04:29:08 UTC 2015 

A idéia da tagcloud foi só uma brincadeira claro, só
pra ter algo mais "artístico" digamos, que pode ser uma
forma alternativa de navegar nessa montanha de informações. Por exemplo,
é possível fazer com que as palavras dessa imagem sejam clicáveis,
levando pra lista de contratos que possui tal palavra.

Quanto ao cruzamento de informações:

  * licitação é uma das colunas da planilha que mando anexado
  * área de cobertura, o que seria?
  * aditivos acredito que só analisando os documentos dos contratos pelo 
que vi
  * secretaria responsável está na coluna "Nome do Órgão"
  * Número do processo nós temos

Quanto a levantar os fornecedores, trabalhei nisso hoje, dá uma olhada 
na planilha
anexada com os top 100 em número de contratos. Se formos analisar por 
número de contratos
obtemos os 15 primeiros:

R$ 396.472.139,31	113	PRODAM - EMP. DE TEC. DA INF. E COM. DO MUN. DE SP
R$ 49.684.329,25	90	MAS CONSTRUÇÕES E EMPREENDIMENTOS LTDA
R$ 61.887.082,65	82	ERA TÉCNICA ENGª. CONSTRUÇÕES E SERVIÇOS LTDA
R$ 91.113.366,63	81	ATENTO SÃO PAULO SERVIÇOS DE SEGURANÇA PATRIMONIAL
R$ 102.643.848,68	81	TELEFONICA BRASIL S.A.
R$ 87.512.789,80	71	APOIO -ASSOCIAÇÃO DE AUXÍLIO MÚTUO DA REGIÃO LESTE
R$ 102.116.324,24	64	EMPRESA BRASILEIRA DE CORREIOS E TELEGRÁFOS
R$ 157.695.013,30	59	SÃO PAULO TURISMO S/A.
R$ 89.255.186,21	53	A. TONANNI CONSTRUÇÕES E SERVIÇOS LTDA.
R$ 14.864.097,57	53	EEC ENGENHARIA E CONSTRUÇÕES LTDA
R$ 81.729.278,95	51	CENTRO SOCIAL NOSSA SENHORA DO BOM PARTO
R$ 2.733.358,18	        49	CONSÓRCIO PREFEITURA DE SÃO PAULO - PE
R$ 71.254.394,05	49	DEMAX SERVIÇOS E COMÉRCIO LTDA
R$ 93.563.668,01	46	G4S Vanguarda Segurança e Vigilância Ltda
R$ 50.058.510,04	44	SAEC - SOC. AMIGA ESP. JD. COPACABANA

E se formos ver pelos valores recebido, somando o total de cada contrato 
pra cada
fornecedor obtemos:

R$ 60.988.854.540,54	16	CASA DE SAÚDE SANTA MARCELINA
R$ 968.986.898,47	29	ASSOCIAÇÃO SAÚDE DA FAMÍLIA
R$ 652.617.944,44	29	SPDM - ASSOCIAÇÃO PAULISTA P/O DESENVOLV MEDICINA
R$ 396.472.139,31	113	PRODAM - EMP. DE TEC. DA INF. E COM. DO MUN. DE SP
R$ 318.727.526,74	20	ELETROPAULO METROPOLITANA ELETR. DE SÃO PAULO
R$ 310.892.882,55	22	LOPES KALIL ENGENHARIA E COMÉRCIO LTDA.
R$ 296.193.369,38	18	FBS CONSTRUÇÃO CIVIL E PAVIMENTAÇÃO LTDA
R$ 266.879.042,32	24	CONSTRUTORA MASSAFERA LTDA.
R$ 157.695.013,30	59	SÃO PAULO TURISMO S/A.
R$ 126.817.499,62	28	CENTRO DE ASSISTÊNCIA E PROMOÇÃO SOCIAL NOSSO LAR
R$ 102.643.848,68	81	TELEFONICA BRASIL S.A.
R$ 102.116.324,24	64	EMPRESA BRASILEIRA DE CORREIOS E TELEGRÁFOS
R$ 93.563.668,01	46	G4S Vanguarda Segurança e Vigilância Ltda
R$ 91.113.366,63	81	ATENTO SÃO PAULO SERVIÇOS DE SEGURANÇA PATRIMONIAL
R$ 89.255.186,21	53	A. TONANNI CONSTRUÇÕES E SERVIÇOS LTDA.

O que já dá pra notar mais problemas com os dados. Com certeza existem 
contratos
da Casa de Saúde Santa Marcelina com valores absurdos, afinal, 60 
bilhões não
faz sentido algum.

Fiquei surpreso com o quanto a Prodam recebe. Aliás, me parece um 
conjunto
interessante de contratos a serem analisados:

"Prodam assina contrato de R$ 17,2 milhões sem licitação"
http://www.estadao.com.br/noticias/geral,prodam-assina-contrato-de-r-17-2-milhoes-sem-licitacao,1047160

"MPE pede demissão de 103 pessoas da Prodam"
http://sao-paulo.estadao.com.br/noticias/geral,mpe-pede-demissao-de-103-pessoas-da-prodam,1672118

E aparentemente são eles os responsáveis pelas maravilhas de software 
que só está nos dando
dor de cabeça para obter os dados da prefeitura. Sem contar que existem 
contratos bem
estranhos, como contratos para aquisição de equipamentos a preços bem 
fora do que se encontra no
mercado (ou estou entendo errado os documentos):

http://www.prefeitura.sp.gov.br/cidade/secretarias/upload/planejamento/prodam/arquivos/arps/2013/COMUNICADO_022013_PRODAM.pdf

Se eles realmente possuem servidores que custam cada um 1.7 milhão de 
reais, fica mais misterioso
que os serviços mantidos por eles sejam tão lento e instáveis. E digo 
mais, nesse arquivo consta o
preço de um servidor de 64 núcleos por 1.7 milhão. Comprei um servidor 
já bem caro da IBM num laboratório
onde trabalhei e não gastamos mais de R$250.000.

Abs,
Edgar

On 12/05/2015 01:04, Paula Oda wrote:
> Ótimo conseguirmos cruzar os dados com os contratos!
> 
> Essa é realmente um dado bem relevante.
> 
> Gostei da idéia do tagcloud, mas acho que o ideal seria conseguir
> fazer essa leitura dos contratos (cruzando com secretarias
> responsáveis, áreas de cobertura, licitações, aditivos)
> Sei que isso já é um pouco mais complexo, mas teoricamente, acho que
> pelo número do processo deveria ser possível cruzar algumas
> informações, não? 
> 
> Outra coisa que seria interessante é conseguir levantar os
> fornecedores, provavelmente devemos ter alguns que se repetem em
> vários contratos...será que a tagcloud nesse caso funcionaria?
> 
> Posso dar uma olhada melhor depois nas informações que são
> disponibilizadas nos contratos para ver se consigo elaborar sugestões
> mais concretas.
> 
> No momento estou olhando mais para o todo do projeto, aquelas
> questões de rumos e afins... 
> 
> Mas muito bom termos essas informações para cruzar!
> 
> Paula Oda
> 
> 2015-05-11 15:17 GMT-03:00 Gisele S. Craveiro
> <gisele.craveiro em gmail.com>:
> 
>> Muito legal, Edgar!!
>> 
>> Fiquei animada em pensar em algumas possibilidades.
>> 
>> Por hora, queria saber se vcs:
>> - tem documentado as dificuldades em obter os dados e problemas
>> de qualidade de dados
>> - estão pensando em escrever blogposts ou enviar diretamente para
>> adm publica municipal
>> -caso já tenham feito isso, alguém respondeu ?
>> 
>> Creio que um dos objetivos do próximo encontro da Google é chamar
>> algumas representantes do poder público. Acho que seria legal
>> conversar sobre isso com eles.
>> 
>> ABs
>> 
>> Gisele
>> 
>> Em 11 de maio de 2015 00:33, Edgar Zanella Alvarenga <e em vaz.io>
>> escreveu:
>> Mais uma razão para termos os contratos: existem valores absurdos
>> no site da prefeitura
>> com os contratos (valores maiores que 100 bilhões por exemplo),
>> incluindo na planilha que
>> disponibilizam. Os valores corretos estão apenas nos arquivos.
>> 
>> Ah sim, fiz um tagcloud com os termos mais comuns nas descrições
>> dos contratos (o ideal
>> é fazer depois com os textos inteiros dos contratos):
>> 
>> http://i.imgur.com/3Z4A0wo.png [1]
>> 
>> E.
>> 
>> On 10/05/2015 19:18, Edgar Zanella Alvarenga wrote:
>> Desde 2014 a Prefeitura disponibiliza os contratos integrais
>> realizados por ela no endereço:
>> 
>> 
> http://transparencia.prefeitura.sp.gov.br/contas/Paginas/Contratos-v2.aspx
>> [2]
>> 
>> O problema é que navegar por esta página é inviável,
>> extremamente
>> lenta e com poucas
>> informações sobre os contratos (tipo de objeto ou convênio que o
>> contrato se refere,
>> quantidades, endereços, etc). Resolvi baixar os contratos pois
>> vejo
>> vários potenciais
>> de análise e jornalismo de dados sobre esses dados.
>> 
>> Neste sábado finalizei um programa que baixou os 10.710 contratos,
>> num
>> total de mais
>> de 4.4Gb de dados.
>> 
>> Podemos agora:
>> 
>>  * Extrair de forma automática informações dos contratos como
>> endereços e quantidades de objetos.
>> 
>>  * Tentar cruzar com nossas bases de dados de planejamento e
>> execução
>> orçamentária.
>> 
>>  * Talvez ao invés de só utilizarmos extrações automáticas,
>> pensar num
>> projeto de crowsourcing usando
>>    ferramentas abertas como o PyBossa para conseguir voluntários
>> para
>> extrair dados dos contratos.
>> 
>>  * Disponibilizar os contratos para baixar numa interface mais
>> fácil de navegar.
>> 
>>  * Criar um torrent dos dados?
>> 
>> Alguém tem outra idéia?
>> 
>> Quem quiser saber mais sobre como foi feito o processo de download
>> dos
>> contratos veja o resumo aqui:
>> 
>> 
> http://nbviewer.ipython.org/github/okfn-brasil/gastos_abertos_dados/blob/master/notebooks/Contratos%20Prefeitura%202014.ipynb
>> [3]
>> 
>> Edgar
>> 
>> _______________________________________________
>> Gastosabertos mailing list
>> Gastosabertos em lists.okfn.org
>> https://lists.okfn.org/mailman/listinfo/gastosabertos [4]
>> _______________________________________________
>> Gastosabertos mailing list
>> Gastosabertos em lists.okfn.org
>> https://lists.okfn.org/mailman/listinfo/gastosabertos [4]
> 
> _______________________________________________
>  Gastosabertos mailing list
>  Gastosabertos em lists.okfn.org
>  https://lists.okfn.org/mailman/listinfo/gastosabertos [4]
> 
> --
> 
> Paula Oda
> 
> Links:
> ------
> [1] http://i.imgur.com/3Z4A0wo.png
> [2] 
> http://transparencia.prefeitura.sp.gov.br/contas/Paginas/Contratos-v2.aspx
> [3]
> http://nbviewer.ipython.org/github/okfn-brasil/gastos_abertos_dados/blob/master/notebooks/Contratos%20Prefeitura%202014.ipynb
> [4] https://lists.okfn.org/mailman/listinfo/gastosabertos
> 
> _______________________________________________
> Gastosabertos mailing list
> Gastosabertos em lists.okfn.org
> https://lists.okfn.org/mailman/listinfo/gastosabertos
-------------- Próxima Parte ----------
Um anexo não-texto foi limpo...
Nome: Contratos 2014.xls
Tipo: application/vnd.ms-excel
Tamanho: 4852736 bytes
Descrição: não disponível
URL: <http://lists.okfn.org/pipermail/gastosabertos/attachments/20150512/915f8b46/attachment-0003.xls>
-------------- Próxima Parte ----------
Um texto embutido e sem conjunto de caracteres especificado foi limpo...
Nome: top_contratos.csv
Url: <http://lists.okfn.org/pipermail/gastosabertos/attachments/20150512/915f8b46/attachment-0003.ksh>

Mais detalhes sobre a lista de discussão Gastosabertos