IV SEMINÁRIO DA REDE BRASILEIRA DE MONITORAMENTO E AVALIAÇÃO

1. Avaliação de Programas da FAPESP: desenvolvimento e aplicação de métodos de avaliação de impactos e para avaliações sistemáticas IV SEMINÁRIO DA REDE BRASILEIRA DE MONITORAMENTO E AVALIAÇÃO Sergio Salles Filho Ana Maria Carneiro Camila Zeitoum

2. GEOPI • Grupo de Estudos sobre Organização da Pesquisa e da Inovação • Fundadoem 1995 • Sediado no Departamento de Política Científica e Tecnológica/UNICAMP • Multidisciplinar e Multi-institucional • Competências • Planejamento e gestão de ciência, tecnologia e inovação   • Áreas • Planejamento e Gestão • Avaliação • Prospecção • Gestão da Propriedade Intelectual • Financiamento • Dinâmica setorial da inovação • CT&I para Sustentabilidade

3. Programas Fapesp II (Fapesp), 2009-2012 Modelo de Gestão Embrapa, (Embrapa), 2011 Lei de Informática (MCT), 2011 INCAGRO (World Bank – Peru), 2009 FIA (Governo Chileno), 2009 Programas Fapesp I (Fapesp), 2006-2008 FUNNTEL (Finep), 2007 ANEEL (CPFL, 2008) Procisur (IICA), 2006 Procitropicos (IICA), 2005-2006 Fontagro (IICA), 2005 Impactos do Software Livre (Softex/MCT), 2004 Programa de Pesquisa em Saneamento - PROSAB (Finep), 2003-2005 Metodologia de Avaliação de Impactos (Fapesp/Finep), 1999-2003 CT-Infra (Finep), 2002 Programas WWF e USAID (USAID), 2000 - 2001 PROBIO e FUNBIO (GEF), 1999 OEPAs (IICA/Embrapa), 1997-1998 GEOPI – Avaliação de Programas e Organizações

4. Metodologia GEOPI de Avaliação • Abordagem multidimensional de impactos • Metodologia flexível para lidar com programas de diferentes naturezas, propósitos, objetos e sujeitos • Mensuração e combinação de variáveis quantitativas e qualitativas • Atribuição da causalidade: • Desenvolvimento do método de adicionalidade • Desenho quase experimental • Abordagem participativa • Produção de resultados para apoiar a tomada de decisão e planejamento institucional

5. Avaliação dos programas da Fapesp Objetivo: Desenvolver e aplicar metodologia de avaliação de resultados e de impactos para programas da FAPESP para integrar o processo de avaliação ao planejamento e accountability dos programas Coord. Prof. Sergio Salles-Filho (DPCT/Unicamp) • 10 programas avaliados • Fase 1 – 2006 a 2008 • Fase 2 – 2009 a 2012

6. Programas Avaliados – Fase 1

7. Programas Avaliados – Fase 2

8. Avaliação continuada  do PIPE, PITE, JP e PPP • Obtenção de dados antes, durante e após a conclusão dos projetos • geração de relatórios gerenciais • acompanhamento de um pequeno número de indicadores de avaliação de resultados impactos

9. Avaliação continuada  do PIPE, PITE, JP e PPP • Construção dos Guias Metodológicos • Título do conjunto de indicadores • Periodicidade • Questão: a) Título da(s) questão(ões), b) Alternativas de resposta, c) escala. • Apresentação e validação junto à FAPESP • Conclusão dos Guias Metodológicos • Implementação a cargo da Diretoria Científica

10. PIPE

11. Considerações finais • 6 anos e 10 programas avaliados de forma participativa • Institucionalização de sistema de avaliação continuada • Criação de coordenação adjunta de avaliação • Aperfeiçoamentos nos programas a partir dos resultados das avaliações – Ex. • Reforço dos editais conjuntos com empresas no PITE • Extinção da fase 1 do PPP • Reforço do papel da coordenação do Biota e do formato de projetos temáticos