Aprender a definir e melhorar estratégias organizacionais através da avaliação

1. Aprender a definir e melhorar estratégias organizacionais através da avaliação Professora Patricia Rogers BetterEvaluação Royal Melbourne Institute of Technology, Melbourne, Australia Avaliação para o Investimento Social Privado: Estratégia Organizacional www.betterevaluation.org

2. O que queremos dizer com avaliação? A avaliação para definir e melhorar estratégias organizacionais Aprender a definir e melhorar as estratégias organizacionais através da avaliação Diferentes tipos de avaliação nos diferentes estágios de um programa ou projeto Como apoiar o aprendizado através da avaliação? 2 2

3. Avaliação Combina valores e evidência para responder a perguntas como: • Estamos fazendo a coisa certa? • Estamos fazendo as coisas de maneira certa? RMIT University 3 3

4. Uma visão estreita, menos útil da avaliação – vem no final, e foca a pergunta: “Cumprimos nossos objetivos”? 5. Avaliação 6. Feedback 4. Monitoramento 1. Rationale Implementação 3. Apreciação 2. Objectivos Mainstreaming Social Inclusion http://www.europemsi.org/index.php RMIT University 4 4

5. Umavisãomaisampla, maisútildaavaliação – feitaaolongo do ciclodapolítica/programa O que é necessário? O que devemos dar conta? Como deveria ser feito isto? Avaliação (incluindo o monitoramento) Como podemos melhorar à medida que avançamos? Funcionou? Valeu a pena? Como está indo? Análise Situacional –necessidades e oportunidades Resultados e impactos Desenho de programa ou política Implementação das atividades e gerenciamento em curso Melhoria contínua Baseado em Funnell 2006 Designing an Evaluation 5

6. Tipos de avaliação – classificação por foco e momento 6

7. A avaliação para definir estratégias organizacionais O ABC DO PLANEJAMENTO ESTRATÉGICO Visão, Missão e Meta B AONDE VOCÊ QUER Missão e mandatos Estrutura e Sistemas Comunicações Programas e Serviços Pessoas e capacidades Orçamento Apoio A ONDE VOCÊ ESTÁ Missão e mandatos Estrutura e Sistemas Comunicações Programas e Serviços Pessoas e capacidades Orçamento Apoio QUESTÕES ESTRATÉGICAS Formulação da Estratégia CCOMO CHEGAR LÁPlano estratégicoplanos de TI e RHComunicaçõesContratações e treinamentoReestruturação e EngenhariaAlocação orçamentária Implementação da Estratégia RMIT University 7 7

8. A avaliação para definir estratégias organizacionais O ABC DO PLANEJAMENTO ESTRATÉGICO A ONDE VOCÊ ESTÁ Missão e mandatos Estrutura e Sistemas Comunicações Programas e Serviços Pessoas e capacidades Orçamento Apoio B AONDE VOCÊ QUER Missão e mandatos Estrutura e Sistemas Comunicações Programas e Serviços Pessoas e capacidades Orçamento Apoio Visão, Missão e Meta QUESTÕES ESTRATÉGICAS Formulação da Estratégia Implementação da Estratégia CCOMO CHEGAR LÁPlano estratégicoplanos de TI e RHComunicaçõesContratações e treinamentoReestruturação e EngenhariaAlocação orçamentária RMIT University 8

9. Avaliação para apoiar o aprendizado sobre onde você está • Análise da Situação • Avaliação das necessidades • Análise SWOT – Fortalezas (S), Fraquezas (W), Oportunidades (O), Ameaças (T) • Mapeamento dos Recursos • Análise das fortalezas 9

10. Avaliação para apoiar o aprendizado sobre onde você quer chegar • Esclarecimento sobre os Valores 10

11. O Que é sucesso em termos de: Resultados e Impactos Distribuição dos benefícios Processos 11

12. Tipos de valores Valores Tácitos Valores Negociados Valores Formais, Explícitos 12 12

13. Avaliação para apoiar o aprendizado sobre como chegar lá • Teoria da mudança • Uma teoria sobre como ocorre a mudança (mecanismo de mudança) • Uma teoria sobre quais ações podem acionar esse mecanismo de mudança • Síntese do que podemos aprender com os outros 13

14. Avaliação para apoiar o aprendizado sobre como melhorar as estratégias organizacionais • Avaliação de programas e projetos • Como está indo? • Monitoramento do desempenho • Controle de Qualidade – estamos fazendo certo? • Melhoria da Qualidade/pesquisa da ação – como podemos melhorar a implementação? 14

15. Avaliação para apoiar o aprendizado sobre como melhorar as estratégias organizacionais • Avaliação dos programas e projetos • Funcionou? De que maneira, em quais situações e para quem funcionou? O que contribuiu para que funcionasse? • A Teoria da mudança informa a avaliação de impacto • Métodos para responder às questões descritivas (o que aconteceu?) – mensurações, indicadores, descrições • Métodos para responder às questões causais (o que fez a mudança ocorrer?) – delineamentos e estratégias de pesquisa experimental, quase-experimental e não experimental • Métodos para responder às questões avaliativas (foi bom o resultado? Valeu a pena) 15

16. Especifique questões chave de Avaliação 16

17. Especifique questões chave de Avaliação 17

18. Especifique questões chave de Avaliação 18

19. Especifique questões chave de Avaliação 19 19

20. Avaliação para apoiar o aprendizado sobre como melhorar as estratégias organizacionais • Avaliação da carteira de programas e projetos • Qual é a cobertura transversal nas áreas de importância? Bell, Masaoka & Zimmerman (2010) Non Profit Sustainability: Making Strategic Decisions for Financial Viability. Jossey-Bass 20

21. Avaliação para apoiar o aprendizado sobre como melhorar as estratégias organizacionais • Avaliação da carteira de programas e projetos • Qual é o equilíbrio entre valor e certeza? Valor Certeza RMIT University 21 21

22. Tipos de aprendizado necessários 22

23. Fontes de informação sobre métodos e processos de avaliação 23

24. Fontes de informação sobre métodos e processos de avaliação 24

28. Que tipos de avaliação precisamos? Como podemos fazer isso? Que tipos de aprendizado pecisamos que a avaliação apoie? Como podemos fazer isso? Avaliação para apoiar o aprendizado sobre como melhorar as estratégias organizacionais 28