CURSO CAPACITACIÓN “AUDITORÍA DE DESEMPEÑO”

1. Auditoría Especial en Materia de Desempeño CURSO CAPACITACIÓN “AUDITORÍA DE DESEMPEÑO” Junio 2014 Auditoría Superior del Estado de Quintana Roo

2. Contenido Evaluación de desempeño Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Auditoría de Desempeño 2

3. Contenido Evaluación de desempeño 3

4. Evaluación de desempeño Marco Jurídico En la CPEUMexisten seis artículos vinculados al SED que son los siguientes: 6, 26, 73, 74, 79 y 134, de los cuales, en el 134, párrafo segundo, queda establecido el mandato de la evaluación. Artículo 134.- “Los recursos económicos de que dispongan la Federación, los estados, los municipios, el Distrito Federal y los órganos político-administrativos de sus demarcaciones territoriales, se administrarán con eficiencia, eficacia, economía, transparencia y honradez para satisfacer los objetivos a los que estén destinados. Los resultados del ejercicio de dichos recursos serán evaluados por las instancias técnicas que establezcan, respectivamente, la Federación, los estados y el Distrito Federal, con el objeto de propiciar que los recursos económicos se asignen en los respectivos presupuestos en los términos del párrafo anterior.” CPEUM: Constitución Política de los Estados Unidos Mexicanos 4

5. Evaluación de desempeño Marco Jurídico 5

6. Evaluación de desempeño Marco Jurídico 6

7. Evaluación de desempeño Marco Jurídico 7

8. Evaluación de desempeño Marco Jurídico 8

9. Evaluación de desempeño Bajo los postulados del PbR, los tres órdenes de Gobierno deben EVALUAR LOS RESULTADOS que obtienen con los recursos públicos y administrarlos bajo los principios de eficiencia, eficacia, transparencia y honradez. El Art. 2 de la LFPRH define que se entenderá por Sistema de Evaluación del Desempeñocomo el conjunto de elementos metodológicos que permiten realizar una valoración objetiva del desempeño de los programas, bajo los principios de verificación del grado de cumplimiento de metas y objetivos, con base en indicadores estratégicos y de gestión que permitan conocer el impacto social de los programas y de los proyectos. SED Matriz de Indicadores para Resultados (MIR) Programa Anual de Evaluación (PAE) Transparencia y Rendición de Cuentas 9

10. Gpr Evaluación de desempeño Objetivos del SED Pbr SED • Conocer los resultados de la aplicación de los recursos públicos y el impacto social de los programas y de los proyectos. • Identificar la eficiencia, economía, eficacia, cobertura, equidad y calidad de la Administración Pública. • Aplicar las medidas necesarias para mejorar la calidad del gasto público. • Vincular la planeación, programación, presupuestación, seguimiento, ejercicio de los recursos y la evaluación de las políticas públicas, los Programas presupuestarios (Pp) y el desempeño institucional. • Impulsar el Presupuesto basado en Resultados (PbR). Evaluación de Políticas Públicas y Programas Presupuestarios Gestión para la Calidad del Gasto Evaluación de Desempeño Programa de Mediano Plazo 10

11. Evaluación de desempeño ¿Quién evalúa? La evaluación externa es realizada por expertos, instituciones académicas y de investigación u organismos especializados, de carácter nacional o internacional, que cuenten con reconocimiento y experiencia en la Gestión para Resultados (GpR), el Presupuesto basado en Resultados (PbR) y el Sistema de Evaluación del Desempeño (SED). ¿Instancias técnicas de evaluación independientes.? Cual es el diseño jurídico de estas instancias Técnicas de Evaluación. Fuente: : http://www.indetec.gob.mx/Archivos/frmArchivoView.aspx?ID=58 ¿Como se realizará la evaluación? Se realizará a través de la verificación del grado de cumplimiento de objetivos y metas, con base en indicadores estratégicos y de gestión que permitan conocer los resultados de la aplicación de los recursos públicos federales. (Fundamento: art. 85, 110 y 111 de la LFPRH) 11

12. Evaluación de desempeño ¿Cual es la metodología de las Evaluaciones al desempeño? El art. 79 párrafo II de la LGCGestablece: Las SHCP y CONEVAL, en el ámbito de su competencia, de conformidad con el artículo 110 de la LFPRH enviarán al CONAClos CRITERIOSde evaluación de los recursos federales ministrados a las entidades federativas, los municipios y las demarcaciones territoriales del Distrito Federal así como LOS LINEAMIENTOS de evaluación que permitan homologar y estandarizar tanto las evaluaciones como los indicadores estratégicos y de gestión para que dicho consejo, en el ámbito de sus atribuciones, proceda a determinar los FORMATOS PARA LA DIFUSIÓN de los resultados de las evaluaciones, conforme a lo establecido en el artículo 56 de esta Ley. ¿Para qué se evalúan los programas? Se hace con el propósito de determinar su pertinencia, los logros que han tenido, la eficiencia, efectividad, la sostenibilidad y el impacto que tienen en beneficio de la sociedad. ¿Qué se espera de las evaluaciones? Proporcionar a las personas que manejan los programas presupuestarios los elementos que permitan realizar acciones encaminadas a mejorar el desempeño de los programas. . 12

13. Evaluación de desempeño EVALUACIÓN DEL DESEMPEÑO DEPENDENCIAS, ENTIDADES, POLÍTICAS PÚBLICAS Y PROGRAMAS PRESUPUESTARIOS • Como lo señala la definición del SED antes mencionada, éste consiste en un “conjunto de elementos metodológicos…”. De acuerdo con lo anterior, la evaluación del desempeñoque requiere de la utilización de dos metodologías: • La medición del desempeño (instrumento de medición) • La revisión o verificación de los resultados que se obtengan en la medición del desempeño (instrumento de revisión). • INSTRUMENTO DE MEDICIÓN • Identificación de objetivos estratégicos • Establecimiento de metas • Construcción de indicadores • Elaboración de la matriz de indicadores INSTRUMENTO DE REVISIÓN Metodología de Evaluación del Desempeño 13

14. Contenido Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales 14

15. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Marco Jurídico 15

16. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Marco Jurídico 16

17. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Marco Jurídico 17

18. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Marco Jurídico 18

19. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales En el caso del Gasto Federalizado, las entidades federativas y municipios deben proporcionar su información de manera trimestral a la SHCP, mediante la plataforma informática denominada Portal Aplicativo de la SHCP (PASH). Que sirve como la principal fuente de información para documentar el estado en que se encuentra el SED en las entidades federativas, en materia del Gasto Federalizado.  http://www.sistemas.hacienda.gob.mx/PASH/jsps/acceso.jsp 19

20. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales • El 25/04/13 se publicaron en el DOFlos Lineamientos para informar sobre los recursos federales transferidos a las entidades federativas, municipios y demarcaciones territoriales del Distrito Federal, y de operación de los recursos del Ramo General 33 con el objeto de: • Constituir las disposiciones para la entrega de los recursos federales del Ramo 33; • Especificar las dependencias coordinadoras de los fondos de dicho ramo; • Definir y la mecánica para el establecimiento de indicadores por resultados de los mismos, • Establecer el formato para que las entidades federativas y municipios reporten el ejercicio de los recursos federales y sobre la evaluación de resultados de cada Fondo. 20

21. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales Las dependencias federales coordinadoras de los fondos y programas, en coordinación con la SHCP y las entidades federativas y municipios definieron los indicadores para evaluar el Gasto Federalizado (Ramo General 33); sin embargo, a pesar de que aportan información para apoyar las evaluaciones, en algunos casos ésta resulta insuficiente para evaluar el impacto del fondo o programa con el alcance deseado. Los indicadores definidos para los Fondos de Ramo General 33 son los siguientes: Pagina recomendada: Auditoría al SED por parte de la ASF http://www.asf.gob.mx/Trans/Informes/IR2012i/Paginas/Master_Impacto.htm#palabra=- 21

22. FAIS Municipal Sitio Recomendado: http://www.transparenciapresupuestaria.gob.mx/ptp/contenidos/?id=61 22

23. FAIS Municipal Sitio Recomendado: http://www.transparenciapresupuestaria.gob.mx/ptp/contenidos/?id=61 23

24. FAIS Municipal Sitio Recomendado: http://www.transparenciapresupuestaria.gob.mx/ptp/contenidos/?id=61 Ver MIR 24

25. FORTAMUN 25 Sitio Recomendado: http://www.transparenciapresupuestaria.gob.mx/ptp/contenidos/?id=61

26. FORTAMUN Sitio Recomendado: http://www.transparenciapresupuestaria.gob.mx/ptp/contenidos/?id=61 Ver MIR 26

27. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales • Las principales limitaciones que enfrenta la implantación del modelo PbR-SED en el Gasto Federalizado consisten en que: • Los fondos de Aportaciones no son estrictamente programas presupuestarios. • Se trata de fondos que constituyen bolsas de recursos, no necesariamente asociados a un objetivo particular, identificable y medible, sino que pueden tener como destino apoyar la atención de problemáticas diversas y de naturaleza diferente. • No presentan una lógica de alineación tan explícita con el Plan Nacional de Desarrollo y con los planes estatales de desarrollo. • Responden a objetivos y materias más generales, como educación, salud, seguridad, infraestructura, deuda y alimentación, entre otros. • La evaluación de estos recursos resulta compleja, pues se administran en distintos órdenes de gobierno (estatal y municipal) y también mantienen cierta flexibilidad para ajustar su direccionamiento, en el marco de su normativa, de acuerdo con las necesidades locales. • Se complementan con otras fuentes de financiamiento en algunos casos, por lo que no están alineados a una única visión presupuestaria y de resultados. • Las autoridades que participan en la gestión de los recursos del Gasto Federalizado se ubican en dos ámbitos (Instancias coordinadoras federales y las entidades federativas y municipios). 27

28. Indicadores del desempeño para evaluar resultados de los fondos de aportaciones federales El Art. 82de la LGCG, establece: La ASFy los EFSLserán responsables de vigilar la calidad de la información que proporcionen las entidades federativas, municipios y demarcaciones territoriales del Distrito Federal, respecto al ejercicio y destino de los recursos públicos federales que por cualquier concepto les hayan sido ministrado. El art. 82 fracción XII de la LFPRH, establece : La ASF, en los términos de la Ley de Fiscalización Superior de la Federación, deberáacordarcon los EFSL de las entidades federativas, las reglas y procedimientos para fiscalizar el ejercicio de los recursos públicos federales. En atención a lo anterior, y como se mencionó anteriormente los indicadores para evaluar el Gasto Federalizado definidos con la Metodología SED-PBR resultan insuficientes para evaluar el impacto del fondo o programa con el alcance deseado. Por ese motivo la ASF y las EFSL han definido una serie de indicadores de impacto, gestión y estratégicos para evaluarlos. 28

29. Contenido Auditoría de Desempeño 29

30. Auditoría de Desempeño Marco Jurídico Constitución Política del Estado Libre y Soberano de Quintana Roo Artículo 77.- (…) El Órgano Superior de Fiscalización del Estado tendrá a su cargo: I.- Revisar y fiscalizar en forma posterior la cuenta pública que los gobiernos, estatal y municipales le presenten sobre su gestión financiera, a efecto de comprobar que la recaudación, manejo, custodia y aplicación de los ingresos y egresos durante un ejercicio fiscal, se ejercieron con apego a los criterios y disposiciones legales aplicables y determinar el grado de cumplimiento de los objetivos contenidos en los planes y programas aprobados conforme a la ley. II.- (…) En el caso de las recomendaciones al desempeño, las entidades fiscalizadas deberán precisar ante el Órgano Superior de Fiscalización las mejoras realizadas o, en su caso, justificar su improcedencia. 30

31. Auditoría de Desempeño Marco Jurídico Ley del Órgano de Fiscalización Superior del Estado de Qroo. Artículo 10.- La revisión y fiscalización superior de las Cuentas Públicas tiene por objeto determinar: III. En su caso, el desempeño, eficiencia, eficacia y economía, en el cumplimiento de los programas aprobados en los presupuestos; (…) la ASE podrá REALIZAR AUDITORÍAS DEL DESEMPEÑO de los programas, verificando la eficiencia, la eficacia y la economía de los mismos y su efecto o la consecuencia en las condiciones sociales, económicas y en su caso, regionales del Estado durante el periodo que se evalúe; además de constatar si se cumplieron las metas de los indicadores aprobados en el Presupuesto y si dicho cumplimiento tiene relación con el Plan Estatal de Desarrollo y los programas sectoriales. Las observaciones que, en su caso, emita la Auditoría Superior del Estado derivado de la fiscalización de la Cuenta Pública, podrán derivar en: II. Recomendaciones, incluyendo las referentes al desempeño. 31

32. Auditoría de Desempeño Definición La Academia Mexicana de Auditoría Integral y al Desempeño, A. C. (AMDAID) define a la Auditoría al Desempeño como la evaluación de la actuación de una entidad a la luz de factores de desempeño, precisa que el desempeño es el resultado obtenido por el conjunto de acciones y operaciones realizadas por una entidad para lograr sus metas y objetivos y que la “medición del desempeño debe hacerse con criterios de: eficacia, eficiencia, y economía; también señala que los factores críticos de desempeño dan origen a los indicadores de desempeño o de gestión, que constituyen la base para la evaluación del desempeño. La Organización Internacional de Entidades de Fiscalización Superior(INTOSAI) define a laAuditoría de Desempeño como una revisión independiente y objetiva de los proyectos, sistemas, programas u organizaciones gubernamentales, en cuanto a uno o más de los tres aspectos de eficacia, eficiencia y economía, a fin de conducir a mejoras. 32

33. Auditoría de Desempeño Definición La Auditoría Especial de Desempeño (AED) de la Auditoría Superior de la Federación (ASF), ha ajustado este concepto a la realidad normativa y estructural mexicana quedando como sigue: Es una evaluación del quehacer público; en la que se miden: la eficacia por medio de resultados, con base en indicadores estratégicos; la eficiencia, por medio de la fidelidad de la operación del programa, y con apoyo en indicadores de gestión; la economía, se mide por el costo de la política o programa público comparado contra los resultados obtenidos. Además, la auditoría de desempeño comprueba el impacto de los resultados en la población objetivo utilizando indicadores de calidad y de satisfacción del ciudadano. Finalmente, analiza el comportamiento de los actores o servidores públicos, tanto de la entidad responsable de poner en práctica el programa o política pública como de los operadores de la misma 33

34. Auditoría de Desempeño • Es una REVISIÓN: • SISTEMÁTICA, porque utiliza los métodos y las técnicas de las ciencias sociales para obtener sus evidencias y, a partir de ellas, elabora sus consideraciones. • INTERDISCIPLINARIA, porque se realiza con la aplicación de los conocimientos de varias disciplinas académicas, según la materia o especialidad que trate la revisión. • ORGANIZADA, porque tanto su protocolo de investigación –la auditina- como su ejecución, obedecen a un razonamiento lógico. • Objetiva, porque trata de describir y explicar los fenómenos, como los podría analizar cualquier científico social carente de prejuicios o intereses generados sobre el objeto o sujeto fiscalizado; es también objetiva, porque todas sus conclusiones están basadas en evidencias suficientes, competentes, relevantes y pertinentes. • Propositiva, porque sus juicios sobre la materia fiscalizada están encaminados a la búsqueda de las mejores y sanas prácticas gubernamentales, más que a sancionar o denostar los resultados de las políticas públicas, programas, proyectos y metas. • Independiente, porque no intervienen intereses ajenos al grupo auditor más que la razón y la objetividad. • Comparativa, porque mide el impacto social de la gestión pública y compara lo propuesto con lo realmente alcanzado. 34

35. Auditoría de Desempeño Componentes de la Auditoría de Desempeño • ¿Que audita el desempeño? • Se ocupa básicamente de examinar las tres “e”: eficacia, eficiencia y economía; además, toma en cuenta las tres “c”: calidad en el servicio, ciudadano usuario y, competencia de los actores. • Eficacia: • Es un concepto ligado al logro de objetivos. • Consta de dos partes: • Logro de objetivos de la política pública. • Si los acontecimientos deseados han ocurrido, y si pueden atribuirse a la política aplicada. • Utiliza indicadores estratégicos como parámetros de medición. EFICACIA 35

36. Auditoría de Desempeño Componentes de la Auditoría de Desempeño • Mide y califica el recorrido entre medios y fines. • Se refiere a la proporción entre la utilización de los insumos, recursos, costos, tiempo y forma en que se relacionan los medios con los fines. • A mayor eficiencia más racionalidad y optimización. • Utiliza indicadores de gestión como parámetros de medición. EFICIENCIA 36

37. Auditoría de Desempeño Componentes de la Auditoría de Desempeño ECONOMÍA • Mide el costo de los recursos aplicados para lograr los objetivos de un programa o política pública. • Implica racionalidad, elegir entre varias opciones, la que conduzca al máximo cumplimiento de los objetivos con el menor gasto posible 37

38. Auditoría de Desempeño Componentes de la Auditoría de Desempeño CALIDAD • Se trata de que el gobierno preste los servicios que se consideran necesarios para la comunidad con calidad. • Satisfacción de los requerimientos del ciudadano, ya que se deben de proporcionar servicios que correspondan a su particular situación. 38

39. Auditoría de Desempeño Componentes de la Auditoría de Desempeño CIUDADANO USUARIO • Se trata de que un servicio público puede y debe ser sometido a las mismas reglas de mercado de los servicios que presta el sector privado. • Tomar en cuenta el punto de vista del ciudadano, concediéndole el derecho de consulta, más que el derecho de tomarla decisión. 39

40. Auditoría de Desempeño Componentes de la Auditoría de Desempeño COMPETENCIA DE LOS ACTORES • Un programa puede fallar por la mala operación de los responsables de su ejecución. • Considerar el perfil, la capacitación y experiencia, como elementos fundamentales del servidor público. 40

41. Auditoría de Desempeño Diferencia entre política pública y política gubernamentales. El Dr. Mauricio Merino Huerta define a las POLÍTICAS PÚBLICAS como una selección y una definición de problemas, consisten en rigor, en la utilización de los medios al alcance del Estado para decidir en qué asuntos intervendrá y hasta qué punto lo hará. Las políticas públicas son decisiones del Estado originadas en un proceso político previo mediante el cual se seleccionan y se definen problemas públicos. En el plano público existe una distinción fundamental “No todo asunto es un problema y no todo problema adquiere la característica de ser un problema público” es decir no todo problema es público. Cuando un problema es público, requiere la atención del Estado (Gobierno), mientras estos no lo sean no requiere su atención (ejemplo: cuestiones religiosas) Entonces, las políticas gubernamentales son respuesta de gobierno a compromisos institucionales, son respuesta a las obligaciones de un gobierno con sus gobernados, son políticas o directrices que dan respuesta a necesidades ordinarias de un mandato constitucional de orden federal, estatal o municipal, que son incorporadas en planes, programas, proyectos, acciones, obras y demás actividades que lleve a cabo un gobierno. En otras palabras, las políticas gubernamentales son la materialización de la acción gubernamental, es la forma en que el gobierno cumple con sus planes institucionales. Por ejemplo: a nivel federal el “Programa Oportunidades”, es una política gubernamental que forma parte de una política pública denominada “Combate a la Pobreza Extrema”. 41

42. Auditoría de Desempeño Diferencia entre evaluación de desempeño y auditoria de desempeño. La diferencia entre estos términos, es que cada una forma parte de fases distintas dentro del proceso de rendición de cuentas y fiscalización superior. El procesos de rendición de cuentas y de fiscalización superior comienza con la emisión de un mandato, que es el Presupuesto de Egresos, la segunda fase del ciclo es la ejecución de ese mandato, que está a cargo del poder ejecutivo. En la tercera fase, la rendición de cuentas, el ejecutor del mandato genera una diversidad de informes para reportar lo realizado; el documento más importante de este proceso es la Cuenta Pública. La fiscalización superior es la cuarta fase, está a cargo del Órgano Técnico de la Cámara de Diputados denominados Entidad de Fiscalización Superior o Auditoría Superior, quien realiza una revisión de la Cuenta Pública mediante auditorias de desempeño y de cumplimiento financiero. Y en la última fase del proceso, la dictaminarían de la Cuenta Pública, se sanciona de manera positiva o negativa la ejecución del mandato. Esta tarea está a cargo de la Cámara de Diputados Directamente. Las Evaluaciones de Desempeño forman parte de la fase de ejecución del mandato dentro del proceso de rendición de cuentas y fiscalización superior. Mientras que las Auditorías de Desempeño, que realizan las Entidades de Fiscalización Superior, forman parte de la fase de la cuarta etapa la fiscalización superior de la Cuenta Pública. 42

43. Diagrama del proceso de rendición de cuentas y fiscalización superior: Evaluaciones de Desempeño y Programas Auditorías de Desempeño 43

44. Auditoría de Desempeño Metodología de Marco Lógico y Matriz de Indicadores para Resultados Una pregunta: ¿sí el Ente Auditado no cuenta con la metodología del SED-PBRo no tiene definido sus objetivos y metas, no cuenta con indicadores de desempeño que permitan valorar el cumplimiento de objetivos y metas, que no cuente con sus Planes y programas estatales o municipales, se le podrá efectuar una auditoría de desempeño, etc...? La respuesta es “Sí” debido a la metodología que empleamos para la ejecución de las auditorías de desempeño que se realizan en la Auditorias Superior del Estado de Quintana Roo (ASEQROO), no solo se revisa lo establecido en el Sistema de Evaluación de Desempeño, sino también se ocupa de examinar las tres “e”: eficacia, eficiencia y economía; además, toma en cuenta las tres “c”: calidad en el servicio, ciudadano usuario y, competencia de los actores; lo explicamos en el siguiente mapa: 44

45. 45

46. 46

47. Auditoría de Desempeño Procedimientos de la Auditoria de Desempeño • LA PLANEACIÓN. • Se presenta como un método de argumentación, mediante el cual se fijan o se proponen los objetivos de las auditorías, se determinan los medios con los que se alcanzarán, se aplican técnicas analíticas y de síntesis para descubrir los hallazgos, se elabora con rigor metodológico la interpretación de los resultados, se observan y se proponen acciones para mejorar el quehacer gubernamental. • Planeación Genérica: La Auditoría al Desempeño se inicia en el plano genérico con la identificación de un programa, proyecto o actividad de los sujetos (Entidad-Dependencia, etc.), susceptible de ser objeto de revisión dentro de la gama de actividades que se desarrollan en los Gobiernos Estatales y Municipales • Planeación Específica: Parte de la definición del programa, proyecto, actividad o sujeto (Entidad o Dependencia), seleccionado para la revisión. Comprende todas las acciones necesarias para recopilar los antecedentes históricos del comportamiento del programa, proyecto, actividad o del sujeto mismo y de sus resultados. (Fuentes Primarias y Secundarias). 47

48. Auditoría de Desempeño Procedimientos de la Auditoria de Desempeño Fuentes de Información para la Planeación: Las Fuentes Primarias: son aquellos documentos originarios que en lo general contienen objetivos, metas, estrategias, políticas y medidas operativas, que serán aplicadas para la atención de las prioridades de la planeación nacional y sectorial y que históricamente son los primeros en abordar los temas que nos ocupan. Las Fuentes Secundarias: son aquellas que se analizan, estudian, evalúan o critican las fuentes originales o primarias. Estas fuentes se generan en el medio académico, en noticias, en los medios impresos, radiofónicos y televisivos. 48

49. Auditoría de Desempeño Fuentes Primarias 49

50. Auditoría de Desempeño Fuentes Secundarias 50