Verificación de la eficacia de los controles oficiales Reglamento (UE) 882/2004
Verificación de la eficacia de los controles oficiales Reglamento (UE) 882/2004
S.G. Sanidad e Higiene animal y Trazabilidad; D.G. Sanidad de la Producción Agraria 11 de mayo de 201911 de mayo de 2019
Verificación de los controles oficiales
Herramientas y técnicas de verificación
Medidas correctoras
Objetivos de la
presentación
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Reglamento 882/2004
• Desarrollo de programas de control para verificar el cumplimiento de la normativa
Reglas de desarrollo
• Criterios operacionales de ejecución de los programas de control
Realizar controles
Verificar eficacia de los controles
Tomar medidas
correctoras
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Verificación de la eficacia
Cómo: no está regulado
Quién: Integrado en la gestión de los programas.
Cuando: Es un proceso continuo.
Documento MANCP Network sobre la verificación de la eficacia de los controles. Octubre de 2016
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Establecer objetivos e indicadores
Ejecución de los controles
Empleo de los indicadores para
valorar los resultados de los controles
oficiales
Establecer medidas correctoras
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Eficacia/efectividad: La medida en la que los controles oficiales producen un efecto(previsto)/logran un objetivo.
Verificación de la eficacia: Evaluación constante de actividades/procedimientosespecíficos para contrastar de forma objetiva hasta que punto se alcanzan losobjetivos y resultados previstos en el programa de controles oficiales.
Supervisión: La acción o proceso por el que se contrasta como se ha efectuado unadeterminada acción y si su realización se ajusta a lo programado
Auditoria: Un examen sistemático e independiente para determinar si lasactividades y sus resultados se corresponden con los planes previstos, y si éstos seaplican eficazmente y son adecuados para alcanzar los objetivos
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Inspección Supervisión Auditoria Monitoreo
Se verifica? SI SI SI SI
A quién se dirige? Empresa Inspector Sistema
Todos los participantesdel programa
Quién lo hace? InspectorServicios
centrales/provinciales
Cuerpo Auditor Servicioscentrales
Cual es el objetivo?
Verificarcumplimiento de la norma
Verificar el cumplimiento
del procedimiento
Verificar si se cumple el plan, y si este se
aplica eficazmente y si ajusta a los objetivos
Medición de los indicadores
Identificación de diferencias entre inspección, supervisión, auditoria y monitoreo.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Auditoriavs
Verificación
Auditoria
Cuerpo auditor
Examen externo al gestor
Proceso Puntual
Contribuye a la verificación de la eficacia, pero no es suficiente
Verificación
Gestor del programa
Proceso de gestión interna
Proceso continuo
Los resultados de las auditorias
forman parte del proceso de V.E.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Calidad de los controles oficiales• Cumplimiento del plan.• Objetivos e indicadores• Planificación para la recogida, seguimiento y análisis de resultados del programa de control
• Antes del inicio del proceso de verificación de la eficacia, los pre‐requisitos deberían estar implantados.
• Sin una implantación previa, las conclusiones de la verificación podrían estar fundamentadas sobre unas bases “falsas”
PRE‐REQUISITOS
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Procedimientos documentados
Imparcialidad
Formación
Uniformidad y consistencia de los controles
Detección y registro fiable de los incumplimientos
Medidas de corrección de incumplimientos
Seguimientos.
Elementos que configuran la calidad de los controles
Cumplimiento del plan: Herramientas• Supervisión• Auditorias
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
OBJETIVOS
• La definición de los objetivos debe ser el primer paso para la ejecución de los programas oficiales.
• El propósito de los objetivos es clarificar a todos los implicados lo que se espera alcanzar con la ejecución del programa de control.
• Pueden usarse: • Direccionar los recursos.• Herramienta de gestión para el establecimiento de un programa eficaz de control. • Para canalizar las actividades de los distintos departamentos y unidades
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
¿Objetivos?• Deben estar bien definidos • ¿Qué es lo que van a hacer y por quien?
Específicos
• Deberían poder verificarse con indicadores• No es medible si no es posible saber si es alcanzable, o cuando o cuanto se alcanzó. Medibles
• Tiene que haber relación entre el objetivo y el efecto desesado.Relevantes
• La descripción de los objetivos debería incluir un cronograma para su consecución
Temporales
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Tipos de objetivos• Objetivos de alto nivel: Se expresan en la legislación u otraspolíticas de carácter general.
• Objetivos estratégicos : Objetivos a largo plazo que establecenqué efecto desea alcanzar el sistema de control oficial y cualesson sus prioridades.
• Objetivos operacionales: Son más específicos y a un plazo máscorto e indica que es lo que se quiere alcanzar.
•Derivan de los objetivos estratégicos.•Directamente relacionados con las actividades de control.•Son verificables directamente.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Alto nivel
• Producción en condiciones de bienestar animal satisfactoria.
Estratégico
• Asegurar que la que las explotaciones de leche bovino proporcionan unas buenas condiciones de bienestar animal a lo largo de toda la vida productiva.
Operacional
• Mejora de las instalaciones• Limitación del uso de antibióticos.• …
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Indicadores• La definición de los objetivos debe ir enparalelo al diseño de los indicadores aplicables
• Son herramientas de medida: ¿Hasta que puntose ha alcanzado el objetivo?.
• Miden tanto la situación actual como latendencia.
• Visión de la eficacia de las actividades decontrol.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
¿Cómo se usan?:• Proporciona información sobre el logro deun objetivo concreto.
• Verifica la eficacia con relación a losresultados e impactos de los controles.
• Seguimiento del progreso de la eficacia delos controles.
• Facilita el traslado del progreso delprograma a todos los “actores”.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
RACER• Relevante: ¿Tienen una vinculación directa alobjetivo?• El indicador debería reflejar si el objetivo se estáalcanzando o no, y en que grado.
• El indicador debería ser significativo para lamejora del funcionamiento del programa. Nodebería ser demasiado ambicioso. Debecentrarse en medir el objetivo a alcanzar
CARACTERÍSTICAS
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
RACER • Aceptado:• El indicador debería ser aceptado y comprendido• Las reglas y responsabilidades deben estar
definidas.
• Creíble:• No debería ser ambiguo.• Transparente y fácil de interpretar• Debería ser lo más sencillo posible
CARACTERÍSTICAS
RACER
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
RACER• Easy‐fácil de monitorizar• Los datos deben ser fácil de obtener y demanejar.
• Siempre que fuera posible se debería evitar eluso de indicadores cuyo seguimiento fueradificultoso o caro.
CARACTERÍSTICAS
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
RACER• Robusto
• Se mantiene fiable a pesar de los cambios desituaciones
• No se ven afectados por variaciones pequeñas de losdatos.
• Sobre la base de los mismos datos produce los mismosresultados
• No debe producir efectos inesperados.• No debe estar abierto a más de una interpretación.
CARACTERÍSTICAS
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Descripción del elemento o característica que va a ser objeto de medida
• Pertinencia del indicador con el objetivoDefinición
• Añade trasparencia• Indicación de las fuentes externas o internas de información y su fiabilidad
Fuente de los datos
• Situación inicial o de referencia, que servirá para medir la evolución del indicador y el grado de éxito en alcanzar la meta fijada para el mismo
Línea base
• La situación final que se pretende alcanzar• Las metas deben ser programadas Meta
• Situaciones intermedias con el fin de ayudar a controlar el logro del objetivo a largo plazoHitos
Componentes de los
indicadores
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
De cumplimiento
• Miden la cantidad o calidad de lo que se ha producido
• Ej: Número de controles oficiales realizados
De eficacia
• Miden cómo los resultados obtenidos provocan el cambio deseado en la conducta o situación
• Ej: Mejora del cumplimiento de las medidas de higiene general en explotación.
Compuestos
• Se forman por combinación de indicadores individuales.
• Se utilizan cuando un objetivo no se puede medir directamente.
• Los indicadores individuales deben estar ponderados
De impacto
• Miden cómo afectan los resultados al objetivo de alto nivel.
Tipos de indicadores.
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
•I •N •D I •C A •D •O •R •E •S
•E •F I C A C I A
•Objetivos •estratégicos •Actividades •Indicadores
•Bloque I
•Bloque II
•Bloque III
•Bloque IV
•Objetivo de alto nivel 2: Reducir los riesgos presentes en los alimentos que amenazan a las personas a niveles razonablemente posibles y aceptables.
•Objetivo estratégico 2.2: Mejorar elcumplimiento de la legislación a fin deque los productos alimenticiosdestinados a ser puestos a disposicióndel consumidor contengan lainformación de seguridad alimentariaestablecida en las disposiciones legales
•Objetivo estratégico 2.1: Mejorar elcumplimiento de la normativa de higienealimentaria y bienestar animal en losestablecimientos alimentarios
•Objetivo estratégico 2.0: Mejorar elgrado y la calidad de implantación delPNCOCA y la cooperación entreautoridades competentes en relación•con el control oficial deestablecimientos alimentarios yalimentos
•Objetivo estratégico 2.3: Reducir en loposible y, en todo caso a nivelesaceptables, la exposición de losconsumidores a los riesgos biológicos yquímicos presentes en los alimentos
•Objetivo estratégico 2.4: Reducir en loposible y, en todo caso a niveles aceptables,la exposición de los consumidores a losriesgos emergentes o de especialpreocupación y dificultad de control
•Control de establecimientos alimentarios
•Control de la
información y
composición alimentaria
•Control de riesgos biológicos y químicos
•Campañas de control de mercado
•PNCOCA y documentos asociados
•I •N •D •I •C A •D •O •R •E •S
•C •U •M •P •L •I •M •I •E •N •T •O
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
•Objetivo estratégico2.1: Mejorar el cumplimiento de la normativa de higiene alimentaria y bienestar •animal en los establecimiento s alimentarios
•Objetivo: Reducir la aparición de riesgos vinculados a las condiciones de higiene de los establecimientos alimentarios y alimentos, a la trazabilidad, a los SANDACH y a la ausencia de formación de los trabajadores de empresas alimentaria
•2.1.1.Diseño y ejecución de un programa de control
general de establecimientos alimentarios
•Objetivo operativo 2.1.1.1:Cumplir con la programación de controles oficiales
•Objetivo operativo 2.1.1.2: Detectar los incumplimientos de los establecimientos alimentarios relativos a: ‐REGISTRO •‐ HIGIENE , estructurales ‐ HIGIENE, operacionales ‐TRAZABILIDAD ‐ SANDACH •‐ FORMACIÓN
•‐ PRODUCTOS ALIMENTICIOS con características fisicoquímicas y/o organolépticas
•Objetivo operativo 2.1.1.3: Adoptar medidas por parte de la autoridad competente ante los incumplimientos detectados relativos a: ‐REGISTRO •‐ HIGIENE ,
•TRAZABILIDAD •‐ SANDACH •‐ FORMACIÓN •‐ PRODUCTO
•Indicador 2.1.1.1a: •Nº UCPR /Nº UCP (totales •y por sector)
•Indicador 2.1.1.1b: Nº UCPR o UCR por cada sector /Nº UCP o UCR totales
•Indicador 2.1.1.2.a ‐2.1.1.2.g: •Nº Incumplimientos /Nº UCR (por tipo de incumplimiento, totales y por sector)
•Indicador 2.1.1.3.a –2.1.1.3.f: •Nº medidas adoptadas/Nº Incumplimientos (por tipo de incumplimiento, totales, por tipo de medida y por sector)
•Indicador 2.2.2.3b: Nº medidas adoptadas de cada tipo(Nº total de medidas adoptadas)
•Objetivo de alto nivel 2: Reducir la
presencia de los riesgos
presentes en los alimentos
•que amenazan a las personas a niveles razonableme nte posibles y aceptables.
•Jornada sobre el PNCOCA 2016‐2020
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Recogida y análisis de datos
Identificación de los datos
Registro de los datos
Procesado y almacén de los datos
Método de análisis
• El plan debe recoger la sistemática de recogida y análisis de datos
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Características• Cuantitativos o cualitativos
• Deberían ser• fiables,
• fácil de obtener,
• Alta calidad
• Imparciales
• De fácil manejo
Identificación de los datos apropiados
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Actuaciones• Información obtenida de losplanes de control• Número de inspecciones,
• Muestras
• Acciones puestas en vigor
• Imparciales
• De fácil manejo
Origen de los datos• Efectos
• Resultados obtenidos• Efecto del Plan sobre el
nivel de cumplimiento,
• Reducción o eliminaciónde riesgos
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Inspecciones
Supervisiones
Seguimiento
Auditoria interna
InternaOtras agencias públicas
Auditorias UE
Organismos internacionales
Externa
Datos que deben ser objeto de recogidos
sistemática
Identificación del
dato
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Calidad del dato
• Datos no registrados• Datos atípicos• Combinación extraña de datos
Ajuste de datos.
• Se deberían registrar los ajustes efectuados y las razones para ello
• Los datos atípicos podrían ser valorados con cuidado
Preparación
• Creación de nuevas variables o indicadores• Combinación de datos.
Procesado de los datos
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Qué es lo que se examina.
Qué es lo que está
disponible.
Cómo de casual es la asociación para ser probada.
Método de
análisis
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Los métodos de análisis más comunes son los decomparación de los datos actuales con la línea base delindicador, y con la meta que se pretende alcanzar.
• Análisis de tendencia.
• Evaluación del efecto de una intervención: Para ello esnecesario disponer de un grupo de control para probarel efecto. Sino se dispone de un grupo de control serequieren datos adicionales para demostrar el efecto.
Análisis de los datos
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Qué nos dicen los indicadores
Interpretación de los
resultados
¿Hemos hecho lo que dijimos que íbamos a
hacer
¿Hemos alcanzado el resultado buscado
¿Sabemos que elementos
contribuyeron a alcanzar el objetivo?
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Establecer objetivos e indicadores
Ejecución de los controles
Empleo de los indicadores para
valorar los resultados de los controles
oficiales
Establecer medidas correctoras
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• El resultado de las acciones de verificación de la eficaciadebe ser la detección de los defectos y debilidades delsistema que impiden alcanzar los objetivos
• La verificación debe continuar con el establecimiento deun Plan de acción.
• El plan de acción debe incluir las modificacionesnecesarias del plan de controles oficiales con lafinalidad de que el programa pueda asegurar laconsecución de los objetivos, (de alto nivel yestratégicos fundamentalmente)
Plan de acción
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Acciones correctivas: acciones destinadas a eliminar lacausa de la no conformidad.
• Acciones preventivas: acciones destinada a eliminar lacausa de una potencial no conformidad o de otrasituación no deseada.
• Acciones de mejora: destinadas a mejorar elfuncionamiento del sistema
Tipos de acciones
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• Modificar la estructura orgánica o la distribucióncompetencial, crear órganos de coordinación, etc.
• El diseño del programa incluido el de los objetivos,indicadores
• Los procedimientos operativos• Formación• Campañas de comunicación, elaboración de guías, etc.• Iniciar propuestas legislativas o iniciativas de otro tipo, a
nivel autonómico.• Otras medidas
¿Qué es lo que se puede mejorar?
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
• El verdadero problema debe ser entendido antes detomar acciones correctivas• Si atacamos los síntomas pero no la causa, el problema
se repetirá.
• Las acciones deben ir a la raíz del problema detectado
• Debe haber una investigación de la causa
• Métodos y herramientas para el análisis de causas.
Plan de acción: Acciones correctivas
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
Plan de acción: Principales elementos
Tareas del P.A.• ¿Qué hay que hacer?• ¿Quién lo hará?
Cronograma• ¿Cuándo se hará?• ¿Existen hitos intermedios?
Fuentes• Se requieren fondos específicos
• Están disponibles?
Evaluación
• Las acciones se han implantado efectivamente y en el tiempo previsto
Resultado
• Acciones implantadas y no implantadas.
• Acciones no implantadas en tiempo
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
“Lo que no se define no se puede medir. Lo que no se mide , no se puede mejorar. Lo que no se mejora, se degrada siempre”
•Lord Kelvin
•Jornada sobre el PNCOCA 2016‐2020
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES
VERIFICACIÓN DE LA EFICACIA DE LOS CONTROLES OFICIALES