Mtodo de evaluacin de un

sistema de PML
Entrenamiento de auditores para la evaluacin
de sistemas de PML de acuerdo a la NB 61002
Abril de 2013
 Acerca de MEPMAL
Metodologa de evaluacin de
un sistema de PML segn la NB
61002 (Modelo de Excelencia en
PML).
Puede ser utilizado para la auto-
evaluacin de un sistema PML.
Permite generar una serie de
fortalezas y oportunidades de
mejora concernientes al sistema
PML.
Proporciona un perfil de
calificacin que facilita las
decisiones de certificacin..
 MEPMAL se basa en RADAR
(Results, Aproaches, Deployment, Assessment, Review )

Metodologa de evaluacin
utilizado para el modelo
EFQM.
Utilizado en esquemas de
reconocimiento europeos y
nacionales en Europa.
Metodologa probada y
aplicada en miles de
evaluaciones.
 Lgica de MEPMAL

La lgica de MEPMAL indica que una empresa:

Obtiene resultados que cumplen o exceden los
objetivos y metas establecidos, que son claramente
causados por los facilitadores, y que, en
comparacin a otras empresas, son sobresalientes.
Planifica y desarrolla una serie de Enfoques slidos e
integrados para lograr los resultados.
Despliega o aplica dichos Enfoques de manera
sistemtica.
Evala y Revisa los Enfoques utilizados por medio de
seguimientos y anlisis de la efectividad de los
mismos a fin de identificar posibles mejoras.
 Elementos y atributos de MEPMAL
Elemento Atributos Se aplica a:

RESULTADOS
Tendencias positivas
Cumplimiento de objetivos
Resultados Comparacin sobresaliente
Causas evidentes
Alcance

Solidez
Enfoque
Integracin
FACILITADORES
Aplicacin
Despliegue
Sistemtico

Verificacin de efectividad
Evaluacin & Revisin
Mejora
 Enfoque
(mtodo, procedimiento)

Evala los procedimientos que

se utilizan para llevar a cabo los
facilitadores.
Una empresa debe desarrollar
enfoques slidos e integrados
para implementar los
facilitadores.
 Enfoque
(mtodo, procedimiento)

Solidez: Un enfoque slido se respalda en una serie

de procedimientos definidos y un
fundamento lgico.

Integracin: Un enfoque integrado apoya tanto la

poltica como la estrategia y se relaciona
con otros enfoques cuando es pertinente.
 Enfoque
Solidez, Integracin

Para calificar la solidez e integracin de un enfoque, se debe

examinar si:
Existe un razonamiento slido.
Existe una serie de procedimientos que soportan el
enfoque.
Apoya la estrategia y la poltica y si corresponde, tiene
relacin con otros enfoques o es parte de una
metodologa integrada.

Mientras mayor evidencia exista,

mayor debe ser la calificacin.
 Enfoque
Solidez

Una dbil evidencia consistira en slo una descripcin de lo

que se hizo, pero no por qu o cmo.
Una evidencia slida consiste en la descripcin de lo que se
hace, por qu, cmo, cmo se integra, todo esto apoyado
con pruebas y ejemplos concretos.

Si los procesos estn bien definidos, documentados y se han

desarrollado en base a razonamientos lgicos, supone una ALTA
PUNTUACIN.
 Despliegue

Evala lo que la empresa

hace para poner en
prctica los Enfoques
desarrollados y la medida
en la que stos son
aplicados.
En una empresa de
excelencia, los enfoques
son efectivamente
aplicados de manera
sistemtica.
 Despliegue

Aplicacin: Los Enfoques se aplican efectivamente

empleando procedimientos bien definidos y
relevantes.

Sistemtico: Los Enfoques deben aplicarse de forma

estructurada, siguiendo una planificacin
determinada.
 Despliegue

Para calificar la efectiva y sistemtica aplicacin de un

enfoque, se debe examinar si:
Existe evidencia que el o los procedimientos se aplican
apropiadamente.
Existe evidencia de estructura y sostenibilidad en la
manera en la que se aplican los procedimientos.
El despliegue de los enfoques es metdico.

Mientras mayor evidencia exista,

mayor debe ser la calificacin.
 Despliegue

Cuando existe concreta evidencia

que demuestre que los Enfoques
se han aplicado de acuerdo a un
plan de desarrollado, con amplia
comunicacin y capacitacin, sin
duda, implicara una buena
puntuacin.
 Evaluacin y Revisin

Se evala lo que la
empresa hace para
mejorar el Enfoque y el
Despliegue.
Una empresa de
excelencia realiza un
continuo seguimiento
a fin de identificar y
aplicar oportunidades
de mejora.
 Evaluacin y Revisin

Seguimiento: Se refiere al anlisis regular de la

pertinencia y efectividad de los Enfoques o
procedimientos desarrollados, adems de
la manera en la que stos de aplican.

Mejora: Se refiere a la identificacin y aplicacin

de mejoras de Enfoques y procedimientos
de Despliegue, que se realiza luego del
seguimiento.
 Evaluacin y Revisin

Para calificar el seguimiento y mejora de enfoques y

despliegues, se debe examinar si:
Existe evidencia que los procedimientos utilizados y la
manera en que stos son aplicados, son revisados
continuamente y su efectividad se comprueba
continuamente.
Los procedimientos utilizados son mejorados en funcin
del seguimiento que se realiza.

Mientras mayor evidencia exista,

mayor debe ser la calificacin.
 Evaluacin y Revisin

Cuando existe concreta

evidencia que demuestre
que los Enfoques y la
manera en la que stos se
Despliegan, son verificados
y mejorados
continuamente.
 Resultados

Para la evaluacin de los resultados se toman en cuenta los

siguientes atributos:
Tendencias positivas. Los resultados, ambientales como
econmicos y sociales deben mostrar tendencias positivas
sostenibles en el tiempo; no es suficiente obtener un
resultado positivo de manera espordica; el reto consiste en
mantenerlo de manera permanente.
Cumplimiento de objetivos. Los resultados deben cumplir o
exceder las metas trazadas en la Estrategia PML.
 Resultados

Comparacin sobresaliente. Los resultados, una vez

comparados con otros obtenidos por empresas del rubro,
deben ser sobresalientes.
Causas evidentes. Debe existir evidencia clara de la relacin
que existe entre la implementacin de las medidas de PML y
los resultados obtenidos.
Alcance. Los resultados alcanzados deben ser significativos
en relacin al potencial de mejora identificado.
Consumo especfico de energa elctrica
[kWh/HL de producto]

0
5
10
15
20
25
30
2000

2001
Meta

2002

2003
Alcanzado

2004

2005

2006

2007

2008

2009
Implementacin del sistema de PML
Mejor benchmark encontrado

2010
Resultados
 Procedimiento general de
evaluacin

Leer cuidadosamente el documento de aplicacin a la

certificacin para obtener una perspectiva general de la
empresa.
En base a la evidencia presentada en el documento,
evaluar los criterios (utilizando el cuaderno de
evaluacin).
Listar, para cada criterio, las fortalezas, oportunidades
de mejora y los aspectos a revisar en la visita a planta.
Asegurarse que stos estn escritos en oraciones
completas, claras y de fcil comprensin tanto para s
mismo como para otros que puedan leer la evaluacin.
 Procedimiento general de
evaluacin

Determinar una puntuacin inicial de cada

criterio a travs de la consideracin de las
fortalezas y las oportunidades de mejora.
Consensuar la puntuacin inicial con el resto
del equipo de auditores.
Efectuar la visita en planta y revisar los aspectos
inicialmente identificados (se debe buscar y
verificar las evidencias concretas).
 Procedimiento general de
evaluacin

Re-evaluar los criterios en base a lo verificado

durante la visita.
Modificar las puntuaciones de los criterios,
de ser necesario.
Consensuar la evaluacin con el resto del
equipo de auditores.
Calcular la calificacin final.
Determinar si el sistema de PML es apto para
certificacin, en base a la calificacin final.
 Procedimiento para la puntuacin

Cada criterio se califica en base a

las fortalezas y oportunidades de
mejora identificadas y tomando
en cuenta cada uno de los
atributos.
Para la calificacin se hace uso de
una matriz (la que corresponda)
por cada criterio.
Matriz de calificacin para
cada criterio facilitador
Matriz de calificacin para
cada criterio resultado
 Escala de calificacin

En general, excelentes o buenas evidencias son

consideradas fortalezas, mientras que una
falta de evidencia completa es considerada
oportunidad de mejora.

Ninguna evidencia o anecdtica

0%-10%
Alguna evidencia
15%-35%
Evidencia
40%-60%
Evidencia clara
65%-85%
Evidencia completa
90%-100%
 Calificacin vs. evidencia

Estamos profundamente
comprometidos con la PML

Ninguna evidencia o anecdtica

0%-10%
Alguna evidencia
15%-35%
Evidencia
40%-60%
Evidencia clara
65%-85%
Evidencia completa
90%-100%

e.g. El Gerente General demuestra su
compromiso con la PML mediante las
siguientes acciones:
inauguracin y clausura de todos los
entrenamientos PML
visita semanal a todas las unidades
de produccin
0%-10% para discutir acerca el
sistema de PML en ejecucin
15%-35%
discusin de resultados PML en
todos las reuniones de directorio
40%-60%
65%-85%
90%-100%
Calificacin vs. evidencia
Escala de calificacin
1. Clara descripcin de los
procedimientos utilizados y del
por qu son aplicados
2. Ejemplos (mas de uno) de cmo
los procedimientos son puestos
en prctica
Ninguna evidencia o anecdtica
3. Clara descripcin de cmo el
Alguna evidencia procedimiento es medido,
revisado y mejorado
Evidencia
Evidencia clara
Evidencia completa
 Clculo de la calificacin de
cada criterio

Las calificaciones de cada atributo, se promedian para el

clculo de la nota del elemento correspondiente.

Las notas de cada elemento se promedian para calcular

la nota de cada criterio.

Luego de calcular la nota de cada criterio, el auditor debe

reflexionar si la nota calculada refleja realmente las
pruebas y el trabajo realizado por la empresa. Esto
puede hacer que la puntuacin para aumentar o
disminuir, hasta que se "sienta" bien.
Ejemplo de clculo de la nota
de un criterio facilitador
Ejemplo de clculo de la nota
de un criterio resultado
 Calificacin final

Las notas de cada CRITERIO se trasladan a la tabla

resumen a fin de calcular la nota final.
Calificacin Calificacin
Criterio Ponderacin
[%] ponderada
Diagnstico PML 60 100 60
Poltica PML 50 50 25
Estrategia PML 65 150 97.5
Implementacin PML 70 150 105
Monitoreo 60 150 90
Resultados Econmicos 65 150 97.5
Resultados Ambientales 70 150 105
Resultados Sociales 50 100 50
TOTAL 630
Gracias
CPTS
La Paz, Bolivia