Proceso y Método de Evaluación MPS.BR

1. Proceso y Método de Evaluación MPS.BR Entrenamiento del Equipo para la Evaluación Final

2. Proceso de Evaluación MPS

3. Proceso de Evaluación MPS

4. Subproceso: Realizar la Evaluación Final

5. Responsabilidades de los mini equipos durante la evaluación final • Verificar los resultados a partir de los indicadores (ajustes realizados) • Caracterizar la implementación en cada proyecto en los procesos bajo su responsabilidad • Proponer caracterización para resultados del proceso, resultados de los atributos del proceso y atributos del proceso en los procesos bajo su responsabilidad • Identificar puntos fuertes, puntos débiles y oportunidades de mejora en los procesos bajo su responsabilidad

6. Responsabilidades conjuntas durante la evaluación final • Revisar el trabajo de los mini equipos • Realizar las entrevistas • Caracterizar los resultados de los procesos, resultados de atributos del proceso y atributos del proceso • Aprobar la redacción de los puntos fuertes, puntos débiles y oportunidades de mejora • Decidir el Nivel MR-MPS

7. Subproceso: Realizar la Evaluación Final

8. Subproceso: Realizar la Evaluación Final

9. Verificar evidencias • Cada mini equipo, en los procesos bajo su responsabilidad: • Examina la planilla de indicadores en conjunto con el Informe de Ajustes para la Evaluación Final • Verifica la presencia y adecuación de los indicadores que comprueban la implementación de los resultados esperados para cada resultado esperado de proceso y de atributo del proceso

10. Subproceso: Realizar la Evaluación Final

11. Realizar entrevistas • Son realizadas en la evaluación final para obtener las afirmaciones • Muestran el grado en que los colaboradores de la organización entienden y usan los procesos • Puede ser realizada en paralelo con la verificación de evidencias

12. Confidencialidad de las entrevistas • Se guarda rigurosa confidencialidad de las entrevistas • Por los miembros del equipo de evaluación y por los entrevistados durante y después de la evaluación Ninguna información será atribuida a una persona individualmente

13. Entrevistas y solicitación de documentos • El Equipo de Evaluación puede solicitar más documentación cuando: • Un entrevistado menciona un documento que se encuentra disponible para el equipo de evaluación • El equipo nota la falta de una evidencia directa que es necesaria para la evaluación

14. Notas de Entrevistas • Todo el equipo debe tomar notas de las afirmaciones recolectadas • En los procesos bajo su responsabilidad los mini equipos deben ser especialmente cuidadosos. • Las notas son destruidas al final de la evaluación

15. Entrevistado Miembro del equipo de evaluación Evaluador Líder Entrevista: Distribución de los Lugares E E E E E E M M M L M M M L E M L

16. Entrevistas: Ejemplo de Distribución del Tiempo

17. Entrevistas: Preguntas • Al inicio de la entrevista comenzar por preguntas genéricas y después hacer preguntas mas específicas. Por ejemplo: • Usted puede explicar su trabajo? • Cómo usted realiza la planificación de sus proyectos? • Cómo son tratados los cambios en los requisitos? • Cómo se monitorean los proyectos? • Cómo usted fue entrenado para realizar su trabajo? • Al final de la entrevista, se vuelven a hacer preguntas genéricas sobre el entorno de la empresa y la cultura organizacional. Por ejemplo: • Hace cuanto tiempo está en la empresa? • Qué le gusta más a usted en esta empresa? • Si pudiera cambiar algo, qué cambiaria?

18. Entrevistas: Preguntas Las preguntas no deben poder ser respondidas conSI o NO Las preguntas no pueden venir con la respuesta incluida Cuidado con la reacción corporal a la respuesta del entrevistado

19. Subproceso: Realizar la Evaluación Final

20. Registrar afirmaciones en la planilla de indicadores • Cuando termina una entrevista cada mini equipo debe: • Revisar sus notas y hacer observaciones en la planilla • Controlar el andamiento de su parte en la evaluación • Controlar la cobertura de las afirmaciones • Revisar y actualizar la lista de preguntas para las entrevistas que faltan • Registrar puntos fuertes, puntos débiles y oportunidades de mejora • IMPORTANTE: Nombres son borrados al final de la evaluación y las notas de las entrevistas son destruidas para preservar la confidencialidad

21. Cobertura de las afirmaciones • Deben haber afirmaciones que comprueben los indicadores directos • Cobertura de afirmaciones para cada proceso • Para cada resultado esperado debe haber por lo menos una afirmación • Todos los proyectos/trabajos (aún los no concluidos deben tener afirmaciones para los resultados) • En un proyecto/trabajo concluido se debe tener afirmaciones para aproximadamente 50% de los resultados

22. Planilla con registros de las afirmaciones

23. Subproceso: Realizar la Evaluación Final

24. Caracterizar el grado de implementación de cada resultado esperado del proceso y de cada resultado esperado de atributo del proceso en cada proyecto/trabajo • Estamos listos para caracterizar los resultados cuando: • Tenemos para cada implementación asociada a un resultado: • Una evidencia directa y • Una evidencia indirecta o una afirmación • El mini equipo responsable por verificar el proceso tiene consenso de que la evidencia objetiva es apropiada para determinar la caracterización

25. Caracterizar el grado de implementación de cada resultado esperado del proceso y de cada resultado esperado de atributo del proceso en cada proyecto/trabajo • Atribuir T, L, P, N, F o NA a cada proyecto en cada resultado esperado del proceso y de atributo del proceso. • Para cada resultado en cada proyecto deben haber indicadores directos. Este indicador directo debe ser comprobado por indicadores indirectos o afirmaciones • Responsable: Mini equipos

26. Escala para caracterizar el grado de implementación de un resultado esperado del proceso y de un resultado esperado de atributo del proceso

27. Planilla después de la verificación de los ajustes, con los registros de las afirmaciones

28. Planilla con caracterización por proyecto

29. Subproceso: Realizar la Evaluación Final

30. Caracterizar, inicialmente, el grado de implementación de cada resultado esperado del proceso y de cada resultado esperado de atributo del proceso en la unidad organizacional • Agregar los resultados obtenidos en la tarea anterior para caracterizar (de forma inicial) el grado de implantación de cada resultado esperado del proceso y de atributo del proceso en la unidad organizacional • El mini equipo agrega los resultados atribuyendo un grado que caracterice la implantación de cada: • resultado esperado del proceso en la unidad organizacional • atributo del proceso en la unidad organizacional • Responsable: Mini equipo Este grado será propuesto por el mini equipo a todo el equipo de evaluación en la reunión de consenso

31. Reglas para caracterizar el grado de implementación de cada resultado esperado del proceso y de cada resultado esperado de atributo del proceso en la unidad organizacional

32. Consideraciones para la Caracterización • Obedecer las reglas • Considerar la gravedad del conjunto de debilidades • Considerar la razón individual de cada grado • Peso relativo de las instancias con puntos débiles • No se puede caracterizar un resultado como T si alguna instancia (proyecto/trabajo) es diferente de T • El resultado jamás puede ser mayor que la mayor de las caracterizaciones

33. Consideraciones relacionadas a la caracterización de resultados a los cuales fue atribuido un REQUERIDO en la evaluación inicial A criterio del equipo de evaluación e considerando su importancia, un resultado con Requerido en la evaluación inicial puede venir a ser caracterizado como T (totalmente implementado).

34. Planilla con caracterización por proyecto

35. Planilla con caracterización por proyecto Todo resultado L, P o N debe tener asociado un punto débil que justifique la caracterización

36. Subproceso: Realizar la Evaluación Final

37. Caracterizar, inicialmente, el grado de implementación de cada atributo del proceso en la unidad organizacional • El mini equipo hace una caracterización inicial de cada atributo del proceso en los procesos bajo su responsabilidad (atribuye un grado) Este grado será propuesto por el mini equipo a todo el equipo de evaluación en la reunión de consenso

38. Reglas para caracterizar el grado de implantación de los atributos de proceso en la unidad organizacional Este porcentaje debe ser visto de manera global en lo que se refiere al grado de implantación del atributo de proceso y es, al mismo tiempo, una evaluación cualitativa y cuantitativa

39. Consideraciones relacionadas a la caracterización de Atributo de Proceso • El porcentaje de orientación para caracterización de un atributo de proceso debe ser visto de manera global en lo que se refiere al grado de implantación del atributo de proceso y es, al mismo tiempo, una evaluación cualitativa y cuantitativa. • Para casos donde el cualitativo tenga predominancia sobre el cuantitativo, el evaluador líder debe enviar una justificativa detallada de la caracterización realizada para el auditor, la cual será incorporada a la documentación de la evaluación enviada a la SOFTEX.

40. Ejemplo: Caracterización de AP 2.1 en el Nivel G RAP 9. (Hasta el nivel F). Los resultados del proceso son revisados con la Alta Gerencia para proporcionar visibilidad sobre su situación en la organización. T o L ?

41. Ejemplo: Caracterización de AP 2.1 en el Nivel G

42. Reglas para caracterizar el grado de implantación de los atributos de proceso en la unidad organizacional Este porcentaje debe ser visto de manera global en lo que se refiere al grado de implantación del atributo de proceso y es, al mismo tiempo, una evaluación cualitativa y cuantitativa

43. Ejemplo: Caracterización de AP 2.1 en el Nivel G El grado T en AP 1.1 significa un alcance de más de 85% del conjunto de los resultados esperados del proceso, sin debilidades significativas o sin atribución de “No Implementado” (N).

44. Subproceso: Realizar la Evaluación Final

45. Caracterizar el grado de implementación de cada resultado esperado del proceso, de cada resultado esperado de atributo del proceso y de cada atributo del proceso en la unidad organizacional • En reunión de todo el equipo, cada mini equipo presenta su propuesta de caracterización • El equipo de evaluación, por consenso, atribuye un grado que caracterice la implantación de cada resultado esperado de proceso, de cada resultado esperado de atributo del proceso y de cada atributo del proceso para la unidad organizacional • Responsable: Equipo de evaluación Todo resultado L, P o N debe tener asociado un punto débil que justifique la caracterización

46. Consenso • Es imprescindible que las decisiones importantes del equipo de evaluación sean por consenso • Consenso: • Llegar a una propuesta suficientemente aceptable para todos los miembros del equipo • Es buscar el Win/Win para todos los miembros del equipo • No es voto unánime • No es voto mayoritario • No es una propuesta que deja todos igualmente satisfechos • No es solamente encerrar cuando se llega a 100% de acuerdo Conducir al equipo al consenso es responsabilidad del Evaluador Líder

47. Pulgar apuntando para arriba Significa: “Apoyo esta decisión y es la de mi preferencia” Pulgar apuntando para el lado Significa: “Esta decisión no es la de mi preferencia pero la puedo aceptar y apoyarla fuera del equipo” Pulgar apuntando para abajo Significa: “No puedo apoyar esta decisión” Voto del Pulgar Si hay al menos un pulgar apuntando para abajo, la decisión no es tomada y se busca el consenso hasta todos consideraren la decisión aceptable

48. Subproceso: Realizar la Evaluación Final

49. Caracterizar el grado de implementación de los procesos en la unidad organizacional • Teniendo la caracterización por resultado, el equipo de evaluación caracteriza el proceso para la organización como: • SATISFACTÓRIO o • NO SATISFACTÓRIO • Responsable: Equipo de evaluación

50. Caracterización del grado de implementación de los procesos en la unidad organizacional Todos los resultados esperados para el proceso son T o L Se tiene resultados para los atributos del proceso conforme la Tabla SATISFACTÓRIO