Modelo para evaluar sistemas de recuperación de procesos de negocio

Objetivo: desarrollar un modelo de evaluación para el descubrimiento de Procesos de Negocio basado en teorías de recuperación de la información. Metodología: se desarrolló una plataforma Web que permitió a un grupo de jueces encontrar Procesos de Negocio relevantes en un conjunto de 100 Procesos de Negocio respecto a 6 Procesos de Negocio de consulta. Los Procesos de Negocio relevantes seleccionados fueron la referencia para evaluar la eficiencia de recuperación de dos herramientas de descubrimiento automático de Procesos de Negocio. Hallazgos: la evaluación de estas herramientas demostró que su efectividad no fue lo suficientemente alta, no obstante, se atribuye a la baja concordancia en los resultados de las comparaciones manuales de los jueces, que se vieron afectadas por el carácter subjetivo de los juicios de relevancia emitidos por cada juez y a la fatiga producida por el gran número de comparaciones. Conclusiones: se aconseja sintetizar la cantidad de criterios a estimar, procurando mantener una buena relación entre la efectividad y la agilidad en la comparación ya que al tener un número elevado de criterios se eleva la cantidad de las evaluaciones que los jueces deben realizar.