Proceso de Evaluación Estándar de ConsScale

Este proceso de evaluación está orientado a agentes implementados y proporciona una medida precisa del nivel de desarrollo cognitivo. Sin embargo, requiere mucho más tiempo y esfuerzo en su realización.

La realización de un Proceso de Evaluación Estándar (PEE) requiere disponer del agente que se quiere evaluar y también una definición de pruebas adaptada al dominio de problema correspondiente. Como muestra la figura anteior, la evaluación se basa en los componentes arquitectónicos del agente y sus capacidades cognitivas. Los componentes arquitectónicos se pueden identificar a través de la inspección interna de la implementación. Las habilidades cognitivas presentes en el agente se pueden evaluar gracias a la definición y ejecución de pruebas de comportamiento específicas adaptadas para el dominio de problema seleccionado.

Las habilidades cognitivas descritas para cada nivel de la escala ConsScale se refieren a capacidades genéricas. Por lo tanto, la lista de habilidades cognitivas no se pueden usar directamente para realizar una evaluación estándar. Se requiere de un proceso de instanciación para poder aplicar la escala a un dominio de aplicación concreto. El proceso de instanciación consiste básicamente en diseñar pruebas conductuales, específicas para el dominio correspondiente, que permitan determinar la presencia de las habilidades cognitivas consideradas en cada nivel de la escala.

 Una vez que se dispone de la lista de componentes arquitectónicos y habilidades cognitivas presentes en el agente se puede aplicar la escala para obtener el nivel nominal de conciencia, el perfil cognitivo y el índice CQS (usando por ejemplo la Calculadora ConsScale).

Este artículo es un ejemplo de la aplicación del Proceso de Evaluación Estándar de ConsScale en el dominio de los video juegos de acción en primera persona.
 

ConsScale - Métodos de Clasificación de Agentes usando ConsScale