Publicación y Monitoreo de Agentes de Copilot Studio

Esta lección cubre el proceso de despliegue de agentes de Copilot Studio en entornos de producción y la configuración de monitoreo continuo. Se detallan los pasos para publicar un agente y las herramientas disponibles para evaluar su rendimiento, uso y efectividad, asegurando una operación estable y optimizada.

Preparación para la Publicación

Antes de publicar un agente de Copilot Studio, es fundamental asegurar que ha pasado por un ciclo completo de pruebas y depuración. Esto incluye pruebas unitarias para cada tema, pruebas de regresión para cambios y pruebas de usuario final para validar la experiencia conversacional. La preparación también implica revisar la configuración de seguridad, los conectores utilizados y los flujos de Power Automate asociados.

• Revisión de contenido: Asegurar que todos los temas, entidades y variables estén configurados correctamente y sin errores lógicos.
• Validación de conectores: Confirmar que las conexiones a sistemas externos (APIs, bases de datos, etc.) son funcionales y tienen los permisos adecuados.
• Pruebas de rendimiento: Evaluar el comportamiento del agente bajo diferentes cargas y escenarios de uso.
• Configuración de seguridad: Verificar que los métodos de autenticación y autorización están implementados según las políticas de la organización.

Proceso de Publicación de Agentes

La publicación de un agente en Copilot Studio lo hace accesible a los usuarios finales a través de los canales configurados. El proceso es directo, pero requiere atención a los detalles para asegurar que el agente esté disponible en el entorno deseado y con las configuraciones correctas.

1. Navegar a la sección 'Publicar': Dentro del entorno de Copilot Studio, seleccionar la opción 'Publicar' en el panel de navegación izquierdo.
2. Revisar el estado de publicación: El sistema mostrará un resumen de los cambios pendientes y advertencias si existen problemas críticos que impidan la publicación.
3. Confirmar publicación: Hacer clic en el botón 'Publicar' para iniciar el despliegue. Este proceso puede tardar unos minutos, dependiendo de la complejidad del agente.
4. Configurar canales: Una vez publicado, el agente puede ser integrado en diferentes canales como sitios web, Teams, Facebook, etc. Esto se realiza en la sección 'Canales' dentro de Copilot Studio. Cada canal tiene requisitos de configuración específicos (por ejemplo, tokens de API, IDs de aplicación).

Es posible publicar versiones de prueba del agente en canales específicos antes de un lanzamiento general. Esto permite una fase de pruebas beta con un grupo limitado de usuarios. La gestión de versiones es importante para revertir a una versión anterior si se detectan problemas críticos después de una publicación.

Monitoreo de Rendimiento y Uso

El monitoreo continuo es esencial para evaluar la efectividad del agente, identificar áreas de mejora y detectar problemas operativos. Copilot Studio ofrece herramientas integradas para el análisis de conversaciones y el seguimiento del rendimiento.

• Análisis de sesiones: La sección 'Análisis' en Copilot Studio proporciona métricas sobre el número de sesiones, el porcentaje de resolución de temas, el escalado a agentes humanos y la satisfacción del usuario.
• Transacciones de Power Automate: Monitorear el éxito y los errores de los flujos de Power Automate invocados por el agente es crítico. Esto se realiza en el portal de Power Automate, donde se pueden ver los historiales de ejecución.
• Integración con Application Insights: Para un monitoreo más avanzado, se puede integrar Copilot Studio con Azure Application Insights. Esto permite capturar telemetría detallada, incluyendo eventos personalizados, errores y métricas de rendimiento de los componentes del agente.
• Paneles personalizados: Utilizar Power BI para crear paneles personalizados que visualicen los datos de rendimiento y uso del agente, combinando información de Copilot Studio, Application Insights y otras fuentes.

Métricas Clave a Monitorear

Las métricas seleccionadas para el monitoreo deben alinearse con los objetivos operativos del agente. No todas las métricas son relevantes para todos los casos de uso.

Aplicación Práctica: Qué Hacer el Lunes

Para aplicar los conceptos de esta lección, realice lo siguiente:

1. Identifique un agente de prueba: Seleccione un agente de Copilot Studio que esté en una fase avanzada de desarrollo y pruebas internas.
2. Revise la configuración de publicación: Navegue a la sección 'Publicar' y verifique que no haya advertencias críticas. Asegúrese de que todos los componentes (temas, conectores) estén listos.
3. Configure un canal de prueba: Si no lo ha hecho, configure el agente para el canal 'Sitio web' o 'Microsoft Teams' para pruebas internas. No lo publique aún en un canal de producción.
4. Explore las herramientas de análisis: Acceda a la sección 'Análisis' en Copilot Studio. Familiarícese con las métricas disponibles y cómo interpretar los datos de las sesiones de prueba.
5. Defina métricas clave: Para su agente de prueba, identifique al menos tres métricas clave que monitorearía si estuviera en producción y explique por qué son importantes para su caso de uso.