Skill Recorder: Microsoft convierte grabaciones de pantalla en skills de IA

Oficina con una pantalla grabando un flujo de trabajo que se convierte en un documento de pasos para un agente de IA, ilustración de Microsoft Skill Recorder

Microsoft quiere que enseñar una tarea a un agente de inteligencia artificial sea tan sencillo como grabar la pantalla: su proyecto de código abierto Skill Recorder registra cómo una persona trabaja en su ordenador y, con ayuda de GitHub Copilot, convierte esa sesión en una «skill» reutilizable o en una automatización programada. La herramienta, publicada en GitHub con licencia MIT, apunta a los agentes de Microsoft como Scout y Copilot Cowork, y plantea preguntas de gobierno de datos que interesan a cualquier empresa que esté desplegando agentes.

Las claves de Skill Recorder y las skills para agentes de IA en 30 segundos

  • Skill Recorder graba una tarea en pantalla y genera un archivo SKILL.md o una automatización para agentes de Microsoft.
  • El análisis lo hace GitHub Copilot en la nube, con capturas, eventos y narración de la persona que graba.
  • Es código abierto, funciona en macOS, Windows 11 y Ubuntu, y se instala compilando el código fuente.
  • Los análisis independientes publicados hasta ahora lo consideran prometedor, pero no listo todavía para despliegues corporativos.

noticias.ai ha explicado en detalle cómo funciona Skill Recorder, el grabador de tareas de Microsoft para agentes de IA. Más allá de la herramienta, el proyecto ilustra hacia dónde va la automatización empresarial: en lugar de programar flujos o grabar macros que repiten clics, se documenta el trabajo una vez y un agente lo reinterpreta con sus propias herramientas.

De la macro a la skill

Según el repositorio, el usuario graba la sesión en local, puede narrar en voz alta lo que hace y, al terminar, pide un análisis. Copilot devuelve una intención y una lista de pasos editables, y a partir de ahí la aplicación genera una Skill, un procedimiento en formato SKILL.md que el agente ejecuta bajo demanda, o una Automation, que lanza ese mismo procedimiento con un calendario o un disparador. Las instrucciones priorizan las herramientas nativas del agente, como la línea de comandos de GitHub o las peticiones web, en vez de reproducir clics, y tratan de generalizar a partir de un único ejemplo.

Esa es la diferencia con la automatización robótica de procesos (RPA) tradicional, que repite exactamente los movimientos grabados y se rompe cuando cambia una pantalla. La contrapartida es que la generalización la hace un modelo de IA y puede equivocarse, por eso el proyecto incluye dos fases de aprobación y una revisión del SKILL.md antes de instalarlo, que según el propio repositorio da visibilidad, no una garantía de seguridad.

Lo que debe mirar un equipo de TI

La grabación y el almacenamiento son locales, pero al analizar se envían a la nube de GitHub la línea de tiempo de eventos, capturas de pantalla, la narración transcrita y fragmentos de terminal. Hay un análisis opcional de secretos en el propio equipo, y el proyecto pide no grabar contraseñas ni claves. El blog A Guide to Cloud advierte de que no conviene suponer que las protecciones de Microsoft 365, como Purview, la prevención de pérdida de datos o la auditoría, cubren lo que se envía a GitHub Copilot, y recomienda no desplegarlo todavía en empresas.

Hay otros factores operativos. La instalación se hace compilando el código en local, algo que pueden bloquear políticas como Gatekeeper en macOS o Smart App Control en Windows, y algunas funciones, como la captura de direcciones web, solo están en macOS. El análisis depende de una cuenta con Copilot, aunque, según andrew.ooo, hay peticiones para admitir otros agentes, y la salida SKILL.md genérica está pensada para no depender de una plataforma concreta.

Skills: el formato que se extiende entre agentes

El archivo SKILL.md se ha convertido en una forma habitual de empaquetar procedimientos para agentes: un documento con un nombre, una descripción de cuándo usarlo, las herramientas permitidas y los pasos a seguir. Que Microsoft cree un grabador para generarlos indica que el cuello de botella ya no es ejecutar tareas, sino describirlas bien. Para las organizaciones, eso desplaza parte del trabajo de automatización desde los desarrolladores hacia quienes conocen el proceso, con la condición de revisar qué hace cada skill antes de darle acceso a sistemas reales.

Preguntas frecuentes

¿Qué hace Microsoft Skill Recorder?

Graba una tarea realizada en pantalla y, con GitHub Copilot, la convierte en una skill (SKILL.md) o una automatización que un agente de IA puede repetir.

¿En qué se diferencia de una macro o de la RPA?

No repite clics: genera instrucciones que el agente ejecuta con sus propias herramientas, como la línea de comandos o peticiones web, y trata de generalizar el proceso.

¿Es seguro usarlo en una empresa?

Los datos se envían a la nube de GitHub al analizar, y análisis independientes recomiendan no desplegarlo todavía en entornos corporativos.

¿Qué agentes usan las skills generadas?

Está pensado para agentes de Microsoft como Scout y Copilot Cowork; Copilot Studio figura como próximamente.

Fuentes:

encuentra artículos

newsletter

Recibe toda la actualidad del sector tech y cloud en tu email de la mano de RevistaCloud.com.

Suscripción boletín

LO ÚLTIMO