Hermes AV

Hermes-AI pot treballar dins de programes de creació audiovisual: Kdenlive, Krita i ArtCraft, etc... Ho fa amb MCP, un protocol estàndard que permet a un agent d'IA usar eines externes. Cada programa exposa un conjunt d'eines (crear un projecte, afegir un clip, renderitzar...) i Hermes les crida a partir de les instruccions en llenguatge natural.

El model no corre dins del programa. El model el tries tu, des de Hermes. Per a la instal·lació bàsica de Hermes, vegeu la pàgina Hermes.

Les aplicacions provades fins ara

Kdenlive. Edició de vídeo. Fa servir kdenlive-mcp, un servidor propi del medialab. Llegeix i edita projectes de Kdenlive i renderitza amb melt. De moment només afegeix clips al final d'una pista o després del final: no talla, no insereix al mig i no separa l'àudio.
Krita. Pintura digital i il·lustració. Fa servir krita-mcp, un connector de tercers que s'instal·la en un entorn virtual. Krita ha d'estar obert, amb el pont MCP activat.
ArtCraft. Motion graphics i composició (EffectCraft) i fotografia (LightCraft). Els seus servidors MCP s'instal·len amb el llançador d'ArtCraft.

Instal·lació guiada amb un prompt

Cada aplicació té tres prompts en català, un per sistema (GNU/Linux, macOS i Windows). Són a la carpeta templates/ del repositori hermes-av. Copia el del teu sistema en una conversa nova d'Hermes i és Hermes qui fa la instal·lació pas a pas, comprovant cada pas. Els prompts demanen permís abans d'obrir cada programa, i no demanen contrasenyes al xat: si cal sudo, Hermes et dona l'ordre perquè l'executis tu al termina.

Consells de seguretat

Hermes no ha de demanar ni escriure contrasenyes ni claus al xat.
Abans d'editar un projecte de Kdenlive amb Hermes, tanca Kdenlive: el servidor es nega a escriure en un projecte obert.
Cada escriptura de Kdenlive desa una còpia a backups/, dins de la carpeta del projecte.
Abans d'un projecte important, prova primer amb una còpia.

Què es comparteix amb el model

Els fitxers multimèdia no surten de l'ordinador. Sí que hi surten les coses que Hermes llegeix durant la conversa: noms de fitxers, rutes, durades i resultats de les eines. Això va al proveïdor del model que hagis triat.

Com començar

Instal·la Hermes-AI (vegeu Hermes).
Obre el repositori hermes-av i tria l'aplicació que vols fer servir.
Copia el prompt del teu sistema de la carpeta templates/ en una conversa nova d'Hermes.
Segueix la conversa. Hermes et dirà què ha comprovat i què queda pendent.

Limitacions conegudes

Les eines noves només apareixen en una sessió nova d'Hermes.
Krita ha d'estar obert perquè el connector respongui.
Kdenlive no escriu en un projecte obert, i no s'ha provat que obri els projectes que genera el servidor.