#agentharnesses — Public Fediverse posts on home.social

RT @witcheer: Hermes hat Kimi K3 schneller abgearbeitet als Kimis eigene Harness. Composio hat K3 auf 28 identischen Aufgaben durch drei Agent-Harnesses getestet. - Medianzeit pro Aufgabe: 179s in Hermes, 297s in Kimi Code, 348s in Claude Code. - Die Geschwindigkeit kostet Sie auch nichts an Tokens: 67k Median in Hermes, direkt neben Kimi Codes 61k, wobei Claude Code bei 340k liegt. - Gleiche Erfolgsrate innerhalb einer Aufgabe, durchschnittlich $0,28 pro Aufgabe. Deshalb wird es Hermes genannt 🪽 Composio (@composio) Wir haben Kimi K3 durch 3 Agent-Harnesses (Claude Code, Hermes, Kimi Code) auf 28 identischen Aufgaben getestet. Alle 3 Harnesses haben die Aufgaben mit ähnlichen Erfolgsquoten abgeschlossen, aber die interessante Geschichte ist die Token-Effizienz: dieselbe Aufgabe kostete je nach Harness bis zu 30x mehr Tokens. 🧵🧵 — https://nitter.net/composio/status/2082452269522378858#m