Neuer GUI-Agent löst komplexe Aufgaben dank Experten‑Demonstrationen
Ein brandneuer Ansatz aus dem arXiv‑Repository präsentiert den Instruction Agent, einen grafischen Benutzeroberflächen‑Agenten, der mit Hilfe von Experten‑Demonstrationen selbst anspruchsvolle Aufgaben bewältigt. Durch die Analyse einer einzigen Demo extrahiert der Agent Schritt‑für‑Schritt‑Anweisungen und folgt strikt der vom Nutzer vorgesehenen Trajektorie, wodurch Fehler während der Ausführung vermieden werden.