SDOF: 32%-kal pontosabb az ügynökirányítás, mint a GPT-4o – állítja az ArXiv
A rendszer a LangChain és LangGraph megoldásokkal ellentétben valós üzleti folyamatokhoz igazodó, állapotfüggő korlátozásokat is képes kezelni.
Új keretrendszert mutat be az ArXiv-en megjelent kutatás, amely SDOF néven a többügynökös rendszerek (például LangChain, LangGraph, CrewAI) útválasztási problémáira kínál megoldást — írja a tanulmány. A jelenlegi rendszerek gyakran nem érvényesítik a valós üzleti folyamatokra jellemző, szakaszfüggő korlátozásokat, ami hibákhoz vezethet.
A SDOF két fő védelmi rétegen keresztül működik, három komponensre építve. Az egyik az Online-RLHF Specialized Intent Router, amelyet Generative Reward Modeling (GRPO) segítségével képeztek. A másik a StateAwareDispatcher, amely GoalStage véges-automata ellenőrzéseket és előfeltétel/utófeltétel SkillRegistry validációt alkalmaz az ellenőrizhető végrehajtás érdekében.
Az innováció fonalán
A kutatók egy toborzási rendszeren tesztelték a SDOF-et, amely a Beisen iTalent platformon fut, és több mint 6000 vállalatot szolgál ki. 185 szakértő által összeállított forgatókönyv során 1671 élő API-hívást indítottak. Az eredmények szerint a GSPO-alapú 7B Intent Router 80,9%-os pontosságot ért el a FSM-korlátozott, ellenőrzött útválasztási teljesítményteszten, míg a zero-shot GPT-4o mindössze 48,9%-ot.
A pontosság határai
Ez azt jelenti, hogy a SDOF 32%-kal pontosabb útválasztást biztosít, mint a GPT-4o, a Beisen iTalent platformon 2024. márciusig tesztelik a rendszert.