WorkRB: 13 munkaerőpiaci feladatot egységesít az új nyílt forráskódú teljesítményteszt
A munkaerőpiaci AI-kutatás eddig rendkívül széttagolt volt, ami megnehezítette a különböző rendszerek összehasonlítását és reprodukálhatóságát.
Megjelent az első nyílt forráskódú, közösségi alapú teljesítményteszt, a WorkRB, amely a munkaerőpiaci mesterséges intelligencia rendszerek értékelésére specializálódott — derül ki az arXiv-on közzétett előnyomtatott tanulmányból.
A modern munkaerőpiac egyre inkább ajánlórendszerekre támaszkodik a toborzás, tehetséggondozás és munkaerő-analitika terén, melyek alapját a természetes nyelvi feldolgozás (NLP) képességek adják. Azonban a kutatás ezen a területen rendkívül fragmentált, mivel a tanulmányok eltérő ontológiákat (ESCO, O*NET, nemzeti taxonómiák), feladatmegfogalmazásokat és modellcsaládokat alkalmaznak, ami megnehezíti a különböző kutatások összehasonlítását és reprodukálhatóságát.
A WorkRB (Work Research teljesítményteszt) célja, hogy egységes keretet biztosítson. A teljesítményteszt 13 különböző feladatot szervez 7 feladatcsoportból, egységes ajánlási és NLP feladatokként. Ezek között szerepel az állás- és készségajánlás, a jelöltajánlás, a hasonló tételek ajánlása, valamint a készségkinyerés és normalizálás.
A munkaerő-piaci adatok érzékenysége eddig korlátozta a nyílt értékelést, és az általános célú teljesítménytesztek sem fedték le a specifikus munkaerőpiaci feladatokat. A WorkRB ezen a hiányosságon igyekszik segíteni, egy közösség által vezérelt keretrendszert kínálva a munkaerőpiaci AI-modellek fejlesztőinek és kutatóinak.