Adatvédő módon ismerik fel a csoportok érzelmeit a kutatók
Kutatók két új keretrendszert mutattak be, amelyek kollektív audio-video jelek felhasználásával ismerik fel a csoportok érzelmi állapotát, csökkentve az egyéni megfigyelés kockázatát. A módszer a csoportos érzelemfelismerés területén új megközelítést jelent.
A kutatók által kidolgozott módszer a csoportos érzelemfelismerés területén új lehetőségeket nyit meg, mivel képes a csoportok érzelmi állapotát felismerni anélkül, hogy az egyéni jellemzőket elemeznék.
Kollektív adatok felhasználása
Az első keretrendszer egy kereszt-figyelmes (cross-attention) multimodális architektúrát használ az audio-video fúzióhoz, kiegészítve a Frames Attention Pooling (FAP) technikával az időbeli összesítéshez. Ezt szintetikus adatbővítéssel támasztják alá, és valós körülmények között végzett tesztek igazolják robusztusságát.
Kapcsolódó: érzelmi ív elemzés
Érzelmi állapot meghatározása
A második keretrendszer, a Variational Encoder Multi-Decoder (VE-MD), egy megosztott latens teret tanul az érzelem-besoroláshoz és a strukturális reprezentáció előrejelzéséhez, beleértve a test- és arckifejezéseket is. Két dekódolási stratégia, a DETR-alapú és a hőtérkép-alapú elemzi a strukturális reprezentációk szerepét csoportos és egyéni beállításokban.
Kapcsolódó: multimodális érzelemfelismerés
A kutatás eredményei azt mutatják, hogy a csoportos érzelmek felismerése lehetséges anélkül, hogy az egyes személyek adatait elemeznék, ami jelentős előrelépés az adatvédelem szempontjából. A VE-MD keretrendszer különösen ígéretesnek tűnik, mivel képes a strukturális információkat is figyelembe venni az érzelmi állapot meghatározásakor.
Kapcsolódó: viselkedéselemzés workshop
A tanulmányt az arXiv 2606.07585v1 azonosítóval tette közzé, ami az arXiv online archívumban elérhető 2026-ban.
Kapcsolódó: csoportos dinamika modellezés