Decoding children's social behavior

QC 20140117
We introduce a new problem domain for activity recognition: the analysis of children's social and communicative behaviors based on video and audio data. We specifically target interactions between children aged 1-2 years and an adult. Such interactions arise naturally in the diagnosis and treatment of developmental disorders such as autism. We introduce a new publicly-available dataset containing over 160 sessions of a 3-5 minute child-adult interaction. In each session, the adult examiner followed a semi-structured play interaction protocol which was designed to elicit a broad range of social behaviors. We identify the key technical challenges in analyzing these behaviors, and describe methods for decoding the interactions. We present experimental results that demonstrate the potential of the dataset to drive interesting research questions, and show preliminary results for multi-modal activity recognition.

NATURVETENSKAP Data- och informationsvetenskap Annan data- och informationsvetenskap hsv//swe
NATURAL SCIENCES Computer and Information Sciences Other Computer and Information Science hsv//eng
Activity recognition
Developmental disorders
Inter-action protocols
Research questions
Semi-structured
Social and communicative behavior
Social behavior
Technical challenges

Abowd, G. D. (författare)
Rozga, A. (författare)
Romero, MarioKTH,High Performance Computing and Visualization (HPCViz)(Swepub:kth)u1doctgn (författare)
Clements, M. A. (författare)
Sclaroff, S. (författare)
Essa, I. (författare)
Ousley, O. Y. (författare)
Li, Y. (författare)
Kim, C. (författare)
Rao, H. (författare)
Kim, J. C. (författare)
Presti, L. L. (författare)
Zhang, J. (författare)
Lantsman, D. (författare)
Bidwell, J. (författare)
Ye, Z. (författare)
KTHHigh Performance Computing and Visualization (HPCViz) (creator_code:org_t)

Ingår i:2013 IEEE Conference on Computer Vision and Pattern Recognition (CVPR): IEEE Computer Society, s. 3414-3421

Av författaren/redakt...: Rehg, J. M.; Abowd, G. D.; Rozga, A.; Romero, Mario; Clements, M. A.; Sclaroff, S.; visa fler...; Essa, I.; Ousley, O. Y.; Li, Y.; Kim, C.; Rao, H.; Kim, J. C.; Presti, L. L.; Zhang, J.; Lantsman, D.; Bidwell, J.; Ye, Z.; visa färre...

Om ämnet

NATURVETENSKAP: NATURVETENSKAP; och Data och informa ...; och Annan data och i ...

Kungliga biblioteket hanterar dina personuppgifter i enlighet med EU:s dataskyddsförordning (2018), GDPR. Läs mer om hur det funkar här.
Så här hanterar KB dina uppgifter vid användning av denna tjänst.