Rui Henriques

FineALLY: Accessing Emotion Patterns from Affective Interactions using Electrodermal Activity

Software:

Emotion recognition combines the traditional feature-based classification with the results provided from sequence learners (hidden Markov models) and is centered on two expressive representations:

SAX to normalize individual differences while still preserving overall response pattern
local angles to enhance the local sub-peaks of a physiological signal response

Emotion characterization is accomplished using both feature-based descriptors and the transition lattices generated by sequence learners.

Publications:

Rui Henriques and Ana Paiva, 2014, Seven principles to mine flexible behavior from physiological signals for effective emotion recognition and description in affective interactions, In IC Physiological Computing Systems (PhyCS’14), Lisbon, Portugal

Rui Henriques, Ana Paiva and Cláudia Antunes, 2012, On the Need of New Methods to Mine Electrodermal Activity in Emotion-centered Studies, DEI IST, In AAMAS’12, 8th IW on Agents and Data Mining Interaction, Springer-Verlag LNAI series, Valência, Spain

Rui Henriques, Ana Paiva and Cláudia Antunes, 2013, Accessing Emotion Patterns from Affective Interactions using Electrodermal Activity, DEI IST, In Affective Computing and Intelligent Interaction (ACII’13), IEEE Computer Society, Geneva, Switzerland

Material:

Script Excerpts:

Script adopted to implement NAO’s behavior (wizard-of-OZ).
Excerpts of the original script (in Portuguese language) disclosing the main paths of interaction and parts related with the selected stimuli.

(X) Olá! [entusiasta] O meu nome é NAO, e serei o agente responsável por te guiar durante esta pequena sessão. [receptivo – braços abertos]
Durante os próximos dez minutos, falaremos um pouco e irei colocar-te algumas questões [pausa].
O objectivo será caracterizar o teu perfil psicológico com base na resposta a estas perguntas! Fica à vontade. [pausa]
Estás preparado para começarmos?
EMPATIA
(Y) Agora, com base na folha que tens à tua frente peço que selecciones os teus 5 hobbies mais valorizados, e que os digas alto para eu guardar esta informação.
(G) Hmmmm… curioso!
(H) Ahah! Como eu!
(I) Hmmm… próximo!
(J) Obrigado!
(Z) A processar… Oh! 4 das 5 preferências são também minhas. Como me identifico com o teu perfil. [Abrir braços]
Hmm… [pensativo] Obrigado, por teres aceite este convite. [Mão no coração]
Tenho a certeza que vais gostar desta sessão… Oh… [pausa] Oxalá possas trabalhar mais vezes comigo no futuro…
PACIENCIA->EXPECTATIVA
(N) Obrigado pela tua colaboração! Estou a processar o teu perfil com base nos questionário que te foi pedido preencher e nas respostas às minhas questões.
A processar… A processar… Aguardo a tua compreensão. A processar…
A processar… [muito tempo]
O teu perfil é ‘Pensador benevolente’. Tens a virtude de pensar, tomar decisões por ti próprio. Mas, ao mesmo tempo, tens facilidade de ligar o pensar e o sentir, de dar e receber.
A ordenação entre os utilizadores com este perfil é… PRIMEIRA.
SURPRESA POSITIVA
Ganhaste uma Nintendo Wii e um cheque para levantares 2 jogos ao teu critério. [tom neutro; pausa; luz nos olhos, braços para cima] Parabéns! [tudo a piscar e música ‘dancing queen’ a tocar!]
STRESS
(O) O próximo desafio consistirá em advinhares qual o seguinte elemento da sequência.
Anota no papel que tens à tua frente os números iniciais da sequência, e quando tiveres a resposta diz audivelmente o número obtido.
1 7 2 15 3 8 9 [pausa]
Lembra-te que para que possas obter o teu bilhete de cinema e a Wii terás que responder correctamente a este desafio em 30 segundos. Boa sorte!
FRUSTACAO
(K) Errado. Resposta não válida.
(L) Errado. Resposta não inserida em tempo válido.
(P) Infelizmente as recompensas foram canceladas. De acordo com o regulamento disponibilizado pelo grupo, a Nintendo Wii e o bilhete-cinema não poderão ser atribuídos.
Obrigado pela colaboração nesta sessão. [neutro, fica sem comportamento]
(Q) Infelizmente as recompensas foram canceladas. Obrigado. [neutro]