A hangsúlyfeldolgozás akusztikai, kognitív és agyi háttere
Angol cím
Acoustical, cognitive and neural basis of stress processing
magyar kulcsszavak
beszédfeldolgozás, prozódia, szóhangsúly, eseményhez kötött agyi potenciálok, akusztika
angol kulcsszavak
speech processing, prosody, word stress, event-related brain potentials, acoustics
megadott besorolás
Pszichológia (Bölcsészet- és Társadalomtudományok Kollégiuma)
50 %
Ortelius tudományág: Kísérleti pszichológia
Kognitív idegtudományok (pl. tanulás, memória, érzelmek, beszéd) (Orvosi és Biológiai Tudományok Kollégiuma)
30 %
Nyelvtudomány (Bölcsészet- és Társadalomtudományok Kollégiuma)
20 %
Ortelius tudományág: Pszicholingvisztika
zsűri
Pszichológia – Nevelés
Kutatóhely
Agyi Képalkotó Központ (HUN-REN Természettudományi Kutatóközpont)
projekt kezdete
2011-01-01
projekt vége
2014-12-31
aktuális összeg (MFt)
8.483
FTE (kutatóév egyenérték)
2.80
állapot
lezárult projekt
magyar összefoglaló
A beszéd prozódiai jellemzőinek feldolgozása a pszicholingvisztika kevéssé kutatott témái közé tartozik. A prozódiai jellemzők közül a hangsúly különösen érdekes a pszichológia számára, mivel ahogy Fónagy Iván fogalmaz: a hangsúly „lélektani kategória : a hangsúlyélmény tehát nem a hallószervben, hanem a központi idegrendszerben alakul ki a hangjelenség alapos, de gyors és öntudatlan elemzése nyomán." (Fónagy, 1958, 23.o.).
Jelen kutatás három témára koncentrál a hangsúllyal kapcsolatban. Az első a hangsúllyal kapcsolatos akusztikai jellemzőket érinti, és célja, hogy egy produkciós vizsgálatban megállapítsuk, hogy mely akusztikai jellemzők - intenzitás, alapfrekvencia és specifikusan az eddig a hangsúllyal kapcsolatban alig vizsgált amplitúdó moduláció - járnak együtt leginkább a hangsúllyal.
A kutatás második témája a hangsúlyfeldolgozás neurokognitív hátterének vizsgálata az eseményhez kötött agyi potenciálok (EKP) módszerével. A kísérlet során azt a korábbi vizsgálatainkban felállított hipotézist vizsgáljuk tovább, hogy a hangsúly feldolgozását absztrakt hangsúly template-ek segítik, amelyek a hangsúlymintázat sértése során a változásdetekció alapjául szolgálnak.
A harmadik kutatási téma a hangsúllyal kapcsolatos akusztikai jellemzők szerepe a hangsúly detekciójában. Egy EKP kísérletben azt vizsgáljuk, hogy a rendelkezésre álló akusztikai jellemzők közül melyek azok, amelyek a leginkább fontosak a hangsúlyélmény létrejöttében.
angol összefoglaló
The processing of prosodic features of speech is a scarcely studied topic of psycholinguistics. Among the prosodic features stress is especially interesting for psychology, because as pointed out by Iván Fónagy: stress is a “psychological category: the experience of stress is formed not in the auditory organ, but in the central nervous system, as a result of a thorough albeit fast and unconscious analysis of the sound.” (Fónagy, 1958, p.23.)
The present project focuses on three topics related to stress. The first topic concerns the acoustical features of stress, with the aim of determining which acoustical features - intensity, fundamental frequency, and specifically the amplitude modulation rarely studied in relation with stress - correlate better with the stress.
The second topic of the project is the study of the neurocognitive basis of stress processing using the method of event-related brain potentials (ERPs). The aim of the experiment is to further investigate the hypothesis suggested in our previous studies, which assumes that the processing of stress is aided by abstract stress templates, forming the basis of change detection when the stress pattern is violated.
The third topic is the role of acoustical features in the detection of stress. In an ERP study we investigate which of the available acoustical cues are more important in the experience of stress.
Zárójelentés
kutatási eredmények (magyarul)
A kutatási projekt a szóhangsúly észlelésének pszicholingvisztikai és kognitív idegtudományi vizsgálatát tűzte ki célul. Mivel a hangsúly fontos szerepet játszik a beszédfolyam szavakra történő tagolásában, ezért annak feltárása, hogy a nyelvi rendszer hogyan dolgozza fel és reprezentálja a hangsúlyt, segíthet annak megértésében, hogy hogyan zajlik a szavak hallás útján történő megértése.
A kutatás eredményei szerint a magyar anyanyelvű hallgatók a hangsúlyban bekövetkező akusztikai változásokat torzítottan észlelik. A hangsúlymintázattal kapcsolatos elvárásaik miatt hajlamosabbak a hangsúlyt a szavak első szótagján detektálni a második helyett, annak ellenére, hogy a fizikai jellemzők a második szótagon indikálják azt.
Az agyi elektromos válaszok vizsgálata arra utal, hogy a hangsúlymintázat változásának detektálását befolyásolja, hogy a szó rendelkezik-e jelentéssel, vagy sem. Továbbá kimutatható, hogy a hangsúllyal kapcsolatos akusztikai információk beszéd környezetben kifejezettebb agyi válaszokat váltanak ki, mint nem-beszéd környezetben. A vizsgált akusztikai jellemzők közül az alapfrekvencia az, amely a legnagyobb változásdetekcióhoz kapcsolódó agyi választ váltja ki, ezért feltétezhetően ez az a jellemző, amely leginkább hozzájárul a hangsúly észleléséhez.
kutatási eredmények (angolul)
The research project aimed to investigate the psycholinguistic and cognitive neuroscientific background of word stress perception. Since stress plays an important role in segmenting the speech stream into words, studying how the linguistic system processes and represents stress can help in understanding how words are perceived in the auditory modality.
According to the results of the research, Hungarian listeners perceive acoustical changes occurring in stress in a biased way. Because of their expectations about stress patterns, they are more likely to detect stress on the first syllable of words instead of the second, despite the physical features indicating stress on the second syllable.
The investigation of brain electrical responses suggests that whether a word is meaningful or meaningless influences the detection of stress pattern changes. Moreover, it can be demonstrated that stress related acoustical information elicits more pronounced brain responses in speech as compared to non-speech context. Among the acoustical features investigated, it is the fundamental frequency that elicits the largest change detection related brain responses, therefore this feature is the one that contributes mostly to the perception of stress.
Honbolygó Ferenc, Csépe Valéria: ERP evidence for pre-lexical processing of word stress information., Proceedings of the 1st Conference of the European Society for Cognitive and Affective Neuroscience. Marseille. p. 65., 2012
Honbolygó Ferenc, Csépe Valéria: Akusztikai jellemzők szerepe a szóhangsúly feldolgozásában: viselkedéses és elektrofiziológiai eredmények, Vargha András (szerk.) A tudomány emberi arca: A Magyar Pszichológiai Társaság XXI. Országos Tudományos Nagygyűlése : Kivonatkötet. pp. 162-163., 2012
Kolozsvári Orsolya Beatrix: A szóhangsúly feldolgozásának kognitív háttere, Szakdolgozat. ELTE-PPK., 2012
Honbolygó Ferenc, Csépe Valéria: Influence of lexical and prosodic information on the pre-attentive processing of word stress, Abstract book of the Second International Conference on Cognitive Hearing Science for Communication. pp. 213, 2013
Honbolygó Ferenc, Kolozsvári Orsolya: A hangsúly észlelésének akusztikai meghatározói, Beszédkutatás, 2015
Ragó A, Honbolygó F, Róna Zs, Beke A, Csépe V: Effect of maturation on suprasegmental speech processing in full- and preterm infants: A mismatch negativity study, RES DEV DISABIL 35: (1) 192-202, 2014
Honbolygó F, Csépe V: Saliency or template?, INT J PSYCHOPHYSIOL 87: 165-172, 2013
A kutatás helye megváltozott. Korábbi kutatóhely: Kognitív Idegtudományi és Pszichológiai Intézet (MTA Természettudományi Kutatóközpont), Új kutatóhely: Agyi Képalkotó Központ (MTA Természettudományi Kutatóközpont).
