Minnesanteckningar Närvarande: Ingela Byström, Germund Hesslow, Jana Holsanova, Roger Johansson, Victoria Johansson, Magnus Lindgren, Eva Sjöstrand

Transkript

1 Thinking in Time Cognition, Communication and Learning (CCL) - a multidisciplinary research environment at Lund University Styrgruppsmöte CCL 20 november 2012 Minnesanteckningar Närvarande: Ingela Byström, Germund Hesslow, Jana Holsanova, Roger Johansson, Victoria Johansson, Magnus Lindgren, Eva Sjöstrand Bilagor inkluderas i detta dokument: Bilaga 1. Nya projektbeskrivningar för utlysning av post docs Bilaga 2. Förslag Inbjudan till CCL konferens 7 mars 2012 Bilaga 3. Ansökningsmöjlighet ERC Synergy information Bilaga 4. CCL Planeringsöversikt HT2012/VT2013 uppdaterat För beslut: 1. Rasmus Bååth förfrågan finansiering av 20% tjänst institutionstjänstgöring Rasmus Bååth har inkommit med förfrågan om CCL kan finansiera 20 % institutionstjänstgöring fr o m årsskiftet mot bakgrund av att han arbetar med flera CCLrelaterade projekt utöver sin forskning som doktorand i CCL. Rasmus arbetar med: Dataanalys och experimentdesign i blinkbetingningsprojektet tillsammans med Karolina Dataanalys m.m. i Selmaprojektet tillsammans med Kristina, Birgitta och Sverker. "Backenden" till CCLs nya hemsida tillsammans med Eva. Beslut: Styrgruppen beviljar denna förfrågan. Rasmus får ett nytt förordnande som gäller fr o m t o m För information/diskussion: 1. Nya projektbeskrivningar inför kommande rekrytering av Post docs och doktorand Fortsatt diskussion samt handlingsplan för rekryteringsprocessen: Vid vilken fakultet ska respektive Post doc-tjänst förläggas? Temporal coordination in crossmodal comprehension Föreslås förläggas till Med fak, Inst för klin vet Temporal coordination in crossmodal production Föreslås förläggas till HT, Humlab Semantics of words and brain activities Föreslås förläggas till S, Psykologiska institutionen The role of eye movements during memory encoding and retrieval Föreslås förläggas till S, Psykologiska institutionen

2 Vem förankrar på respektive institution och vem sköter praktiskt utlysningen? Magnus håller på att förankra projektet Semantics of words and brain activities på Psykologiska institutionen och åtar sig att också förankra The role of eye movements during memory encoding and retrieval där. Förslagsvis förankrar Birgitta på Institutionen för kliniska vetenskaper och Marianne på Humlab och med HT. Jana påpekar i sammanhanget att det är bra om Birgitta återkopplar och förankrar delar av projektinslagen med Kenneth Holmqvist. Vilka förslag finns kvar efter att post-doc tjänsterna har definierats? Styrgruppen resonerar kring huruvida det finns anledning att utlysa doktorandtjänst och kommer fram till att det inte känns angeläget. Doktorander har under denna första halvan av anslagsperioden rekryterats i två omgångar. Det strategiska upplägget speglar framöver en fördjupning av för CCL centrala forskningsområden som i sin tur kan generera nya ansökningar i framtiden för nya doktorander. 2. CCL konferens 7 mars 2013 Tänka, språka och lära i tid Utkastet (se bilaga 2) diskuteras och styrgruppen enas om följande: Lägg till inledande mening om CCL Styrgruppen enig om att annan rubrik för Debatt i Lund efter konferensen är önskvärd Reglera storlek och typsnitt, färgkoda nyckelord Germund föreslår att de inbjudningar som ska gå till familjen Rausing mfl ska åtföljas av ett personligt ställt följebrev som påtalar att de inbjuds eftersom de tidigare visat intresse för denna typ av forskning. 3. Suzanne Purdy, Head, Discipline of Speech Science, The University of Auckland Birgitta har informerat om att Suzanne Purdy gästar Avdelningen för logopedi, foniatri och audiologi i samband med en internationell kurs. Hon kan förhoppningsvis ge några föreläsningar antingen gemensamma eller separata för CCL. S Purdy; Research interests: Electrophysiological assessment of auditory function in infants and children, objective assessment of hearing aid performance, auditory processing disorders and reading delay, aural rehabilitation in hearing impaired adults, speech perception in children. Styrgruppen uppskattar att Suzanne Purdy gästar universitet och välkomnar möjligheten att CCL eventuellt kan få ta del av hennes forskning genom en eller flera föreläsningar.

3 4. Söka externa anslag - ERC Synergy - Research Funding News, To subscribe to this newsletter, please contact Sophie.Hyden_Picasso@fs.lu.se Ingela informerar om ERC Synergy som till skillnad från ERC Starting Grant och ERC Advanced Grant vänder sig till grupper av forskare (minst två och max fyra PI s) som har möjlighet att finansieras med upp till 15 miljoner euro i upp till sex år. Anslagsformen lämpar sig särskilt väl för CCL som redan har flera upparbetade samarbeten över disciplingränserna. Deadline för pågående utlysning är den 13 juni För mer information, se bilaga 3. Roger och Jana informerar om att de har uppmärksammat detta och funderar kring en ansökan. Beslutas att Ingela ska återkomma med ytterligare uppgifter om hur mycket arbete det är med ansökan är det realistiskt att söka redan inom pågående utlysningsomgång? I annat fall klokt att påbörja tankarna inför nästa års ansökningsomgång redan nu. Övrigt 1. Hur engagera yngre forskare i CCLs ledning? Diskussion att ta upp när alla ledamöter kan delta kanske en kväll i december? Diskussionspunkter: Definition av yngre forskare Styrgruppens funktion Förnya styrgruppen? Nackdelar med för många ledamöter? Eva kontaktar Peter för att efterhöra lämplig tidpunkt 2. Uppföljning Personalplan Alla berörda informerade? Germund bekräftar att så är fallet 3. Kommunikationsplan Inga synpunkter har inkommit på reviderad version. Germund och Ingela går igenom några kvarvarande frågetecken och dokumentet finns tillgängligt i Dropbox. 4. Rapporteringsformatet till halvtidsrapportering till VR Germund efterfrågar underlag och mall för hur rapporteringen ska göras, så att vi kan påbörja vissa avsnitt inom kort. Ingela tar fram detta.

4 Bilaga 1. Nya projektbeskrivningar för utlysning av post docs 12 december 2012 Sammanställning _- nya projektbeskrivningar baserat på inkomna doktorandprojektförslag 1. Temporal coordination in crossmodal comprehension 2. Temporal coordination in crossmodal production 3. Semantics of words and brain activities 4. The role of eye movements during memory encoding and retrieval 1. Temporal coordination in crossmodal comprehension Birgitta Sahlén och Marianne Gullberg The environment in today's class-room represents challenges for typically developing children with normal hearing, but even more so for children with atypical language development. Pedagogical and technical development do not always go hand-in-hand. A deeper understanding of children s multimodal comprehension in interactive learning environments and noisy sound environments will enhance the possibilities for individual children to participate, feel included and motivated to learn in school settings. A class of 25 students with one laptop each means that 25 fans add to the noise burden. Furthermore, each laptop is a heating source causing the ventilation system to work harder to achieve comfort temperature, which also adds to the noise burden. The consequence is distortion of the communication between the teacher and the students, with increased demands on the pupils hearing and cognitive capacity and the teacher s voice. The post-doc project will explore how speakers voice and gestures influence children s comprehension and learning in different sound environments and how these factors interact with the child s cognitive capacity. Research within the CCL environment clearly indicates that childrens language comprehension is influenced, not only by the complexity of the verbal content per se, but also by teachers speaking rate and voice quality. A virtual embodied teacher-character that speaks and moves, is currently being developed. It will allow us to systematically and experimentally vary voice quality and use of gestures, to study the effect of each factor and their combined effects on comprehension, which is not possible in naturalistic settings. Further, the virtual class-room in the Humanities Laboratory offers new possibilities? to study childern s comprehension and gaze beahaviour while listening. Background in Linguistics, Speech Pathology, Audiology or Cognitive Science.

5 Bilaga 1. Forts Study design Virtual teacher in digital class-room with Normal voice- normal gesturing Without reverb/noise Hoarse voice- normal gesturing With reverb/noise Normal voice- ample gesturing Hoarse voice- ample gesturing Student w computer Comprehension: TROG- 2 and Narrative Tests:WM and Gaze beh.

6 Bilaga 1. Forts 2. Temporal coordination in crossmodal production Marianne Gullberg This project aims to investigate the fine-grained temporal coordination between speech, manual gestures and gaze in language production in order to improve our understanding of how crossmodal information coordination is achieved, how it develops, and, ultimately, its role in face-to-face interaction. Although many disciplines assume that expressive modalities are aligned, the exact temporal nature and alignment of many production phenomena remains unknown. This is all the more surprising given its theoretical importance to models of (adult) language production as well as to models of developing production systems in typical developing (children, adult second language learners) and atypical populations. This project aims to develop a paradigm for studying crossmodal temporal coordination under more rigorous conditions than has hitherto been done by combining motion capture, articulography, and VR-modeling with traditional audio- and video analysis. The project will focus on the comparative analysis of the timing of articulatory movements of the speech apparatus, of prosodic markers, and hand gestures. Pertinent questions include: What is the temporal relationship between acoustic and articulatory speech gestures and hand gestures? How do functional prosodic cues modulate the relationship? Is the relationship the same in children and adults, in native and non-native speakers, in hearing speakers and speakers with hearing deficits? If not, what is the nature of the misalignment and what are the consequences for existing models of speech-gesture production, of articulatory phonetics, of crossmodal language production, and models of language evolution? We intend to address these questions using combinations of motion capture and articulography, VR-modelling and regular video-based analysis. Research facilities, equipment and experience with the relevant techniques are present at Lund University Humanities Lab. The successful candidate will have (1) a background in (psycho-)linguistics, psychology, or cognitive science with experience of multimodal analyses, (2) good skills in quantitative analysis methods including multi-level modeling, and (3) computational skills such as programming or 3D-modelling. Neither gaze nor included at this point, writing although technically possible as additions to the production battery.

7 Bilaga 1. Forts 3. Semantics of words and brain activities Magnus Lindgren, Peter Gärdenfors, Sverker Sikström This project will study the relationship between semantic representation of words and brain activity, using quantitative semantic methods and neuroimaging techniques and EEG/fMRI. A major goal of the project is to identify the relation between the brain activity and different kinds of semantic representation. This relation can be studied in two ways; (1) By looking at whether the semantic representation is a predictor for localization of brain activity (fmri) or a predictor for time locked response to stimulus (e.g. ERPs, time-frequency related changes). (2) By studying whether brain activity is a predictor of the semantic representations. The semantic representation can also be used to predict the ease-of-learning of verbal material, where the predicted value can be related to brain activity. Quantitative semantic is a method that allows to generates a high dimensional semantic representation of words. Of particular, though not exclusive interest is the processing of verbs. This is a central topic in neurolinguistics. We have previously shown that verbs for actions (manner verbs) and verbs for consequences (result verbs) show distinct neural patterns in the brain. We would therefore like to extend these results. The studies that exist have rather weak grounding in semantic theory. Our two-vector model of events generates a rich class of predictions concerning the semantics of verbs. These predictions can be used to generate a multitude of neurolinguistic experiments. Result verbs activate extended networks that might be related to additional syntactic, sensory, and executive processing compared to manner verbs. We wish to further elucidate the differences between these verb classes. Outstanding questions: - Can quantitative semantics be used to map out the semantic representation in the brain? - What is the time course of semantic representation in the brain? - Can quantitative semantics be combined with fmri/eeg methods to predict what people are thinking of? - Can finer divisions in the manner-result verb distinction be detected by differences in brain activity? For example, do verbs involving intentions activate different brain regions than verbs that are not intentional? - Does understanding of result verbs call for more cognitive control? If so, does this depend on more effortful retrieval of relevant material? - Temporal factors, is the fine-grained understanding of more complex result verbs slower than manner verbs? We intend to address these questions using EEG-based techniques, as well as further fmri studies. A suitable candidate should have (1) a background in psychology, neurolinguistics or cognitive science, (2) a documented interest in EEG/fMRI techniques and (3) good skills in quantitative or computational methods.

8 4. The role of eye movements during memory encoding and retrieval Roger Johansson, Mikael Johansson Bilaga 1. Forts The purpose of this project is to investigate the role of eye movements during memory encoding and retrieval and to develop an experimental paradigm where eye-tracking is combined with electrophysiological measures of brain activity (EEG/ERP) to elucidate this question. The project will focus on how and when the oculomotor system is engaged during memory formation and retrieval, and how eye-movements may influence memory and mnemonic control mechanisms. While past research suggests that eye-movements may mirror retrieval from memory, it is a hotly debated question if eye-movements also play a causal role in memory retrieval (Ferreira et al., 2008, Richardson et al., 2009). In a recent study (Johansson & Johansson, in preparation), we have shown that eye movements during memory retrieval indeed play a functional role in modulating episodic memory performance. However, the neurocognitive basis of these processes and their interaction remain to be specified. For example, can eye movements enhance the overlap between retrieval cues and stored memory traces, assist in selecting target memories at the expense of competing memories, and be used as a behavioral correlate of memory even if overt reports are withheld or incorrect? The project bridges two fundamental CCL-themes, internal simulation and language/memory systems, with the goal to improve current understanding of the role of eye movements in memory. A key aspect of achieving this goal is to establish a reliable method of combining eye tracking and EEG/ERP measures of brain activity, two indices of information processing characterized by high temporal resolution. Research facilities, equipment and experience with these techniques are present at the Lund Humanities Lab.

9 Bilaga 2. Förslag Inbjudan till CCL konferens 7 mars 2012 Thinking in Time Cognition, Communication and Learning (CCL) - en Linnémiljö med gränsöverskridande forskning vid Lunds universitet Inbjuder till en dag om att Tänka, språka och lära i tid Den 7 mars 2013 kl till På Pufendorfinstitutet i Lund Dagen kommer att bjuda på presentationer om blickens roll i samtal, om gesters betydelse när vi talar, om läppläsning och läpprörelsemätningar, hur barn begriper vad orden betyder, pedagogiska vinster med digitala lärspel, betydelsen av lärarens röst för inlärning, om lärteknologi-forskning med mera. Presentationerna kommer att varvas med mingellunch och kaffepaus i foajén där en utställning med posters, demonstration av ögonrörelse-mätningar och robotar med mera presenteras i de magnifika lokalerna på Pufendorfinstitutet i Lund. Dagen avslutas med ett panelsamtal om lärande mellan forskare från miljön och andra experter på området. Välkommen! Anmälan: eva.sjöstrand@fil.lu.se Deltagarna inbjuds varmt att efter konferensen delta i ett anslutande evenemang: Debatt i Lund Är livets skola bättre? (tänkbar rubriksättning)be Peter komma med förslag Lokal: Café Aten i AF-borgen, Lundagård, Lund Tid: (preliminärt) Ett arrangemang i samverkan mellan Linnémiljön Thinking in Time Cognition, Communication and Learning och Kommunikationsavdelningen vid Lunds universitet Läs mer om Linnémiljön CCL på nästa sida

10 Bilaga 2. Forts Om Linnémiljön CCL Forskningen inom Linnémiljön CCL handlar om samspelet mellan kognition (tänkande), kommunikation och lärande. Moderna tekniker för att avbilda hjärnan har gett mycket kunskap om var olika processer äger rum, men vi vet förhållandevis lite om tidsförloppen för processerna. Vi har exempelvis mycket begränsad kunskap om de snabba processer som verkar när man förstår talat språk under en dialog. Forskningen fokuserar på tidsaspekterna eftersom de kan ge värdefull kunskap om olika orsakssamband. Tidsförloppen kan studeras på olika nivåer av hjärnprocesser och beteenden och det långsiktiga målet är knyta samman de olika nivåerna. Följande delområden studeras inom forskningsmiljön: Hur människor, särskilt barn, lär sig begrepp och att förstå orden i ett språk även hur en individs begrepp ändrar sin betydelse över tiden. Hur den språkliga strukturen och den kulturella omgivningen påverkar inlärning och uppmärksamhet och hur detta visar sig när man skall uttrycka sig muntligt eller skriftligt. Hur förmågan att sätta sig in i andras tankar och känslor, exempelvis under ett samtal, påverkar kommunikation och lärande. Hur olika former av handikapp och språkstörningar påverkar kommunikationens tidsförlopp, exempelvis i dialoger och hur detta kan knytas till minnesförmåga. Hur tidsförloppet i hjärnans neuroner ser ut under olika former av inlärning. Hur hjärnans förmåga att föreställa sig handlingar och yttranden innan de utföres påverkar förmågan att planera och kommunicera. Forskningen finansieras av Vetenskapsrådets Linnéstöd och CCL är en av Lunds universitets 14 Linnémiljöer. CCL sysselsätter 40 forskare, post docs och doktorander inom kognitionsvetenskap, psykologi, lingvistik, logopedi och neurofysiologi.

11 Bilaga 3. Ansökningsmöjlighet ERC Synergy information FRÅN VR:s hemsida: NOTIS, Ny utlysning av ERC Synergy Grant öppen ERC:s andra utlysning av "Synergy Grant" är nu öppen (ERC-2013-SyG). Utlysningen riktar sig till små grupper av excellenta forskare, som vill samarbeta för att gemensamt lösa forskningsproblem. Grupper av 2-4 forskare kommer att finansieras med upp till 15 miljoner euro i upp till sex år. Den totala budgeten för Synergy Grant är 150 miljoner euro vilket innebär att samarbetsprojekt kommer att finansieras. Detta är den enda av ERC:s bidragsformer som riktar sig mot grupper av forskare. Övriga bidragsformer, Starting, Consolidator och Advanced Grants, riktar sig mot enskilda forskare. Sista ansökningsdag är 10 januari Från ERC:s hemsida: ERC Synergy Grants in brief Research proposal: pioneering frontier research in any field of science, engineering or scholarship Groups applying for the ERC Synergy Grant must be made up of a minimum of two and a maximum of four Principal Investigators (PIs) and, as necessary, their teams One of the PIs acts as the 'Corresponding PI' with the ERCEA on behalf of the group No specific eligibility criteria are foreseen for PIs applying for the ERC Synergy Grants, but only exceptional proposals are likely to be funded in what are expected to be extremely competitive calls It is expected that in most cases ERC Synergy Groups will be interdisciplinary, often using multidisciplinary approaches. However this is not a requirement and colleagues from the same or similar disciplines bringing together complementary approaches, expertise and resources can apply Similarly Synergy Groups are not required to be co-located but the PIs in the group will have to demonstrate their commitment to the group project including willingness to spend significant 'core time' together at the same physical location The Host Institution that engages the Corresponding Principal Investigator for the duration of the grant should be a legally recognised public or private research organisation situated in one of the EU Member States or Associated Countries Funding: up to a maximum of 15 million for a period up to 6 years (pro rata for projects of shorter duration) Calls for proposals: published annually with one deadline Länk Call for proposal:

12 Bilaga 4. CCL Planeringsöversikt HT2012/VT2013 uppdaterat Thinking in Time - Cognition, Communication and Learning PLANERING, HT 2012 Datum Styrgruppsmöten (gult)/ Övrigt (lila) Lokal Lokal Övrigt Sem 14 augusti augusti augusti 2012? Planering doktorandrekrytering och personalplanering augusti september 2012 Höstterminens första styrgruppsmöte?? Höstterminens första seminarietillfälle 11 september 2012 Mötet inställt 18 september 2012 Stormöte CCL med information om styrgruppens arbete mm 25 september september 2012 Besök från Linnécentrum HEAD, LiU för forskning om hörsel och dövhet. 27 september 2012 Besök från Linnécentrum HEAD, LiU för forskning om hörsel och dövhet. 2 oktober oktober 2012 After Work på Grand kl oktober 2012 Planering tillsättning av nya CCL Forskartjänster 23 oktober oktober november 2012 Koordinatorsträff hos Sven Strömqvist, inför halvtidsutvärderingen november 2012 Uppföljning förslag nya forskartjänster H140 H november 2012 L123 L123 After Work på Gloria's kl november 2012 L123 L123 4 december 2012 H140 H december 2012 H140 H december 2012 H140 H december 2012 Thinking in Time - Cognition, Communication and Learning PLANERING, VT 2013 Datum Styrgruppsmöten (gult)/ Övrigt (lila) Lokal Lokal Övrigt Sem den 8 januari 2013 H339 H339 den 15 januari 2013 H140 H140 den 22 januari 2013 den 29 januari 2013 den 5 februari 2013 den 12 februari 2013 den 19 februari 2013 den 26 februari 2013 den 5 mars 2013 den 7 mars 2013 CCL Konferens Cognition, Communication and Learning - på Pufendorf den 12 mars 2013 den 19 mars 2013 den 26 mars 2013 den 2 april 2013 den 9 april 2013 den 16 april 2013 den 17 april 2013 CCL Internat 2013 den 18 april 2013 CCL Internat 2013 den 23 april 2012 den 30 april 2013 den 7 maj 2013 den 14 maj 2013 den 21 maj 2013 den 28 maj 2013 den 4 juni 2013 den 11 juni 2013 den 18 juni 2013