Ljudinteraktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper

Storlek: px

Starta visningen från sidan:

Download "Ljudinteraktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper"

Sebastian Lund
för 5 år sedan
Visningar:

1 Ljudinteraktion

2 Innehåll och mål Om ljudinteraktion Lite om virtuellt 3D-ljud Tips och trix Mål: att ni ska få verktyg att resonera om ljudinteraktion, samt få lite exempel

3 Vad är ljud? Ljud är kombinationen mellan vågrörelserna i mediet (luft) som utgör ljudtryckvågen och det som örat uppfattar.

Snäckan och basilarmembranet http://www.

4 Snäckan och basilarmembranet

6 Loudness - frekvensberoende

7 Ljudikoner (auditory icons) Ljud som ska föreställa någonting i appen Jfr traditionella visuella ikoner ( t ex papperskorgen i Windows) Om de väljs på rätt sätt kan de underlätta förståelsen

8 Lyssningstest

9 Exempel på ljudanvändning Informera om genomförda eller möjliga interaktioner Indikera pågående processer eller moder Hjälpa till vid navigation

10 Designrymd Funktioner: Vad ska ljudikonerna användas till i appen? Mappning: Hur ska de mappas till händelserna i appen? Vokabulär: Vilka ljud ska användas? Irritation: Hur använda ljud utan att irritera användarna?

11 Olika typer av ljudikoner Ikoniska eller direktmappande Metaforer Ljud-effekter

12 Direktmappande Ljud som tydligt är kopplade till hur fysiska föremål låter T ex ett hasande ljud när ett fönster flyttas på en skärm

13 Metaforiska Hur låter t ex en fil som kopieras? När det är svårt att hitta ett direktmappat ljud, men det finns något sätt att göra en ljudmetafor

14 Ljud-effekter Nydesignade ljud Jfr lasersvärd =)

15 Listening test II A. Drawing application, paste B. Drawing application, resize object C. Drawing program, erase D. Battery is running out (mobile phone) E. Drawing application, copy F. Computer startup (Mac) C 2 A 4 D 6 E 1 F 3 B 5

16 Parametriska ljudikoner Ljudikoner som varierar någon dimension för att Ge en mer dynamisk upplevelse av ljudgränssnittet Gör det möjligt att förmedla små variationer, t ex starkare ljud för större objekt

17 Earcons Earcons inte föreställande, ofta musikaliska Svårare att lära sig Lättare att göra en enhetlig ljudbild Lättare att variera Möjliga att generera automatiskt

18 Sonifiering Att medvetet ljudsätta Data Gränssnitt Exempel En matematisk kurva kan modelleras för att kunna upplevas utan att se den Geigermätare

19 Driftsljud

20 Signalljud

21 Signalljud Använd signalljud där det är nödvändigt Ljudet ska matcha funktionen med avseende på intensitet och frekvens Gradera olika ljudsignaler efter deras betydelse Bygg in en meningsfull ljudbild där detta passar sig Var uppmärksam på att signalen, oavsett vad den betyder, inte i sig själv ska vara så skrämmande att användaren blir handlingsförlamad

22 Återkopplingsljud

23 Talat ljud Inspelat tal Informationstätt Svårt att göra dynamiskt Syntetiserat tal

24 TTS Text-to-speech Två steg: 1. Konvertera text till fonem, identifiera delar av ord, meningar och fraser Syntetisera den konverterade texten Syntetiska eller samplade fonem Erik, Emma och Elin

25 Ljudgränssnitt Tornspelet Klockspel

26 Riktningshörsel och virtuellt 3D-ljud Fundera och diskutera: Hur avgör man från vilket håll ett ljud kommer?

27 ITD Interaural Time Difference Icke-kontinuerliga ljud Kontinuerliga ljud (<1500Hz)

28 IID Interaural Intensity Difference > 1500 Hz

29 Ytterligare riktningsbestämning ITD och IID i horisontalplanet Riktningsbestämning Ytterörat Hörselgången Överkroppen Huvudrörelser

30 Reflektioner

31 IID & ITD Simulering av 3D-ljud HRTF Head Related Transfer Function Generell vs personlig Innebär en hel del förenklingar av en full fysikalisk modell

32 Lyssnaren Lyssnar-objektet ( listener ) placering av öronen Position Orientering Roll-off (logaritmisk, linjär...) Doppler faktor - när ljudkällan rör sig i förhållande till lyssnaren

33 Ljudkällor Soundmanager Ljudkällor ( source ) placering av källa Position Ljudkoner (inre o yttre vinkel) Min och max avstånd (påverkar roll-off)

35 Rumsklang och effekter Rumsklang - reverb Reflektionsmodeller - beräkningsintensivt Dämpnings-modeller Occlusion = Dämpat direktljud och reverb (vägg) Obstruction = Dämpat direktljud, opåverkat reflektionsljud (stolpe) Exclusion = Opåverkat direktljud, dämpat reverb (dörrhål)

36 Tänk på: Designa för bred användning Låt användarna välja ljudstyrkan (observera skillnaden på mediavolym och ringvolym) Välj ljud som passar bra för den miljö de är tänkta att användas i Perceptualisera viktig information i flera modaliteter (ljud, visuellt, taktilt)

37 Gör-det-själv Spela in själv. Använd: Ljudinspelare (t ex telefonen) Ljudredigeringsprogram (eg. Audacity) Fantasi (skapa egna ljud som liknar det man vill få fram men inte nödvändigtvis är en inspelning av ett naturligt ljud) FormatFactory (för att göra om från ett ljudformat till annat) Och/eller: Googla sound effects, eller sound FX har ganska mycket

38 Audacity

39 Ljud på Android ics/media/mediaplayer.html 3D-ljud för Android: OpenAL4Android Kräver NDK

Relevanta dokument

Ljud och interaktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper

Ljud och interaktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper Ljud och interaktion Innehåll och mål Om ljud och hörsel Om ljudinteraktion Lite om virtuellt 3D-ljud Tips och trix Mål: att ni ska få verktyg att resonera om ljudinteraktion, samt få lite exempel Ljudet