Ljud och interaktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper

Storlek: px

Starta visningen från sidan:

Download "Ljud och interaktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper"

Kurt Andreasson
för 7 år sedan
Visningar:

1 Ljud och interaktion

2 Innehåll och mål Om ljud och hörsel Om ljudinteraktion Lite om virtuellt 3D-ljud Tips och trix Mål: att ni ska få verktyg att resonera om ljudinteraktion, samt få lite exempel

3 Ljudet och hörseln

4 Vad är ljud? Ljud är kombinationen mellan vågrörelserna i mediet (luft) som utgör ljudtryckvågen och det som örat uppfattar.

Snäckan och basilarmembranet http://www.

5 Snäckan och basilarmembranet

7 Loudness - frekvensberoende

8 Interaktionsljud

9 Ljudikoner (auditory icons) Ljud som ska föreställa någonting i appen Jfr traditionella visuella ikoner ( t ex papperskorgen i Windows) Om de väljs på rätt sätt kan de underlätta förståelsen

10 Lyssningstest

11 Exempel på ljudanvändning Informera om genomförda eller möjliga interaktioner Indikera pågående processer eller moder Hjälpa till vid navigation

12 Designrymd Funktioner: Vad ska ljudikonerna användas till i appen? Mappning: Hur ska de mappas till händelserna i appen? Vokabulär: Vilka ljud ska användas? Irritation: Hur använda ljud utan att irritera användarna?

13 Olika typer av ljudikoner Ikoniska eller direktmappande Metaforer Ljud-effekter

14 Direktmappande Ljud som tydligt är kopplade till hur fysiska föremål låter T ex ett hasande ljud när ett fönster flyttas på en skärm

15 Metaforiska Hur låter t ex en fil som kopieras? När det är svårt att hitta ett direktmappat ljud, men det finns något sätt att göra en ljudmetafor

16 Ljud-effekter Nydesignade ljud Jfr lasersvärd =)

17 Lyssningstest II A. Ritprogram, klistra in B. Ritprogram, storleksförändring av objekt C. Ritprogram, sudda D. Slut på batteri, mobil E. Ritprogram, kopiera F. Start av dator C 2 A 4 D 6 E 1 F 3 B 5

18 Parametriska ljudikoner Ljudikoner som varierar någon dimension för att Ge en mer dynamisk upplevelse av ljudgränssnittet Gör det möjligt att förmedla små variationer, t ex starkare ljud för större objekt

19 Earcons Earcons inte föreställande, ofta musikaliska Svårare att lära sig Lättare att göra en enhetlig ljudbild Lättare att variera Möjliga att generera

20 Sonifiering Att medvetet ljudsätta Data Gränssnitt Exempel En matematisk kurva kan modelleras för att kunna upplevas utan att se den Geigermätare

21 Driftsljud

22 Signalljud

23 Signalljud Använd signalljud där det är nödvändigt Ljudet ska matcha funktionen med avseende på intensitet och frekvens Gradera olika ljudsignaler efter deras betydelse Bygg in en meningsfull ljudbild där detta passar sig Var uppmärksam på att signalen, oavsett vad den betyder, inte i sig själv ska vara så skrämmande att användaren blir handlingsförlamad

24 Återkopplingsljud

25 Kontrollfrågor Ger ljuden ett positivt bidrag till produktens övergripande ljudbild? Överensstämmer ljuden med produktens övriga upplevda värde? Ger ljuden en signal om att den underliggande (mekaniska) konstruktionen håller god kvalitet?

26 Kontrollfrågor Utgör summan av akustiska kvitteringar en sammanhängande och logisk helhet? Skiljer sig ljuden tydligt från driftsljud och bakgrundsljud i den miljö där produkten ska användas? Kan ljuden uppfattas av den användargruppen det är fråga om?

27 Talat ljud Inspelat tal Informationstätt Svårt att göra dynamiskt Syntetiserat tal

28 TTS Text-to-speech Två steg: 1. Konvertera text till fonem, identifiera delar av ord, meningar och fraser Syntetisera den konverterade texten Syntetiska eller samplade fonem Erik, Emma och Elin

29 Skärmläsare Program som läser av skärmen och presenterar det i tal eller på en punktdiplay

30 Ljudgränssnitt Tornspelet Klockspel

31 Riktningshörsel och virtuellt 3D-ljud Fundera och diskutera: Hur avgör man från vilket håll ett ljud kommer?

32 ITD Interaural Time Difference Icke-kontinuerliga ljud Kontinuerliga ljud (<1500Hz)

33 IID Interaural Intensity Difference > 1500 Hz

34 Ytterligare riktningsbestämning ITD och IID i horisontalplanet Riktningsbestämning Ytterörat Hörselgången Överkroppen Huvudrörelser

35 Reflektioner

36 IID & ITD Simulering av 3D-ljud HRTF Head Related Transfer Function Generell vs personlig Innebär en hel del förenklingar av en full fysikalisk modell

37 Lyssnaren Lyssnar-objektet ( listener ) placering av öronen Position Orientering Roll-off (logaritmisk, linjär...) Doppler faktor - när ljudkällan rör sig i förhållande till lyssnaren

38 Ljudkällor Soundmanager Ljudkällor ( source ) placering av källa Position Ljudkoner (inre o yttre vinkel) Min och max avstånd (påverkar roll-off)

40 Rumsklang och effekter Rumsklang - reverb Reflektionsmodeller - beräkningsintensivt Dämpnings-modeller Occlusion = Dämpat direktljud och reverb (vägg) Obstruction = Dämpat direktljud, opåverkat reflektionsljud (stolpe) Exclusion = Opåverkat direktljud, dämpat reverb (dörrhål)

41 Tips och trix

42 Tänk på: Designa för bred användning Låt användarna välja ljudstyrkan (observera skillnaden på mediavolym och ringvolym) Välj ljud som passar bra för den miljö de är tänkta att användas i Perceptualisera viktig information i flera modaliteter (ljud, visuellt, taktilt)

43 Gör-det-själv Spela in själv. Använd: Ljudinspelare (t ex telefonen) Ljudredigeringsprogram (eg. Audacity) Fantasi (skapa egna ljud som liknar det man vill få fram men inte nödvändigtvis är en inspelning av ett naturligt ljud) FormatFactory (för att göra om från ett ljudformat till annat) Och/eller: Googla sound effects, eller sound FX har ganska mycket

44 Audacity

45 Ljud på Android ics/media/mediaplayer.html 3D-ljud för Android: OpenAL4Android Kräver NDK

46 Information Ingen föreläsning på onsdag Det kommer ut föreläsnings-material på mail/hemsida

Relevanta dokument

Ljudinteraktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper

Ljudinteraktion. Kirsten Rassmus-Gröhn, Avd. för Rehabiliteringsteknik, Inst. för Designvetenskaper Ljudinteraktion Innehåll och mål Om ljudinteraktion Lite om virtuellt 3D-ljud Tips och trix Mål: att ni ska få verktyg att resonera om ljudinteraktion, samt få lite exempel Vad är ljud? Ljud är kombinationen