Sammanfattning Icke-visuella audio-haptiska datorgränssnitt Charlotte Magnusson Kirsten Rassmus-Gröhn Presentation av EU-projekt Flera olika tillämpningar Audio-haptiskt ritprogram Audio-haptisk trafikmiljö i 3D Audio-haptisk web browser Spela in och spela upp gester (University of Glasgow) Kurvor och geometri (LABEIN) Audio-karta (OFFIS) Karta med haptik och talad info (LABEIN) Gränssnitt Haptik: PHANToM Ljud: Hörlurar eller högtalare MICOLE Att undersöka möjligheter för att skapa tekniska hjälpmedel för att underlätta "lärande i samarbete" för blinda och seende barn i t ex matematik, fysik och andra ämnen. Löper över 3 år (september 2004 oktober 2007). MICOLE partners Finland: Tampere Universitet Storbritannien: Glasgows Universitet Frankrike: Metz Universitet Pierre och Marie Curie-universitetet (Paris) France Telecom Sverige: Uppsala Universitet KTH Reachin Certec Lunds Universitet Litauen: Siauliai Universitet Grekland: ICS Forth forskningsgrupp Österrike: Linz Universitet MICOLE - mål Riktlinjer för att skapa gränssnitt åskådliggöra matematiska, fysiska och andra rumsliga förhållanden virtuellt ljud, virtuell känsel & förstorande system Samarbete i audio-haptiska gränssnitt API som stöder samarbete och skolrelaterade uppgifter Applikationer som utvecklas som exempel: Ritprogram Utforska och lära sig om solsystemet (Tampere Universitet) Lära sig elektronik (Metz Universitet) 1
MICOLE Certecs uppgifter Ta fram användarrelaterad information Leda löpande utvärdering av teknik och gränssnitt Medverka vid specifikation av mjukvara Medverkavid design av API Bidra med ritmoduler Kravspecifikationer Designa och implementera testprogram 3D Memory Ritprogram Ritprogrammet - översikt Virtuellt papper + relief Rita påfrihand Verktygför att skapa objekt Ritprogrammet - hantera objekt Med tangentbord: Förstora Förminska Ta bort Kopiera Klistrain Flytta Ritprogrammet - ljudinformation Pennans position i kan höras genom tonändring: Frekvens (upp & ner) 200Hz 1kHz Linjär stereo (vänster höger) Talad information om objekt Händelsestyrda ljudeffekter vid objekthantering Storleksförändring, flyttning, form-ändring Ta bort, kopiera, klistra in Ljudsignal för att känna igen kanterna på arbetsområdet Gester spela in och spela upp Utvecklat av MICOLE partner Glasgows Universitet Använder PHANToM för att spela in en rörelse Rörelsen kan spelas upp igen, så att PHANToM drar handen Användningsområden: Lära sig att skriva Använda gester i datorinteraktion Forsknings- och utvecklingsprojekt som ska syfta till att människor med synnedsättningar ska kunna orientera sig och komma åt information lättare Löper över 3 år (september 2004 oktober 2007). ENABLED 2
ENABLED partners Storbritannien: Queens University of Belfast Omicron Technology Ltd British Telecommunications Spanien: Fundación LABEIN Soluziona Telecomunicaciones Sverige: Certec, Lunds Universitet Frankrike: Franska atomenergikomissionen Portugal: Tekever, lda Tyskland: Siemens Business Services Kuratorium OFFIS CAS Software Schweiz: NetUnion Virtuell trafikmiljö - översikt 3D värld, modell av trafikområdet kring Mejeriet i Lund Inte gjord för visuell upplevelse (förenklingar) Virtuell trafikmiljö - modellen 484 objekt statiska och dynamiska Virtuell trafikmiljö - ljudinformation Talad information om objekt 3D-ljud på bilarochövergångsställen med ljudsignal Händelsestyrda ljudeffekter Om avataren blir påkörd spelas ljudeffekt Ljudsignal för att känna igen kanterna på arbetsområdet Ljudeffekter för interaktion med miljön Scrollning av arbetsområde Skalningavarbetsområde Utvecklad av ENABLED partner OFFIS Spelar upp olika omgivnings-ljud beroende på var man pekar med musen på kartan Audio-karta Karta med haptik och talsyntes Utvecklat av ENABLED partner LABEIN Känna översiktligt och detalj Följavägar Få talad info (talsyntes) om olika objekt 3
Kurvor med haptik och talsyntes ENACTIVE Utvecklat av ENABLED partner LABEIN Känna kurvor Välja olika representationer: Kurva Stapeldiagram Cirkeldiagram Talad info (talsyntes) för detaljinfo Forskningsfält: Experimentell psykologi Kognitionsvetenskap Teknology (Robotik, Datavetenskap, Virtuella världar) Interaktionsdesign Filosofi Enactive partners 27 partners 10 länder Även Kanada och USA Konkreta studier Navigering med 3D-ljud och haptik Identifiering av likadana objekt Pebble-box Rit-program med 3D-ljud Geometri med haptik och talsyntes Publikationer Utvecklat av ENACTIVE & ENABLED partner LABEIN Enabling Audio-Haptics Kirsten Rassmus-Gröhn Licentiatavhandling, september 2006 www.certec.lth.se/doc/enablingaudiohaptics A Virtual Traffic Environment for People with Visual Impairments Charlotte Magnusson, Kirsten Rassmus-Gröhn Visual Impairment Research, pp 1-12 Vol 7. No 1. 2005 Slutrapport Projekt haptik och trafik - en förstudie, beteckning EK 50A 2002:5083 Charlotte Magnusson Internrapport och rapport till uppdragsgivaren Skyltfonden 4
Mer att läsa: www.certec.lth.se/haptics 5