Magnus Nielsen, IDA, Linköpings universitet

Relevanta dokument
Tommy Färnqvist, IDA, Linköpings universitet. 1 ADT Map/Dictionary Definitioner Implementation... 2

Tommy Färnqvist, IDA, Linköpings universitet. 1 ADT Map/Dictionary Definitioner Implementation... 2

Tommy Färnqvist, IDA, Linköpings universitet. 1 Administrativ information Upplägg... 1

ADT Set, Map, Dictionary. Iteratorer TDDD86: DALGP. Tommy Färnqvist, IDA, Linköpings universitet

Datastrukturer och algoritmer. Innehåll. Tabell. Tabell - exempel. Gränsyta till Tabell. Tabell. Modell. Hashtabell Relation, lexikon.

Datastrukturer. föreläsning 6. Maps 1

Innehåll. F7: Tabell, hashtabell, relation & lexikon. Gränsyta till Tabell. Tabell. Tabell Hashtabell Relation Lexikon.

Avbildningar och hashtabeller. Koffman & Wolfgang kapitel 7, mestadels avsnitt 2 4

Programkonstruktion och. Datastrukturer

Sökning. Översikt. Binärt sökträd. Linjär sökning. Binär sökning. Sorterad array. Linjär sökning. Binär sökning Hashtabeller

Föreläsning 8. Mängd, Avbildning, Hashtabell

Innehåll. Föreläsning 10. Specifikation. Mängd. Specifikation. Konstruktion av mängd. Mängd Lexikon Hashtabell

Föreläsning 8. Mängd, Avbildning, Hashtabell

TENTAMEN I DATASTRUKTURER OCH ALGORITMER DVG B kl. 14:00-19:00

Hashtabeller. TDA416, lp3 2016

Föreläsning 2. AVL-träd, Multi-Way -sökträd, B-träd TDDD71: DALG. Innehåll. Innehåll. 1 Binära sökträd

Föreläsning 6 Datastrukturer (DAT037)

Diskutera. Hashfunktion

Prov i DAT 312: Algoritmer och datastrukturer för systemvetare

Föreläsning 10 Innehåll

Grundläggande datalogi - Övning 4

Interfacen Set och Map, hashtabeller

Föreläsning 5 Datastrukturer (DAT037)

Inlämningsuppgift och handledning

Inlämningsuppgift och handledning. Föreläsning 11 Innehåll. Diskutera. Hashtabeller

Sid 1 Kapitel 7: Sökning (Hashning) Hashning

Föreläsning 10 Innehåll. Diskutera. Hashtabeller. Hashfunktion. hashfunktion. hashkod (ett heltal)

Föreläsningsanteckningar, Introduktion till datavetenskap HT S4 Datastrukturer. Tobias Wrigstad

Hashtabeller! (& kanske lite sortering)

Datastrukturer, algoritmer och programkonstruktion (DVA104, VT 2015) Föreläsning 6

Datastrukturer och algoritmer

Föreläsning 4 Datastrukturer (DAT037)

TDDI16 Datastrukturer och algoritmer. Prioritetsköer, heapar, Union/Find

Föreläsning 11 Innehåll

Tentamen kl Uppgift 4. Uppgift 5

Tentamen Datastrukturer D DAT 035/INN960

TDDC30. Objektorienterad programmering i Java, datastrukturer och algoritmer. Föreläsning 9 Jonas Lindgren, Institutionen för Datavetenskap, LiU

TDDC30. Objektorienterad programmering i Java, datastrukturer och algoritmer. Föreläsning 3 Jonas Lindgren, Institutionen för Datavetenskap, LiU

Datastrukturer och algoritmer. Föreläsning 15 Inför tentamen

Tentamen TEN1 HI

Innehåll. Föreläsning 12. Binärt sökträd. Binära sökträd. Flervägs sökträd. Balanserade binära sökträd. Sökträd Sökning. Sökning och Sökträd

Hashing Bakom kulisserna på Pythons dictionary

Föreläsning 14 Innehåll

Tommy Färnqvist, IDA, Linköpings universitet

TDDC30. Objektorienterad programmering i Java, datastrukturer och algoritmer. Föreläsning 3 Jonas Lindgren, Institutionen för Datavetenskap, LiU

F5: Debriefing OU2, repetition av listor, träd och hashtabeller. Carl Nettelblad

Föreläsning 4. Kö Implementerad med array Implementerad med länkad lista Djup kontra bredd Bredden först mha kö

Hashing Bakom kulisserna på Pythons dictionary. Leta i listor Osorterade listor. Leta i listor Sorterade listor

Hashing Bakom kulisserna på Pythons dictionary

Tentamen Datastrukturer D DAT 035/INN960 (med mycket kortfattade lösningsförslag)

Övning 4. Hashning, sortering, prioritetskö, bästaförstsökning. Hitta på en perfekt hashfunktion för atomer. Hur stor blir hashtabellen?

Föreläsning 2. Stackar, köer och listor TDDC91,TDDE22,725G97: DALG. Innehåll. 1 ADT stack. 1.1 Tillämpningar

Tommy Färnqvist, IDA, Linköpings universitet

TDDC77 Objektorienterad Programmering

3. Toppkvinnor på hög Låt lådan och de två kvinnornas famnar utgöra stackarna L, K1 respektive K2. Från början finns alla kort i L.

Föreläsning Datastrukturer (DAT037)

Vad har vi pratat om i kursen?

Övningsuppgifter #11, Programkonstruktion och datastrukturer

Lösningsförslag för tentamen i Datastrukturer (DAT037) från

Dugga Datastrukturer (DAT036)

Tentamen Datastrukturer, DAT037 (DAT036)

Databaser Design och programmering Minnesteknik Minnesteknik, forts Utvecklingen Hårddisk Hårddisk, forts

Datastrukturer, algoritmer och programkonstruktion (DVA104, HT 2014) Föreläsning 5

Föreläsning Datastrukturer (DAT037)

DD1320 Tillämpad datalogi. Lösnings-skiss till tentamen

Magnus Nielsen, IDA, Linköpings universitet

Databaser - Design och programmering. Minnesteknik. Minnesteknik, forts. Hårddisk. Primärminne (kretsteknik) Fysisk design av databasen

Hitta k största bland n element. Föreläsning 13 Innehåll. Histogramproblemet

Föreläsning Datastrukturer (DAT036)

Upplägg. Binära träd. Träd. Binära träd. Binära träd. Antal löv på ett träd. Binära träd (9) Binära sökträd (10.1)

Databaser Design och programmering. Fysisk design av databasen att ta hänsyn till implementationsaspekter: minnesteknik filstrukturer indexering

Programmering för Språkteknologer II. Innehåll. Associativa datastrukturer. Associativa datastrukturer. Binär sökning.

Föreläsning 10 Innehåll. Prioritetsköer och heapar. ADT Prioritetskö. Interface för Prioritetskö. Exempel på vad du ska kunna

OMTENTAMEN I DATASTRUKTURER OCH ALGORITMER DVG B kl. 08:15-13:15

Föreläsning 9 Innehåll

Tentamen Datastrukturer D DAT 035/INN960

Föreläsning Datastrukturer (DAT036)

Algoritmer och datastrukturer

Databaser Design och programmering. Fysisk design av databasen att ta hänsyn till implementationsaspekter: minnesteknik filstrukturer indexering

Programkonstruktion och Datastrukturer

Föreläsning 9 Innehåll

TDDC91 & TDDE22 & 725G97 Datastrukturer och algoritmer Datortentamen (DAT1) , 08 12

Tentamen Datastrukturer, DAT037 (DAT036)

Datastrukturer i kursen. Föreläsning 8 Innehåll. Träd rekursiv definition. Träd

Föreläsning 6. Sökträd: AVL-träd, Multi-Way -sökträd, B-träd TDDC70/91: DALG. Innehåll. Innehåll. 1 AVL-träd

Innehåll. Sökning och hashtabeller. En bilsamling att söka i. En bil-klass att söka efter. Hur hittar vi alla bilar som uppfyller ett annat villkor

Tentamen Datastrukturer (DAT037)

DD1320 Tillämpad datalogi. Lösning (skiss) till tenta 20 okt 2011

Tentamen Datastrukturer (DAT036)

Collections och datastrukturer. Kursbokens kapitel 13 och

Innehåll. Föreläsning 11. Organisation av Trie. Trie Ytterligare en variant av träd. Vi har tidigare sett: Informell specifikation

DAI2 (TIDAL) + I2 (TKIEK)

TENTAMEN: Algoritmer och datastrukturer. Läs detta!

Sökning och sortering

Magnus Nielsen, IDA, Linköpings universitet

Föreläsning 11. ADT:er och datastrukturer

Tommy Färnqvist, IDA, Linköpings universitet

Datastrukturer. föreläsning 10. Maps 1

Lösningar Datastrukturer TDA

Föreläsning 7. Träd och binära sökträd

Transkript:

Föreläsning ADT Map/Dictionary, hashtabeller TDDC9,TDDE22,725G97: DALG Utskriftsversion av föreläsning i Datastrukturer och algoritmer 7 september 208 Magnus Nielsen, IDA, Linköpings universitet. ADT Map/Dictionary. Definitioner ADT Map Domän: mängder av poster/par (nyckel, värde) Mängderna är partiella funktioner som avbildar nycklar på värden! Typiska operationer: size() - storlek (antalet par i mängden) isempty() - är mängden tom get(k) - hämta informationen associerad med nyckelnk eller null om någon sådan nyckel inte finns put(k,v) - lägg till (k,v) till mängden och returnera null om k är ny; ersätt annars värdet med v och returnera det gamla värdet remove(k) - ta bort post (k,v) och returnera v; returnera null om mängden inte har någon sådan post.2 ADT Map Exempel: Kursdatabas: (kod, namn) Associativt minne: (adress, värde) Gles matris: ((rad, kolumn), värde) Lunchmeny: (dag, rätt) Statisk Map: inga uppdateringar tillåtna Dynamisk Map: uppdateringar är tillåtna. ADT Dictionary Domän: mängder av par (nyckel, värde) Mängderna är relationer mellan nycklar och värden! Typiska operationer: size() - antalet par i mängden isempty() - kolla om mängden är tom find(k) - returnera någon post med nyckel k eller null om inget sådant par finns findall(k) - returnera en itererbar samling av alla poster med nyckel k insert(k,v) - lägg till (k,v) och returnera den nya posten remove(k,v) - ta bort och returnera paret (k,v); returnera null om det inte finns något sådant par entries() - returnera itererbar samling av alla poster.

ADT Dictionary Exempel: Svensk-engelskt lexikon..., (jakt, yacht), (jakt, hunting),... Telefonkatalog (flera nummer tillåtna) Relation mellan liuid och avklarade kurser Lunchmeny (med flera val): (dag, rätt) Statisk Dictionary: inga uppdateringar tillåtna Dynamisk Dictionary: uppdateringar är tillåtna.5.2 Implementation Implementation: Map, Dictionary Tabell/array: sekvens av minnesområden av lika storlek Oordnad: ingen särskild ordning mellan T [i] och T [i + ] Ordnad:... men här gäller T [i] < T [i + ] Länkad lista Oordnad Ordnad Hashning (Binära) sökträd (föreläsning ) Tabellrepresentation av Dictionary Oordnad tabell: find genom linjärsökning misslyckad uppslagning: n jämförelser O(n) tid lyckad uppslagning, värsta fallet: n jämförelser O(n) tid lyckad uppslagning, medelfallet med likformig fördelning av förfrågningar: n+ n (+2+...+n) = 2 jämförelser O(n) tid Tabellrepresentation av Dictionary Ordnad tabell (nycklarna är linjärt ordnade): find genom binärsökning uppslagning: O(logn) tid... uppdateringar är dyra!!.6.7.8 Kan vi hitta på något bättre? Ja, med hjälp av hashtabeller Idé: givet en tabell T [0,...,max] att lagra element i...... hitta ett lämpligt tabellindex för varje element Hitta en funktion h sådan att h(key) [0,...,max] och (idealt) sådan att k k 2 h(k ) h(k 2 ) Lagra varje nyckel-värdepar (k,v) i T [h(k)] Kursbokens terminologi: h(k) = g(hc(k)) hash code hc : Nycklar Heltal; kompressionsfunktion g : Heltal [0,...,max].9 2 Hashtabeller Hashtabell I praktiken ger inte hashfunktioner unika värden (de är inte injektiva) Vi behöver kollisionshantering... och Vi behöver hitta en bra hashfunktion.0 2

2. Kollisionshantering Kollisionshantering Två principer för att hantera kollisioner: Länkning: håll krockande data i länkade listor Separat länkning: ha de länkade listorna utanför tabellen Samlad länkning: lagra alla data i tabellen Öppen adressering: lagra alla data i tabellen och låt någon algoritm bestämma vilket index som ska användas vid en kollision [Eng: Separate Chaining, Coalesced Chaining, Open Addressing]. Länkning Separat länkning 0 2 28 5 5 8 6 7 8 9 0 6 0 2 90 2 8 25 Samlad länkning.2 Öppen adressering. Exempel: hashning med separat länkning Hashtabell med storlek Hashfunktion h med h(k) = k mod Lagra 0 heltalsnycklar: 5, 0, 8, 25, 28,, 8, 6, 2, 90 0 2 28 5 5 6 8 7 8 9 0 6 0 2 90 2 8 25.

Separat länkning: find Givet: nyckel k, hashtabell T, hashfunktion h beräkna h(k) leta efter k i listan T [h(k)] pekar ut Notation: sondering= en access i den länkade listan sondering för att komma åt listhuvudet (om icke-tomt) + sondering för att komma åt innehållet i första listelementet +2 sondering för att komma åt innehållet i andra listelementet... En sondering (att följa en pekare) tar konstant tid. Hur många avpekningar P behövs för att hämta en post i hashtabellen?.5 Separat länkning: misslyckad uppslagning n dataelement m platser i tabellen Värsta fallet: alla dataelement har samma hashvärde: P = + n Medelfallet: hashvärden likformigt fördelade över m: medellängd α av lista: α = n/m P = + α.6 Separat länkning: lyckad uppslagning Medelfallet: access av T [h(k)] (början av en lista L): traversera L k hittas efter: L /2 förväntat L svarar mot α, alltså: förväntat P = α/2 +.7 Samlad länkning: behåll elementen i tabellen Placera dataelementen i tabellen Utöka dem med pekare Lös kollisioner genom att använda första lediga plats Kedjor kan innehålla nycklar med olika hashvärden...... men alla nycklar med samma hashvärden dyker upp i samma kedja + Bättre minnesanvändning - Tabellen kan bli full - Längre kollisionskedjor.8 Samlad länkning.9

Öppen adressering Lagra alla element inuti tabellen Använd en fix algoritm för att hitta en ledig plats Sekvensiell/linjär sondering önskvärt hashindex j = h(k) om konflikt uppstår gå till nästa lediga position om tabellen tar slut, gå till början av tabellen... Positioner i närheten av varandra fylls snabbt upp (primärklustring) Hur gör man remove(k)?.20 Öppen adressering remove() Elementet som ska tas bort kan vara del i en kollisionskedja kan vi avgöra det? Om det är del av en kedja kan vi inte bara ta bort elementet! Eftersom alla nycklar lagras, hasha om alla data som är kvar? Titta bland elementen efter, hasha om eller dra ihop när lämpligt, stanna vid första lediga position...? Ignorera sätt in en markör borttagen (deleted) om nästa plats är icke-tom....2 Dubbel hashning eller vad göra vid kollision? Andra hashfunktion h 2 beräknar inkrement i fall av konflikter Inkrement utanför tabellen tas modulo m = tablesize Linjär sondering är dubbel hashning med h 2 (k) = Krav på h 2 : h 2 (k) 0 för alla k h 2 (k) har inga gemensamma delare med m för något k alla tabellpositioner kan nås Ett vanligt val h 2 (k) = q (k mod q) för q < m, q primtal (dvs, välj ett primtal mindre än tabellstorleken!).22 2.2 Att välja hashfunktion Vad är en bra hashfunktion? Antag att k är ett naturligt tal. Hashning bör ge en likformig fördelning av hashvärden, men detta beror på distributionen av nycklar i datat som ska hashas. Exempel: Hashning av efternamn i en (svensk) grupp studenter hashfunktion: ASCII-värdet av sista bokstaven dåligt val: majoriteten av namn slutar med n..2 Hashning genom heltalsdivision Låt m vara tabellstorleken Undvik m = 2 d : hashning ger sista d bitarna i k m = 0 d : hashning ger d sista siffrorna Man brukar föreslå primtal för m. h(k) = k mod m Se http://burtleburtle.net/bob/hash/doobs.html för vidare läsning..2 5