XML - Vad är det? Hur vet jag vad som är vad - End Note? Publikationsreferens. XML för bibliotekarier. Anders Ardö.

Transkript

1 1 Introduktion - Vad är det? för bibliotekarier Anders Ardö EIT Elektro- och informationsteknik, Lunds Universitet November 28, Vad är? - detaljer 3 Xpath, XSLT, Schema,... gory details 4 Exempel 5 Sammanfattning Slides, handouts och links: A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 Publikationsreferens Exempel från EIT K. Golub, T. Hamon, A. Ardö: Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Knowledge Organisation, Vol. 34, No. 4, pp , Exempel från LU Koraljka Golub, Thierry Hamon, Anders Ardö Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Artikel i tidskrift, Knowledge Organisation, 2007, 34, 4, A. Ardö, EIT - Vad är det? November 28, / 39 Hur vet jag vad som är vad - End Note? K. Golub, T. Hamon, A. Ardö: Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Knowledge Organisation, Vol. 34, No. 4, pp , TY - JOUR ID - LUP TI - Automated Classification of Textual Documents Based o AU - Golub,Koraljka AU - Hamon,Thierry AU - Ardö,Anders PY /// SP EP JF - Knowledge Organisation VL - 34 IS - 4 PB - Ergon Verlag ER - A. Ardö, EIT - Vad är det? November 28, / 39

2 Hur vet jag vad som är vad - BibTeX? Hur vet jag vad som är vad -? K. Golub, T. Hamon, A. Ardö: Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Knowledge Organisation, Vol. 34, No. 4, pp , <Author>Golub, Koraljka</author> author = {Golub, Koraljka and Hamon, Thierry and Ard\"o, Anders}, title = {{Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering}}, <journal>automated Classification of...</journal> journal = {Knowledge Organisation}, <title>knowledge Organisation</title> volume = {34}, number = {4}, publisher = {Ergon Verlag}, pages = { }, year = {2007}, } A. Ardö, EIT - Vad är det? November 28, / 39 K. Golub, T. Hamon, A. Ardö: Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Knowledge Organisation, Vol. 34, No. 4, pp , $ xmllint noout ex1.xml ex1.xml:3: parser error : Opening and ending tag mismatch: Author line 3 and author <Author>Golub, Koraljka</author> ^ A. Ardö, EIT - Vad är det? November 28, / 39 Hur vet jag vad som är vad -? K. Golub, T. Hamon, A. Ardö: Automated Classification of Textual Documents Based on a Controlled Vocabulary in Engineering Knowledge Organisation, Vol. 34, No. 4, pp , <journal>automated Classification of...</journal> <title>knowledge Organisation</title> <pages><start>247</start><end>263</end></pages> $ xmllint noout ex2.xml A. Ardö, EIT - Vad är det? November 28, / 39 Rätt eller fel? <journal>automated Classification of...</journal> <title>knowledge Organisation</title> DTD fil <!ELEMENT publication (author+,journal,title,pages?)> <!ELEMENT author (#PCDATA)> <!ELEMENT journal (#PCDATA)> <!ELEMENT title (#PCDATA)> <!ELEMENT pages (start,end)> <!ELEMENT start (#PCDATA)> <!ELEMENT end (#PCDATA)> A. Ardö, EIT - Vad är det? November 28, / 39

3 Rätt eller fel - W3C Schema? Rätt eller fel? Lämpligt eller olämpligt? <schema xmlns=" <element name="publication"> <complextype> <journal>automated Classification of...</journal> <sequence> <title>knowledge Organisation</title> <element name="author" type="string" minoccurs="1" maxoccurs="unbounded"/> <journal vol="34" no="4">knowledge Organisation</journal> <element name="journal" type="string" minoccurs="1" maxoccurs="1" <pages> /> <start>247</start> <end>263</end> </pages> <element name="title" type="string" minoccurs="1" maxoccurs="1" /> <element name="pages" maxoccurs="1"> <complextype> <sequence> <element name="start" type="integer"/> <element name="end" type="integer"/> </sequence> </complextype> </element> </sequence> </complextype> </element> A. Ardö, EIT - Vad är det? November 28, / 39 </schema> Exempel MODS MODS : Metadata Object Description Schema (MODS): MODS applikationsprofil för LUP Formellt korrekt! $ xmllint noout dtdvalid mypubl.dtd ex2.xml $ xmllint noout schema myw3cschema.xsd ex2.xml ex2.xml validates Men olämpligtbättre Inget som schema kan hjälpa oss med Använd applikationsprofil A. Ardö, EIT - Vad är det? November 28, / 39 <dateother type= defencedate > = Date of defence Dagen för en disputation. Använder attributet encoding med värde w3cdtf vilket betyder att datum skrivs som YYYY-MM-DD. Exempel <dateother encoding= w3cdtf type= defencedate > </dateOther> <titleinfo> = Title Ett verks titel. Vi använder också <titleinfo type= alternative > när titeln t. ex. översätts vilket fr a används i dokumenttyp theses där det kan finnas sammanfattning och titel på annat språk än avhandlingen är skriven på. type= alternative > används också för originaltiteln på ett... A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

4 = Gramatik/struktur - inte semantik Separerar struktur och layout Rötter i SGML Strukturera information Regler för hur (nya) format kan definieras Många standardverktyg för att bearbeta Ingenting om hur informationen ska visas Kan inte automatiskt hitta rätt information Bara ett verktyg - fast användbart för datorer! Semantik i applikationsprofilen extensible Markup Language Google: ungefär vid sökning efter xml. Hello world dokument Kodning Storlek PostScript PDF 4915 MS Word HTML A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 Taggning Alltid bara ett root-element Träd-strukturerat Måste vara korrekt balanserad (nästlad) - well formed FEL <title>what is <author>anders</title></author> RÄTT<title>What is <author>anders</author></title> Size matters - versaler/gemena Olika element <title>what is</title> <Title>Where is</title> Element kan ha attribut: <author role="primary">anders</author> <journal vol="34" no="4">knowledge Organisation</journal> Tagging contd. Entiteter - specialtecken Tecken Kodning Namn < < Less-than > > Greater-than & & Ampersand " " Double quote &apos; Apostrophe or single quote &#xyz; Character no xyz Namespaces används för att lösa konflikter <article xmlns:mods=" xmlns:journal="anders/egen/namespace "> <mods:name>anders Ardö</mods:name> <journal:name>cacm</journal:name> </article> Processing nodes, syntax: <?...?> A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

5 Trädrepresentation Document Object Model - DOM - Trädrepresentation <journal>knowledge Organisation</journal> publication author author title journal pages Objekt för alla delar av -trädet Operationer som nodename, nodevalue, parentnode, childnodes, nextsibling documentelement (root), getelementsbytagname, createelement, createattribute, insertbefore, appendchild Tillgängligt i flera programspråk Finns andra modeller som SAX Standard API för program start end A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 XPath - node-set <journal>knowledge Organisation</journal> XPath publication author author title journal pages start end XPath expression: /publication/pages/end Pekar ut node-set A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

6 XPath - attribute XPath - test <author primary="yes">golub, Koraljka</author> <author primary="no">ardö, Anders</author> <journal>knowledge Organisation</journal> <author primary="yes">golub, Koraljka</author> <author primary="no">ardö, Anders</author> <journal>knowledge Organisation</journal> publication publication author author title journal pages author author title journal pages primary primary start end primary primary start end XPath expression: /publication/author/@primary XPath expression: /publication/author[@primary= yes ] A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 XPath - sökvägar Jämför sökväg för filer location path (absolut/relativ => kontext), expressions,... Mycket mer Används i XSLT XSLT A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

7 XSL - exstensible Stylesheet Language XSLT - XSL Transformations Hur gör man HTML//text av? XSL skript XSLT - exempel <author primary="yes">golub, Koraljka</author> <author primary="no">ardö, Anders</author> <author>hamon, Thierry</author> <journal>knowledge Organisation</journal> - <xsl:stylesheet xmlns:xsl=" version="1.0"> <xsl:output method="text"/> <xsl:template match="/publication"> Publ. <xsl:apply-templates select="author"/> </xsl:template> XSLT Utdata <xsl:template match="author"> <xsl:text>is </xsl:text> <xsl:if test="@primary= yes ">Primary author: <xsl:value-of select="."/></xsl:if> <xsl:if test="@primary= no ">Author: <xsl:value-of select="."/></xsl:if> </xsl:template> </xsl:stylesheet> A. Ardö, EIT - Vad är det? November 28, / 39 $ xsltproc xsltex.xsl ex4.xml Publ. Is Primary author: Golub, Koraljka Is Author: Ardö, Anders Is A. Ardö, EIT - Vad är det? November 28, / 39 XQuery Superset av XPath Som XSLT fast inte XSLT enklare och bra på traversera XQuery mer databas programmering Kan emulera varandra Schema A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

8 Schema DTD Formell definition Kontrollera korrekthet Flera olika DTD - Document Type Definition W3C Schema RelaxNG and more Enkelt Begränsningar Saknar constraints, data-typer, Kontext-oberoende Uttrycks inte i Stödjer inte namespaces A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 Rätt eller fel? <journal>automated Classification of...</journal> <title>knowledge Organisation</title> DTD fil <!ELEMENT publication (author+,journal,title,pages?)> <!ELEMENT author (#PCDATA)> <!ELEMENT journal (#PCDATA)> <!ELEMENT title (#PCDATA)> <!ELEMENT pages (start,end)> <!ELEMENT start (#PCDATA)> <!ELEMENT end (#PCDATA)> A. Ardö, EIT - Vad är det? November 28, / 39 W3C Schema Mer uttrycksfullt Skrivs i Tillåter constraints, har fler data-typer Delvis kontext-oberoende Komplicerat A. Ardö, EIT - Vad är det? November 28, / 39

9 Rätt eller fel - W3C Schema? <schema xmlns=" <element name="publication"> <complextype> <sequence> <element name="author" type="string" minoccurs="1" maxoccurs="unbounded"/> <element name="journal" type="string" minoccurs="1" maxoccurs="1" /> <element name="title" type="string" minoccurs="1" maxoccurs="1" /> <element name="pages" maxoccurs="1"> <complextype> <sequence> <element name="start" type="integer"/> <element name="end" type="integer"/> </sequence> </complextype> </element> A. Ardö, EIT - Vad är det? November 28, / 39 </sequence> </complextype> </element> </schema> Exempel applikationer Exempel A. Ardö, EIT - Vad är det? November 28, / 39 Exempel och databaser LUP/MODS MARC: OAI: Dublin Core: RSS: Web services: SRU -> Search/Retrieve Operation -> Records Zebra -> Documentation HTML -> DOM Record Filter Architecture Solr/Lucene Messages for Updating a Solr Index A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39

10 Sammanfattning Slutet - äntligen Struktur inte layout Taggat, trädtsruktur, väl balanserat Bra verktyg med stort stöd Populärt, standardiserat Flexibelt Formell validering av struktur (inte semantik) Datorer kan förstå och behandla XPath, XSLT, (DOM) A. Ardö, EIT - Vad är det? November 28, / 39 A. Ardö, EIT - Vad är det? November 28, / 39 Mer att läsa Moeller/Schwartzenbach: An Introduction to and Web Technologies. Addison Wesley 2006, ISBN O REILLY pocket reference XSLT Webb tutorial: XSLT tutorial: XPath tutorial: in libraries: A workshop/eric Lease Morgan Kurser EITN01 Webb-intelligens och informationssökning EITN05 Projekt Semantisk Webb-programmering A. Ardö, EIT - Vad är det? November 28, / 39