Geneva 2016-09-22 Klas Blomqvist Eva Holm facebook.com/statistiskacentralbyranscb @SCB_nyheter statistiska_centralbyran_scb www.linkedin.com/company/scb
Outline Towards a metadata driven production at Statistics Sweden Focus on design From theory to practice, National Accounts
Towards a metadata driven production Statistics Sweden - towards a more standardized and process oriented approach to statistics production. An important element - build and establish a common production environment. The foundation for this environment is an SCB adapted version of the GSBPM model where metadata, using GSIM as a basis, is used to configure and steer the production process for each survey in the system metadata driven production
Metadata input process output Driving and feeding the process Meassure unit Content Price type Amount
Internal structure - statistical program Statistical program Statistical program cycle Statistical Support Program Business (Collect) Business (/Analyse) Business (Dissemination) Business (Evaluate) Specify needs. Design and plan. Build and test. Collect. Parts of (coding, mikro editing). The restof (impute, completing, weighing) and analyse Disseminate and communicate Evaluate and feedback Customer needs are identified, the design completed, the production system created and tested Collected, coded and edited microdata Establish final observation register Edited and disclosure controlled of aggregate values and proposed dissemmination Disseminated and communicated results Action plan for the product improvement proposals outside the product
Design Statistical program Statistical program cycle Statistical Support Program Business (Collect) Business (/Analyse) Business (Dissemination) Business (Evaluate)
Design of production Define Content Provider, contract Design Collect Define Content Calculation rule Design Calculation Define Content Editing rule Design Editing Define Content x Calculation area x Calculation area x Calculation rules Calculation rules Calculation rules
Information och metadata 3 levels Common to all in Statistical program UDB Metapus Common part of GSBPM Common for a domain Collect / Analyse Disseminate Specific for an process/activity
Metadata repository Statistical program Exchange information Metaplus
Design of Statistical program Administreras Centralt Anges av undersökningen design Method Statistical Program Statistical Program Cycle tep Valid processtep, methods, and business services Business service Statistical Support Program Bussiness (collect) Bussiness (process/ analyse)) Bussiness (disseminate) Bussiness (Evaluate) Activities Codes for status Source Reference time According to the design: Selected processtep, methods and Business service for each Business process Roles (access)
Identified common aspects Identified common aspects that are needed for an effective common production environment are: step, methods and services Valid process step for a business process Valid methods for a process step Valid services for a process step and methods Common status codesreference time List of sources List of services
External deliverables Rapporteringsobjekt Collection Collect admin data and internally exchange Administrative data Data supplier Statistical program 3 Internal deliverables Stat Program 1 Stat Program 2 Data suppliers Register 1 Provision agreement
National acconts: Leverantörsöverenskommelse och kontrakt (NR) Leverantör Överenskommelse Ev. Delöverenskommelse Ev. Delöverenskommelse Ev. Delöverenskommelse Kontrakt Post (Tabell/Fil) Leveransinnehåll (rader/kolumner) NRPSR makro; Relation undersökning, produktionsomgång och till beräkning (Exempel kvartalsberäkning (BNP) 2:a kvartalet 2015 (Makroberäkningar)) Nr-Fiber Metadata NR- beräkningar Nivå: NR-systemet (Övernivå) Metadata: Nomenklatur, data Andra källor L a s t k a j E T L NR Rådata Verktyg granskning Beräknings verktyg Verktyg Beräkningar NR Bearbetad data Verktyg granskning Verktyg publiceringleverans Analysverktyg Gemensam Offenlig insamling förvaltning, FiR NR INS NR OFf Etc. Produktionsomgång kvartal 1 t.ex. NRPSR2015Q1 Offenlig Finansräkenskaper Produkt- och Excessive Deficit förvaltning, reala NR FiR sektorräkenskaper Procedure NR OFr NR PSR NR EDP Produktionsomgång, Produktionsomgång, Produktionsomgång, Produktionsomgång, snabben Årsräkenskaperna kvartal 2 Kvartal 3 t.ex. t.ex. t.ex. t.ex. NRPSR2015Q2S NRPSR2013 NRPSR2015Q2 NRPSR2015Q3 Regionala Sektorövergripande räkenskaper beräkningar NR BRP NR SB Produktionsomgång, kvartal 4 t.ex. NRPSR2015Q4 Utformnings Insamlingsomgånomgång Makroberäkningsomgång(ar) Redovisnings- Utvärderings- Mikroberäknings- -omgång omgång omgång Def ÅR (T-2), Innehavande ÅR (T), Kvartalsfördelning av Prel ÅR (T-1), Tidsserieomräkning Omräkning av kvartalen första beräkning för 2015kv2 senaste årberäkning och preliminäråret 2014 och omräkning av 2015kv1 med olika metoder. T.ex ändringar T.ex. Benchmark, rak Beräkna och justeringar i en tidsserie kvartalsfördelning etc. PrelÅr Beräkna Skapa om fel hittats Revidering av tidsserier Beräkna Skapa kvartal slutresultat och skapande kvartal slutresult Referensperiod kvartalsresultat 2013kv1-2013kv4 Hela tidsserien kan Referensperioder Referensperioder som gäller för första justeras som ska revideras beräkning 2015kv2 och där det är möjliga t.ex. 1980kv1-2014kv4 2014kv2 till 2014kv4 Beräkningsområde Beräkningsområde att räkna om 2015kv1 B1 B2 m.m. 2014kv1 ==> 2014kv4 2015kv1 ==> 2015kv2 Benchmark Etc.? Nivå: Undersökning Nivå: Produktionsomgång Nivå: Omgångstyp Som kan bestå av fler Omgångar Nivå: Referensperiod SCB-Tjänster NR-Fiber-Indata NR-Fiber-Beräkning NR-Fiber-Analys och leverans m.m. Beräkningsområde Sektor Beräkningsområde Hushållskonsumtion Beräkningsområde Investeringar Beräkningsområde Industriproduktion Beräkningsområde Beräkningsområde Tjänsteproduktion Utland m.m. Metoder Regler Tjänster Nivå: Beräkningsområde (Som har beräkningar som i sin tur har regler, tjänster etc) Nivå: Beräkningsdesign
National accounts - Example COICOP 1211 From input data: Ursprungs- Uppgifts- Närmaste SNI 4:e kv LP Ack LP 4:e kv FP Ack FP 4:e kv Kal Ack Kal Ref.period Källa status Källa Inkom (Gen) Omgång 96.02 10,0 8,6 7,1 5,3 6,9 5,3 kv4 2015 OMS Hämtad Insamling 2016-02-10 12:00 1 INS2015Q4 96.03-96.09 5,9 6,7 3,1 3,7 3,1 3,8 kv4 2015 OMS Hämtad Insamling 2016-02-10 12:00 1 INS2015Q4 ETL OMS Rules OMS : Transform (Värde- Ref. Grund Uppgifts- Närmaste NR-SNI Uppgift Pristyp typ) period Källa status Källa Tidsstämpel (Gen) Omgång S9602 1,100 LP Omsindex kv4 2015 OMS Rådata NR anpassning 2016-02-10 12:10 1 INS2015Q4 S9604 1,059 LP Omsindex kv4 2015 OMS Rådata NR anpassning 2016-02-10 12:10 1 INS2015Q4
National accounts - Example COICOP 1211 (Värde- Ref. Grund Uppgifts- Närmaste NR-SNI Uppgift Pristyp typ) period Källa status Källa Tidsstämpel (Gen) Omgång S9602 1,100 LP Omsindex kv4 2015 OMS Rådata NR anpassning 2016-02-10 12:10 1 INS2015Q4 S9604 1,059 LP Omsindex kv4 2015 OMS Rådata NR anpassning 2016-02-10 12:10 1 INS2015Q4 Information om korrigering Vem: Henrik Romanov När: 2016-02-11 Korrigering: 0,026 Typ av korrigering: Kommentar: Korrigering p.g.a. att begravningsbranschen påverkar negativt till utvecklingen Editing OMS Editing rules OMS : Editing (Värde- Ref. Grund Uppgifts- Närmaste NR-SNI Uppgift Pristyp typ) period Källa status Källa Tidsstämpel (Gen) Omgång S9602 1,100 LP Omsindex kv4 2015 OMS Rådata NR anpassning 2016-02-10 12:10 1 INS2015Q4 S9604 1,090 LP Omsindex kv4 2015 OMS Källkorrigerad NR anpassning 2016-02-11 10:00 2 INS2015Q4
Thanks Klas Blomqvist klas.blomqvist@scb.se Eva Holm eva.holm@scb.se