Gestió de dades a l'Administració

Elaboració pròpia: la font és de pagament i no es reprodueix

Enunciat oficial. Gestió de dades a l'Administració. Estratègia de dades, inventari i catàleg. Data governance i qualitat del dada.

1. Les dades com a actiu

Una estratègia de dades defineix com l'organització captura, emmagatzema, governa, comparteix i explota les dades per assolir els seus objectius. Sense estratègia, cada sistema genera el seu sitja i la mateixa dada té valors diferents en llocs diferents.

Components d'una estratègia de dades:

1. Visió i objectius de negoci que les dades han de suportar.
2. Govern: rols, polítiques, comitès i responsabilitats.
3. Arquitectura de dades: on viuen, com flueixen, quins models les descriuen → tema 32.
4. Qualitat de les dades: dimensions, mesura i remediació.
5. Metadades i catàleg: què hi ha, què significa, d'on ve.
6. Seguretat i privadesa: classificació, control d'accés, cicle de vida.
7. Compartició i obertura: interoperabilitat i dades obertes → tema 33.
8. Cultura i competències: alfabetització de dades i presa de decisions basada en evidència.
9. Mesura: indicadors de maduresa i de valor obtingut.

Marc de referència: DAMA-DMBOK (DAMA, Data Management Association; DMBOK, Data Management Body of Knowledge), amb la seva roda d'onze àrees de coneixement al voltant del govern de dades com a eix: arquitectura, modelatge i disseny, emmagatzematge i operacions, seguretat, integració i interoperabilitat, gestió de documents i contingut, dades mestres i de referència, data warehousing i BI (Business Intelligence), metadades, qualitat i govern.

2. Govern de les dades (data governance)

Definició: exercici d'autoritat i control —planificació, supervisió i execució— sobre la gestió dels actius de dades. Respon a qui decideix què sobre les dades.

No és el mateix que gestió de dades: el govern decideix i controla; la gestió executa.

2.1 Rols

Regla: cada conjunt de dades ha de tenir un propietari de negoci identificat. Sense propietari, ningú no decideix ni respon de la seva qualitat.

2.2 Polítiques

Classificació de la informació, control d'accés i mínim privilegi, cicle de vida i retenció, qualitat mínima exigible, gestió de metadades, ús secundari i compartició, anonimització i pseudonimització, i ètica de les dades.

3. Inventari i catàleg de dades

3.1 Inventari

Inventari de dades: relació dels conjunts de dades que l'organització posseeix, amb el sistema on resideixen, el responsable, la categoria d'informació i la base jurídica del tractament. És obligatori de facto per dues vies:

• El registre d'activitats de tractament del RGPD, art. 30, obligatori per a totes les autoritats i organismes públics sigui quina sigui la seva mida.
• L'inventari d'actius exigit per l'ENS com a base de l'anàlisi de riscos.

3.2 Catàleg de dades (data catalog)

Va més enllà de l'inventari: és un repositori cercable de metadades que permet a qualsevol persona autoritzada descobrir quines dades existeixen, què signifiquen, d'on venen, quina qualitat tenen i com accedir-hi.

Contingut: nom i descripció en llenguatge de negoci, propietari i custodi, esquema i tipus, glossari de negoci (definició acordada de cada terme), llinatge (lineage), indicadors de qualitat, classificació de sensibilitat, política de retenció, freqüència d'actualització i condicions d'ús.

Tipus de metadades: de negoci (significat, propietari, regles), tècniques (esquema, tipus, ubicació, format) i operatives (data de càrrega, volum, errors, llinatge d'execució).

Llinatge de dades (data lineage): traçabilitat del recorregut d'una dada des de l'origen fins al consum, incloent-hi totes les transformacions. Serveix per a l'anàlisi d'impacte, la depuració d'errors, l'auditoria i el compliment.

Eines: DataHub, OpenMetadata, Amundsen, Apache Atlas, Collibra, Alation, Informatica, Microsoft Purview, CKAN (Comprehensive Knowledge Archive Network, per a dades obertes).

Marc normatiu: a l'Administració, el catàleg no és una bona pràctica opcional sinó una obligació que ve de l'ENI (RD, Reial Decret, 4/2010) i de les seves Normes Tècniques d'Interoperabilitat (NTI): la NTI de Catàleg d'estàndards fixa quins estàndards són d'ús obligatori, la NTI de Document electrònic en regula els metadades i el cicle de vida, i la NTI de Reutilització de recursos de la informació en condiciona la publicació com a dada oberta → tema 33.

4. Qualitat de les dades

4.1 Dimensions

Norma: ISO/IEC 25012 (IEC: International Electrotechnical Commission; model de qualitat del dada) i ISO 8000.

4.2 Gestió de la qualitat

Cicle: perfilat (profiling) de les dades → definició de regles i llindars → mesura amb indicadors → informe i quadre de comandament → remediació (correcció a l'origen) → prevenció (validació a l'entrada) → monitoratge continu.

Principi fonamental: corregir a l'origen, no al magatzem. Netejar les dades al procés d'ETL (Extract, Transform, Load) cada nit sense corregir el sistema font és treball perpetu.

Cost de la no-qualitat: decisions errònies, retreball, pèrdua de confiança en els sistemes analítics, incompliment normatiu (el RGPD, art. 5 imposa el principi d'exactitud) i, al sector públic, perjudici directe al ciutadà (notificacions a adreces errònies, prestacions mal calculades).

5. Dades mestres i de referència

• Dades mestres (master data): les entitats de negoci compartides per tota l'organització — persona, empresa, adreça, via pública, equipament, expedient. MDM (Master Data Management): disciplina que en manté una versió única i fiable (golden record).
• Dades de referència: catàlegs i taules de codis compartits (municipis, tipus de via, monedes, codis de procediment).
• Estil d'implantació MDM: registre (índex de referències creuades), consolidació (repositori analític), coexistència (mestre sincronitzat amb els sistemes) i transaccional/centralitzat (el mestre és el sistema d'origen).
• A l'Administració, el padró municipal i el registre d'entitats fan de dades mestres de facto; la interoperabilitat (ENI) hi juga el paper d'evitar duplicar-les entre administracions.

6. Modelatge de dades

Conceptes bàsics que apareixen a l'examen amb freqüència:

• Model conceptual → lògic → físic.
• Entitat: objecte del món real, físic o conceptual, que es pot distingir de la resta i del qual interessen algunes propietats (p. ex. «Persona», «Expedient»). No s'ha de confondre amb un atribut (una propietat de l'entitat) ni amb el domini (el conjunt de valors possibles d'un atribut).
• Diagrama entitat-relació (E-R) de Chen: entitats (rectangles), atributs (el·lipses) i relacions (rombes que uneixen dues entitats). En la notació de peu de corb (crow's foot), la relació es representa amb una línia entre les dues entitats amb els símbols de cardinalitat als extrems.
• Cardinalitat: 1:1, 1:N i N:M. Una relació N:M significa que cada ocurrència d'una entitat es pot relacionar amb moltes de l'altra i viceversa; en el model relacional es resol creant una taula intermèdia (taula d'unió) amb les claus foranes de totes dues.
• Clau primària: atribut o conjunt d'atributs que identifica de manera única i no nul·la cada ocurrència d'una entitat. Un bon exemple d'atribut identificador únic per a l'entitat «Alumne» és el número d'expedient acadèmic o el NIF (Número d'Identificació Fiscal); no ho són el nom, la data de naixement ni el curs, perquè es poden repetir.
• Clau forana: atribut que referencia la clau primària d'una altra taula; garanteix la integritat referencial.
• Normalització: 1FN (valors atòmics, sense grups repetitius), 2FN (dependència funcional completa de la clau), 3FN (sense dependències transitives), BCNF (Boyce-Codd Normal Form). Es desnormalitza deliberadament als models analítics per rendiment → tema 32.
• ACID (Atomicity, Consistency, Isolation, Durability): propietats de les transaccions relacionals. La «Disponibilitat» NO forma part de l'acrònim ACID: aquesta és la distractora habitual.
• BASE i el teorema CAP (Consistency, Availability, Partition tolerance) en sistemes distribuïts → tema 32.

7. El model de l'Ajuntament de Barcelona

• OMD (Oficina Municipal de Dades), responsable de la gestió, qualitat, govern i explotació de les dades de l'Ajuntament i els seus ens associats, dirigida pel CDO (Chief Data Officer).
• Mesura de govern de gestió ètica i responsable de les dades: Barcelona Data Commons (2018): les dades com a bé comú, la sobirania tecnològica, la minimització, la transparència i el control ciutadà. Estableix que la gestió del cicle de vida de la dada ha de respectar els principis FAIR: Findable (localitzable), Accessible, Interoperable i Reusable — definits originalment per Wilkinson et al. (2016) a Scientific Data.
• Open Data BCN: portal de dades obertes → tema 33.
• CityOS / plataforma de dades municipal i Sentilo com a plataforma de sensors de codi obert.
• Marc de principis: Mesura de digitalització oberta i Mesura de govern d'IA.
• Interoperabilitat externa: Via Oberta de l'AOC (Administració Oberta de Catalunya) i les plataformes d'intermediació estatals, que fan efectiu el principi once-only (Llei 39/2015, art. 28).

Claus d'examen

• FAIR = Findable, Accessible, Interoperable, Reusable. El parany: distractors que canvien alguna lletra per «Alone», «Internal» o «Resilient», o que confonen «Fair» (just) amb «Findable» (TS-TIC 2018, p. 50).
• L'OMD la dirigeix el CDO (Chief Data Officer), no el DPD, el CTO (Chief Technology Officer) ni el CIO (Chief Information Officer): cadascun d'aquests càrrecs té un àmbit diferent i el DPD és qui apareix més sovint com a distractor (TS-TIC 2018, p. 51).
• Entitat ≠ atribut ≠ domini: descriure una entitat com «una característica que identifica una relació» és confondre-la amb un atribut; com «un conjunt de valors possibles», amb un domini (TS-TIC 2025 pràctica, p. 12).
• Cardinalitat N:M: molts a molts en tots dos sentits, no «una entitat relacionada amb una sola de l'altra» (que és 1:1) (TS-TIC 2025, p. 47).
• Atribut identificador únic: el DNI (Document Nacional d'Identitat) o el NIF, o el número d'expedient, mai el nom ni la data de naixement, que es poden repetir (TS-TIC 2025 pràctica, p. 14).
• La relació en un diagrama E-R es representa amb un romb, no amb un cercle, un rectangle (que és l'entitat) ni una línia doble (TS-TIC 2025 pràctica, p. 13).

Per recordar

• Govern de dades = qui decideix; gestió de dades = qui executa. Cada conjunt necessita un propietari de negoci.
• El registre d'activitats de tractament (RGPD, art. 30) és obligatori per a totes les administracions, sense excepció per mida.
• Catàleg de dades = metadades cercables amb glossari de negoci i llinatge; l'inventari és només la llista.
• Dimensions de qualitat: exactitud, completesa, consistència, actualitat, validesa, unicitat, integritat, traçabilitat, accessibilitat. Norma: ISO/IEC 25012.
• Corregir a l'origen, no al magatzem.
• MDM manté el golden record de les dades mestres.
• FAIR (Findable, Accessible, Interoperable, Reusable): principis de la Mesura de govern 2018 de l'Ajuntament de Barcelona; l'OMD la dirigeix el CDO.
• Entitat ≠ atribut ≠ domini: l'entitat és la «cosa» del món real; l'atribut, una propietat seva; el domini, els valors possibles d'un atribut.
• Cardinalitat N:M: molts a molts en tots dos sentits; es resol amb una taula intermèdia.
• ACID = Atomicitat, Consistència, Aïllament, Durabilitat. La disponibilitat no hi és.