Opendata: obrir les dades de les empreses de serveis públics també (III)

Com responsables de generar estadística dels ajuntaments respectius podríem dir que els observatoris municipals tenim fam de dades, que bona part de la feina nostra és estructurar, difondre i fins i tot interpretar totes les dades que existeixen, dispersades aquí i allà,  sobre els nostres municipis. Dades procedents de diferents entitats, produides per diferents organismes.

Quina és la font primària de les dades dels  municipis que treballem des dels observatoris?. Habitualment, en el 95% dels casos o més, son producte del buidat de registres informàtics producte de registres administratius, la majoria lligats a les funcions fiscals i recaptatòries, o de control,  de les diferents administracions: registres de la seguretat social, llicències d’activitat, de circulació, de construcció d’habitatges etc… A qualsevol registre administratiu hi ha el domicili del fet imposable i, per tant, és una dada territorialitzable a nivell municipal i fins i tot geoposicionable amb exactitud mil·limètrica sobre el territori.

Encara hi ha molta feina per fer alhora de treure profit tant dels registres administratius propis dels ajuntaments com, sobretot, dels registres dels diferents ministeris i conselleries. Els observatoris municipals anem avançant força en aquest sentit a base de contactar amb els diferents serveis de documentació o planificació de les administracions superiors que produeixen cadascuna de les dades.  Que ens facilitin les respectives dades municipalitzades acaba depenent de l’obertura del responsable polític de les dades o de l’esperit col·laboratiu dels responsables tècnics d’aquestes.

Però hi ha una altra font de dades encara pràcticament inexplotada per la dificultat d’accedir-hi: les dades de les companyies de serveis públics en règim de concessió. Operadores de telecomunicacions, companyies elèctriques,  de gas, d’aigua, autopistes, companyies de transport públic, etc. Companyies que abans eren empreses públiques, monopolis públics, però que es van privatitzar i ¿liberalitzar? durant les dos darreres dècades.  I que tenen a les seves bases de dades un coneixement preciòs per l’interès públic. El consum energètic, la mobilitat i el consum d’ample de banda a les diferents barris i zones de les nostres ciutats son unes dades valuosíssimes per al planejament urbanístic, econòmic i social de les nostres ciutats. Per posar un exemple: com es pot fer politiques sostenibilistes sense conèixer al detall els consums energètics de les diferents zones de la ciutat?. Com planificar la mobilitat si sols tenim dades de mobilitat de transports públics anuals i fragmentades per operadors o concessionaris diferents?.

La majoria d’aquestes companyies, bona part d’elles potents multinacionals, com a grans empreses que gestionen milions de clients i desenes de milions de facturació, tenen potentíssims datawarehouses sobre els que apliquen tècniques de mineria de dades per a fer previsions de consum, detectar fraus, o per fer scorings dels clients (cada client rep una puntuació de la capacitat de consum, o del perill de que sigui un moros, o d’altres variables rellevants per al model de negoci i la relació amb el client). És a dir, tenen una capacitat per a extreture dades de forma estructurada, i analitzar-les, practicament ilimitada. Pel que fa als nostres interesos, aquests sistemes informàtics poden extreure amb suma facilitat dades agregades a nivell territorial amb el màxim de granularitat territorial que es necessiti: dades per província, per municipi, per secció censal, per illa cadastral i, si es vol, per edifici, habitatge, persona… No hem d’oblidar que tenen sistemes SIG integrats indispensables per al seu negoci, i que en aquests traballen sobre la cartografia oficial, com la cartografia catastral.

S’imaginen aquesta potencia analítica al servei de les ciutats, de la planificació de la ciutat?. Jo si que m’ho imagino, i per això no comprenc encara com, en el procés de liberalització de serveis públics essencials no s’ha obligat (reglamentat) a les companyies a compartir les dades de interès públic a alts nivells de granularitat i desagregació (illa cadastral, per exemple). Si més no, amb les administracions públiques!. Que siguin enpreses de titularitat privada no és motiu suficient, al meu parer, pel tancament de dades originades en l’exercici de les seves funcions públiques. El fet és més incomprensible encara des del moment que són uns sectors amb preus i serveis regulats i, per tant, de planificació pública en darrer terme. Com es pot planificar i regular be sense dades detallades?

Generalment, son els organismes reguladors com la Comision del Mercado de las Telecomuniaciones o la Comision Nacional de la Energia,  els que publiquen dades agregades a nivell estatal o, com molt, autonòmic, a partir de la seva funció principal de vetllat per la competència al sector i assegurar els serveis públics obligatoris per llei. Dades que els faciliten les companyies i que es publiquen a nivells d’agregació territorial altíssims: l’estat sencer.

Anem a veure amb una mica més de detall el panoràma de dades municipals en un parell de sectors que em treballat recentment al nostre ajuntament, per tal d’exemplificar, en casos concrets, la problemàtica del tancament d’aquestes fons de dades.

Cas 1. Les dades del sistema energètic.

Actualment, a l’ajuntament de Rubí, s’està desenvolupant un ambiciós projecte de promoció de l’estalvi i l’eficiència energètica de caràcter integral, amb la voluntat de incidir tant sobre el consum del propi ajuntament com sobre el consum de la industria, el comerç i el sector residencial del municipi: www.rubi.cat/energia. En el marc d’aquest projecte portem ja cert recorregut de recerca de dades de consums energètics al nostre municipi i a les diverses zones d’aquest, amb resultats desiguals.

El que hem aconseguit…

Les companyies energètiques no publiquen res!. A nivell de consum energètic als municipis sols  hem trobat les dades elaborades per l’ICAEN a partir de les dades que li subministren les diferents companyies: consum anual d’energia elèctrica i gas natural canalitzat al municipi, i per sectors (residencial, comerç, industrial).  Son dades sempre agregades a nivell de tot el municipi, i publicades amb 3 anys de retard. Ara mateix sols tenim les dades fins el 2008.  Dades que l’ICAEN no publica pero que si ens han facilitat. Resulta curiós que estiguin publicades a nivell municipal les dades de generació d’energia (un fenomen intranscendent dins el sector energètic actualment), però no les de consum energètic, molt més importants i transcendents des de tots els punts de vista. Quedi clar, en tot, cas, que l’ICAEN aquí fa una feina impagable i voluntària, i que supleix la feina de producció d’estadística energètica exhaustiva que entenem haurien de fer altres organismes competents, com el Ministerio de Energia o la Comisión Nacional de la Energia.

El que es podria aconseguir?

Sembla que els procediments de intercanvi de dades entre les administracions i les companyies són poc eficients, almenys quan pots trobar online  dades agregades de consum elèctric en tems real, a nivell de tot Espanya. A la llum d’aquest magnífic gràfic (la font de dades mes objectiva sobre el seguiment de les vagues generals!) no és temerari assegurar que això mateix es podria fer perfectament a nivell d’altres agregats territorials, inclòs el nivell de municipi o, perquè no, d’estació o subestació transformadora. O d’edifici!.

Però mes que el temps real, als municipis els interessaria saber, segurament, el territori real: el consum, i les necessitats energètiques, dels seus barris, urbanitzacions, polígons industrials o, fins i tot, de illa cadastral. I la seva evolució en el temps. També podem assegurar –ja ens desmentireu als comentaris al post, si ens equivoquem– que això és perfectament possible tècnicament donat que totes les factures de consum estan associades a un be immoble amb una referència cadastral.

Una datacooperació  és possible. I convenient.

Les administracions i les empreses de serveis públics hauriem de ser capaces doncs de poder compartir microdades o, si mes no, dades altament desagregades, en benefici mutu i, per tant, en benefici del ciutadà, en el nostre cas, i del client, en el seu. Sempre respectant la protecció de dades personals i el secret estadístic, obviament.

Les administracions, incloses les petites com els ajuntaments, també tenim dades que a aquestes els poden interessar per a planificar millor les seves infrastructures, com és la dinàmica poblacional del padró continu d’habitants, la previsió d’habitatges, la radicació de noves activitats, etc.. Pero sols els municipis mes grans tenen sistemes de datawarehouses i, sobretot, capacitats tècniques per explotar-los, que facin això viable a la pràctica.😦

D’aquesta manera no hauríem de recórrer a complicats models estadístics, fets per grups de recerca universitaris, per a saber els consums energètic dels edificis de la nostra ciutat, com han fet molt recentment a Nova York:

Estimació estadística del consum energètic dels edificis de Nova York

Perquè hem d’estimar dades que en realitat ja existeixen? No és socialment més eficient treballar per poder accedir-hi? Perquè aquesta mania a tancar les dades als nostres sistemes i no compartir-les quan poden ser útils pel be general, per a millorar la governança de la societat i la qualitat de vida?.  Be, la resposta és evident, no siguem il·lusos: la informació és poder.  Però hem d’anar treballant, a roda del moviment de l’opendata, per a que això canviï. I no sols per les dades públiques!

Cas 2. Les dades del sistema de telecomunicacions.

Aquí la manca de dades és encara més greu. No es que no sapiguem els clients o els consums (de telefonia o de ample de banda en aquest cas) al nostre municipi sinó que no sabem ni les infraestructures instal·lades al nostre municipi.Per llogar-hi cadires!. Les teleoperadores no comparteixen on tenen posada la fibra òptica o quina infraestructura tenen instal·lada a les centraletes telefòniques, que són unes informacions rellevants per saber si el nostre municipi podrà entrar de ple a la societat de la informació o es quedarà a la societat dels rumors. On hi ha fibra òptica instal·lada és un secret d’Estat al que, curiosament, no hi té accés l’Estat.

Els ajuntaments sols tenim coneixement indirecte de les infraestructures de telecomunicacions que hi ha a la ciutat, fruit de les llicències que les teleoperadores necessiten per obrir el carrer. Però això sols en el cas de canalitzacions noves. I una cosa és saber que hi ha una canalització de  tal empresa i l’altra saber que hi passa per din i on connecta.

No disposem de informació ni del nombre d’abonats, ni del nombre de línies de banda ampla ni, tant sols, de fins quin punt disposem de infraestructures de fibra òptica. El que si sabem, positivament, es de les enormes carències en ample de banda fruit de les queixes dels clients, ajuntament inclòs.

Òbviament totes aquestes dades les teleoperadores les tenen, i sols han de donar-li a un parell de botons dels seus aplicatius informàtics de consulta sobre el datawarehouse corporatiu per a generar-les sobre un mapa, perfectament geoposicionades. Però simplement no hi ha voluntat de compartir-les.

Cas 3. Les dades del sistema financer.

Sembla evident que per a planificar els serveis socials i les polítiques de promoció econòmica tenir les dades de l’activitat financera al nostre municipi seria un input important ¿no?.  També hem intentat assabentar-nos de l’activitat credíticia al nostre municipi, contactant directament amb les entitats financeres per a saber els crèdits concedits a les empreses del municipi i la seva evolució. La resposta oficial es “no tenim aquesta dada”.  Ejem,..

Addenda.

Com creiem haver demostrat, les dades “sempre existeixen”, i son fàcilment municipalitzables. Tècnicament és ben fàcil fer les consultes als repositoris de dades, públics i privats, per a generar estadística per municipi i fins i tot per àrees més petites, inframunicipals. Si això no es fa, a la pràctica és, en primer lloc, per desconeixement d’aquestes possibilitats dels qui poden decidir sobre aquestes dades. I en segon lloc, per manca de voluntat del propietari de les dades de compartir-les i obrir-les.

En el cas tractat aquí, les dades de les empreses privades de concessió pública, s’adduirà que es un secret de negoci, informació confidencial a preservar als ulls de la competència. Però els reguladors haurien de saber que la desitjada (i no aconseguida) competència sols és possible si el mercat és transparent. Si no ho saben no hauríen de ser reguladors. I, més enllà d’aquesta ensenyança de primer curs a qualsevol facultat d’econòmiques, l’interès públic (la planificació ordenada del territori, dels servies..) hauria de prevaldre sobre l’interès privat (el benefici).

Josep Vives, Observatori de la Ciutat de l’Ajuntament de Rubí

2 respostes a Opendata: obrir les dades de les empreses de serveis públics també (III)

  1. Josep,
    molt interessant.

    Dins de l’àmbit elèctric i sobre el que comentes de l’opacitat de les dades, el que és curiós, és que hi ha una llei que obliga a totes les distribuidores a facilitar la informació de la lectura facturada (la base de dades dels Punts de Suministre – SIPS ) a totes les Comercialitzadores i a l’OCSUM (l’oficina de Canvi de Suministre, que vetlla per a que es pugui fer el canvi de suministrament elèctric segons la llei ).
    Això està recollit a : Real Decreto 1011/2009, de 19 de junio ,
    I diu :
    Las empresas distribuidoras deberán garantizar el acceso a las bases de datos de puntos de suministro a través de medios telemáticos. En particular, la empresas distribuidoras deberán contar con los medios necesarios para que cualquier comercializador o la Oficina de Cambio de Suministrador, de acuerdo con la norma reguladora de su funcionamiento, pueda descargar y proceder al tratamiento de los datos referidos a la totalidad de los puntos de suministro conectados a las redes del distribuidor y a las redes de transporte de su zona, así como llevar a cabo una selección detallada de los puntos de suministro respecto a los cuales quiere acceder a sus datos, en función de las diferentes categorías de datos que componen las citadas bases.

    Las empresas distribuidoras no podrán establecer condición alguna al acceso y tratamiento de estos datos por parte de los comercializadores o de la Oficina de Cambio de Suministrador, ni exigir en ningún caso que éstos les proporcionen dato alguno como condición previa de acceso a su base de datos, entre ellos: el Código Universal del Punto de Suministro, CIF, NIF o NIE del titular de dicho punto de suministro o número de contrato en vigor de cada punto de suministro concreto, para el cual deseen consultar la base de datos.

    Sin perjuicio del derecho de acceso a las bases de datos a través de medios telemáticos las empresas distribuidoras deberán remitir a la Oficina de Cambio de Suministrador, o a los comercializadores que lo soliciten, los datos relativos a todos y cada uno de los puntos de suministro conectados a sus redes y a las redes de transporte de su zona a través de un soporte físico informático que permita su inmediata y efectiva disposición y tratamiento, sin que resulte exigible, en ningún caso, que los comercializadores o la Oficina de Cambios de Suministrador les proporcionen dato alguno como condición previa de acceso a su base de datos La empresa distribuidora deberá remitir dicha información en el plazo máximo de quince días desde la fecha de solicitud por parte de la Oficina de Cambio de Suministrador o del comercializador.

    Això vol dir que una Comercialitzadora o el OCSUM hi té accés pero només ells.
    Tot i que les Comercialitzadores tenen limitat l’ús per a publicar-ne el contingut:
    Los comercializadores que hagan uso de la información que figura en las bases de datos de puntos de suministro de las empresas distribuidoras, a tenor de lo contemplado en la presente disposición, deberán garantizar la confidencialidad de la información contenida en las mismas.

    Tot i que segons això no haurien de poder limitar la publicació de dades estadístiques extretes d’aquestes bases de dades.

    Per tant, amb la legislació actual, ja hi hauria forma d’aconseguir les dades de consum, tot i que passant pel tràmit d’haver-te de constituir com a Comercialitzadora.

    • Ivan Solé,

      Moltes gràcies per una informació de tant de interès. No coneixia aquesta oficina i sembla evident que, per les seves funcions, ha de tenir una base de dades de punts de sumbimistrament. Com a mínim té accès a les bbdd de les companyies.

      Avui mateix m’hi poso en contacte a veure si tenim sort. Em desagradaria profundament, si es confirmés, que a la llei hi hagi obligatoritat de compartir informació mínima amb les comercialitzadores pero no amb les administracions públiques. Els processos de liberalització fets a Espanya semblen escrits per enemics de l’interès general.

      Almenys ara ja se com es diu “la bicha” (SIPS) i el ID informàtic dels punts: Codigo Universal de Puntos de Suministro.

      Seguiré informant aquí dels progressos.

Deixa un comentari

Fill in your details below or click an icon to log in:

WordPress.com Logo

Esteu comentant fent servir el compte WordPress.com. Log Out / Canvia )

Twitter picture

Esteu comentant fent servir el compte Twitter. Log Out / Canvia )

Facebook photo

Esteu comentant fent servir el compte Facebook. Log Out / Canvia )

Google+ photo

Esteu comentant fent servir el compte Google+. Log Out / Canvia )

Connecting to %s

%d bloggers like this: