FASE 2

Anàlisi de dades i disseny de dashboards personalitzats

Per què l'anàlisi de dades ha canviat les regles del joc?

Últimament sentim la paraula dades per tot arreu. Però, per què cada cop agafen més força? Per què són tan importants?

Ens hem adonat que estem envoltats de dades i resulta que aquestes són “gratuïtes” i tenen un gran valor. Són informació, coneixement i per tant poder. Per això hem de ser responsables i conscienciar de fer-ne un bon ús.

Gràcies als avanços tecnològics i la informàtica hem aconseguit convertir qualsevol dada en un valor únic i binari convertint colors, píxels i llenguatge humà a llenguatge binari de 0 i 1.

I també ens ha permès recopilar més informació de la que els humans —avui en dia— som capaços d’assimilar a simple vista.

Si a això li sumem l’estadística i les matemàtiques, obtenim la possibilitat de sintetitzar aquest coneixement encriptat a una forma visual, senzilla i clara que ens ajuda a detectar patrons de comportament, tendències, valors anòmals, correlacions, clústers… confirmant o rebutjant hipòtesis en fets.

Una de les coses més difícils (o que sol donar més respecte) és prendre decisions per por d’equivocar-nos, i justament en això ens ajuda l’anàlisi de dades.

Objectius que perseguim aquí:

Transformar les dades recopilades en les nostres bases de dades en informació comprensible i visual.

Convertir els números (dades) en elements visuals com ara gràfics de barres, de línies, de punts, de caixa (boxplots), etiquetes, taules, rànquings…
Utilitzar tècniques de disseny per evitar el soroll d’altres dades (ús de colors, tipografia, maquetació…).

Fer un seguiment de les dades periòdicament segons les necessitats individuals de cada projecte.

Crear processos d’automatitzacions per assegurar la qualitat de la dada i evitar errades.
Crear processos d’automatitzacions per mantenir la base de dades actualitzades i disposar de la informació visual el més ràpid possible.

Facilitar la interpretació perquè siguin comprensibles per a tothom i així sumar coneixements a la presa de decisions.

Dissenyar visualitzacions intuïtives amb etiquetes, llegendes i descripcions que facilitin l’experiència de la persona usuària.
Crear històries (storytelling) a l’hora d’explicar els informes perquè siguin comprensibles per a tots els públics (o almenys el públic objectiu).

Crear informes de forma periòdica per poder tenir un històric i anar ajustant la visualització de les dades perquè plegats millorem el producte o servei, optimitzem estratègies o fem descobriments.

Dedicar el temps necessari a crear informes que aportin valor i guardar-los de forma que es puguin consultar en cas de necessitat.
Utilitzar aquests informes per ajustar cada cop millor l’anàlisi de dades segons les necessitats del projecte, per això és tan important dedicar-li temps en crear-lo (analistes) com de llegir-los (experts en altres parts del projecte).

Habilitats clau que utilitzem en aquesta etapa:

Llenguatges de programació (Python, SQL, DAX, M...).
Biblioteques de visualització de Python (Matplotlib, Seaborn, Plotly...).
Programes de disseny de quadres de comandament (Power BI...).
Estadística aplicada.
Big Data frameworks (Spark, Hadoop...).

Comparativa entre elaborar informes (servei) i crear un quadre de comandament personalitzat (producte).

Es tracta d’un servei perquè es basa en un document recurrent que reps de forma periòdica (mensual, trimestral, semestral, anual) segons l’acordat. Aquest informe està compost per un seguit d’elements gràfics (barres, línies, mapes de calor, dònuts, caixa de bigotis, taules…) i explicacions detallades (què s’ha fet, com s’ha fet i quines conclusions he arribat).

L’objectiu aquí és donar una visió clara i comprensible respecte del que jo he observat de les dades recollides convertides en elements gràfics que hem decidit analitzar i fer-ne un seguiment. Per això és interessant presentar l’informe en una reunió on la col·laboració entre l’especialista en dades i els experts del projecte és fonamental i ens hem d’assegurar de:

El que t’explico queda clar i és comprensible per tot l’equip interessat.
Que els oients o lectors puguin aportar els seus coneixements per ajustar les conclusions, millorar-les i optimitzar els informes per una presa de decisions més efectiva.
Que el document queda a l’abast per poder-lo consultar o tenir un historial dels informes elaborats al llarg del temps.

Beneficis

Registre històric: permet tenir un registre històric on pots veure l'evolució i consultar-lo en qualsevol moment.
MVP (Mínim producte viable): Estableixen un primer punt de vista per començar a treballar-hi i poder-hi sumar la visió de la resta d'experts de les diferents àrees del projecte.
Claredat i accessible: la informació està escrita i estructurada el que provoca que la seva comprensió sigui més fàcil i accessible per persones no habituades en llegir elements gràfics i coneixements estadístics.
Personalització: permet que cada informe sigui diferent i es pugui ajustar a les necessitats del moment d'una forma senzilla tant l'estructura com la informació presentada. No és estàtic.
Externalització: no necessites habilitats tècniques, ja que això recau sobre la persona que realitza els informes, només has d'informar del que vols saber.

Limitacions

Comporta temps: cada cop s'ha d'actualitzar l'informe ajustant-lo a les necessitats o amb els nous resultats.
No és a temps real: es basa en una anàlisi fins a la data de la creació de l'informe. Per tant, la informació no és d'ara mateix, dependrà de la periodicitat acordada.
Dependència externa: els resultats es veuran condicionats per les habilitats de la persona que realitza l'informe i com n'ha extret les conclusions. Per això, m'agrada involucrar al màxim a la resta de l'equip explicant els mètodes i d'on surten les meves conclusions, per intentar condicionar el menys possible i poder sumar-hi altres punts de vista.
Comunicació constant: és essencial mantenir una comunicació fluida i assertiva per tal d'estar alineats en l'objectiu del projecte i l'anàlisi per assegurar-nos que el que diem és el mateix que s'entén.

Es tracta d’un producte perquè és un entregable, és a dir, un cop creat ja és teu i és cosa teva l’ús que en fas. La relació comercial s’ha acabat.

Un quadre de comandament és com una pissarra interactiva en què et mostra la informació que consideres rellevant a analitzar a través d’elements gràfics com taules, gràfiques de diferent tipus, etiquetes… La gràcia està en el fet que aquesta part interactiva es pot adequar la informació que et mostra a través de filtres i condicions. També val remarcar que és molt personalitzable el que pot ajuda a ressaltar la informació clau i donar-li un toc corporatiu i ajudi en l’experiència de qui usa aquesta eina.

En canvi, el repte és entendre quina és la informació (dades) clau a mostrar i de quina manera ho fem. És a dir, quins elements gràfics val la pena juntar-los en el mateix llenç que faciliti la comprensió, deduccions i conclusions als analistes de dades. De totes maneres, com hem comentat abans, és fonamental haver treballat la primera fase del projecte (optimització de l’estructura i fiabilitat de les dades) i assegurar-te que les automatitzacions estan ben fetes i les dades són rigoroses i fiables.

Beneficis

Visualització clara, extensa i efectiva: la visualització de la informació és més clara i neta fent més fàcil la comparativa entre els elements i accedir a més informació a simple vista amb l'ajuda de les opcions de disseny gràfic.
Informació en temps real i interactiva: les dades es visualitzen en temps real segons l'última actualització programada i a més, la pots filtrar, seleccionar, maximitzar, reduir, jerarquitzar... segons el que necessitis observar en cada moment.
Autonomia: no necessites a ningú per analitzar les dades, ho pots fer quan i des d'on vulguis sense esperar-te.
Personalitzable i estètic: és altament adaptable a les teves necessitats des del tipus de gràfic a utilitzar, la quantitat, la disposició, el format, els colors...

Limitacions

Cost inicial elevat: d'entrada requereix una inversió inicial significativa de preu i temps invertit fins a veure resultats.
Dependència tecnològica: tot i que s'entrega amb un manual d'ús, es necessitarà cert nivell de coneixement de l'eina per aprofitar totes les seves funcionalitats.
Limitat: un cop creat et mostrarà la informació que hi ha. És a dir, servirà per monitoritzar la informació i veure la seva evolució però no et permet d'una forma àgil afegir noves dades no valorades durant la creació del quadre de comandament. Per això es necessitarà tornar a tocar la base però en principi no hauria de comportar gaire temps si la base esta ben feta.

Coses a tenir en compte:

No és incompatible utilitzar ambdues coses, servei (elaboració d'informes) i producte (creació d'un dashboard personalitzat). De fet, millorarà els resultats però, la inversió en l'anàlisi de dades serà més gran.
Recorda que per fer-ho bé caldrà passar per la fase 1, d'optimitzar l'estructura i fiabilitat de les dades.
Cada projecte és únic. Per tant, d'entrada no es pot saber la inversió en temps i diners que costarà.
En lloc d'un informe també es pot fer una presentació (més gràfica i visual i menys text) però pot ser difícil d'entendre per si sola.

Exemples