Modellazione dati per warehouse
Progettare modelli dimensionali, gestire gerarchie e slow changing dimensions.
Cosa imparerai
- Comprendere il problema analitico e il contesto decisionale
- Applicare esempi, metriche e controlli a casi reali
Collegamenti
Modellazione dati per warehouse
La stessa domanda, “quanti clienti attivi abbiamo?”, cambia risposta se il grain è utente, account, contratto o workspace. La modellazione dati serve a rendere queste scelte visibili prima che entrino in dashboard e KPI. Modellazione dati per warehouse lavora su fatti, dimensioni e definizioni che reggono nel tempo.
Una scena da cui partire
Leggi la lezione chiedendoti sempre quale processo genera il fatto, quale entità lo descrive e quale domanda deve restare semplice. Un modello buono non è quello con più tabelle eleganti, ma quello che impedisce join ambigui, doppi conteggi e metriche instabili.
- Contesto: Quale vincolo tecnico decide il disegno?
- Metodo: Quale controllo ti direbbe che il risultato è affidabile?
- Applicazione: Quale trade-off racconteresti prima di mettere in produzione?
La gerarchia della modellazione
- Staging (raw): copia 1:1 delle tabelle sorgente. Come arrivano, senza trasformazioni.
- Cleansed: pulizia, standardizzazione, deduplicazione. I dati sono corretti ma ancora normalizzati.
- Dimensional (star): fatti e dimensioni. Il modello che il business interroga.
- Aggregated: summary tables pre-calcolate per query frequenti.
Fact table: granularità e tipi
La decisione più importante è la granularità: cosa rappresenta UNA riga nella fact table?
- Transactional: una riga per evento.
sales_fact: una riga per ogni item venduto in ogni transazione. Massimo dettaglio, massima flessibilità. - Periodic snapshot: una riga per periodo.
inventory_snapshot: una riga per prodotto per giorno. Meno dettaglio, query più veloci. - Accumulating snapshot: una riga per evento con molte date.
order_fulfillment: una riga per ordine conorder_date,ship_date,deliver_date. Utile per funnel e pipeline analysis.
Tipi di misure:
- Additive: sommi su tutte le dimensioni (
amount). - Semi-additive: sommi su alcune dimensioni ma non su altre (
inventory level: sommi per prodotto, non per data). - Non-additive: non puoi sommare (
price,rate).
Dimensioni: conformed vs degenerate
- Conformed dimension: usata da più fact table. Esempio:
dim_dateusata dasales_facteinventory_fact. Garantisce coerenza tra analisi cross-dominio. - Degenerate dimension: dimensione senza tabella propria, vive nella fact table. Esempio:
order_number— è un identificatore, non ha attributi suoi, ma serve per raggruppare.
Gestire gerarchie nelle dimensioni
Un cliente appartiene a una città, che appartiene a una regione, che appartiene a un paese. Due approcci:
- Snowflake: tabelle separate per ogni livello (
dim_city,dim_region,dim_country). Accademicamente puro, query complesse. - Star (denormalizzato): tutto in
dim_customer:city,region,country. Query semplici, ridondanza controllata. Preferito nel 90% dei casi reali.
Riferimento: Kimball, R. & Ross, M. (2013). The Data Warehouse Toolkit, 3rd ed. Wiley.
Approfondimento operativo: leggere modellazione dati per warehouse come sistema
In un progetto reale, modellazione dati per warehouse non vive mai isolato. È parte di un sistema più ampio fatto di decisioni, dati disponibili, vincoli tecnici, incentivi organizzativi e qualità dell’esecuzione. Il rischio dell’analista principiante è trattare il tema come una definizione: imparare il nome, ricordare due formule, applicare un template. Il lavoro professionale è diverso: bisogna capire quale problema risolve, quali assunzioni contiene e cosa succede quando quelle assunzioni non sono vere.
Nel contesto di data warehousing, la prima domanda da fare non è “quale metrica calcolo?” ma: quale decisione dovrà essere presa grazie a questa analisi? Una dashboard, una query o un modello statistico hanno valore solo se riducono incertezza decisionale. Se non cambiano una scelta, sono documentazione o teatro analitico.
Un buon modo per impostare il lavoro è usare questa sequenza:
- definire il problema in linguaggio business;
- identificare l’unità di analisi corretta: utente, account, evento, sessione, ordine, campagna;
- controllare se i dati misurano davvero il fenomeno o solo una sua ombra;
- costruire una metrica interpretabile;
- segmentare per evitare che la media nasconda pattern opposti;
- trasformare il risultato in una raccomandazione verificabile.
Caso reale: Netflix e la disciplina delle metriche
Netflix è un esempio utile perché ha costruito molte decisioni di prodotto intorno a segnali comportamentali osservabili: completamento degli episodi, tempo di ricerca prima della riproduzione, abbandono dopo pochi minuti, ritorno nella settimana successiva, efficacia delle raccomandazioni. Il punto non è che ogni azienda debba copiare Netflix. Il punto è metodologico: il dato non viene trattato come ornamento, ma come infrastruttura decisionale.
Quando Netflix valuta una modifica all’esperienza — una nuova riga di raccomandazioni, una diversa immagine di copertina, un algoritmo di ranking — non misura solo il click immediato. Misura anche segnali di qualità: l’utente guarda davvero il contenuto? torna nei giorni successivi? riduce il tempo speso a cercare? aumenta la soddisfazione implicita? Questa disciplina impedisce di ottimizzare vanity metric che sembrano positive nel breve ma danneggiano valore nel lungo periodo.
Lo stesso principio vale qui: modellazione dati per warehouse deve essere collegato a un outcome. Se il risultato non aiuta a scegliere tra due azioni alternative, l’analisi è incompleta.
Esempio SQL: costruire una vista di controllo
Il pattern seguente è volutamente generico ma eseguibile nella maggior parte dei warehouse moderni. L’obiettivo è creare una base analitica con metrica, segmento e finestra temporale, così da poter confrontare periodi e gruppi senza riscrivere la logica ogni volta.
WITH base_events AS (
SELECT
user_id,
account_id,
event_type,
event_time,
DATE_TRUNC('week', event_time) AS week,
source,
device_type
FROM events
WHERE event_time >= CURRENT_DATE - INTERVAL '180 days'
AND user_id IS NOT NULL
),
weekly_user_metrics AS (
SELECT
week,
user_id,
COALESCE(source, 'unknown') AS source,
COALESCE(device_type, 'unknown') AS device_type,
COUNT(*) AS total_events,
COUNT(DISTINCT DATE(event_time)) AS active_days,
COUNT(DISTINCT event_type) AS event_diversity,
MAX(CASE WHEN event_type IN ('purchase', 'subscribe', 'activation') THEN 1 ELSE 0 END) AS reached_key_outcome
FROM base_events
GROUP BY week, user_id, source, device_type
)
SELECT
week,
source,
device_type,
COUNT(DISTINCT user_id) AS users,
ROUND(AVG(active_days), 2) AS avg_active_days,
ROUND(AVG(event_diversity), 2) AS avg_event_diversity,
ROUND(AVG(reached_key_outcome) * 100, 2) AS key_outcome_rate
FROM weekly_user_metrics
GROUP BY week, source, device_type
ORDER BY week, source, device_type;
Questa query non pretende di essere la risposta finale. Serve a creare una superficie di osservazione: trend, segmenti, differenze tra canali, variazioni nel tempo. Da qui l’analista può formulare ipotesi più precise.
Esempio Python: controllare stabilità e anomalie
Una metrica utile deve essere stabile abbastanza da orientare decisioni e sensibile abbastanza da segnalare cambiamenti reali. In Python possiamo controllare variazioni anomale settimana su settimana.
import pandas as pd
# df contiene: week, segment, users, key_outcome_rate
# key_outcome_rate espresso in percentuale, es. 12.4
df = df.sort_values(['segment', 'week']).copy()
df['previous_rate'] = df.groupby('segment')['key_outcome_rate'].shift(1)
df['wow_change_pp'] = df['key_outcome_rate'] - df['previous_rate']
df['rolling_mean'] = df.groupby('segment')['key_outcome_rate'].transform(
lambda s: s.rolling(4, min_periods=2).mean()
)
df['rolling_std'] = df.groupby('segment')['key_outcome_rate'].transform(
lambda s: s.rolling(4, min_periods=2).std()
)
df['z_score'] = (df['key_outcome_rate'] - df['rolling_mean']) / df['rolling_std']
anomalies = df[df['z_score'].abs() >= 2].sort_values('z_score')
print(anomalies[['week', 'segment', 'key_outcome_rate', 'wow_change_pp', 'z_score']])
Il valore di questo controllo è pratico: evita di reagire a ogni oscillazione casuale, ma segnala quando una variazione merita investigazione. In un contesto aziendale, questo tipo di analisi può alimentare alert, review settimanali e retrospettive di prodotto.
Errori comuni da evitare
Il primo errore è lavorare su dati aggregati troppo presto. Una media globale può nascondere due segmenti che si muovono in direzioni opposte. Il secondo errore è non controllare la qualità del dato: eventi duplicati, tracking incompleto, timezone incoerenti e cambi di definizione possono produrre conclusioni false. Il terzo errore è confondere correlazione e causalità: se gli utenti che usano una feature convertono di più, non significa automaticamente che la feature causi conversione. Potrebbero usarla perché sono già più motivati.
Per ridurre questi rischi, ogni analisi dovrebbe includere almeno tre controlli: definizione esplicita della metrica, confronto per segmento e verifica contro un periodo precedente o gruppo di controllo.
Riepilogo
Modellazione dati per warehouse va trattato come uno strumento decisionale, non come un argomento da manuale. Il valore nasce quando colleghi problema, dati, metrica, segmentazione e azione. Una buona analisi non termina con “il numero è salito” o “il numero è sceso”. Termina con una frase operativa: quale decisione prendiamo, con quale livello di confidenza, e quale metrica useremo per sapere se avevamo ragione.
Problema reale
Nel dominio di data warehousing, Modellazione dati per warehouse serve a risolvere questo problema: costruire una base analitica affidabile che renda metriche e query consistenti nel tempo. La lezione non va trattata come teoria isolata, ma come un modo per migliorare una scelta concreta con dati, assunzioni esplicite e controlli minimi.
Obiettivo operativo: Comprendere il problema analitico e il contesto decisionale; Applicare esempi, metriche e controlli a casi reali. Se alla fine non sai indicare quale decisione cambia, quale dato osservi e quale errore vuoi evitare, la lezione non è ancora diventata competenza applicata.
Modello concettuale
| Fase | Cosa chiarire | Output |
|---|---|---|
| Domanda | Quale scelta reale deve migliorare? | Decisione da prendere |
| Misura | Quale segnale osservabile rappresenta il problema? | Metrica o dato sorgente |
| Controllo | Quale baseline rende il risultato interpretabile? | Confronto credibile |
| Azione | Che cosa cambia dopo l’analisi? | Prossimo passo operativo |
Il modello concettuale è intenzionalmente semplice: decisione, dato, controllo, azione. Ogni approfondimento tecnico deve rafforzare almeno uno di questi quattro punti.
Formalizzazione rigorosa
Per rendere Modellazione dati per warehouse analizzabile, definisci prima l’unità di lavoro: tabella, fact, dimensione, grain o modello dati. Poi collega questa unità a una metrica osservabile: grain corretto, integrita, performance, costo query e tracciabilità. Infine dichiara la decisione attesa: schema, mart, query pattern o scelta architetturale.
| Elemento | Specifica richiesta |
|---|---|
| Unità di analisi | tabella, fact, dimensione, grain o modello dati |
| Segnale principale | grain corretto, integrita, performance, costo query e tracciabilità |
| Baseline | Periodo precedente, gruppo comparabile, benchmark o scenario controfattuale |
| Decisione | schema, mart, query pattern o scelta architetturale |
| Rischio | Scambiare un numero disponibile per una prova sufficiente |
La formalizzazione e solida quando un altro analista può riprodurre la logica, criticare le assunzioni e ottenere la stessa decisione partendo dagli stessi dati.
Esempio o caso studio
Il team deve modellare revenue, usage e rinnovi per analisi SaaS. La scelta critica è separare fatto transazionale, snapshot mensile e dimensioni lentamente variabili, così una domanda su MRR non viene risolta ogni volta con una query diversa.
| Evidenza osservata | Lettura prudente | Azione consigliata |
|---|---|---|
| Il numero migliora | Potrebbe essere effetto reale o variazione normale | Cercare confronto e segmento |
| Un segmento cambia più degli altri | La media aggregata nasconde una differenza | Separare coorti o casi d’uso |
| Il costo cresce insieme al risultato | L’impatto va letto sul margine | Stimare trade-off e sostenibilità |
Lab / esercizio
Livello base
Scrivi una scheda di una pagina per Modellazione dati per warehouse: decisione da supportare, metrica primaria, baseline, rischio principale e azione se il segnale e confermato.
Livello intermedio
Costruisci una tabella con tre segmenti, periodi o scenari. Per ciascuno indica cosa cambia, quale spiegazione alternativa e plausibile e quale controllo useresti prima di raccomandare un azione.
Livello research-grade
Prepara un decision memo: ipotesi, dati richiesti, criteri di esclusione, controlli di qualità, soglia decisionale, rischio residuo e piano di monitoraggio dopo la decisione.
Dataset e materiali consigliati
Usa warehouse, SQL, modelli dimensionali, dati ordini, eventi e tabelle anagrafiche. Se non hai accesso a dati reali, crea un dataset sintetico con almeno 200 righe, una dimensione temporale, una dimensione segmento e una metrica di outcome.
Errore tipico da evitare
L’errore più comune e usare Modellazione dati per warehouse come etichetta invece che come processo. Succede quando il team mostra un grafico senza decisione, una metrica senza baseline, o una conclusione senza indicare quale assunzione potrebbe invalidarla.
La domanda di controllo è: se questo risultato fosse instabile, quale scelta sbaglierei? Se la risposta non è concreta, manca ancora il collegamento tra analisi e azione.
Quiz o checkpoint
- Quale decisione concreta dovrebbe migliorare questa lezione?
- Quale unità di analisi rende il problema misurabile?
- Quale baseline useresti per evitare una lettura ingenua?
- Quale errore tipico potrebbe cambiare la conclusione?
- Quale output consegneresti a uno stakeholder non tecnico?
Riepilogo operativo
Modellazione dati per warehouse diventa utile quando produce una decisione più chiara, non quando aggiunge terminologia. Usa il framework problema, modello, formalizzazione, esempio, lab e checkpoint per trasformare la lezione in pratica verificabile. Categoria: Tecnico. Difficoltà: advanced. Tempo stimato: 22 min.
Percorso collegato
Lezioni da leggere insieme
Questi collegamenti portano la lezione dentro il resto del corso: basi da riprendere, passaggi successivi e connessioni tematiche tra moduli.