Forecast
Errore, bias, copertura, accuratezza direzionale e confronto con baseline, solo su esiti maturati.
Principio generale
Limiti di regole, indicatori e modelli
Gli output prodotti da regole, indicatori e modelli sono risultati sperimentali o informativi, non decisioni.
Possono essere incompleti, instabili o errati, soprattutto in presenza di dati mancanti o ritardati, eventi eccezionali, cambiamenti di regime o condizioni differenti da quelle osservate durante la progettazione e la validazione.
Ogni risultato deve essere interpretato, quando pertinenti e disponibili, insieme a baseline, periodo osservato, numerosità del campione, metriche, misura dell’incertezza e condizioni note di fallimento.
Risultati e stato delle evidenze
Che cosa è misurato, in valutazione o operativo.
La tabella non inventa un punteggio comune: distingue evidenza predittiva, affidabilità operativa e attività ancora in maturazione.
| Workflow | Stato evidenza | Maturità | Dettaglio |
|---|---|---|---|
| WF-1 · Weather automation | Operativo | Attivo · educativo | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-2 · The New Margin | In valutazione | Attivo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-3 · Market Overview | In valutazione | Attivo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-4 · AI Supply Chain | In valutazione | Attivo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-5 · Satellite | Operativo | Attivo · condizionato all’evento | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-6 · Termometro della crisi energetica | In valutazione | Attivo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-7 · Etna Forecast | Misurato nel workflow | Attivo · educativo | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-8 · Bluesky multi-fonte | Operativo | Attivo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-9 · World Economy Engine | In valutazione | Attivo · sperimentale · evidence-aware | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-10 · Etna Sentinel | Operativo | Attivo · educativo · fail-closed | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-11 · Hydrogen Route Observatory | In valutazione | Sperimentale · calculation · evidence-aware | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-12 · Ammonia & Fertilizer Chain | In valutazione | Sperimentale · calculation + forecast | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-13 · Italy Variable Renewable Forecast | In valutazione | Sperimentale · forecast · point-in-time | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-14 · Process Sentinel | Benchmark controllato | Sperimentale · dati sintetici (dati simulati) · anomaly detection | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-15 · Virtual Analyzer | Benchmark controllato | Sperimentale · dati sintetici (dati simulati) · soft sensor | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-16 · Energy & Steam Optimizer | Benchmark controllato | Sperimentale · ibrido pubblico + dati sintetici (dati simulati) · ottimizzazione | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-17 · Etna Fusion Lab | In maturazione prospettica | Attivo · sperimentale · quality-aware | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-18 · Climate Comfort Hours | Operativo · euristico | Attivo · educativo · euristico | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-19 · Lab Intelligence Community | Operativo · editoriale | Attivo · editoriale · automatizzato | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-20 · The Public Service Run | In valutazione · calibrazione | Attivo · educativo · sperimentale | Apri la pagina per metriche, periodo e limiti disponibili. |
| WF-21 · Port Operability · NYC Ferry | In maturazione prospettica | Attivo · research shadow · verifica prospettica | Apri la pagina per metriche, periodo e limiti disponibili. |
Misurato nel workflow indica che la pagina pubblica metriche specifiche; in valutazione indica metriche pertinenti ma non ancora centralizzate; operativo riguarda controlli, run e tracciabilità, non skill predittiva.
Metriche generali disponibili
Classificazioni e anomalie
Precision, recall o frequenza delle anomalie quando esiste un’etichetta affidabile; altrimenti contesto e revisione umana.
Workflow operativi
Run riusciti, falliti, saltati, bloccati, dati mancanti e duplicati evitati.
Regola di trasparenza
Mai mostrare solo la metrica migliore; indicare periodo, campione e natura preliminare.
Stato dei workflow
| Workflow | Stato | Cadenza | Metriche pertinenti |
|---|---|---|---|
| WF-1 · Weather automation | Attivo · educativo | Lunedì, mercoledì e venerdì | Continuità dei run, dati mancanti intercettati e duplicati evitati. Non sono dichiarate metriche cliniche. |
| WF-2 · The New Margin | Attivo · sperimentale | Settimanale | MAE, errore mediano, bias e copertura degli intervalli, con periodo e numero di forecast maturati. |
| WF-3 · Market Overview | Attivo · sperimentale | Giorni feriali | Accuratezza direzionale, ampiezza media, errori, stabilità per periodo e confronto con baseline. |
| WF-4 · AI Supply Chain | Attivo · sperimentale | Settimanale | Confronto modello-naïve, errore dell’outlook e stabilità dei panieri nel tempo. |
| WF-5 · Satellite | Attivo · condizionato all’evento | Controllo ogni 6 ore; post su nuovo evento valido | Esiti dei run (pubblicato, saltato, bloccato), disponibilità delle fonti e duplicati evitati. Non viene dichiarata skill di dispersione operativa. |
| WF-6 · Termometro della crisi energetica | Attivo · sperimentale | Più run settimanali | Copertura dei driver, confidenza shipping, metriche OOS del forecast, Dynamic vs Static, drawdown e stabilità per periodo. |
| WF-7 · Etna Forecast | Attivo · educativo | Lunedì, giovedì, domenica ed eventi | Brier score, confronto con climatologia/persistenza/Hawkes, calibrazione, campione maturato e sorgente selezionata dal gate. |
| WF-8 · Bluesky multi-fonte | Attivo · sperimentale | Lunedì, mercoledì e venerdì | Audit del gate fonti, ricevute di pubblicazione, conteggio grapheme, output multi-immagine e verifica PDS/AppView. |
| WF-9 · World Economy Engine | Attivo · sperimentale · evidence-aware | Settimanale · lunedì | Expanding backtest con purge gap, selezione prequentiale, baseline naive, bootstrap di skill, intervalli conformal 90%, ablation del grafo e audit anti-leakage/vintage. |
| WF-10 · Etna Sentinel | Attivo · educativo · fail-closed | Mar/Gio/Dom + monitor VONA ogni 3 ore | Test unitari/end-to-end, data-quality e disclosure gates, deduplicazione/idempotenza, fail-closed su stato ufficiale incerto/positivo e history immutabile. |
| WF-11 · Hydrogen Route Observatory | Sperimentale · calculation · evidence-aware | Lun–Ven 10:50 Europe/Rome | Invarianti fisici/dimensionali, sourcing coerente, lineage, replay da snapshot. |
| WF-12 · Ammonia & Fertilizer Chain | Sperimentale · calculation + forecast | Lun–Ven 09:50 Europe/Rome; maturazione mensile | Walk-forward, persistenza, stagionalità, gas-only, baseline fisica, MAE/RMSE/bias/coverage/skill. |
| WF-13 · Italy Variable Renewable Forecast | Sperimentale · forecast · point-in-time | Giornaliero 08:50 Europe/Rome | Split temporale e persistenza; proxy separato da actual e mai maturato come forecast reale; baseline prospettica ENTSO-E A69 quando disponibile; nMAE/RMSE/bias/coverage/skill. |
| WF-14 · Process Sentinel | Sperimentale · dati sintetici (dati simulati) · anomaly detection | Ogni 6 h: 00:50/06:50/12:50/18:50 UTC | Parametri fissati su simulazione di sviluppo separata; stesso benchmark basato su dati sintetici (dati simulati) congelato di 28 giorni; event recall, missed rate, episodi di falso allarme/24h, delay P50/P90, confronto con ensemble v1.4.16 e anti-leakage. |
| WF-15 · Virtual Analyzer | Sperimentale · dati sintetici (dati simulati) · soft sensor | Ogni 6 h: 01:50/07:50/13:50/19:50 UTC | RMSE/MAE/bias/coverage, skill vs ultimo lab, split-conformal e truth-vs-lab; risk-coverage solo diagnostico. |
| WF-16 · Energy & Steam Optimizer | Sperimentale · ibrido pubblico + dati sintetici (dati simulati) · ottimizzazione | Giornaliero 11:50 Europe/Rome | Fattibilità, bilanci, ottimalità, tempo soluzione, stabilità, reference policy. |
| WF-17 · Etna Fusion Lab | Attivo · sperimentale · quality-aware | Nowcast orario · social Mar/Gio/Sab | Ledger immutabile delle emissioni, reconciliation sidecar, calibrazione prospettica, hysteresis/cooldown e learner adattivo soltanto in shadow prima dei gate. |
| WF-18 · Climate Comfort Hours | Attivo · educativo · euristico | Mar/Gio 17:00 · Dom 21:00 Europe/Rome | Validazione indipendente città/giorno, batch→cache recente→retry singolo, celle grigie su missing, pubblicazione solo con 4 città core e almeno 80% del paniere. |
| WF-19 · Lab Intelligence Community | Attivo · editoriale · automatizzato | Lun/Mer/Ven/Dom fissi · Mar/Sab FLEX | validazione slot e blackout, limite settimanale, deduplicazione, diff revisionabile e gate fail-closed su schedule, policy e credenziali |
| WF-20 · The Public Service Run | Attivo · educativo · sperimentale | Forecast giornaliero 05:17 · social Mar IT / Ven EN | MAE, RMSE, MAPE, errore assoluto mediano/p90, coverage P10–P90, top-1 departure accuracy, departure regret e stato esplicito del warm-up |
| WF-21 · Port Operability · NYC Ferry | Attivo · research shadow · verifica prospettica | Run giornaliero + watcher ogni 30 min · social Ven IT / Lun EN | Previsioni immutabili verificate a D+1 e D+7; metriche prospettiche su episode recall, lead time, alert burden su giorni verificati disponibili, horizon coverage e calibrazione riservata; UNKNOWN escluso dai denominatori. |
Lo stato indica la maturità progettuale, non garantisce disponibilità continua delle fonti esterne.
Come usare queste evidenze
Metriche diverse rispondono a domande diverse.
Capacità di delivery
Osservare test, modularità, logging, schedule, gestione degli errori e comunicazione dei limiti.
Mappa professionale →Validità empirica
Controllare baseline, separazione temporale, campione, calibrazione e risultati negativi.
Checklist accademica →Affidabilità operativa
Valutare freshness, run saltati, gate bloccanti, idempotenza e tracciabilità degli output.
Applicazioni →Dati non ancora centralizzati: il sito non inventa una percentuale complessiva di run riusciti. Sarà mostrata solo quando un registro automatico comune alimenterà il dato.