Business Intelligence Semantic Model

Business Intelligence Semantic Model
Tomislav Piasevoli
SoftPro Tetral d.o.o.
Sommario
•
•
•
•
•
Cos’è BISM?
PowerPivot
SQL Server „Denali”
Il significato di BISM
Linee Guida
Pre requisiti
• Interesse per la BI
• Curiosità 
Poche domande prima di partire...
• Quanti di voi hanno lavorato con PowerPivot
• Quanti di voi hanno lavorato con PowerPivot su
SharePoint?
• Quanti di voi hanno esperienza nella costruzione di
cubi?
• Quanti di voi hanno usati i cubi per creare la
reportistica?
1
COS’E’ BISM?
Sistemi di Analisi
• Trasformare dati in informazioni
• Obiettivi dell’architettura
1. Ottimizzare l’accesso ai dati
2. Preparare i dati per l’analisi
I – Ottimizzare l’accesso ai dati
• Memorizzare i dati in strutture adeguate per
l’analisi e query ah-hoc o lasciarli «cosi come
sono» sulla fonte dati
• requisiti
–
–
–
–
Buone prestazioni
flessibilità
scalabilità
...
• Quale tecnologia utilizzare o scegliere ‘
MOLAP, ROLAP, HOLAP
• row-based databases
– MOLAP = Multidimensionale
– ROLAP = Relazionale
– HOLAP = Ibrido (solo per gruppo di misure = fatti)
•
•
•
•
prestazioni basate su aggregazioni
partizionamento
compressione (MOLAP)
Non limitato dalla memoria disponibile
II – Preparare i dati per l’analisi
1. Consentire l’analisi dei dati come se ci fosse un’unica
fonte
– In realtà ci possono essere diverse fonti sorgente
•
•
•
•
databases relazionali
File Excel
File di testo
RSS feeds, ...
– Dove effettuare il collegamento tra queste fonti ?
2. Fornire l’interpretazione (logica business) ai dati
– Come renderli comprensibili all’utente finale
Semantic data model
• Un livello di Metadati
– Descrive i concetti (entità) e le connessioni
(relazioni) tra di loro
– E’ orientato all’utente
• Mostra ciò che le tabelle e le relazioni rappresentano nel
mondo reale.
semantica= lo studio del significato
UDM
•
•
•
Modello semantico esistente per la BI
Fornito con SQL Server 2005
Consente di collegare dati provenienti da fonti
diverse
– Aggiungere le relazioni tra le tabelle
– Aggiungere calcoli
• Nelle tabelle – colonne calcolate DSV (T-SQL)
• Sul modello – MDX script (MDX)
– I calcoli non possono essere combinati
(Linguaggi differenti!) o è molto difficile farlo
UDM – Modello dati 1/3
UDM – Modello dati 2/3
UDM – Modello dati 3/3
UDM – Analisi dei Dati
SQL Server 2005 Analysis Services
SharePoint 2003
&
SharePoint 2007
Reporting Services
2005
&
Report Builder 1
3rd party SSAS
clients
•Reporting Services
MDX
MDX
PerformancePoint
2007
MDX
MDX
Excel 2003 +
add-in
&
Excel 2007
MDX
SQL Server 2008 Analysis Services
SharePoint 2007
• Reporting Services
• PerformancePoint Services
• Excel Services
• Visio Services
Reporting Services
2008
&
Report Builder 2
MDX
MDX
Excel 2007
MDX
3rd party SSAS clients
MDX
SQL Server 2008 R2 Analysis Services
SharePoint 2010
Reporting Services
2008 R2
&
Report Builder 3
•Excel Services
•PerformancePoint
Services
•Visio Services
MDX
MDX
Excel 2010
MDX
3rd party SSAS
clients
MDX
PowerPivot add-in for Excel 2010
2
POWERPIVOT
PowerPivot
• Versione integrata in SQL Server 2008
R2 Analysis Services
• Copre sia la Self Service BI che la BI
Corporate
Integrazione
Excel 2010
• free add-in for Excel 2010
(www.powerpivot.com)
• Versione a 32-bit e 64-bit
SharePoint 2010
• SQL Server 2008 R2 x64
• Durante l’installazione
selezionare SQL Server
PowerPivot for
SharePoint
25
VertiPaq
• Database «in-memory» basato su colonne
• Compressione dei dati molto elevata
• Scala in maniera lineare con il nome di
processori
• Non richiede un processo di progettazione e di
costruzione di aggregazioni.
• Previsto per sostenere il partizionamento di
grandi formati dei dati. (anche se non lo fa in
PowerPivot)
BISM v1
•
•
•
Nuovo modello semantico per la BI
Presente in SQL Server 2008 R2 (PowerPivot!)
Consente di collegare dati provenienti da varie
fonti dati
– Aggiungere relazioni tra le tabelle
– Aggiungere misure calcolate
• In tabella – colonne calcolate (DAX)
• Nel modello – misure calcolate(DAX)
– I calcoli possono essere combinati. (Stesso
Linguaggio)
BISM v1
• Si fondono insieme la base analitica e la base
di reportistica
– reporting, analysis, dashboards e
scorecards
– Bi personale, di gruppo e aziendale
• Lavora in cached (VertiPaq)
BISM v1 – Modello dati
BISM v1 – Analisi dei dati
3
SQL SERVER „DENALI”
BISM v2
• Un modello per tutto
– reporting, analysis, dashboards, scorecards
– personal, team, corporate BI
• È stato annunciato che ci sarà un supporto sia
per i valore in cache (VertiPaq) e in tempo
reale.*
* Solo con sorgente dati su SQL Server per adesso.
Pass-through
• Nessun database aggiuntivo
• I dati rimangono come nei database originali
• Ideale per analisi real-time
BI semantic model e i suoi strati
Modello Dati
• Modello relazionale
• Supporta sia l’interfaccia relazionale (DAX) che
multidimensionale (MDX).
Logica di Business
• Calcoli in DAX (colonne e misure calcolate)
• dopo„Denali” forse anche in MDX
Accesso ai Dati
• In memoria (VertiPaq)
• in „Denali” ance ral-time (pass-through mode)
Analysis Services „Denali” - UDM
SharePoint 2010
• Excel Services
• Reporting Services
• PerformancePoint Services
• Visio Services
Reporting Services
„Denali”
MDX
3rd party SSAS clients
SharePoint 2010
MDX
• Project Crescent
MDX
MDX
Excel 2010
MDX
Analysis Services „Denali” - BISM
SharePoint 2010
• Excel Services
• Reporting Services
• PerformancePoint Services
• Visio Services
Reporting Services
„Denali”
MDX
3rd party SSAS clients
SharePoint 2010
MDX
• Project Crescent
DAX
MDX
DAX
Excel 2010
MDX
DAX
3rd party SSAS
clients
PowerPivot „Denali” add-in for Excel 2010
Excel
2010
Miglioramenti annunciati di BISM
• Gerarchie, KPIs, Padre-Figlio,
drillthrough, Prospective
• Funzioni DAX nuove (RankX,
DistinctCount, GroupBy, Lookup, ...)
• Sicurezza (basati sui ruoli con Active
Directory.)
Cosa non ci sarà nel BISM in
„Denali” ?
• Alcune delle caratteristiche UDM
– scripts, azioni, traduzioni
– object model
– write-back
• Altro
– realtime per sorgenti diverso da SQL Server
– Supporto query MDX
Miglioramenti UDM in „Denali”
• Per lo più al di fuori di GUI
– Non più di 4GB di limite di una stringae limit
– Miglior supporto per PowerShell
– Miglior monitoraggio (XEvents)
– Varie ottimizzazione del motore.
• l'obiettivo è quello di
rendere SSAS (istanza UDM) più
scalabile
4
IL SIGNIFICATO DI BISM
Vantaggi di BISM
• Modelli relativamente semplici (no cubi,
dimensioni, misure, ...)
• Risposta veloce indipendetemente dalla
granularità della query
• Flessibilità (ogni colonna può essere un attributo
o una misura)
• Calcoli in DAX molto simili alle formule Excel
• Formato del modello relazione col risultato di
essere più comprensibile per la maggior parte
delle persone.
Il modello semantico
PowerPivot
per Excel
PowerPivot
per
SharePoint
SSAS
„Denali”
Scalabilità
Excel
SharePoint
„Denali”
Altri vantaggi di BISM
•
•
•
•
Sviluppo più rapido che in UDM
Prototipi realizzare dagli utenti finali
Facilità di cambiare il modello
Riduzione dei costi di sviluppo di una
soluzione di BI
Nuove possibilità nella
modellazione dei dati
• Punti salienti da vari blocìg
– Marco Russo – ad-hoc joins, ETL?
– Thomas Ivarsson – master-detail design
– Alberto Ferrari – point-in-time, SCD-2, rank
5
LINEE GUIDE
source: Thomas Kejser, SQLCAT
ColumnStore
50 TB
5 TB
100 GB
ROLAP
Scalabilità*
Posizionamento del BISM
Scalabilità=
- buon supporto per le query concorrenti
- non dipende dalla memoria disponibile
- buona manutenibilità
MOLAP
BISM
2 GB
PowerPivot
Usabilità
Conclusioni
•
•
•
•
BISM non sostituisce di UDM
DAX non sostituisce MDX
Ogni modello ha i suoi vantaggi
Chi realizza le soluzioni di BI decide e
consiglia qual è il modello migliore.
Vantaggi e Svantaggi
BISM
UDM
Sviluppatori BI
• La maggior parte delle soluzioni esistenti
rimangono in UDM
• Nuove soluzioni
– Usano UDM per sistemi complessi (calcoli
complessi, write-back, forecasting, ...)
– Si prova BISM come soluzione potenziale per i
nuovi o semplici progetti.
• UDM eBISM possono essere installati
insieme su diverse istanze
Utenti, ecco il kit fai da te
• Provare Office 2010
• Installare il PowerPivot for Excel 2010
add-in
• Caricare e relazionare da varie fonti dati
• Provare e studiare DAX
• Analizzare i propri dati
• Convalidare la completezza del modello
Il modello giusto?
• Self Service BI
– Excel 2010 e PowerPivot
• Corporate BI
– SharePoint 2010 e SQL Server „Denali“
Modello non ancora ok?
• Miglioramenti
– Esperienza degli utenti e degli sviluppatori
– Consulenti esterni
• Miglioramenti possibili?
– PowerPivot
– SQL Server „Denali“ (istanza BISM)
• Altro...
– Implementazione di modelli UDM basati su BISM
source: TechNet
Related content
• Presentations
– MS BI Roadmap (SQL Server Denali)
• Workshops
– Build Your First Microsoft BI Solution with SQL
Server 2008 R2