Création de tableau de bord, BI et entrepôt de données

mardi 31 décembre 2013

Commentaire sur le Bye bye 2013 minute par minutes #byebye2013

Voici les commentaires sur le Byebye 2013

Les données ont été extraites de twitter.

Le début du Byebye 2013, les gens trouvent déjà ça Woua




23h30   Woua, wow, excellent et crampé sont les mots les plus utilisés. Le sentiment est positif.



23h35 Antoine Bertrand vole la vedette avec son imitation de Miley Cyrus


Mathduff remake 


Le Byebye 2013 a été très apprécié.

Denis Coderre a apprécié son imitation ;-)



Les comptes twitter de Louis Morissette ( zemorissette) et Laurent Paquette ( lpaq) ont été les plus actifs pendant les premières heures du byebye 2013.


Les 100 mots les plus populaires à propos du  byebye 2013 une heure après la fin.



Plus d'analyse dans les jours qui vont venir....

lundi 16 décembre 2013

PowerPivot pour créer rapidement des tableaux croisées dynamiques avec Excel

Vous aimeriez rendre vos rapports dynamiques, esthétiques, conviviales et les déployer à d'autres collaborateur ou utilisateur comme vous ? Voici un exemple de rapport matriciel conçu à l'aide de "PowerPivot pour Excel 2010" contenant quatre mesures analysées selon les axes que vous désirez.
Les données ont été extraites d'un progiciel de gestion intégré (PGI ou ERP en anglais) dans le domaine financier combiné avec les données budgétaires. La table de faits contient plus de 8 millions d'enregistrements et peux être analysée selon 12 axes différents au choix de l'utilisateur. MS-Excel doit transporter les données sur le poste de l'utilisateur et la puissance de la base de données n'est pas mise à contribution pour créer ces requêtes. Les données doivent être rechargées sur le poste de travail à la création du rapport et à chaque actualisations des données.
Les mesures: Vous pouvez observer dans le rapport matriciel ci-dessous, les quatre mesures agencées en quatre couleurs distinctes. La colonne bleue étant le montant de budget initial alloué au début de l'année. Le montant réel, de couleur verte, représente les montants dépensés jusqu'à maintenant.  Le montant engagement, de couleur rouge,  est le montant de dépense en attente d'approbation et enfin, le montant disponible, en violet, est le calcul représenté par la soustraction des montants réels et engagements au montant budget initial.
  • Montant budget initial - Montant Engagement - Montant Réel = Montant Disponible

Les dimensions: Les dimensions sont les axes d'analyse que vous choisissez pour explorer de façon dynamique vos données. Ici nous avons choisi d'analyser les données selon les dimensions suivantes:
  • L'année fiscale, de la période financière, du niveau 5 du code de type de budget, de la fréquence en segment;
  • des niveaux 1, 2 et 3 de l'unité administrative sous forme de hiérarchies en lignes;
  • de la période et mois financier en entête de colonne.

Rapport matriciel SAGIR

L'image suivante vous montre comment ce rapport est bâtit sous forme de feuille de calcul, sans utiliser une seule ligne de code. La liste des champs PowerPivot est maintenant visible. Dans la partie supérieure de la liste des champs PowerPivot, à droite, sont présents tous les champs disponibles à la conception du rapport.

Dans les sections Segments verticaux et horizontaux, les champs qui y sont déposés, servent à la conception de contrôles de filtrages, qui seront ajoutés, de façon automatique, soit au-dessus à l'horizontal ou à gauche et à la verticale de votre rapport matriciel. Ces filtres vous permet de sélectionner rapidement des critères et d'afficher instantanément les modifications. Les sections Étiquettes de Lignes et Étiquette de Colonnes servent à y déposer nos axes d'analyse, les dimensions, qui apparaîtrons sur les lignes et les colonnes.

Structure du rapport SAGIR precedent


Dans les colonnes de couleur bleue, rouge, verte et violet sont présentes les mesures que vous désirez dans notre cas le budget, l'engagement, le réel et le nouveau calcul du montant disponible qui n'existait pas lors de l'extraction des données et qui a été créé dans powerpivot.

Dans la liste des champs PowerPivot, visible à droite, sont présents la section des filtres, des segments horizontaux et verticaux, les sections étiquettes de ligne et de colonne ainsi que la section valeurs. C'est en introduisant ou en enlevant des champs dans ces sections que l'utilisateur peut modifier les informations qui seront contenues dans son rapport.

Voici le résultat final du tableau de bord comprenant le rapport matriciel et graphique.

 
Tableau de bord SAGIR
Vous pourrez aussi intégrer votre rapport à SharePoint.

Conclusion:

·   Facilité d’utilisation (Utilisateur ou programmeur): Le plus grand avantage de PowerPivot est son  intégration à MS-Excel. La courbe d'apprentissage est courte pour les utilisateur de MS-Excel. C'est un outil très convivial et l'utilisateur obtiendra rapidement des résultats.  Il est aussi facile à installer ( Télécharger ici )

·   Temps pour la construction du rapport par un utilisateur: cliquer ici pour plus de détails

·   Temps réponse de la requête: cliquer ici pour plus de détails

·   Exploitation dynamique pour construire d’autres rapports: cliquer ici pour plus de détails

·   Facilité de déploiement: cliquer ici pour plus de détails

·   Couche en langage d’affaires: cliquer ici pour plus de détails
·   Sécurité: cliquer ici pour plus de détails


Si vous souhaitez en apprendre plus sur PowerPivot pour Excel 2010, nous avons des formations pour vous. Vous pouvez visiter notre site :

Spécialiste en BI et tableau de bord


Voir aussi:



SSRS - Tableau croisé - Rapports matriciels avec SSRS (SQL Server Reporting Services)

Vous voulez analyser vos données financières, croiser les données de budget avec le réel afin d'obtenir les montants disponibles. Vous voulez réaliser cette analyse financière pour chacun de vos projets, par diverses unité administratives et dans le temps.


Voici un exemple de rapport intégré dans un tableau de bord avec SSRS. Les données ont été extraites d'un progiciel de gestion intégré (PGI ou ERP en anglais) dans le domaine financier combiné avec les données budgétaires. La table de faits contient plus de 8 millions d'enregistrements et peut être analysée selon 12 axes d'analyse différents aux choix de l'utilisateur comme le temps, l'unité administrative, l'entité et les projets. 


  • Montant budget initial - Montant Engagement Montant Réel = Montant Disponible
  • de l'année fiscale, de la période financière, du niveau 5 du code de type de budget en paramètre
  • des niveaux 1, 2 et 3 de l'unité administrative en lignes
  • de la période et mois financier en en-tête de colonnes
Les mesures: Vous pouvez observer dans le rapport matriciel ci-dessous, les quatre mesure agencées en quatre couleurs différentes. Le montant de budget initial alloué au début de l'année, en bleu. Le montant réel, en rouge, représente les montants dépensés jusqu'à maintenant.  Le montant engagement, en vert,  est le montant de dépense en attente d'approbation et enfin, le montant disponible, en orange, est le calcul représenté par la soustraction des montants réels et engagements au montant budget initial.
Les dimensions: Les dimensions sont les axes d'analyse que vous choisissez pour explorer de façon dynamique vos mesures. Ici nous avons choisi d'analyser les mesures selon les dimensions suivantes:


 Pour créer notre''dataset'' principal qui va contenir toutes les données sur lesquels nous allons faire des rapports dans  ''Report Data'' faire un clic droit pour ajouter l'ensemble de données.



La fenêtre Dataset properies s'affiche:


Nous pouvons utiliser l'assistant, le Query Designer permet de créer des requêtes sans avoir à apprendre le langage SQL.


L'image suivante vous montre comment le dataset du rapport est bâtit avec SSRS sans utiliser une seule ligne de code.La matrice est construite en choisissant vos axes d'analyse, les dimensions, qui apparaîtrons dans les colonnes et en-tête de lignes a partir du ''dataset''.
À l'intersection ajoutez quatre nouvelles colonnes, ensuite vous glissez simplement les mesures que vous désirez dans notre cas le budget, l'engagement, le réel et le nouveau calcul du montant disponible qui n'existait pas lors de l'extraction des données.  



Par la suite vous pouvez créer un graphique avec SSRS pour voir l'évolution des dépenses à parti du rapport que vous avez créé. Ce rapport et ce graphique pourront être déployé dans Sharepoint et partagé aux utilisateur de votre organisation qui ont les droits (sécurité).


Conclusion:


· Facilité d’utilisation (Utilisateur ou programmeur): cliquer ici pour plus de détails


· Temps pour la construction du rapport par un utilisateur: cliquer ici pour plus de détails


· Temps réponse de la requête: cliquer ici pour plus de détails


· Exploitation dynamique pour construire d’autres rapports: cliquer ici pour plus de détails


· Facilité de déploiement: cliquer ici pour plus de détails


· Couche en langage d’affaires: cliquer ici pour plus de détails
· Sécurité: cliquer ici pour plus de détailsSi vous souhaitez en apprendre plus nous avons des formations pour vous. Vous pouvez visiter notre site :
Panorama Technologies
Spécialiste en BI et tableau de bord
OBIEE- Tableau croisé dynamique - Créer des rapports matriciels à l'aide de OBIEE (Oracle Business Intelligence Enterprise Edition)
PowerPivot - tableau croisé dynamique - Créer des rapports matriciels à l'aide de PowerPivot pour Excel 2010

mercredi 11 décembre 2013

SSRS - Forage dans un cube SSAS - drillthrough


Dans ce blogue, nous allons explorer les données avec un niveau de détails plus fin (forage). En plus, nous allons utiliser une hiérarchie pour faire le forage et obtenir le détail avec les enfants de cette hiérarchie.

Le rapport est construit à partir de SSRS (SQL Server Reporting Services) avec comme source de données un cube SSAS (SQL Server Analysis Services).

Les données ont été extraites d'un progiciel de gestion intégré (PGI ou ERP en anglais) dans le domaine financier combiné avec les données budgétaires. Nous avons construit un cube à partir de la table de faits qui contient plus de 8 millions d'enregistrements et peut être analysée selon 12 axes différents au choix de l'utilisateur. 
Les mesures : Le montant de budget initial alloué au début de l'année, visible dans le premier encadré. Le montant engagement, visible dans le deuxième encadré, représente le montant de dépense en attente d'approbation. Le montant réel, dans le troisième encadré, sont les montants dépensés jusqu'à maintenant et enfin, le montant disponible, dans le tout dernier encadré, est le calcul représenté par la soustraction des montants réels et engagements au montant budget initial.

  Montant budget initial - Montant Engagement - Montant Réel = Montant Disponible

 Les dimensions : Les dimensions sont les axes d'analyse que vous choisissez pour explorer de façon dynamique vos mesures. Ici, nous avons choisi d'analyser les mesures selon les dimensions suivantes :

  • de l'année fiscale, et du niveau 5 du code de type de budget en paramètres
  • des niveaux de l'unité administrative sous forme de hiérarchies en lignes, de l'entité, de la période et mois financier en en-tête de colonnes




Dans l’image ci-dessus nous avons un rapport principal appelé Main liée à un autre nommé Details. Le Main est une matrice croisée dynamique (matrix) qui donne une vue globale des mesures pour le premier et le deuxième niveau de l’unité administrative selon la période financière et le mois. Le Details sera appelé et filtré en contexte de la cellule choisi dans le Main. L’utilisateur peut naviguer entre les deux rapports pour faire des analyses plus approfondies. Ce passage d’un rapport à un autre se fait ici avec un forage sur les mesures.

Après avoir configuré votre « data source », nous allons maintenant créer notre rapport principal. Cette étape nécessite que vous sachiez à l'avance les différents champs, filtres et paramètres que nous utiliserons dans le rapport pour établir le « dataset ». Ces décisions auront un impact sur la façon dont vous pourrez forer
Au niveau du rapport de détail, il faut ajouter un paramètre « paramUA » ce dernier permettra de stocker le UniqueName du niveau précis sélectionné dans le rapport principal.
 



Étant donné qu'on veut un membre particulier de la hiérarchie, il faut créer un membre calculé UniqueName qui contiendra le membre parmi les différents membres de la hiérarchie. Le membre calculé sera créé dans les champs du dataset. Ce champ sera utilisé ultérieurement pour transmettre le niveau (master) sélectionné au rapport Details.

Enfin il reste à mettre en place l’action SSRS de type « Go to report » dans le rapport d’analyse au niveau de la cellule contenant la mesure.

Il suffit alors de sélectionner le rapport de détail et d’effectuer le mapping des paramètres du rapport.



Étant donné que nous voulons aussi les enfants dans la hiérarchie (et pas seulement le niveau sélectionné dans le Main), nous allons modifier la requête MDX pour le rapport détaillé. Dans les propriétés du dataset nous l’éditons comme chaine de caractères en ajoutant le paramètre dans la requête comme le montre l'image ci-dessous.


Nous obtenons par forage le niveau de l'unité administrative désiré (le niveau B-DG Ouest) et ses enfants (niveau C), pour la période financière 2 (mai). Les montants réels correspondent soit x $


Différence entre SSRS, SSIS et Microsoft SSAS?

Microsoft SQL Server est un système de gestion de base de données relationnelles developpé et commercialisé par la société Microsoft.

SQL Server dispose d'un moteur base de données qui est central et permet le stockage et la traitement les données. Grâce à celui ci il y a un contrôle sur les accès et le traitement les transactions pour répondre aux besoins des applications.

Parmi les fonctionnalités qu'offrent SQL Server dans le domaine du BI (Business Intelligence) nous avons
 :  SSIS (SQL Server Integration Services) ,SSRS(SQL Server Reporting Services) et SSAS(SQL Server Analysis Services ).


 SQL Server Integration Services (SSIS)

 Ce Service est l'outil d'ETL (Extract Transform Load ) de Microsoft et permet d'alimenter notre datawarehouse à partir de données provenant de plusieurs sources.Pour cela il faudra commencer d'abord par extraire les données, les transformer puis les sauvegarder dans la base de données. Les données peuvent provenir de différentes sources (fichiers Excel, MySQL ,Oracle etc ...)

Lors de la création d'un projet SSIS nous avons un package qui est créé et celui est un ensemble  d'actions qui va être exécuté dans un certain ordre. Parmi les actions nous avons des taches qui aident à l’établissement de l’entrepôt de données qui peuvent être des taches de transfert de base de données des taches de script etc ...

SQL Server Reporting Services (SSRS)

 SQL Server Reporting Services permet  la création ,le déploiement et la gestion de rapports à partir de différentes sources de données. Avec SSRS nous pouvons avoir différents types de rapports qui peuvent être entre autre tabulaire, graphique ou matriciels. 

Des connexions peuvent être faites à partir de SSRS et d'autres outils reporting au cube déployé sur le serveur. SSRS peut baser son dataset sur un cube ou une base de données comme Oracle

Ces rapports peuvent être exportés vers divers formats de fichiers  par exemple pdf ou fichiers MS-Excel .

 Les rapports peuvent être aussi partagés par le biais d'une connexion internet internet s'ils sont déployés sur le serveur ou aussi par l’intermédiaire de Sharepoint.

 SQL Server Analysis Services (SSAS)

SQL Server analysis Services  va nous permettre la conception, la création et la gestion  des structures multidimensionnelles, les cubes. Les cubes contenant des données agrégées à partir d’autres sources de données, comme les bases de données relationnelles (schéma étoile), fichier plat ou tout autres sources de données.

SSAS est un moteur d'exploration de données et permet de répondre à des requêtes de consultation de données créées avec les cube et le langage MDX.

Il est possible de définir des rôles de sécurité afin de restreindre l’accès aux données à des comptes et/ou groupes d’utilisateurs Windows identifiés.