Syllabus

Question 1

Business intelligence

Answer 1

• Application logiciel qui collecte et traite une grande quantités de données.
• Permet d’extraire, transformer et charger les données dans un nouvelle environnement.
• Les données sont representés sous forme de tableau de bords interactif permettant aux utilisateurs de faire des analyses dynamiques et de prendre de décisions plus éclairés.
• Répond à la question : Quels sont le performances actuelles et passées de mon entreprise ?
• BI s’applique aux données structurées ou semi-structurées, provenant principalement de bases de données relationnelles.

Question 2

Data science

Answer 2

• Domaine interdisciplinaire combinant les mathématiques, les statistiques, la programmation spécialisés, le deep learning, le machine learning pour extraire les informations afin de guider la prise de décisions et la planification stratégiques
• Le data science peut être decriptive, prescriptive ou predictive.
• S’applique aux données structurées, semi-structurées et non structurées
• Inclut des informations provenant de bases de données relationnelles et non relationnelles.

Question 3

Quels sont les 3 types de données ?

Answer 3

• Données structurées
• Données semi structurées
• Données non structurées

Question 4

Il existe quatre types d’échelles pour mesurer une variable :

Answer 4

• Nominal
• Ordinal
• Interval
• Proportionnelle

Question 5

Qu’est ce qu’une variable nominal ?

Answer 5

• Une variable nominal est une vairable qualitatif mais ne pas pas être classé sous un ordre logique / hiérarchique.
• Par exemple, on ne peut pas dire que jaune > rouge, ni inversemement.

Question 6

Qu’est ce qu’une variable ordinal ?

Answer 6

• Une variable ordinal est une variable qualitatif qui peut être classé sous un certain ordre logique.
• Par exemple, Bonne note > moyenne note > mauvaise note

Question 7

Qu’est ce qu’une variable interval ?

Answer 7

• Une variable interval est une variable quantitatif dont les intervalles entres les valeurs ne sont pas constantes.
• Exemple: mesure de la temperature - 12/15/2022 13:45:34 7.2 C°; 12/15/2022 13:46:15 7.1C°; 12/15/2022 13:52:55 7.4 C°.

Question 8

Qu’est ce qu’une variable proportionnelle ?

Answer 8

• Une variable quantitative proportionnelle contient des valeurs qui sont caractérisées par des proportions égales entre les valeurs mesurées, de sorte qu’un calcul mathématique direct et constant est possible.
• Exemple : une personne pesant 90 kg est deux fois plus lourde qu’une personne pesant 45 kg.

Question 9

Quel est la différence entre variable discrète et continus ?

Answer 9

• Une variable continue a un nombre infini ou indéfini de valeurs. Il s’agit de données dont les valeurs appartiennent à un sous-ensemble infini de l’ensemble R. Par exemple, si la température est comprise entre 10 et 12°C, la variable peut prendre l’une des innombrables valeurs existantes et mesurables : 10,007°C, 11,11°C ou 11,9999°. Exception lorsque l’ensemble des valeurs est grand. Par exemple, l’âge : ce n’est pas un nombre infini, mais nous avons plusieurs dizaines de valeurs. La variable est donc considérée comme continue.
• Une variable discrète a un nombre fini ou dénombrable de valeurs. Exemple : niveau d’éducation, Primaire, secondaire, supérieur, universitaire… Mais il peut aussi s’agir d’une variable quantitative si elle ne prend que des valeurs isolées. Par exemple, un âge, une note arrondie à 0,5, etc. Les variables binaires sont un cas particulier d’attributs discrets.

Question 10

La différence entre une base de données relationnelle et une base de données non relationnelle ?

Answer 10

• La différence est le stockage de l’information (stockage sous forme de table ou de clé/valeur).
• Bien que NoSQL réponds aux problèmes actuels du Big Data, il ne remplace pas la base de données relationnelle, mais la complète. Les données sont en effet regroupées dans un second temps pour être analysées.

Question 11

Une base de données contient les données de

Answer 11

• Computer application
• ERP
• API (application promgramming interface)
• A data lake
• Site web, réseau sociaux

Question 12

Qu’est ce qu’un API ?

Answer 12

• Solution permettant d’accéder à distance aux fonctions ou aux données d’une application.
• Une requête est envoyée au logiciel cible dans un langage universel qui effectue les actions et délivre le contenu demandé.
• Grâce à une API, les applications peuvent communiquer entre elles et échanger des services ou des données.

Question 13

Qu’est ce que data lake ?

Answer 13

• Réservoir de données brute qui alimente un processus décisonnelle.
• Contrairement a la base de données, les données de data lake ne sont pas modélisées.

Question 14

Data warehouse, entrepôt de données ?

Answer 14

• Base de données et ses outils qiu sont collecter et stockées dans un entrepôt de données qui regroupes et stocke les données actuelles et historiques.
• Les données proviennent de plusieurs système opérationnelle et de source externe, chacun avec des modèles de données différents
• Les données peuvent être consultés mais pas modifiés.

Question 15

Qu’est ce qu’un star shema ?

Answer 15

• Utilisé pour organiser les données dans le datawarehouse, en particulier, pour la couche dataamart.
• Caractérisé par un table de fait et une table dimensions.

Question 16

Le but d’un star schéma ?

Answer 16

Limiter le nombre de jointure afin d’accélerer l’analyse des données lorsque les utilisateurs font des requêtes dans les différentes vues.

Question 17

Qu’est ce qu’une table de fait ?

Answer 17

• Contient des observations (transactions - mesures numériques) et un ensemble de champs “clé” qui détermine la granularité de la table des faits.
• Contient une grand nombre de ligne mais un faible nombre de colonne.

Question 18

Qu’est ce qu’une table dimension ?

Answer 18

• Fournit des informations supplémentaires pour les observations.
• Contient un grand nombre de colonne mais peu de lignes.
• Les dimensions sont généralments utilisées comme filtres pour les observations.
• Décrit les entités de l’entreprise : les éléments que vous modélisez. Les entités peuvent inclure des produits, des personnes, des lieux et des concepts, y compris le temps lui-même.

Question 19

Quel est la différence entre normalization et dénormalizations ?

Answer 19

• La normalisation est le processus d’organisation des données pour réduire les répétitions. Elle implique la création de tables qui ne stockent que les valeurs clés, réduisant ainsi la redondance.
• Un exemple est une table de produits où chaque produit est identifié par une clé unique et où des colonnes séparées détaillent des caractéristiques telles que le nom, la catégorie, la couleur et la taille.
• Toutefois, si la table contient des détails qui vont au-delà de la clé, elle est considérée comme étant dénormalisée.

Question 20

L’option Cardinalité peut prendre l’une des valeurs suivantes :

Answer 20

• One to many
• One to one
• Many to many

Question 21

Qu’est ce que one to many ?

Answer 21

Une relation de plusieurs à un est le type de relation par défaut le plus courant. Cela signifie que la colonne d’une table donnée peut avoir plusieurs instances d’une valeur, tandis que la table liée n’a qu’une seule instance d’une valeur.

Question 22

Qu’est ce que one to one ?

Answer 22

• Une colonne de table n’a qu’une seule instance d’une valeur donnée, et la table liée n’a qu’une seule instance d’une valeur donnée.

Question 23

Qu’est ce que many to many ?

Answer 23

• Avec les modèles composites, vous pouvez établir des relations de plusieurs à plusieurs entre les tables, ce qui élimine le besoin de valeurs uniques dans les tables.

Question 24

Qu’est ce qu’une mesure ?

Answer 24

• Une mesure est un champ calculé. Il s’agit le plus souvent d’une fonction d’agrégation appliquée à des données
  considérées comme des faits.
• SUM, MIN, MAX ou AVERAGE

Question 25

Qu’est ce qu’une dimension ?

Answer 25

• Une dimension est une donnée non numérique qui ne permet PAS d’effectuer des calculs, comme le nom, le jour, le pays, etc,
• L’exception à la règle : Count, qui permet de mesurer sur la base d’une dimension, et donc d’une variable qualitative Count(distinct ProductName).

Question 26

Qu’est ce que ETL ?

Answer 26

Il s’agit du processus d’extraction, de transformation et de chargement des données, dans le but de produire des données propres et faciles d’accès qui peuvent être exploitées efficacement par l’analyse.

• Extraction : extraire des données brutes à partir de sources multiples.
• Transformation : application de règles internes aux données brutes pour répondre aux exigences de reporting.
• Chargement : charger les données extraites et transformées dans leur nouvel environnement.

Question 27

Expliquez l’extraction des données

Answer 27

Elle consiste à créer des connexions avec les sources de données. Cette étape s’appuie sur des connecteurs, interfaces préexistantes qui facilitent l’échange d’informations entre l’outil de BI et la base de données initiale. D’une manière générale, les connecteurs nécessitent quelques configuration de base :
- Définition de l’adresse IP (adresse où se trouve le serveur hébergeant la base de données).
- Nom de la base de données.
- Un nom d’utilisateur et un mot de passe avec un accès en lecture à la base de données.
- Le port utilisé pour identifier une application/service spécifique fonctionnant sur le serveur.

Question 28

Expliquez l’étape de transformation

Answer 28

Implique de se familiariser avec les données et d’identifier celles qui sont incorrectes pour les traiter ou appliquer des règles commerciales. L’analyse de la distribution des variables, examinée variable par variable, permet de mieux comprendre les données. La représentation graphique aide à identifier le contenu des variables et les transformations nécessaires, telles que les valeurs manquantes et les outliers.

Le traitement des données incorrectes vise à améliorer leur fiabilité en remplaçant ou supprimant les données problématiques.

La deuxième étape concerne la transformation ou l’ajout de données. Deux méthodes principales sont utilisées : transformer les données existantes dans une variable ou créer une nouvelle variable calculée à partir d’autres. Cela peut inclure la définition de nouvelles valeurs de colonnes, la fusion de textes de différentes colonnes, ou le calcul de valeurs numériques à partir d’autres données. Par exemple, combiner des champs Ville et État en un champ unique Emplacement.

Question 29

Expliquez load

Answer 29

Les outils de BI stockent généralement les données qu’ils analysent dans la mémoire vive de l’ordinateur (RAM). Cela signifie que ces outils ne travaillent pas directement avec les données originales, mais avec une copie sauvegardée à un moment donné. Cette méthode, appelée mise en cache des données, rend les analyses et les rapports plus rapides et interactifs.

Cependant, quand les données à analyser sont très volumineuses, il n’est pas toujours possible de les stocker entièrement dans la RAM. Dans ce cas, seules certaines parties des données sont mises en cache. Pour le reste, les outils de BI vont interroger directement la source des données. Cette approche peut ralentir les outils

Question 30

Qu’est ce qu’un système informatique ?

Answer 30

Ensemble organisé de ressources : matériel, logiciel, personnel, données, procédures… permettant d’acquérir, de traiter, de stocker et de diffuser des informations au sein des organisations et entres elles.

Nous trouvons donc :

• L’infrastructure - serveurs, stockage, bases de données, réseaux, virtualisation, cloud, Big Data, IoT, sécurité, etc.
• Les applications - l’ERP est le cœur du SI, auquel s’ajoutent le CRM (clients), le SIRH (Système d’Information de Gestion des Ressources Humaines), le marketing, les secteurs d’activité spécifiques, les développements spécifiques, les services, - - - Les API (Interface de Programmation d’Applications), etc.
• Les utilisateurs/acteurs - plus spécifiquement, les outils et services allant du bureau à l’environnement mobile.

Question 31

Qu’est ce que le Crisp-Dm model ?

Answer 31

Détermine les étapes clés dans le processus de traitement d’un problème d’analyse de données.
Cette méthode identifie 6 étapes clés :
- Compréhension des affaires (business understanding)
- Compréhension des données
- Préparation des données
- Modélisation
- Evalutation
- Déploiement

Question 32

Que doit contenir le rapport « inventaire des source(s) de données » (inventory of data source report) ?

Answer 32

• La quantité de données (volume)
• Le type de variables (quantitatives ? Qualitatives ? Booléennes ?)
• Le taux de complétude des informations
• Les erreurs de données (encodage incorrect)
• Les valeurs aberrantes
• Le taux de remplissage, la densité de l’information

Question 33

La préparation des données implique généralement les tâches suivantes :

Answer 33

• Fusionner des ensembles de données et/ou des enregistrements
• Sélectionner des sous-ensembles de données
• Agrégation d’enregistrements
• Création de variables calculées
• Transformation de variables existantes
• Trier les données pour la modélisation
• Supprimer ou remplacer les blancs ou les valeurs manquantes
• Diviser en sous-ensembles d’apprentissage et de test (science des données)

Question 34

En quoi consiste la phase de modélisation ?

Answer 34

La modélisation des données est l’étape où l’on crée une structure organisée pour analyser les données. Cela signifie créer un “schéma en étoile”, une sorte de plan qui montre comment différentes données sont connectées. On utilise des techniques comme la jointure et la concaténation.

Question 35

En quoi consiste l’évaluation ?

Answer 35

L’évaluation consiste à partager les résultats du projet avec des utilisateurs importants de l’entreprise pour s’assurer que le travail accompli répond bien aux objectifs fixés au départ et que les informations sont bien présentées, sous forme de tableau de bord.

Question 36

Qu’est ce que la technique descriptives non supervisées ?

Answer 36

Sert à découvrir des informations cachées dans de grandes quantités de données. On explore les données sans chercher à prédire une variable spécifique. L’objectif est de laisser les données révéler leurs propres tendances et structures. Ces techniques aident à identifier des modèles ou à établir de nouvelles règles sans avoir été préalablement “formées”.

Question 37

Qu’est ce que la technique prédictives supervisées ?

Answer 37

Ces techniques sont utilisées pour faire des prédictions basées sur des données existantes. Elles se divisent en deux sous-catégories :

• Estimation : On cherche à prédire une valeur numérique (quantitative) en se basant sur d’autres variables. Par exemple, prédire le prix d’une maison en fonction de sa taille, du nombre de chambres, etc.
• Classement (ranking) : On cherche à prédire une catégorie (qualitative) en utilisant d’autres variables. Par exemple, déterminer si un T-shirt sera un best-seller ou non en se basant sur son prix de vente, les dépenses marketing, et le coût des matières premières.

Question 38

Pour superviser une machine, on partitionne les données :

Answer 38

• Ensemble d’entraînement : Utilisation de 60% des données pour “entraîner” le modèle.
• Ensemble de validation : Utilisation des 40% restants pour vérifier si le modèle a bien appris. On compare les prédictions du modèle avec les valeurs réelles

Question 39

L’apprentissage des algorithmes se déroule en quatre étapes :

Answer 39

• Apprentissage : Créer une règle basée sur les données d’entraînement où les résultats sont déjà connus. Le modèle apprend la relation entre les variables d’entrée (X) et la variable cible (Y).
• Test : Tester le modèle sur un nouvel échantillon pour évaluer sa précision.
• Validation : Vérifier la performance du modèle sur un autre ensemble de données pour s’assurer qu’il peut généraliser ce qu’il a appris à de nouvelles données.
• Application : Utiliser le modèle sur de nouvelles données pour faire des prédictions.

Question 40

En quoi consiste ETL ?

Answer 40

L’ETL consiste à prendre des données de différentes sources, à les convertir dans un format utilisable, puis à les placer dans une base de données pour analyse.