Forum régional de normalisation de l'UIT pour l'Afrique (Kampala, Ouganda, 23-25 ​​Juin 2014) Suivi QoS / QoE de l’approche nouvelle des réseaux mobiles Pourquoi suivre la QoS / QoE des réseaux mobiles? Tahitii Obioha Network Planning and Optimisation Engineer Planet Network International, France. Kampala, Uganda, 25 June 2014

 Suivi = observation, contrôle et maintien d'un registre continu du progrès ou de la qualité de quelque chose. Suivi = observation, contrôle et maintien d'un registre continu du progrès ou de la qualité de quelque chose.  C'est l'utilisation de tout outil technique disponible pour évaluer en permanence ou pour une période de temps donnée, un paramètre de qualité de service particulier, par exemple, un temps d’installation d’appels. (ETSI EG 202 009-2) RAISONS   Pour les utilisateurs finaux: Satisfaction signifie obtenir la meilleure valeur pour leur argent parmi d'autres choix  Pour les opérateurs: la satisfaction des utilisateurs accroît les revenus, affermit la loyauté de leur clientèle, consolide l'avantage concurrentiel parmi les concurrents. Des enquêtes ont montré que près de 90% des clients ne se plaignent pas avant de faire défection.  Pour les régulateurs: la satisfaction signifie protéger les consommateurs, assurer la satisfaction de l'utilisateur final, créer un espace d’activités économiques à niveau pour les opérateurs pour la libre concurrence parmi les concurrents.  Ils partagent tous un un objectif commun : LA SATISFACTION CLIENT Kampala, Uganda, 25 June 2014

Mesure QoE La  Qualité d'Expérience (QoE) est devenue un concept important depuis la croissance des services mobiles. La QoE est très subjective en soi car elle implique des dimensions humaines.  La mesure et l’amélioration de la QoE malgré les défis doivent être entreprises afin d'évaluer la vision la plus précise et complète de la valeur offerte par le fournisseur à l'utilisateur final.  Si la QoE est élevée, l'utilisateur est heureux, satisfait et fidèle tandis qu’une QoE faible se traduira par des clients mécontents. Kampala, Uganda, 25 June 2014

Mesure QoE Fiabilité KPI de QoE KPI POUR QoE Les attentes des utilisateurs peuvent être regroupés en deux grandes catégories            1. FIABILITE (qualité de service de l'accessibilité et continuabilité KPI)             2. COMFORT (qualité de service de l'intégrité KPI) Fiabilité KPI de QoE QoE KPI Most important measures Service availability(anywhere) Local and global coverage included How seamless it is for the user? Service accessibility(anytime) The success rate of user connections for any service Service access time The delays in setting up any service connection Continuity of service connection-interruption ratio The retainability of the service connection and its performance overtime Kampala, Uganda, 25 June 2014

Mesure de QoE Confort KPI DE QoE QoE KPI Most important measures Quality of Session Jitter (delay variation %) Average throughput(kbits/s) towards mobile Bearer stability Application layer packet loss ratio Average end-to-end delay (ms) Ease of use How easy is it to use service offered by the network Level of support How quick and easy is it to get customer support Kampala, Uganda, 25 June 2014

Mesure de QoE Deux approches Pratique la mesure de la QoE  approche de niveau de service en utilisant des échantillons statistiques • Cette approche s'appuie sur un échantillon statistique des utilisateurs globaux du réseau pour mesurer la  QoE pour tous les utilisateurs dans le réseau. (Moyenne Opinion Score (MOS))  approche du système de gestion de réseau à l'aide des paramètres de qualité de service • Cette approche repose sur l'utilisation NMS pour recueillir les KPI de QoS à partir d'éléments de réseau et les comparer avec la cible prédéfinie. Sachant très bien que le Saint Graal de mesures subjectives est de le prédire à partir des mesures objectives, c'est-à-dire prédire la QoE d’un ensemble de paramètres QoS. L’approche NMS offre une plus grande précision que le niveau de service en raison de sa nature objective et deterministe. Kampala, Uganda, 25 June 2014

Relations entre NP et QoS QoE = f(AQoS, NQoS) + other subjective factors (expectations, mood, etc.) Strong Correlation between QoS and QoE Relationship Between QoE and QoS may be near-linear for a voice call but non-linear for a video call Kampala, Uganda, 25 June 2014

Relations entre NP et QoS Il existe une relation exponentielle entre QoS et QoE  La QoS de bout en bout est un facteur important pour la QoE ; en d’autres termes,  une meilleure qualité de service de réseau dans de nombreux cas, se traduira par une meilleure qualité d'expérience  La QoE peut être prédite à partir d'un ensemble donné de paramètres de qualité de service et vice versa (ETSI TS 102 250-1)  La QoE peut être améliorée avec les vrais mécanismes de QoS Relationship Between QoE and QoS may be near-linear for a voice call but non-linear for a video call Kampala, Uganda, 25 June 2014

Mesures des QoS La qualité de service (QoS) est advenue avec les réseaux de 2e génération  Capacité d'un réseau à fournir un service avec un niveau de service assuré.  Il est de manière intrinsèque un concept technique, mesuré et compris en termes de réseaux et d’éléments de réseau.  Une métrique objective qui fait référence à la capacité du réseau pour obtenir un comportement plus déterministe. La qualification de service est basée sur six composantes principales telles que définies dans la Recommandation UIT-T Rec E-800 Operability Accessibilty Retainability Integrity Security Support La QoS peut être mesurée en utilisant KPIs et KQIs 85% Key Performance Indicators(KPIs) Performance Key Quality (Assurance) Indicators(KQIs) 15% Assurance Kampala, Uganda, 25 June 2014

Relations entre NP et QoS Forte corrélation entre NP et QoS En d'autres termes, les NP médiocres aboutissent aux QoS médiocres Network related QoS QoS aspects of service usage(ETSI TS 102 250-1) Kampala, Uganda, 25 June 2014

Relations entre NP et QoS Critères d'OS Network related QoS criteria Non network related QoS criteria 85% 15% Mapping Network Performance Indicators/Parameters Target - range or limit CALL DROP RATE CALL SETUP SUCCESS RATE …… PARAMETER N < 2% < 90% …… <= x% Kampala, Uganda, 25 June 2014

Mesure QoS QoS Objective NP Non-NP Intrusive Non-Intrusive Walk/Drive Test Around test OMC-R Counters using NMS Active Passive Surveys, churn-rate, etc… Ex. DT Tools: Nemo, XCAL, TEMS … Ex.NMS: RPM System, Net Act, imanager M2000 … Subjective

Relations entre NP, QoS et QoE NP QoS et QoE QoS  NP est un sous-ensemble de la qualité de service qui, à son tour, est un sous-ensemble de la portée générale QoE  NP paramètres déterminent finalement la qualité de service  QoE peut être prédit à partir d'un ensemble donné de paramètres de qualité de service et     vice versa (ETSI TS 102 250-1) Kampala, Uganda, 25 June 2014

QoS / QoE Assesement Deux approches différentes et complémentaires pour la qualité de service mobile (ETSI EG 202 057-3)  Test :Marcher/Conduire  Des mesures basées sur les compteurs d'éléments de réseau à l'aide de NMS Suivi: utilisation d'un outil technique permettant d'évaluer de façon permanente ou pour une période de temps donnée, un paramètre QoS particulier. (ETSI EG 202 009-2) QoS Assesment Target Best Suitable QoS Approach(es) One-time snap shot DT Acceptance Procedure DT/ NMS Continuous Monitoring NMS Optimisation Cycle DT + NMS Kampala, Uganda, 25 June 2014

Différence entre SMN et DT Network Management System Drive Test (DT) QoS experienced by users are taken into account as the calls are made with the real terminals by the real users. The QoS experienced is not taken into account by users depends to some extent on the design of their terminals which may differ somewhat from those used for formal tests. Representativity is assured as real traffic provides measurements from the entire network 24h/7 Drive test does not provide a representative of the performance of the whole network because of variation in user density and the complexity of providing service in different areas. (60% of calls made in a network are made indoor). Track performance down to the cell level Performance stops at Base station level Provides comparabilty of Congestion and network failures Misses out on planned Site outages and network failures. Follow up on Operators’ network expansion, type of equipment deployed and mobile evolution Impossible to track Network Expansion using DT NMS reports are actionable as it tracks the availability of network elements (Ex. BSC/RNC) DT reports are simply informative Indepedent of enviromental factors Depedent on environmental factors such as weather conditions, seasons, location, timing etc Traffic carried over the network and associated grade of service (GoS) are obtained using this approach DT has no information on Traffic carried over a given network. KPI Build flexibility from numerous counters of NEs Limited KPI observation as it measures the network from an external point. Relatively no OPEX involved High OPEX as well as time and Labor intensive Passive and non- intrusive, best approach in continious QoS monitoring. Active and intrusive, best approach for QoS (coverage) benchmarking purposes. Kampala, Uganda, 25 June 2014

Inconvénients de DT Illustrés Kampala, Uganda, 25 June 2014

Inconvénients de DT Illustrés Kampala, Uganda, 25 June 2014

Inconvénients de DT Illustrés Kampala, Uganda, 25 June 2014

Recherche d'un outil de surveillance  Surveiller simultanément 24H / 7 l'état de toutes les technologies d’accès et d’ éléments de réseau / dans un réseau d'opérateur passivement sans compromettre leurs activités quotidiennes  Mettre un frein à la dégradation du service et des pannes parfois au profit du gouvernement et les masses.  Recherche d'un système qui peut surveiller les performances des opérateurs mobiles indépendantes du fournisseur et de la technologie  Audit de référence flexible; hebdomadaire, mensuelle ou trimestrielle.  Suivre l'évolution et l'expansion du réseau des opérateurs mobiles.  Réduire le taux d'utilisateurs finaux directement ou indirectement le taux de désabonnement  Un système robuste qui est facilement mis à niveau pour répondre à l'évolution rapide de la technologie mobile.  Une plate-forme qui facilitera la prise de décision pour le bénéfice de toutes les parties concernées avec peu ou pas OPEX. Créer un espace de jeu de niveau pour tous les opérateurs et de protéger l'intérêt de tous les consommateurs et pas seulement ceux dans les zones urbaines Kampala, Uganda, 25 June 2014

Systèmes de gestion de réseau Des exemples de solutions NMS sur le marché aujourd'hui Pour les régulateurs (Vendor-indépendant) Système compatible (RPM)de la gestion des performances des Régulateurs (QoS) , avec tous les principaux fournisseurs de réseau (Huawei, ZTE, Ericcsson, Alcatel et NSN) POUR OPÉRATEURS (Vendor-dépendant)  imanager M2000 pour Huawei fournisseur  NetNumen U31 pour ZTE vendeur  NetAct pour Nokia Siemens vendeur  NetOp SME pour Ericsson et Omnivista 2500 pour Alcatel vendeur Kampala, Uganda, 25 June 2014

APERÇU DU SYSTÈME DE RPM Le Système de gestion de la performance des Régulateurs (QoS) est la solution NMS nouvelle qui gère la tâche de l'interfaçage entre le système de suivi des réseaux de tous les opérateurs, fournisseurs, collecte des registres de données sur les performances et créer des rapports KPI qui fournissent une performance de réseau donné évalués par un benchmarking publié. Automatic Reporting and 3D GIS display(compatible with google earth Main Features Friendly and intuitive web user interface QoS monitoring and reporting 24/7 all year round Unlimited number of Users/ Single License Multi vendor Multi access technology No running costs and upgrades easily as mobile access technology evolves Built in compliance with ETSI TS 102 250-4&7/ ETSI EG 202 057-3 and ETSI EG 202 009-2 Kampala, Uganda, 25 June 2014

Conclusion The assessment of the QoS/QoE is expected to be evaluated in checking criteria against reference values. These criteria are measured either objectively via technical means or subjectively via surveys amongst the users. Experts agree that a mix of objective(intrusive and non-intrusive) and subjective measurements remains the best means to get the whole QoS picture. Today, four out of five Regulators only employ Drive Test(intrusive) both for one-time snap shot, benchmarking and continuous QoS monitoring(reactive sense). Given DTs drawbacks and inaccuracy with respect to continuous QoS monitoring, its high-time Regulators, gaining from operators’ perspective, adopted the novel, practical and more efficient approach – the use of Network Management Systems (NMS) for proactive continuous QoS monitoring. Kampala, Uganda, 25 June 2014

Recommandations Les Régulateurs, tel que recommandé dans l'ETSI EG 202 009-1 alinéa 7, en quête d’ évaluation et de suivi des QoS continus et objectifs doivent eux meme realiser les mesures et rendre les résultatsn publics au lieu de les confiés aux Opérateurs mobiles de fournir l’information sur la QoS Ainsi les régulateurs devraient procurer un système de RPM ou tout autre NMS qui facilite la tâche complexe qui consiste à amener les opérateurs mobiles à adhérer au KPI convenu, mettre un frein aux dégradations de service / pannes et même des pénalités pour défaillance répétées pour réaliser des objectifs QoS / QoE minima. Kampala, Uganda, 25 June 2014

MERCI DE VOTRE ATTENTION Pour plus d'informations sur le système de RPM ou tout autre NMS         N'hésitez pas à me contacter                    ou par courriel cblanchard@planetworkint.com Kampala, Uganda, 25 June 2014