S4P1_Talib_Hassan

ITU Workshop on
“Benchmarking QoS evaluation of Multimedia

Networks”
(Ouagadougou, Burkina Faso, 18 July 2013)
Evaluation de la QoS de l’Internet

mobile,
méthodologie et outils pour les
réseaux 3G
Cas du Maroc
Hassan TALIB,
Vice-Chair ITU-T SG 12,
talib@anrt.ma // htalib@ties.itu.int
Plan de la présentation
Introduction : fondements QoS…

Le service Internet mobile 3G au Maroc
Types de mesures :
Internet mobile 3G sur PC,
Internet mobile 3G sur Smartphones
Mesures FTP ou HTTP
Indicateurs mesurés (Définitions)
Plate-forme serveurs de mesures
Outils de mesures
Conclusions et recommandations
Ouagadougou, 18 juillet 2013 2
Fondements pour le suivi de la
Dispositif QoE : QoS/QoE à l’ANRT Adoption d’une
Portail QoE et stratégie de
applications communication
Un cadre réglementaire
téléchargées (publication)
international (normes) :
- UIT-T : séries E, G, P,
Y, QoS handbook, ...
Un cadre - Un benchmark des
Régionales : ETSI
réglementaire (série EG), IEEE,… meilleurs
national :
- Attributions
pratiques et une
- Obligations QoS l’ANRT exerce veille
technologique
des opérateurs un suivi
régulier de la
Retour d’usage : Analyse des
- Plaintes, QoS données reçues
- Presse, des opérateurs en
- Associations des Mesures terrain termes de
consommateurs, (campagnes) performances,
- …
réalisées par KPI et mesures
l’ANRT QoE
Fondements pour le suivi de la QoS
Modèle
Mise en place d’un dispositif complet
global de réception des KPI opérationnel
des opérateurs : tous de données
réseaux et tous services KPI selon des
fréquences
fixées
Externalisation
maîtrisée des
Elaboration de documents de mesures et
référence convenus par tous usage des
les acteurs encadrant les résultats par
mesures terrain de la QoS les opérateurs

Fondements pour le suivi de la QoS
Méthodologie d’évaluation de la qualité

de service QoS data pour les réseaux 3G
(UMTS ou CDMA2000 sur PC ou SP) est
parfaitement valable pour les réseaux
mobiles de futures générations :
4G ( ),
Wifi Outdoor (offloading ),…

Types de mesures :
Mesures FTP ou HTTP
Indicateurs mesurés (Définitions)
Outils de mesures
Trois opérateurs 3G (opérateurs globaux) :

Itissalat Al-Maghrib (Maroc Telecom) et Médi Telecom
: technologie UMTS,
Maroc connect (Wana Corporate) : technologie
CDMA-2000.
Les services 3G, lancés au Maroc en mars
2007, porteront le développement de l’Internet
au Maroc

Evolution du Parc et du Taux de pénétration de

Répartition du parc Inter-
l'Internet
4500000 4 061 432 14,00%
net par type d'accès (Mars
4000000
3 957 068 12,49% 2013)
0.04%
12,00%
3500000 3 182 116 17.79%
10,00%
3000000
2500000 8,00%
1 866 963
2000000 6,00%
1 186 923
1500000 757 453
4,00%
1000000 526 080
399 720
262 324
2,00%
500000 113 170 82.16%
0 0,00%
2004 2005 2006 2007 2008 2009 2010 2011 2012 mars-
ADSL
13 Internet 3G
Parc des autres offres Internet Parc Internet 3G
Parc ADSL Taux de pénétration Internet Autres offres Internet
• Le parc Internet a connu une croissance soutenue en particulier durant les quatre dernières
années.
• Cette croissance est due essentiellement au développement des offres Internet mobile 3G.
• Actuellement sur plus de 4 millions d’abonnés, près de 82% utilisent les connexions 3G mobile
contre 17,8% pour l’accès ADSL fixe.
Ouagadougou, 18 juillet 2013


Bande passante internationale et Noms de domaine
60000
Evolution du nombre des
Evolution de la bande passante Noms de Domaine ".ma " 48,104
Internet internationale 50000 46806
300,000 42187
266,000
40000 37969
250,000 34008
29450
200,000 30000
Mb ps
25890
22583
150,000 19025
124,400 20000
100,000
75,000
9476
51,200 10000
50,000 5298
25,130 25,130 3586
11,500 1998
1,240 7,100 674
200 310
0 0
200 200 200 200 200 200 200 200 201 201 201
2 3 4 5 6 7 8 9 0 1 2
 La bande passante Internet internationale a  Le parc des noms de domaine en «.ma»

connu une croissance remarquable en 2012 de continue de croître en atteignant 48.104
113,83% avec une capacité de 266 000 Mbps. comptes à fin mars 2013.
 Les noms de domaines créés directement
sous l’extension « .ma » dominent.

Évolution de la facture moyenne Internet
180
La facture moyenne mensuelle
167 par client Internet a reculé de
160
154
157 73% entre 2008 et 2012. Elle est
140
de 42 DHHT à fin décembre
139
2012 contre 154
DHHT/mois/client à fin 2008.
en DHHT/mois_abonné Internet
120 121
116
111 Pour l’Internet 3G, cette facture
100 100 moyenne ressort à fin 2012, à un
montant de 27
83
80 82 DHHT/mois/client contre 100
DHHT à fin 2008, soit une
60 58
54
baisse de 72%.
42
La facture Internet ADSL passe,
40
37 quant à elle, de 165
20
27 DHHT/mois/client à fin 2008 à
111 DHHT à fin 2012 marquant
0
ainsi une baisse de 33%.
2008 2009 2010 2011 2012
Global Internet Internet 3G ADSL
11

Types et conditions de mesures QoS :
Mesures FTP ou HTTP
Indicateurs mesurés
Outils de mesures
12
QoS de l’Internet mobile 3G
Internet mobile 3G sur PC : dongles USB
(prépayés ou post-payés) sur ordinateurs
pour l’UMTS ou la CDMA-2000.
Internet mobile 3G sur Smartphones :
SIM/3G pour abonnés sur SP/tablettes
uniquement pour l’UMTS.
Mesures en mode FTP ou HTTP : à réaliser
sur des fichiers taillés pour les mesures
(Up/Dw) : 1Mo, 5Mo,…
13
Evaluation de la QoS ≠ Evaluation de la
couverture.
Toute mesure ne doit se faire que dans les
zones déclarées couvertes à la fois par tous
les opérateurs concernés : exercice
d’échantillon géographique et de la carte de
couverture.
L’exercice de cartographie de couverture doit
se faire au détail du quartier et non par ville.
14

Types de mesures :
Mesures FTP ou HTTP
Outils de mesures
15
Pour chaque type de mesure, quels
indicateurs sont pertinents ?
Gigue, délai, débit, pertes de données,…?
Objectifs pragmatiques (par enquête de
satisfaction) intéressant l’expérience
utilisateurs : mesurer l’accessibilité (taux
et temps de connexion), la fiabilité et la
rapidité (débit de transmission et de
réception).
Transformation de ces éléments en dix (10)
indicateurs :
16
Liste des dix (10) indicateurs mesurés :
Le taux de connexions réussies : une connexion est réussie si
elle est établie dans un délai inférieur à 1 minute. Le taux de
connexions réussies est calculé sur la base de l’ensemble des
mesures réalisées.
Le taux de connexions réussies dans un délai inférieur à 10
secondes : le taux de connexions réussies dans un délai
inférieur à 10 secondes est calculé sur la base de l’ensemble
des mesures réalisées.
Le taux de fichiers de 1 Mo envoyés dans un délai inférieur à 2
minutes : un fichier est considéré comme envoyé si le fichier
est envoyé intégralement dans un délai Dmax et si son contenu
est correct. Le taux est calculé sur la base du nombre total de
fichiers envoyés.
Le taux de fichiers de 5 Mo reçus dans un délai inférieur à 5
minutes : un fichier est considéré comme reçu si le fichier est
reçu intégralement et si son contenu est correct. Le taux est
calculé sur la base du nombre total de fichiers téléchargés.
17
Le débit de données atteint pour 90% des fichiers de 1 Mo

envoyés : cet indicateur correspond au percentile à 90 % des
fichiers envoyés.
fichiers envoyés.
fichiers envoyés.
18

reçus : cet indicateur correspond au percentile à 90 % des
fichiers envoyés.
fichiers envoyés.
fichiers envoyés.
19
Indicateurs mesurés :
Précisions importantes :
Le débit pour les réseaux 3G est un débit
partagé entre les utilisateurs. Le débit réel
(exploité) est toujours inférieur au débit
théorique (commercialisé). C’est une
considération technologique.
Mais, ce débit est mesurable pour tous les
opérateurs à travers le même dispositif.
20
Indicateur supplémentaire : TUDC
Le taux d’usage du débit contractuel (TUDC)
correspond au rapport du débit utilisé (observé) au
débit contractuel (commercialisé) auprès de
l’opérateur concerné. Ce rapport est exprimé en
pourcentage. Débits observés/ Débits commercialisés (en %)
Un exemple 100.00%
(Débit atteint par 50% des fichiers reçus)
réel pour un
90.00%
80.00%
réseau 3G :
70.00%
60.00% 54.10%
48.83%
50.00%
41.80% 39.53%
40.00% 36.23%
31.64%
30.00% 24.61%
20.00%
10.00%
0.00%
Casablanca Rabat Agadir Marrakech Fès Tanger Moyenne
nationale
21

Types de mesures :
Mesures FTP ou HTTP
Outils de mesures
22
Plate-forme serveurs de mesures :

Mesurer les performances d’un réseau
Internet mobile 3G, c’est mesurer la QoS
d’une connexion à travers ce réseau entre un
terminal et un serveur de données.
Plusieurs facteurs extérieurs peuvent
impacter un des segments du chemin de test.
D’où la contestation des résultats de mesures
par l’opérateur concerné.
Option de mesures avec un serveur
international est à écarter.
23
Plate-forme serveurs de mesures :
Problème : inexistence de serveur (chez les
hébergeurs), au niveau national, connecté à
la fois à tous les réseaux par une capacité
supérieure à l’offre de débit le plus élevé !!!
Solution : conception d’une plate-forme de

serveurs de mesures au niveau des locaux du
régulateur. Les capacités des liens sont
supérieures au débits mesurés (Exemple
10Mb/s pour mesurer 7,2Mb/s et 20Mb/s
pour mesurer 14,4Mb/s).
24
Plate-forme serveurs :
Tous les fichiers tests sont installés dans chaque serveur de la

plate-forme connecté par FO au réseau 3G de l’opérateur.
25

Types de mesures :
Mesures FTP ou HTTP
Outils de mesures
26
Outils de mesures (Précautions)

Equipements terminaux (PC, SP et
dongles/USB) , critères de choix :
Choisir parmi les modèles industriels les
plus utilisés dans le marché national,
Ayant des performances ne bridant en
aucun cas les débits supérieurs mesurés.
Pour les PC (OS, firewalls, antivirus,…) et
pour les terminaux (Twindowsize ,MTU,
CPU , RAM,…).
27
Outils de mesures (Précautions)

Profils d’abonnements utilisés :
Post-payé ou prépayé.
Attention aux downgrade de débit si le
volume de téléchargement atteint les
seuils.
Les tests sur les SP doivent se faire en
mode forcé 3G et non en dual (éviter
confusion GPRS ou EDGE).
Pour chaque opérateur (un serveur et un
lien) une seule mesure est à faire à la fois.
28
Outils de mesures
Application logicielle (Agents installés dans
les terminaux : PC et SP) :
A chaque connexion data, l’application remonte
des informations permettant le calcul automatique
de tous les indicateurs de QoS de la connexion
(niveau de champs, SC, échecs, succès,…) ainsi
que la position GPS.
L’application permet de stocker directement et
automatiquement tous les résultats (indicateurs)
dans un serveur qui centralise la préparation des
rapports nécessaires dans le cadre de portail
dédié.
29

Types de mesures :
Mesures FTP ou HTTP
Equipements terminaux
30
Conclusions et Recommandations
Recommandation n°1
Concertation permanente avec les opérateurs
en amant sur la méthodologie. Adoption
d’une démarche concertée de référence pour
le suivi.
Recommandation n°2
Aucun des opérateurs n’est informé sur les
sites des mesures ni sur la période.

Recommandation n°3
Réaliser un nombre important de
mesures QoS à blanc, avec les mêmes
outils que ceux utilisés dans les
campagnes réelles de mesures et de
préférence en présence des
représentants des opérateurs concernés
par les mesures (Minimiser à savoir
éliminer toute contestation potentielle
des opérateurs).

Recommandation n°4
Mesures pour les opérateurs : usage
positif des résultats par les opérateurs
(usage de la plate-forme serveurs de
tests//objectif potentiel financement des
campagnes par les opérateurs).
Recommandation n°5
Publier les résultats (comparatifs),
adopter une stratégie de communication
et considérer les sanctions pour les
anomalies comme dernier recourt.
Recommandation n°5 (suite)

Publication des résultats de mesures :
1ère campagne voix 2ème campagne

sur un échantillon similaire à la
large (trentaine de Communication des résultats
première basée
villes et points de aux opérateurs
pratiquement sur le
concentration même échantillon.
aéroports, centres 4ème trimestre de
touristiques…). Délai de 5 à 6 mois pour l’année
1er trimestre de correction des anomalies
l’année identifiées par l’ANRT (Publication des
résultats et
communication)
Merci pour votre attention
Questions/Réponses
talib@anrt.ma // htalib@ties.itu.int

S4P1_Talib_Hassan

Transféré par

Informations du document

Copyright

Formats disponibles

Partager ce document

Partager ou intégrer le document

Options de partage

Avez-vous trouvé ce document utile ?

Ce contenu est-il inapproprié ?

Droits d'auteur :

Formats disponibles

S4P1_Talib_Hassan

Transféré par

Droits d'auteur :

Formats disponibles

ITU Workshop on

“Benchmarking QoS evaluation of Multimedia

Evaluation de la QoS de l’Internet

Introduction : fondements QoS…

Ouagadougou, 18 juillet 2013 4

Méthodologie d’évaluation de la qualité

Ouagadougou, 18 juillet 2013 5

Trois opérateurs 3G (opérateurs globaux) :

Ouagadougou, 18 juillet 2013 7

Evolution du Parc et du Taux de pénétration de

Ouagadougou, 18 juillet 2013

Ouagadougou, 18 juillet 2013 9

 La bande passante Internet internationale a  Le parc des noms de domaine en «.ma»

Ouagadougou, 18 juillet 2013

Global Internet Internet 3G ADSL

Introduction : fondements QoS…

Introduction : fondements QoS…

Liste des dix (10) indicateurs mesurés :

Le débit de données atteint pour 90% des fichiers de 1 Mo

Le débit de données atteint pour 90% des fichiers de 5 Mo

Introduction : fondements QoS…

Plate-forme serveurs de mesures :

Solution : conception d’une plate-forme de

Tous les fichiers tests sont installés dans chaque serveur de la

Introduction : fondements QoS…

Outils de mesures (Précautions)

Outils de mesures (Précautions)

Introduction : fondements QoS…

Ouagadougou, 18 juillet 2013 31

Ouagadougou, 18 juillet 2013 32

Recommandation n°5 (suite)

1ère campagne voix 2ème campagne

Ouagadougou, 18 juillet 2013 35

Vous aimerez peut-être aussi