Top Banner
BoR PC02 (14) 18 From: CEDEXIS Sent: 28 April 2014 23:54 To: PM Subject: Cedexis - Report on Monitoring quality of Internet access services in the context of net neutrality We read with much interest the draft BEREC report launched in March and we are glad to see that Cedexis and the BEREC share, in many ways, the same thought about the importance of monitoring quality of Internet and how to do it. The report explains very well the existing measurement methods that already exists and their pros and cons. Monitoring quality of Internet access services has now become a key to improve NRA’s capacity to perform regulatory assessments of potential degradation of service. Moreover, as it is clearly explained in the report, quality monitoring needs specific requirements such as accuracy, comparability, trustworthiness, openness and future-proofness. It is needed to develop a neutral entity which would be working with the Internet service providers to monitor their performance while keep being truly transparent and reliable. When we started Cedexis in 2009 we were convinced about it and this is how we built our monitoring tool : Cedexis Radar. Radar is using a unique software-based monitoring system with a crowd- sourced approach to monitor 100s of providers, internet access services, datacentres and CDN platforms everywhere in the world. Our real-time monitoring tool uses real-users probes and is already gathering 4 billions probes a day. It allows us to offer meaningful and reliable data to monitor the global quality of Internet access services. Furthermore, our data are publicly available on our portal (portal.cedexis.com ). Granularities and statistical distributions guarantees a full interpretation of results at anytime, anywhere, from any providers. As an example of what we can provide, we are already working with “le GESTE” which gathers some of the biggest website in France such as lemonde.fr ,lefigaro.fr etc. Working with them, we are editing a monthly report which aims to show ISP and websites performances experienced by real users from Europe. You will find enclosed a document which details the full methodology of measurement of Cedexis Radar and an example of what we are doing with "le GESTE". Please feel free to contact us if you are interested in knowing more about our products. Best regards, -- How is the Cloud performing in the markets you are interested in? Find out on cedexis.com
1

BoR PC02 (14) 18 - BEREC · When we started Cedexis in 2009 we were convinced about it and this is how we built our monitoring tool : Cedexis Radar. Radar is using a unique software-based

Jul 22, 2020

Download

Documents

dariahiddleston
Welcome message from author
This document is posted to help you gain knowledge. Please leave a comment to let me know what you think about it! Share it to your friends and learn new things together.
Transcript
  • BoR PC02 (14) 18

    From: CEDEXIS Sent: 28 April 2014 23:54To: PMSubject: Cedexis - Report on Monitoring quality of Internet access services in the context of net neutrality

    We read with much interest the draft BEREC report launched in March and we are glad to see that Cedexis and the BEREC share, in many ways, the same thought about the importance of monitoring quality of Internet and how to do it.

    The report explains very well the existing measurement methods that already exists and their pros and cons. Monitoring quality of Internet access services has now become a key to improve NRA’s capacity to perform regulatory assessments of potential degradation of service. Moreover, as it is clearly explained in the report, quality monitoring needs specific requirements such as accuracy, comparability, trustworthiness, openness and future-proofness. It is needed to develop a neutral entity which would be working with the Internet service providers to monitor their performance while keep being truly transparent and reliable.

    When we started Cedexis in 2009 we were convinced about it and this is how we built our monitoring tool : Cedexis Radar. Radar is using a unique software-based monitoring system with a crowd-sourced approach to monitor 100s of providers, internet access services, datacentres and CDN platforms everywhere in the world. Our real-time monitoring tool uses real-users probes and is already gathering 4 billions probes a day. It allows us to offer meaningful and reliable data to monitor the global quality of Internet access services. Furthermore, our data are publicly available on our portal (portal.cedexis.com). Granularities and statistical distributions guarantees a full interpretation of results at anytime, anywhere, from any providers.

    As an example of what we can provide, we are already working with “le GESTE” which gathers some of the biggest website in France such as lemonde.fr,lefigaro.fr etc. Working with them, we are editing a monthly report which aims to show ISP and websites performances experienced by real users from Europe.

    You will find enclosed a document which details the full methodology of measurement of Cedexis Radar and an example of what we are doing with "le GESTE".

    Please feel free to contact us if you are interested in knowing more about our products.

    Best regards,

    --

    How is the Cloud performing in the markets you are interested in?Find out on cedexis.com

    mailto:/O=BEREC OFFICE/OU=EXCHANGE ADMINISTRATIVE GROUP (FYDIBOHF23SPDLT)/CN=RECIPIENTS/CN=77BDA40EE616431998F9A0A856A7C9D6-PMmailto:[email protected]://portal.cedexis.com/http://lemonde.fr/http://lefigaro.fr/http://www.cedexis.com/reports/
  •  

     

     

     

     

     

    Cedexis  Service  Description  

     

     

     

     

     

    Updated  April  2014      

  •  

               2  

     

    Introduction  to  Cedexis  

    Cedexis  was  started  in  2009  to  provide  tools  that  would  improve  website,  mobile  app  and  web-‐distribution  experiences  to  end-‐users  by  efficiently  enabling  multi-‐Datacentre,  Cloud  and  Content  Delivery  Networks  (CDNs)  strategies.    Multiple  provider  strategies  enables  and  demonstrates  improved  availability,  optimized  performance  and  cost  benefits  associated  with  vendor  diversity.      

    Cedexis  has  combined  real-‐user  performance  monitoring  (or  RUM)  and  data-‐driven,  HTTP/DNS-‐based  global  load  balancing,  into  a  unified  service.  The  Cedexis  platform  is  unique  in  the  sense  that  it  employs  100s  of  millions  of  end-‐user  based  probes  to  collect  real-‐time  information  (Cedexis  Radar)  and  couples  this  with  a  programmable  DNS/HTTP  decision  engine  (Cedexis  Openmix)  that  can  make  real-‐time  use  of  this  and  other  data  sets.  

    The  Openmix  service  allows  highly  flexible  load-‐balancing  decisions  to  be  made  dynamically,  based  on  a  wide  variety  of  real-‐time  data-‐feeds,  including  “public”  Radar  data  points  as  well  “private”  data  from  a  customer’s  own  architecture.    Configuration  scripts  can  support  such  obvious  methodologies  as  sending  the  user  to  the  fastest  provider  for  a  specific  geography,  or  as  subtle  and  sophisticated  as  factoring  in  any  other  metric  a  customer  can  collect  or  think  of  (Time  of  day,  cost,  contractual  commitments,  weighting  servers,  capacity,  BTU  power  usage,  Electricity  cost  etc.)  

        Data  Centers          Clouds     CDNs  

     

    Automated  control,  costs  &performance  optimization  across  multiple  platforms  

         

           

     

     

    Best  possible  web  or  mobile  application  end  user  experience  

     

     

     

    Visibility  into  real-‐time  performance  data  through  global  

    real  user  monitoring  

       

    Automated  optimization  of  web  and  mobile  apps  through  data  

    driven  global  traffic  management  

  •  

               3  

     

    Cedexis  Radar  

    Service  Introduction  

    Cedexis  Radar  provides  objective  and  standardized  visibility  into  the  real  user  performance  of  your  actual  visitors  via  their  web  browsers  or  web/mobile  application  clients,  and  associates  that  experience  to  the  service  performance  of  the  cloud,  data  center  and  CDN  platforms  used  to  deliver  that  experience  globally.    Radar  provides  the  performance  data  IT  professionals  use  to  assess,  select  and  manage  cloud,  data  center  and  CDN  platforms  through  a  common,  objective,  methodology.  

    Using  a  unique,  community-‐based  approach,  Cedexis  brings  unrivalled  transparency  to  the  global  performance  and  availability  of  the  world's  largest  public  infrastructures,  from  Cloud  Computing  and  Storage  to  Content  and  Application  Delivery  Networks.  From  Zambia  to  Afghanistan,  the  customer  will  quickly  find  the  best—and  worst—performing  platforms  for  each  and  every  one  of  their  visitors.      

    Cedexis  Radar  is  the  Internet's  first  cloud  monitoring  cooperative:  Becoming  a  Community  Member  means  unlimited  access  to  our  historical  reporting  database,  including  detailed  segmentation  by  provider,  country  and  network.  Whether  a  customer  is  looking  for  12  month  trends,  or  trying  to  understand  what  happened  yesterday,  community-‐based  measurements  can  help  answer  their  questions.    

    Being  a  Radar  community  member  also  provides  a  rich  set  of  tools  for  capturing  the  service  levels  provided  by  both  internal  and  external  content  delivery  infrastructures.    Unique  to  Radar  is  the  ability  to  utilize  your  website  visitors  to  measure  the  experience  they  would  receive  from  platforms  not  currently  used  by  an  enterprise,  reducing  risk  is  assessing  and  adopting  such  solutions.    The  same  methodology  enables  objective  evaluations  of  cloud  platforms  throughout  their  lifecycle  of  use,  including  on  going  evaluation  of  performance  relative  to  SLAs.      

    Cedexis  Radar  Value  For  Cloud  &  CDN  Management  

    Cloud  &  CDN  Lifecycle  Timing  

    Radar  Value   Radar  Services  

    Baseline  Existing  Real  End  User  Performance  

    A  single  objective  solution  for  measuring  Page  Load  Times  by  geography,  networks,  browser  types,  device  types  across  all  data  center,  cloud  and  CDNs  used      

    Radar  PLT  Reports  Radar  “my  user”  Reports    

    Comparison  &  Selection  Of  Platforms    

    A  common  methodology  for  using  millions  of  real  end  users,  from  around  the  globe,  to  measure  data  center,  cloud  and  CDN  availability,  latency  and  throughput  performance,  allowing  comparisons  of  platforms  you  do  and  don’t  yet  use    

    Radar  Platform  Reports  Radar  Community  Alerts  Radar  Private  Platform  Measurement  

    SLA  Performance  Monitoring  

    In  depth  data  and  automated  notifications  of  cloud  and  CDN  availability  and  performance  relative  to  origins  or  other  providers,  as  seen  by  millions  of  end  users    

    Radar  Platform  Reports  Radar  Platform  Alerts  

  •  

               4  

     

    By  adding  a  simple  JavaScript  tag  to  your  web  page  or  mobile  applications,  the  customer  can  turn  each  of  their  visitors  into  a  virtual  ‘test  agent’.    Cedexis  Radar  triggers  device-‐based  measurements  by  downloading  reference  objects  and  comparing  internal  &  external  infrastructure,  datacentres,  delivery  networks  and  cloud  platforms  as  seen  by  the  actual  end-‐users  of  sites  or  web  applications.  

    Radar:  Key  Benefits  

    Cedexis  Radar  addresses  multiple  web  delivery  challenges  through  its  approach  to  monitoring  and  data  gathering.    Key  benefits  of  participating  in  the  Radar  community  are:  

    • Massive  testing  environment,  with  end-‐users  in  every  network  in  every  location  (32,000+  recognized  networks  so  far).    

    • Gain  transparency  into  the  performance  of  a  current  provider,  as  well  as  the  alternative  platforms,  clouds,  and  delivery  mechanisms.    

    • Global  (190+  countries)  view  un-‐restricted  by  agent  deployments,  bandwidth  or  costs.  

     • All  users  are  not  the  same:  Understand  

    different  machines,  connections,  &  devices.    

    • Receive  real  time,  or  summarized  Radar  reports  to  fit  your  needs.    

    • Focus  on  the  metrics  that  make  a  real  difference  to  a  web  and  mobile  users  (Performance,  Availability  &  QoS).    

    • Received  automated  alerts  on  platform  provider  performance  relative  to  SLA  definitions,  and  to  their  peers.  

     • Increase  Search  Engine  Rankings:  

    Better  website  performance  means  increased  traffic  and  better  organic  search  rankings.    

    • Real,  unbiased,  data  not  gamed  or  influenced  -‐  Radar  data  is  almost  impossible  to  forge  with  real  users  doing  the  testing  (over  1.4  Billion  measurements  a  day).    

     

    Radar  Tag:  The  Measurements  Methodology  

    Cedexis  Radar  uses  a  “Real-‐User”  Measurement  methodology,  or  RUM.  Content  owners  place  a  JavaScript  Tag  (or  piece  of  code)  into  their  web  applications,  mobile  apps  or  webpages.  By  placing  this  tag  the  end-‐user  will  then  perform  tests  in  the  back  ground  after  an  application  or  webpage  has  loaded,  allowing  for  measurements  of  your  existing  infrastructure  and  providers  under  consideration.      

    The  tests  come  in  three  forms:  

    • Community  Benchmarking  • Private  Benchmarking  • Page  Load  Analytics  

    Community  Benchmarking  of  CDN,  Cloud  and  Data  Centers  

    Community  measurements  are  sourced  through  a  crowd  sourcing  model  providing  the  customer  a  view  of  a  vendor’s  performance  and  availability  at  a  geographic  and  logical  level  globally.  The  community  measurements  allow  comparisons  to  be  made  between  a  vendor’s  quality  of  experience  as  seen  from  the  end-‐user  and  allows  a  “what-‐if”  analysis  in  evaluating  vendors  and  suppliers  for  content  and  application  distribution.  By  using  a  crowd  sourcing  model,  Cedexis  customers  benefit  by  gaining  a  greater  level  of  granularity  and  quality  of  data  in  evaluating  and  monitoring  vendor  performance,  even  in  locations  where  a  customer  may  not  have  a  high  density  of  users,  or  indeed  users  at  all.    

    The  measurements  themselves  use  a  standard  set  of  objects  located  across  the  different  Cloud  and  CDN  vendors  that  end-‐users  will  download  when  they  execute  the  Radar  JavaScript  client,  or  mobile  SDK  logic,  located  on  a  content  owner’s  site  or  application.  The  following  metrics  are  then  reported  back  to  Cedexis  and  presented  within  the  Portal  or  API  reporting  interfaces:  

  •  

               5  

     

    • Availability—whether  the  object  loads  or  not.    

    • Connect  Time—how  long  it  takes  for  the  browser  to  establish  a  connection  with  the  server,  inclusive  of  the  DNS  resolve  time,  the  establishment  of  the  initial  TCP  handshake  and  HTTP  session  to  the  provider.    

    • Response  Time—how  long  it  takes  for  the  server  to  respond  to  a  subsequent  request,  once  all  of  the  noise  of  establishing  a  connection  is  completed.  This  is  a  relatively  close  approximation  of  TCP  round-‐trip  time  (RTT)  from  the  browser  to  the  provider.    

    • Throughput—this  is  the  data  rate  of  the  connection,  in  kilobits  per  second,  as  measured  from  the  retrieval  of  a  100  KByte  object.  

    Private  Benchmarking  

    As  part  of  the  Radar  Tag  deployment,  Cedexis  provides  the  ability  for  the  customer  to  create  their  own  “benchmark”  tests.  This  could  be  for  Data  Centres  or  their  own  CDN  and  Cloud  contracts.  As  with  the  community  benchmark  measurements,  the  same  metrics  are  supplied  –  Availability,  Connect  Time,  Response  Time  and  Throughput  allowing  the  customer  to  effectively  evaluate  an  existing  content  delivery  strategy.  

    This  private  information  is  only  available  to  the  customer.  

    Example  uses  include:  

    • Their  own  datacenter  architecture/s  • Using  their  own  test-‐object  or  page  • Using  their  own  contract  with  a  vendor  • Audio/Video  end-‐user  quality  of  Experience.  

    Private  Measurements:  Streaming-‐  BETA  

    As  part  of  Private  Measurements,  Cedexis  provides  a  functionality  to  not  only  test  standard  HTTP  based  applications,  but  also  Audio  and  Video  streaming  applications  delivered  from  a  customer’s  Cloud,  CDN  or  Data-‐Centre  infrastructure.    

    Cedexis  currently  supplies  the  following  Radar  Clients  with  the  following  measurement  capabilities:  

    Adobe  Flash  Stream  Type/Measurement   Progressive  Download   RTMP  Streaming  Start-‐up  Delay   Yes   Yes  Bandwidth   Yes   Yes  Playback  Bitrate   Yes   Yes  Stream  Not  Found   Yes   Yes  Connection  Error   Yes   Yes    

    Microsoft  Silverlight  Stream  Type/Measurement   Smooth  Streaming   HTTP  Streaming   Progressive  Download  Start-‐up  Delay   Yes   Yes   Yes  Buffer  Events  per  Minute   Yes   Yes   Yes  Playback  Bitrate   Yes   No   No  Dropped  Frames  per  Second   Yes   Yes   Yes    

    Mobile  Device/Measurement   Android   iPhone  Start-‐up  Delay   Yes   Yes  Buffer  Events  per  Minute   Yes   Yes  Error   Yes   Yes  

  •  

               6  

     

    Radar  Page  Load  Measurements:  About  YOUR  pages.  

    Within  Radar  Cedexis  provides  the  ability  for  the  customer  to  see  detailed  information  on  the  how  the  page/s  that  the  tag  is  implemented  on  are  being  downloaded.  Cedexis  provides  information  that  allows  you  to  see  the  performance  of  that  actual  end-‐users  are  experiencing  when  interacting  with  your  webpages.  The  data  is  provided  through  the  Nav  Timing  API  provided  for  through  many  of  the  newer  version  browsers.  

    Below  is  a  diagram  and  description  of  each  of  the  metrics  Cedexis  provides:  

     

     

    Measurement   Description   Nav  Timing  Calculation  Total  Page  Load   The  full  download  of  the  webpage  and  its  corresponding  

    components.  LoadEventEnd  –  NavigationStart  

    Redirect   The  initial  time  used  in  redirecting  to  the  page   fetchStart  –  NavigationStart  DNS  Lookup   The  time  required  for  DNS  resolution  to  complete  of  the  

    base  page  URI.  domainLookupEnd  –  domainLookupStart  

    Connect   The  time  to  make  a  TCP  Connection  inclusive  of  SSL  if  its  used  

    ConnectEnd-‐ConnectStart  

    Send   The  HTTP  Request  and  Response  time  of  the  initial  base  page,  excluding  any  message  body.  A  good  indicator  of  backend  server  latency  

    ResponseStart  -‐  RequestStart  

    Receive   The  time  taken  to  receive  the  Body  HTML  of  the  base  document.  

    ResponseEnd  -‐  ResponseStart  

    DOM   The  Time  to  download  all  images,  objects  that  are  called  from  base  HTML  and  load  them  into  the  browser.  

    DomComplete  -‐  DomLoading  

    Load  Event   The  time  for  executing  any  Javascript  and  rendering  the  page  within  the  browser.  

    LoadEventEnd-‐LoadEventStart  

     

    Radar:  Reporting  

    Radar  members  are  provided  access  to  a  rich  data  set  presented  through  intuitive  interactive  charts.    The  data  set  collected  incorporates  both  the  full  public  data  set  of  billions  of  measurements  as  a  context  for  private  data  collected  (if  subscribed  to)  from  a  customer’s  Radar  tag  or  mobile  SDK  deployment.    Page  Load  time  information  is  provided  for  with  the  customer’s  own  tag,  providing  deep  insight  into  the  actual  performance  experience  of  your  website  and  mobile  application  end  users.  In  addition  to  performance  metrics,  Radar  reports  provide  insight  into  many  facets  of  your  end  user  audience,  including  their  volumes,  geographies,  user  agents,  OS  types  and  the  timing  of  their  use  of  your  website  or  mobile  application.      

  •  

               7  

     

     

     

     

     

    Radar:  Alerts  

    Cedexis  can  provide  customers  with  configurable  alerts  which  may  be  used  to  alert  against  KPI’s  and  SLA’s  of  a  public  clouds,  CDN  platforms,  or  private  platforms.    Alerts  can  be  configured  to  the  Network  (ASN),  Country  or  Market  level.      Alerts  are  also  provided  with  the  context  of  observed  performance  metrics  of  comparable  platform  alternatives.      

    Alerts  are  sent  via  email  to  either  individual  email  addresses  or  distribution  lists.  Alert  thresholds  are  set  using  a  menu  driven  interface  allowing  the  end-‐user  to  set-‐up  different  alerts  for  different  levels  of  team  member.  For  example  a  manager  may  be  only  interested  in  the  daily  summary  of  alerts  and  the  NOC  may  want  immediate  and  the  daily  summary.  

    Sample  Alert/Notification  

    As  shown  in  this  Radar  Alert  Notification,  the  Radar  measurements  of  individual  networks  are  compared  to  observed  measurements  of  various  peers  and  to  a  defined  threshold.    This  allows  for  identification  of  outlier  conditions  while  also  providing  a  benchmark  of  the  experience  of  the  aggregate  Radar  community.      

  •  

               8  

     

     

     

     

     

    Radar:  SLA  Monitoring  

    Radar  utilizes  a  proven  and  objective  methodology  for  the  monitoring  of  platform  provider  performance  relative  to  SLAs.    The  wide  range  of  performance  data  available  through  Radar  allows  enterprises  to  visualize  and  record  performance,  while  providing  peer-‐context  to  make  for  more  informed  decision  making.    Performance  information  is  available  on  demand  from  the  Cedexis  portal,  or  Radar  Alerts  can  analyze  the  Radar  data  set  against  thresholds  you  define  and  notify  you  by  email.      

    Availability  –  Data  center,  cloud  and  CDN  providers  all  provide  SLAs  around  their  availability,  and  Radar  is  continuously  testing  this  critical  metric  from  100s  of  millions  of  real  end  user  endpoints  each  day.    Availability  can  be  visualized  in  Radar  charts,  or  availability  events  can  be  identified  and  notifications  emailed  through  Radar  alerts.  

    Latency  –  CDN  SLAs  are  typically  based  on  comparisons  of  latency  performance  between  Origin  servers  and  observed  CDN  performance.    Use  of  Radar  allows  an  enterprise  to  see  the  comparative  performance  from  the  perspective  of  real  end  users  from  around  the  globe,  not  just  from  a  handful  of  synthetic  agents.      

    Page  Load  Times  –  A  newly  emerging  metric  of  performance  validation  is  the  real  observed  Page  Load  Times  as  seen  by  an  enterprise’s  real  end  users.    Cedexis  believes  this  is  the  ultimate  measure  of  service  levels,  though  it  is  not  yet  a  default  metric  in  provider  agreements.      

     

     

  •  

               9  

     

    Radar:  APIs  

    Radar  provides  APIs  for  both  operations  and  data  retrieval  functions.  

    • Operations  API  –  Add/Edit/Delete  Radar  accounts  and  the  control  mechanisms  for  running  your  account  through  an  API    

    • Radar  Data  API  –  The  Cedexis  Radar  data  API  provides  aggregates  of  the  Radar  public  community  and  private  measurement  data.    Data  is  updated  continuously,  and  batched  approximately  every  60  seconds  for  retrieval  by  the  API.    The  data  API  is  provided  to  allow  customers  to  integrate  Radar  data  into  their  own  reports  and  dashboards.    A  single  call  to  the  API  can  provide  Radar  quartile  or  mean  measurement  averages  for  all  countries  and  up  30  ASNs  of  interest,  for  each  platform.      

    More  can  be  found  in  the  Web  Services  and  API’s  on  the  http://developers.cedexis.com  

       

  •  

               10  

     

    Notice:  

    The  information  in  this  publication  is  subject  to  change  without  notice.  

    THIS  PUBLICATION  IS  PROVIDED  “AS  IS”  WITHOUT  WARRANTIES  OF  ANY  KIND,  EXPRESS  OR  IMPLIED,  INCLUDING  ANY  WARRANTIES  OF  MERCHANTABILITY,  FITNESS  FOR  A  PARTICULAR  PURPOSE  OR  NONINFRINGEMENT.  CEDEXIS,  INC  .    (“CEDEXIS”),  SHALL  NOT  BE  LIABLE  FOR  TECHNICAL  OR  EDITORIAL  ERRORS  OR  OMISSIONS  CONTAINED  HEREIN,  NOR  FOR  DIRECT,  INCIDENTAL,  

    CONSEQUENTIAL  OR  ANY  OTHER  DAMAGES  RESULTING  FROM  THE  FURNISHING,  PERFORMANCE,  OR  USE  OF  THIS  PUBLICATION,  EVEN  IF  CEDEXIS  HAS  BEEN  ADVISED  OF  THE  POSSIBILITY  OF  SUCH  

    DAMAGES  IN  ADVANCE.  

    This  publication  contains  information  protected  by  copyright.  Except  for  internal  distribution,  no  part  of  this  publication  may  be  photocopied  or  reproduced  in  any  form  without  prior  written  consent  from  

    Cedexis.  

    Product  names  mentioned  herein  may  be  trademarks  and/or  registered  trademarks  of  their  respective  companies.  

    Copyright  ©  2014  Cedexis,  Inc.  

  • CEDEXIS - GESTE – Edition de mars 2014 1  

     

     

    Observatoire  GESTE/CEDEXIS  de  la  

    Qualité  de  Service  Internet Edition  de  Mars  2014  

    Source des données : Cedexis

    Auteurs du rapport : Fabien BARON ([email protected]) Camille CHARAUDEAU ([email protected]), Julien COULON ([email protected]) Cyril DUPRAT ([email protected])

    Rapport édité le 7 Avril 2014

  • CEDEXIS - GESTE – Edition de mars 2014 2  

    Table des matières Introduction ................................................................................................................................................................... 3  

    Panel ................................................................................................................................................................................ 3  

    Méthodologie Cedexis et Représentativité du Panel ........................................................................................... 4  

    Le fonctionnement du tag Cedexis .......................................................................................................................... 5  

    Confidentialité des données ...................................................................................................................................... 7  

    Mesure du temps de chargement des pages ....................................................................................................... 8  

    Résumé du contenu de ce rapport .......................................................................................................................... 9  

    Temps de chargement des pages en France métropolitaine .......................................................................... 10  

    Différence de performances entre internautes ............................................................................................. 10

    Comparaison entre réseaux métropolitains ................................................................................................... 11

    Temps de chargement des pages en DROM/COM ............................................................................................ 13  

    Différence de performances entre internautes ............................................................................................. 13

    Temps de chargement des pages depuis des réseaux européens ou de pays francophones .............. 16  

    Panel des navigateurs web supportant la mesure de la performance web ................................................ 20  

    Performance des réseaux de diffusion de contenus (CDN) ............................................................................ 21  

  • CEDEXIS - GESTE – Edition de mars 2014 3  

    Introduction Le présent rapport a pour objectif de fournir au GESTE, sur une base mensuelle, les éléments nécessaires à la mesure de la qualité de service internet de chacun des internautes se connectant aux services en ligne proposés par les membres du GESTE.

    Panel Les données agrégées par la société Cedexis ont été collectés depuis les internautes qui exécutent la sonde Cedexis Radar embarquée sur un panel de sites et/ou applications mobiles de membres du GESTE et qui ont accepté de mettre en commun leurs mesures. Le panel pour l’édition d’Octobre du rapport du GESTE regroupe les 15 éditeurs de contenu suivants:

  • CEDEXIS - GESTE – Edition de mars 2014 4  

    Méthodologie Cedexis et Représentativité du Panel

    Cedexis Radar a été créé afin de permettre de connaître, à tout moment, le ressenti utilisateur et, en toute transparence, les temps de chargement des sites web et mobile, ainsi que la performance et la disponibilité des principales infrastructures d’hébergement et de diffusion, du Cloud aux réseaux de distribution (CDN) en passant par les data-centres.

    Le présent rapport a été construit sur la base des données de 15 éditeurs de contenus ayant accepté d’y participer. Ensemble, ces 15 éditeurs de contenu ont généré, par le biais de leur audience, plus de 6,2 milliards de mesures actives sur une période d’un mois, et ce mois après mois.

    Pour bien mettre en évidence l’ensemble de cette base de mesures, Cedexis n’a pas souhaité présenter des résultats moyennés, et s’est au contraire attaché à faire ressortir la distribution statistique des mesures. Ainsi seront toujours présentés le 10ème centile, la médiane et le 95ème centile.

    En statistique, les centiles d'une variable sont les valeurs-seuils de cette variable qui, lorsque l'on ordonne la population selon les valeurs de la variable, la partitionnent en 100 sous-populations de taille égale.

    A titre d’exemple, si le temps de chargement des pages au 10ème centile est de 2 secondes, 10% des utilisateurs auront affiché ces pages en moins de 2 secondes, alors que 90% des utilisateurs auront affiché ces mêmes pages en plus de 2 secondes.

  • CEDEXIS - GESTE – Edition de mars 2014 5  

    Le fonctionnement du tag Cedexis Par l’intégration du tag Radar, Cedexis utilise le navigateur pour mesurer les temps de chargement des pages et pour télécharger un ensemble d’objets de référence afin de comparer, du point de vue de l’utilisateur final, les performances des CDN et des plateformes Cloud publiques et privées.

    Radar effectue ses mesures de façon asynchrone et est intégré de manière invisible dans les pages des sites du panel du GESTE. Ce script remonte pour chaque page web affichée le temps de chargement des pages visitées tel quel perçu par l’internaute.

    La consolidation et l'analyse de l'ensemble de ces mesures permettent le classement des meilleurs prestataires en fonction du comportement des internautes, pays par pays, FAI par FAI.

    Ci-dessous, le tag Cedexis tel que déployé par les membres du GESTE ayant accepté de figurer dans le panel de ce rapport de performance.

     (function(w,  d)  {  var  a  =  function()  {  var  a  =  d.createElement('script');  a.type  =  'text/javascript';          a.async  =  'async';  a.src  =  '//'  +  ((w.location.protocol  ===  'https:')  ?  's3.amazonaws.com/cdx-‐radar/'  :          'radar.cedexis.com/')  +  '01-‐xxxxxx-‐radar10.min.js';  d.body.appendChild(a);  };          if  (w.addEventListener)  {  w.addEventListener('load',  a,  false);  }          else  if  (w.attachEvent)  {  w.attachEvent('onload',  a);  }  }(window,  document));    

    Afin de mesurer les performances des CDN et des Clouds, Radar effectue des mesures actives 2 secondes après le chargement complet de la page (event onLoad()), ceci afin d’être complètement invisible pour l’internaute et ne pas perturber sa navigation.

    Radar télécharge un premier objet (de 50 octets) situé sur les plateformes de Cloud et de CDN pour mesurer le temps de connexion, puis un second objet identique une fois la connexion TCP ouverte, qui permet de mesurer le temps de réponse HTTP. Pour tester la disponibilité, Radar mesure le succès ou non du téléchargement de ce premier objet.

    Radar télécharge ensuite un autre objet plus volumineux (100 ko) pour mesurer le débit sur les CDN. La méthodologie complète de Cedexis Radar peut être consultée à l’adresse suivante : cedexis.com/fr/radar/methodology.html.

  • CEDEXIS - GESTE – Edition de mars 2014 6  

    Figure 1: les différentes étapes des mesures de performances réalisées par le tag Cedexis Radar

  • CEDEXIS - GESTE – Edition de mars 2014 7  

    Confidential ité des données Les données présentes dans ce rapport sont des valeurs agrégées des différents membres du GESTE et ne sont donc aucunement identifiables à un membre en particulier.

    L’ensemble des mesures de performances réalisées par Cedexis est absolument anonyme. Cedexis ne relève que le fournisseur d’accès internet de l’utilisateur et sa localisation géographique. En aucun cas des données personnelles (adresse IP du client par exemple) ne sont stockées dans le cadre de ces mesures.

     

  • CEDEXIS - GESTE – Edition de mars 2014 8  

    Mesure du temps de chargement des pages

    Cedexis Radar collecte le temps de chargement complet (jusqu’à l’event onLoad()) des pages web sur lesquelles le tag est déployé.

    Cedexis permet d’afficher en détails ces temps de chargement, en les décomposant par type d’événements: Load Event, DNS Lookup, HTTP Connect, HTTP Redirect, HTTP Send, HTTP Receive, HTTP DOM et HTTP Total Page Load.

    Les données affichées dans ce document sont les temps de chargement des pages totaux, une fois tous les éléments chargés, y compris les modules externes et autres publicités. Le graphique ci-dessous présente les différents éléments de l’API de Navigation Timing qui sont mesurés par Radar.

  • CEDEXIS - GESTE – Edition de mars 2014 9  

    Résumé du contenu de ce rapport L’édition de Mars 2014 du rapport mensuel de l’Observatoire de la Qualité de Service Internet à destination des membres du GESTE regroupe environ 6,2 milliards de mesures de performances utilisateur. Du fait de l’amplitude de l’échantillon, les mesures réalisées sont statistiquement significatives. Ces mesures proviennent majoritairement de France, mais également des 29 autres pays depuis lesquels les sites des membres du GESTE sont les plus consultés.

    De la même manière que dans les éditions précédentes, ce rapport met en évidence des temps de chargement élevés pour accéder aux pages des sites participant à l’Observatoire, ainsi que de fortes disparités entre les internautes les mieux servis et les moins bien servis, de l’ordre d’une trentaine de secondes.

    Dans ce rapport de Mars, nous constatons une baisse du temps de chargement des pages des sites web des éditeurs du GESTE par rapport à Février. Nous retrouvons ainsi des performances très proches de ceux observés entre Novembre et Janvier, avec un temps de chargement médian au niveau national d’environ 6,4 secondes.

    Fait notable de ce rapport de Mars : la France remonte de la 19e à la 16e place des pays analysés dans ce rapport en matière de temps de chargement total médian des pages, repassant devant la Roumanie et la République Tchèque. Le classement de la France ne change pas en ce qui concerne les 10% les mieux servis de chacun des pays de l’étude, dans lequel elle figure toujours à la 16e place.

    Sont également abordés dans ce rapport les performances des infrastructures permettant d’acheminer le contenu aux utilisateurs finaux. Les conclusions de cette section mettent en exergue que les performances vers ces prestataires varient du simple en triple suivant les pays d’observation et placent la France en milieu de classement.

  • CEDEXIS - GESTE – Edition de mars 2014 10  

    Temps de chargement des pages en France métropolitaine

    Période des mesures : 1 au 31 mars 2014

    Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus et aux seuls réseaux d’accès français, et aux cinq fournisseurs d’accès internet ayant remonté le plus de données.

    Différence de performances entre internautes Le temps de chargement médian des pages des sites membres de l’Observatoire

    Geste en France est de 6,4 secondes, mesuré sur les principaux fournisseurs d’accès internet français1.

    33,3 secondes séparent les utilisateurs les mieux servis des moins bien servis.

    1 Les cinq principaux fournisseurs d’accès internet retenus dans cette section étant Orange, Free, SFR, Bouygues Telecom et Numéricable. Ce sont ceux qui remontent le plus de données des utilisateurs en France métropolitaine.

    2,0 2,2 2,0 2,2 2,3 2,0

    35,8 35,3 34,0 34,7

    36,7 35,3

    6,3 6,5 6,4 6,4 6,9 6,4

    0,0

    5,0

    10,0

    15,0

    20,0

    25,0

    30,0

    35,0

    40,0

    Octobre Novembre Décembre Janvier Février Mars

    Tem

    ps d

    e ch

    arge

    men

    t tot

    al d

    es p

    ages

    (en

    seco

    ndes

    )

    Différence des performances entre internautes français, tous FAI confondus

    10% les plus rapides 5% les plus lents Médiane mensuelle

  • CEDEXIS - GESTE – Edition de mars 2014 11  

    Comparaison entre réseaux métropolitains

    4,0

    4,5

    5,0

    5,5

    6,0

    6,5

    7,0

    7,5

    8,0

    8,5

    9,0

    oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14

    TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    )

    Temps de chargement des pages (valeur médiane, en secondes)

    Numericable (ASN 21502) Free (ASN 12322)

    Bouygues Telecom (ASN 5410) Orange (ASN 3215)

    SFR (ASN 15557) SFR (ASN 8228)

    Nom du réseau (AS) Temps de chargement (secondes)

    10% les mieux servis

    Médiane 5% les moins

    bien servis Différence 95e – 10e

    Bouygues Telecom (AS5410) 2,3 6,6 32,5 30,4

    Numericable (ASN 21502) 1,7 5,0 28,2 26,5

    Free (ASN 12322) 2,1 6,1 35,4 33,3

    Orange (ASN 3215) 2,4 7,1 33,1 30,8

    SFR (ASN 8228) 2,7 8,2 41,1 38,4

    SFR (AS15557) 2,4 7,6 39,9 37,5

  • CEDEXIS - GESTE – Edition de mars 2014 12  

    1,0

    1,2

    1,4

    1,6

    1,8

    2,0

    2,2

    2,4

    2,6

    2,8

    3,0

    oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14

    TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    ) Temps de chargement des pages

    (10% les mieux servis, en secondes)

    Numericable (ASN 21502) Free (ASN 12322)

    Bouygues Telecom (ASN 5410) Orange (ASN 3215)

    SFR (ASN 15557) SFR (ASN 8228)

    25,0

    27,0

    29,0

    31,0

    33,0

    35,0

    37,0

    39,0

    41,0

    43,0

    45,0

    oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14 TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    )

    Temps de chargement des pages (5% les moins bien servis, en secondes)

    Numericable (ASN 21502) Free (ASN 12322)

    Bouygues Telecom (ASN 5410) Orange (ASN 3215)

    SFR (ASN 15557) SFR (ASN 8228)

  • CEDEXIS - GESTE – Edition de mars 2014 13  

    Temps de chargement des pages en DROM/COM Période des mesures : 1 au 31 mars 2014

    Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus et aux seuls réseaux d’accès français outre-marins.

    Différence de performances entre internautes Le temps de chargement médian des pages des sites membres de l’Observatoire

    Geste en DROM/COM est de 12,3 secondes, tous fournisseurs d’accès internet confondus.

    82 secondes séparent les utilisateurs les mieux servis des moins bien servis.

    4,6 5,0 4,5 4,7 4,8 4,5

    79,5

    67,5 65,8 64,6

    82,1 86,5

    12,2 12,9 12,3 12,2 12,7 12,3

    0,0

    10,0

    20,0

    30,0

    40,0

    50,0

    60,0

    70,0

    80,0

    90,0

    100,0

    oct-13 nov-13 déc-13 janv-14 févr-14 mars-14

    Tem

    ps d

    e ch

    arge

    men

    t de

    s pa

    ges

    (en

    seco

    ndes

    )

    Différence de performance entre internautes des DROM-COM

    10% les mieux servis 5% les moins bien servis Médiane

  • CEDEXIS - GESTE – Edition de mars 2014 14  

    6,0

    8,0

    10,0

    12,0

    14,0

    16,0

    18,0

    oct.-13 nov.-13 déc.-13 janv.-14 févr.-14 mars-14

    TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    )

    Temps de chargement des pages (valeur médiane en secondes)

    Saint Pierre et Miquelon Guadeloupe Martinique

    La Réunion Mayotte Guyane française

    Polynésie Française Nouvelle Calédonie

    Nom du réseau (AS) Temps de chargement (secondes)

    10% les mieux servis

    Médiane 5% les moins

    bien servis Différence 95e – 10e

    Guadeloupe 4,5 12,2 59,0 54,5 Guyane française 5,1 13,0 53,7 48,6 La Réunion 4,9 12,1 49,6 44,7 Martinique 4,4 11,8 123,4 119,0 Mayotte 4,5 11,2 43,9 39,5 Nouvelle Calédonie 4,9 15,5 192,1 187,2 Polynésie française 5,2 14,8 138,0 132,8 Saint Pierre et Miquelon 2,8 7,5 32,6 29,8

  • CEDEXIS - GESTE – Edition de mars 2014 15  

    2,0

    2,5

    3,0

    3,5

    4,0

    4,5

    5,0

    5,5

    6,0

    6,5

    7,0

    oct-13 nov-13 déc-13 jan-14 fév-14 mar-14 TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    ) Temps de chargement des pages

    (10% les mieux servis, en secondes)

    Saint Pierre et Miquelon Guadeloupe Martinique

    La Réunion Mayotte Polynésie Française

    Guyane française Nouvelle Calédonie

    0,0

    50,0

    100,0

    150,0

    200,0

    250,0

    oct-13 nov-13 déc-13 jan-14 fév-14 mar-14

    TEM

    PS D

    E CH

    ARG

    EMEN

    T D

    ES P

    AGES

    (SEC

    ON

    DES

    )

    Temps de chargement des pages (5% les moins bien servis, en secondes)

    Saint Pierre et Miquelon Mayotte Martinique

    La Réunion Guyane française Guadeloupe

    Polynésie Française Nouvelle Calédonie

  • CEDEXIS - GESTE – Edition de mars 2014 16  

    Temps de chargement des pages depuis des réseaux européens ou de pays francophones Période des mesures : 1 au 31 mars 2014

    Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus membres de l’Observatoire Geste et aux seuls réseaux d’accès des pays limitrophes au territoire français métropolitain / des pays francophones sélectionnés.

    Les valeurs de cette section comprennent les mesures provenant de l’intégralité des fournisseurs d’accès internet de chaque pays.

    15,91 11,02

    10,41 7,75 7,67 7,54

    7,33 7,08

    6,94 6,89

    6,73 6,65

    6,50 6,48 6,36

    6,02 5,97 5,89

    5,71 5,71 5,62 5,61 5,55

    5,39 5,23

    5,09 5,07 4,94 4,92

    4,71

    0,00 2,00 4,00 6,00 8,00 10,00 12,00 14,00 16,00 18,00

    Algérie Tunisie Maroc

    Italie Grèce Russie

    Espagne Portugal Polande Lettonie Ukraine Bulgarie

    République Tchèque Roumanie

    France Autriche

    Slovaquie Allemagne

    Irlande Croatie Suède

    Finlande Grande-Bretagne

    Luxembourg Estonie

    Danemark Norvège Belgique Pays-Bas

    Suisse

    Temps de chargement total des pages (en secondes)

    Temps de chargement des pages en Europe (valeurs médianes)

  • CEDEXIS - GESTE – Edition de mars 2014 17  

    La représentation graphique ci-dessous est plus parlante pour visualiser les variations de performance d’affichage à travers les pays sélectionnés :

    Temps de chargement total Légende colorée < 5,5 secondes

    5,5 – 6 secondes 6 – 6,5 secondes 6,5 – 7 secondes 7 – 8 secondes

    8 – 10 secondes >10 secondes

  • CEDEXIS - GESTE – Edition de mars 2014 18  

    4,19

    3,34

    3,32

    2,62

    2,54

    2,42

    2,33

    2,29

    2,25

    2,22

    2,21

    2,21

    2,11

    1,97

    1,97

    1,90

    1,78

    1,76

    1,74

    1,73

    1,68

    1,67

    1,65

    1,62

    1,60

    1,60

    1,50

    1,47

    1,40

    1,33

    0,00 0,50 1,00 1,50 2,00 2,50 3,00 3,50 4,00 4,50

    Algérie

    Tunisie

    Maroc

    Italie

    Grèce

    Russie

    Espagne

    Portugal

    Pologne

    Lettonie

    Ukraine

    Bulgarie

    République Tchèque

    Roumanie

    France

    Autriche

    Slovaquie

    Allemagne

    Irlande

    Croatie

    Suède

    Finlande

    Grande-Bretagne

    Luxembourg

    Estonie

    Danemark

    Norvège

    Belgique

    Pays-Bas

    Suisse

    Temps de chargement total des pages (en secondes)

    Temps de chargement des pages en Europe (10e centile)

  • CEDEXIS - GESTE – Edition de mars 2014 19  

    Temps de chargement total Légende colorée < 2 secondes

    2,0 – 2,25 secondes 2,25 – 2,5 secondes 2,5 – 2,75 secondes 2,75 – 3,0 secondes 3,0 – 3,5 secondes

    > 4 secondes

  • CEDEXIS - GESTE – Edition de mars 2014 20  

    Panel des navigateurs web supportant la mesure de la performance web Cette section vise à mettre en exergue la proportion des navigateurs internet pour chacun des principaux fournisseurs d’accès internet français.

    Ces navigateurs sont ceux qui supportent l’API « Navigation Timing » et qui permettent à Cedexis de récupérer les informations de temps de chargement des pages. Ces navigateurs sont les suivants :

    • Mozilla Firefox dès la version 7.0 • Google Chrome dès la version 6.0 • Internet Explorer dès la version 9.0 • Autres (Opéra dès la version 15.0, navigateurs mobiles utilisés depuis des

    connexions fixes, par exemple une tablette reliée par WiFi à une box).

    Période des mesures : 1 au 31 mars 2014

    Note : Apple Safari est à l’heure actuelle le seul navigateur web récent à ne pas être compatible avec le standard « Navigation Timing ». Cedexis a publiquement fait une demande à Apple afin d’intégrer cette API dans le futur. Des informations détaillées sur ce sujet sont disponibles à l’adresse suivante :

    http://www.cedexis.com/blog/apple-please-support-navigation-timing-api-in-safari/

    38,43%

    45,23%

    43,33%

    45,33%

    46,82%

    44,75%

    28,97%

    30,06%

    27,86%

    26,29%

    25,25%

    26,79%

    8,81%

    6,73%

    8,21%

    8,02%

    7,93%

    6,88%

    23,78%

    17,98%

    20,60%

    20,36%

    20,00%

    21,58%

    0% 20% 40% 60% 80% 100%

    Orange (ASN 3215)

    Free (ASN 12322)

    SFR (ASN 15557)

    SFR (ASN 8228)

    Bouygues Telecom (ASN 5410)

    Numericable (ASN 21502)

    Niveau d'utilisation de chaque navigateur remontant des informations de temps de chargement des pages

    Google Chrome Mozilla Firefox Internet Explorer Autres

  • CEDEXIS - GESTE – Edition de mars 2014 21  

    Performance des réseaux de diffusion de contenus (CDN)

    Période des mesures : 1 au 31 mars 2014

    Périmètre : Le périmètre des mesures est restreint à un groupe d’éditeurs de contenus sur une sélection de pays.

    Note : La mesure représente les temps de réponse, disponibilité et débit de téléchargement de plusieurs objets référents téléchargés sur les serveurs Edge d’un CDN lors d’une navigation sur l’un des sites membres du panel.

    Panel de CDN : Un panel de 20 CDN internationaux a été comparé dans chacun des pays de l’étude. Les CDN n’ayant qu’une présence nationale dans un des pays de l’étude ont été retirés, ceci afin de comparer de manière objective l’ensemble des pays sélectionnés. Les performances des CDN suivants sont ainsi mesurées :

    • Akamai • Azure CDN • CacheFly • CDN.NET • CDN77 • CDNetworks • CDNify • CloudFlare • Cloudfront • Edgecast • Fastly • Fastweb • Highwinds • Level3 • Limelight • MaxCDN • OnApp • Pacnet • SwiftServe • Tata Communications

  • CEDEXIS - GESTE – Edition de mars 2014 22  

    153

    141

    139

    108

    92

    87

    78

    75

    72

    70

    69

    67

    66

    65

    64

    64

    63

    63

    57

    57

    57

    57

    56

    52

    49

    48

    47

    47

    43

    43

    0   20   40   60   80   100   120   140   160   180  

    Tunisia  

    Morocco  

    Algeria  

    Greece  

    Italy  

    Spain  

    Portugal  

    Russian  Federa@on  

    Poland  

    Romania  

    Croa@a  

    Ukraine  

    Ireland  

    Bulgaria  

    Estonia  

    Finland  

    France  

    Latvia  

    Austria  

    Czech  Republic  

    Germany  

    Slovakia  

    Norway  

    United  Kingdom  

    Sweden  

    Denmark  

    Belgium  

    Switzerland  

    Luxembourg  

    Netherlands  

    Temps de réponse (ms)

    Temps de réponse (en millisecondes) d'un panel de 20 CDN dans les 30 pays

    de l'étude

  • CEDEXIS - GESTE – Edition de mars 2014 23  

    566

    880

    1281

    1590

    1949

    2179

    2303

    2389

    2459

    2509

    2669

    2701

    2771

    2783

    2791

    2813

    2852

    2903

    2958

    3059

    3098

    3251

    3273

    3661

    4049

    4069

    4088

    4181

    4719

    4782

    0   1000   2000   3000   4000   5000   6000  

    Algérie  

    Tunisie  

    Maroc  

    Grèce  

    Italie  

    Espagne  

    Croa@e  

    Pologne  

    Portugal  

    Russie  

    Roumanie  

    Estonie  

    Ukraine  

    Bulgarie  

    France  

    Irlande  

    Slovaquie  

    LeVonie  

    Finlande  

    République  Tchèque  

    Autriche  

    Norvège  

    Allemagne  

    Grande-‐Bretagne  

    Suisse  

    Belgique  

    Suède  

    Danemark  

    Luxembourg  

    Pays-‐Bas  

    Débit (kbps)

    Débit (en kbps) d'un panel de 20 CDN dans les 30 pays de l'étude

  • CEDEXIS - GESTE – Edition de mars 2014 24  

    98,21%

    98,34%

    98,45%

    98,69%

    98,91%

    99,04%

    99,04%

    99,11%

    99,20%

    99,25%

    99,28%

    99,30%

    99,30%

    99,32%

    99,34%

    99,35%

    99,36%

    99,37%

    99,38%

    99,41%

    99,42%

    99,46%

    99,48%

    99,50%

    99,51%

    99,56%

    99,56%

    99,57%

    99,58%

    99,62%

    97,50%   98,00%   98,50%   99,00%   99,50%   100,00%  

    Algérie  

    Tunisie  

    Maroc  

    Luxembourg  

    Royaumes-‐Unis  

    France  

    Suisse  

    Russie  

    Italie  

    Allemagne  

    Grande-‐Bretagne  

    Bulgarie  

    Irlande  

    Autriche  

    Pays-‐Bas  

    Roumanie  

    Belgique  

    LeVonie  

    Slovaquie  

    Espagne  

    République  Tchèque  

    Suède  

    Grèce  

    Finlande  

    Portugal  

    Croa@e  

    Danemark  

    Estonie  

    Norvège  

    Pologne  

    Disponibilité (%)

    Disponibilité (en %) d'un panel de 20 CDN dans les 30 pays de l'étude