Solutions de protection des terminaux pour les entreprises
Tests de performance
Windows 7
Septembre 2010
Document : Tests de performance des solutions de protection des terminaux pour les entreprises Auteurs : K. Lai, D. Wren, T. Rowling Société : PassMark Software Date : 5 octobre 2010 Rapport : 1
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Introduction En septembre 2010, PassMark Software® a réalisé des tests de performance objectifs sur cinq solutions de
protection des terminaux destinées aux entreprises sous Windows 7 Edition intégrale.
La note la plus élevée possible est de 70. La solution Symantec Endpoint Protection s'est positionnée à la
première place avec une note de 54.
Nom du produit Note totale
Symantec Endpoint Protection 54
Kaspersky Business Space Security 44
Trend Micro OfficeScan 42
Sophos Endpoint Security 38
McAfee Total Protection for Endpoint 32
Cette note totale est une bonne indication du niveau de performance du produit par rapport aux autres
produits testés. Chaque produit gagne des points selon son classement à chaque test.
Classement au test
Points gagnés
1 5
2 4
3 3
4 2
5 1
Les tests ont été réalisés sur tous les produits au moyen de 14 indicateurs de performance. Ces indicateurs
sont les suivants :
Durée d'installation
Vitesse de démarrage
Durée d'une analyse à la demande
Durée d'une analyse planifiée
Taux moyen d'utilisation du processeur durant l'analyse
Durée de lancement de l'interface utilisateur
Temps d'ouverture d'un document Word
Durée de lancement d'Internet Explorer
Vitesse de navigation
Débit réseau
Copie, déplacement et suppression de fichiers
Compression et décompression de fichiers
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Quantité de mémoire utilisée pendant les périodes d'inactivité du système
Taux moyen d'utilisation du processeur pendant les périodes d'inactivité
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Sommaire
INTRODUCTION ................................................................................................................................................ 2
SOMMAIRE ....................................................................................................................................................... 4
HISTORIQUE DES RÉVISIONS ............................................................................................................................. 6
PRODUITS ET VERSIONS .................................................................................................................................... 7
RÉSUMÉ DES INDICATEURS DE PERFORMANCE ................................................................................................ 8
RÉSULTATS DES TESTS ..................................................................................................................................... 11
TEST 1 - DURÉE D'INSTALLATION (SECONDES) .............................................................................................................. 11
11
TEST 2 - DURÉE DE LANCEMENT DE L'INTERFACE UTILISATEUR (MILLISECONDES) ................................................................. 11
TEST 3 - TEMPS D'OUVERTURE D'UN DOCUMENT WORD (MILLISECONDES) ....................................................................... 12
TEST 4 - DURÉE DE LANCEMENT D'INTERNET EXPLORER (SECONDES) ................................................................................ 12
TEST 5 - VITESSE DE DÉMARRAGE (SECONDES) ............................................................................................................. 13
TEST 6 - DURÉE D'UNE ANALYSE À LA DEMANDE (SECONDES) .......................................................................................... 13
TEST 7 - DURÉE D'UNE ANALYSE PLANIFIÉE (SECONDES) ................................................................................................. 14
TEST 8 - TAUX MOYEN D'UTILISATION DU PROCESSEUR DURANT L'ANALYSE (POURCENTAGE)................................................. 14
TEST 10 - DÉBIT RÉSEAU (SECONDES) ........................................................................................................................ 16
TEST 11 - COPIE, DÉPLACEMENT ET SUPPRESSION DE FICHIERS (SECONDES) ....................................................................... 17
TEST 12 - COMPRESSION ET DÉCOMPRESSION DE FICHIERS (SECONDES) ............................................................................ 17
TEST 13 - QUANTITÉ DE MÉMOIRE UTILISÉE PENDANT LES PÉRIODES D'INACTIVITÉ DU SYSTÈME (MÉGA-OCTETS) ....................... 18
TEST 14 - TAUX MOYEN D'UTILISATION DU PROCESSEUR PENDANT LES PÉRIODES D'INACTIVITÉ (POURCENTAGE) ....................... 18
EXCLUSION DE RESPONSABILITÉ ET DIVULGATION ......................................................................................... 19
COORDONNÉES ............................................................................................................................................... 19
ANNEXE 1 - ENVIRONNEMENT DE TEST........................................................................................................... 20
SYSTÈME DE TERMINAUX WINDOWS 7 (64 BITS) ......................................................................................................... 20
SERVEUR WEB ET DE FICHIERS .................................................................................................................................. 20
SERVEUR ACTIVE DIRECTORY.................................................................................................................................... 20
SERVEUR DE LA CONSOLE DE GESTION AV ................................................................................................................... 20
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
ANNEXE 2 – DESCRIPTION DE LA MÉTHODOLOGIE .......................................................................................... 21
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Historique des révisions Rév. Historique des révisions Date
Rapport 1
Version initiale de ce rapport 27 septembre 2010
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Produits et versions
Dans ce rapport, nous avons testé ou inclus les versions suivantes des logiciels de protection des terminaux1 :
1 Tous les produits ont été testés avec leurs paramètres par défaut.
2 La fonction IPS (système de prévention d'intrusion) est activée par défaut dans Symantec Endpoint
Protection.
Fabricant Nom du produit Année de lancement
Version du produit
Symantec Endpoint Protection2 2010 11.0.6100.645
McAfee Total Protection for Endpoint 2010 4.5.1
Trend Micro OfficeScan 2010 10.5.1083
Sophos Endpoint Security 2010 9.5
Kaspersky Business Space Security 2010 6.0.4.1424
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Résumé des indicateurs de performance
Nous avons sélectionné un ensemble d'indicateurs objectifs qui reflètent de façon exhaustive et réaliste les
domaines dans lesquels les produits de protection des terminaux peuvent avoir un impact sur les
performances du système pour les utilisateurs. Nos indicateurs testent l'impact des logiciels sur les tâches
courantes que les utilisateurs peuvent être amenés à réaliser au quotidien.
Toutes les méthodes de test de PassMark Software peuvent être reproduites par des tiers en utilisant le même
environnement pour obtenir des résultats similaires. Une description détaillée des méthodes employées dans
nos tests est disponible dans l'Annexe 2 – Description de la méthodologie de ce rapport.
Test 1 - Durée d'installation
Ce test mesure la durée d'installation minimum requise pour que le logiciel soit totalement opérationnel. Plus
la durée d'installation est courte, plus le produit est rapide à installer par l'utilisateur.
Test 2 - Durée de lancement de l'interface utilisateur
Ce test indique de façon objective la réactivité d'un produit de sécurité pour l'utilisateur. Il mesure le temps
nécessaire au lancement de l'interface utilisateur du logiciel de protection des terminaux à partir de Windows.
Pour prendre en compte les effets de la mise en mémoire cache par le système d'exploitation, ce test mesure
la durée du lancement initial et la durée des lancements suivants. Le résultat final est une moyenne de ces
deux mesures.
Test 3 - Temps d'ouverture d'un document Word
La durée moyenne du lancement de l'interface Word a été calculée au moyen de l'outil AppTimer. Cette
mesure englobe le temps nécessaire pour lancer l'application Word 2007 et ouvrir un document de 10 Mo. Ce
test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque
produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements de Word,
avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système
d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série
de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble
de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les
lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le
temps moyen des lancements suivants.
Test 4 - Durée de lancement d'Internet Explorer
Ce test est l'une des nombreuses méthodes permettant de calculer objectivement l'impact d'un produit sur la
réactivité du système. Il mesure le temps nécessaire pour lancer l'interface utilisateur d'Internet Explorer 8.
Pour prendre en compte les effets de la mise en mémoire cache par le système d'exploitation, ce test mesure
la durée du lancement initial et la durée des lancements suivants. Le résultat final est une moyenne de ces
deux mesures.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 5 - Vitesse de démarrage
Ce test mesure le temps nécessaire au chargement du système d'exploitation sur l'ordinateur. Le logiciel de
sécurité se lance généralement au démarrage de Windows, ce qui augmente la durée et retarde le démarrage
du système d'exploitation. Des temps de démarrage plus courts indiquent que l'application a eu moins
d'impact sur le fonctionnement normal de la machine.
Test 6 - Durée d'une analyse à la demande
Toutes les solutions de protection des terminaux comprennent des fonctionnalités conçues pour détecter les
virus et autres formes de programmes malveillants grâce à une analyse des fichiers sur le système. Ce test
mesure le temps nécessaire pour analyser un ensemble de fichiers sains. Notre échantillon de 5,42 Go était
constitué de fichiers habituellement présents sur les ordinateurs des utilisateurs (fichiers multimédias, fichiers
système et documents Microsoft Office).
Test 7 - Durée d'une analyse planifiée
Le test est effectué sur une copie des fichiers de test utilisés dans la section Test 6 - Durée d'une analyse à la
demande ci-dessus. En revanche, l'analyse est programmée pour une heure précise par le biais de l'interface
utilisateur du client, ou au moyen de la console de gestion en l'absence de cette option sur le client.
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse
Ce test mesure le taux d'utilisation du processeur durant l'exécution d'une analyse.
Test 9 - Vitesse de navigation
Il est courant que les logiciels de protection des terminaux analysent les données à la recherche de
programmes malveillants au moment de leur téléchargement à partir d'Internet ou d'un intranet. Ce
comportement peut avoir un impact négatif sur la vitesse de navigation au moment où les produits analysent
le contenu Web pour détecter les éventuels programmes malveillants. Ce test mesure le temps nécessaire
pour charger successivement une série de sites Internet populaires dans la fenêtre du navigateur d'un
utilisateur à partir d'un serveur local.
Test 10 - Débit réseau
Ce test mesure le temps nécessaire pour télécharger divers fichiers à partir d'un serveur local par HTTP
(Hypertext Transfer Protocol), qui est le principal protocole utilisé sur le Web pour la navigation, la création de
liens et le transfert de données. Les fichiers utilisés dans ce test sont dans des formats couramment
téléchargés depuis le Web par les utilisateurs : images, archives, morceaux de musique et films.
Test 11 - Copie, déplacement et suppression de fichiers
Ce test mesure le temps nécessaire pour déplacer, copier et supprimer un échantillon de fichiers. Cet
échantillon comprend plusieurs types de formats de fichiers qu'un utilisateur de Windows manipule au
quotidien. Il s'agit de documents (documents Microsoft Office, PDF Adobe, fichiers ZIP, etc.), de fichiers
multimédias (images, films, morceaux de musique, etc.), ainsi que de fichiers système (fichiers exécutables,
bibliothèques, etc.).
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 12 - Compression et décompression de fichiers
Ce test mesure le temps nécessaire pour compresser et décompresser différents types de fichiers. Les formats
de fichiers utilisés dans ce test comprennent des documents, des films et des images.
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du
système
Ce test mesure la quantité de mémoire (RAM) utilisée par le produit alors que l'ordinateur et le logiciel de
protection des terminaux sont inactifs. Nous avons calculé la quantité totale de mémoire utilisée en identifiant
tous les processus du logiciel de protection des terminaux et la quantité de mémoire utilisée par chacun des
processus.
La quantité de mémoire utilisée alors que l'ordinateur est inactif est un bon indicateur de la quantité de
ressources système consommées par le logiciel de protection des terminaux sur une base permanente. Les
produits plus performants occupent moins de mémoire lorsque l'ordinateur est inactif.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes
d'inactivité
Ce test mesure le taux d'utilisation du processeur lorsque le système et le produit sont tous deux inactifs.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Résultats des tests
Test 1 - Durée d'installation (secondes)
Le graphique ci-dessous compare la durée d'installation minimum requise pour que les produits soient
totalement opérationnels. Les produits dont l'installation est la plus rapide sont considérés comme les plus
performants dans cette catégorie.
Test 2 - Durée de lancement de l'interface utilisateur (millisecondes)
Le graphique ci-dessous compare la durée moyenne du lancement de l'interface utilisateur des produits. Les
produits affichant les temps de lancement les plus courts sont considérés comme les plus performants dans
cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 3 - Temps d'ouverture d'un document Word (millisecondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour lancer Microsoft Word et ouvrir un
document de 10 Mo. Les produits affichant les temps de lancement les plus courts sont considérés comme les
plus performants dans cette catégorie.
Test 4 - Durée de lancement d'Internet Explorer (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour charger Internet Explorer. Les produits
affichant les temps de chargement les plus courts sont considérés comme les plus performants dans cette
catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 5 - Vitesse de démarrage (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire au démarrage du système (à partir d'un
échantillon de cinq démarrages) pour chaque produit testé. Les produits affichant les vitesses de démarrage
les plus élevées sont considérés comme les plus performants dans cette catégorie.
Test 6 - Durée d'une analyse à la demande (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour analyser un ensemble de fichiers
multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer ce temps, nous
faisons la moyenne de la durée de l'analyse initiale (cycle 1) et de la durée des analyses suivantes (cycles 2 à 5).
Les produits affichant les durées d'analyse les plus courtes sont considérés comme les plus performants dans
cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 7 - Durée d'une analyse planifiée (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour analyser un ensemble de fichiers
multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer ce temps, nous
faisons la moyenne de la durée de l'analyse initiale (cycle 1) et de la durée des analyses suivantes (cycles 2 à 5).
Les produits affichant les durées d'analyse les plus courtes sont considérés comme les plus performants dans
cette catégorie.
*Nous n'avons aucun résultat pour le logiciel Sophos Endpoint Security dans ce test car il ne propose aucune option permettant de planifier l'analyse d'un dossier spécifique.
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse (pourcentage)
Le graphique ci-dessous compare le taux moyen d'utilisation du processeur durant l'analyse d'un ensemble de
fichiers multimédias, fichiers système et documents Microsoft Office totalisant 5,42 Go. Pour calculer cette
valeur, nous faisons la moyenne du taux d'utilisation du processeur pendant le cycle initial (cycle 1) et pendant
les cycles suivants (cycles 2 à 5). Les produits affichant le taux d'utilisation le plus bas sont considérés comme
les plus performants dans cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 9 - Vitesse de navigation
Le graphique ci-dessous compare le temps moyen nécessaire pour qu'Internet Explorer charge successivement
une série de sites Web populaires via le réseau local à partir d'un serveur local. Les produits affichant les
vitesses de navigation les plus élevées sont considérés comme les plus performants dans cette catégorie.
Test 10 - Débit réseau (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour télécharger un échantillon de fichiers de
types courants pour chaque produit testé. Les produits affichant les temps les plus courts sont considérés
comme les plus performants dans cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 11 - Copie, déplacement et suppression de fichiers (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour copier, déplacer et supprimer plusieurs
ensembles de fichiers pour chaque produit testé. Les produits affichant les temps les plus courts sont
considérés comme les plus performants dans cette catégorie.
Test 12 - Compression et décompression de fichiers (secondes)
Le graphique ci-dessous compare le temps moyen nécessaire pour compresser et décompresser un échantillon
de fichiers pour chaque produit testé. Les produits affichant les temps les plus courts sont considérés comme
les plus performants dans cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du
système (méga-octets)
Le graphique ci-dessous compare la quantité moyenne de RAM utilisée par chaque produit durant une période
d'inactivité du système. Cette moyenne provient d'un échantillon de dix instantanés de mémoire pris
séparément toutes les 60 secondes environ après le redémarrage. Les produits utilisant le moins de mémoire
RAM en période d'inactivité sont considérés comme les plus performants dans cette catégorie.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes
d'inactivité (pourcentage)
Le graphique ci-dessous compare le taux moyen d'utilisation du processeur pendant les périodes d'inactivité
du système. Pour calculer cette valeur, nous faisons la moyenne du taux d'utilisation du processeur pendant le
cycle initial (cycle 1) et pendant les cycles suivants (cycles 2 à 5). Les produits affichant le taux d'utilisation le
plus bas sont considérés comme les plus performants dans cette catégorie.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Exclusion de responsabilité et divulgation
Ce rapport couvre uniquement les versions de produits disponibles au moment des tests. Les versions testées
sont celles indiquées dans la section "Produits et versions" du présent rapport. Les produits que nous avons
testés ne constituent pas une liste exhaustive de tous les produits disponibles dans ce segment de marché très
concurrentiel.
Exclusion de responsabilité
En dépit de tous ses efforts pour garantir l'exactitude des informations présentées dans ce rapport, PassMark
Software Pty Ltd décline toute responsabilité concernant les erreurs, omissions ou informations obsolètes
pouvant subsister, et ne saurait en aucun cas être tenue pour responsable des dommages directs, indirects,
accessoires, consécutifs ou punitifs résultant de la disponibilité, de l'utilisation ou de la consultation de ces
informations ou de l'incapacité à les utiliser.
Divulgation
Symantec Corporation a financé l'élaboration de ce rapport et a fourni certains des scripts utilisés pour les
tests.
Marques commerciales
Toutes les marques commerciales sont la propriété de leurs détenteurs respectifs.
Coordonnées
PassMark Software Pty Ltd
Suite 202, Level 2
35 Buckingham St.
Surry Hills, 2010
Sydney, Australie
Téléphone + 61 (2) 9690 0444
Fax + 61 (2) 9690 0445
Site Web www.passmark.com
Téléchargement
Une copie électronique de ce rapport est disponible à la page suivante :
http://www.passmark.com/avreport
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Annexe 1 - Environnement de test
Dans le cadre de sa procédure de test, PassMark Software a utilisé un environnement de test sous Windows 7
Edition intégrale (64 bits) avec la configuration matérielle suivante :
Système de terminaux Windows 7 (64 bits)
Processeur : Intel Core i5 750 à 2,66 GHz
Carte vidéo : ATI Radeon 4350 1 Go
Carte mère : ASUS V-P7H55E, LGA1156
RAM : 4 Go DDR3, 1 333 Mhz
Disque dur : Samsung 1,5 To 7200RPM
Réseau : Gigabit (1 Go/s)
Serveur Web et de fichiers
Le serveur n'est pas testé directement. Mais il sert à présenter les pages Web et les fichiers utilisés durant les tests sur les terminaux.
Processeur : Pentium 4 3 200 MHz
Carte vidéo : Integrated Video
Carte mère : Intel D865PERL
RAM : 1 Go
Disque dur : Seagate ST380023AS 80 Go
Réseau : Gigabit (1 Go/s)
Serveur Active Directory
Le serveur n'est pas testé. Mais il sert à faciliter le déploiement à distance de certains produits sur les terminaux.
Processeur : Dual Xeon 3,4 Ghz
Carte vidéo : RADEON X600 PRO
Carte mère : HP 08B4h
RAM : 2 Go Registered ECC Infineon
Disque dur : 74 GO 10K, WD740GD-50FLA2 (Raptor)
Réseau : Gigabit (1 Go/s)
Serveur de la console de gestion AV
Le serveur n'est pas testé. Mais il est nécessaire pour le déploiement des logiciels et la planification des analyses de programmes malveillants. Des machines virtuelles sont utilisées pour les consoles de gestion de chaque produit.
Processeur : AMD Phenom II x4 940 (Quad Core)
Carte vidéo : ASUS GeForce 9400GT
Carte mère : Gigabyte GA-MA790XT-UD4P
RAM : 16 Go PC3-10600 1 333 MHz DDR3
Disque dur : Western Digital Caviar Green WD10EADS 1 TO Serial ATA-II
Réseau : Gigabit (1 Go/s)
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Annexe 2 – Description de la méthodologie
Création de l'image Windows 7
Comme pour les tests sous Windows Vista, nous avons utilisé Norton Ghost pour créer une image de base
"saine" avant les tests. Notre objectif est de créer une image de base occupant le moins de place possible et de
réduire les risques de variation engendrés par des facteurs externes du système d'exploitation.
Nous avons restauré l'image de base avant de tester chacun des produits. Grâce à cette procédure, nous
sommes sûrs d'installer et de tester tous les produits sur la même machine "saine".
Les étapes de création de l'image de base de Windows 7 sont les suivantes :
1. Installation et activation de Windows 7 Edition intégrale
2. Désactivation des mises à jour automatiques
3. Changement des paramètres de contrôle des comptes utilisateur en "Ne jamais notifier"
4. Désactivation des analyses automatiques de Windows Defender pour éviter toute activité inattendue
en arrière-plan
5. Désactivation du pare-feu Windows pour éviter toute interférence avec le logiciel de sécurité
6. Installation de Norton Ghost pour la création de l'image
7. Désactivation de Superfetch pour garantir des résultats cohérents
8. Installation de HTTP Watch pour tester les vitesses de navigation
9. Installation de Windows Performance Toolkit x64 pour tester les vitesses de démarrage
10. Installation de l'application Active Perl pour l'interprétation de certains scripts de test
11. Désactivation des mises à jour, des accélérateurs et des mises à jour d'affichage de compatibilité dans
Internet Explorer 8
12. Création d'une image de base au moyen de Norton Ghost
Test 1 - Durée d'installation
Ce test mesure la durée d'installation minimum requise pour que le logiciel soit totalement opérationnel. La
durée d'installation se décompose généralement en trois phases majeures :
Dans la mesure du possible, l'installation s'effectue par un déploiement à distance. Si cela n'est pas possible,
nous procédons à une installation locale. Chaque étape de la procédure d'installation a été minutée
manuellement à l'aide d'un chronomètre et consignée avec le plus de détails possible. Lorsque l'utilisateur
devait saisir des données, le chronomètre a été mis en pause et l'intervention notée dans les résultats bruts
entre parenthèses après la description de la phase.
Dans la mesure du possible, nous avons refusé ou ignoré toutes les demandes d'analyse avant ou après
l'installation. Lorsqu'il nous était impossible d'ignorer une analyse, nous avons inclus la durée de l'analyse dans
la durée d'installation. Lorsqu'un composant facultatif de l'installation représentait une fonctionnalité valable
du logiciel, nous l'avons également installé (par exemple, outil de contrôle des liens vers les sites Web en tant
que partie intégrante d'un produit de sécurité des terminaux).
La durée d'installation comprend le temps nécessaire au programme d'installation du produit pour télécharger
les composants requis dans l'installation. Cela peut concerner les mises à jour obligatoires ou le transfert de
l'application elle-même à partir d'un téléchargement.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Nous avons exclu les durées d'activation des produits en raison des variations dans les temps de réponse des
serveurs des fournisseurs ou dans la durée nécessaire à la création des comptes.
Test 2 - Durée de lancement de l'interface utilisateur
La durée du lancement de l'interface utilisateur d'un produit a été calculée grâce à AppTimer (v1.0.1008). Pour
chaque produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements
de l'interface utilisateur, avec un redémarrage avant chaque série pour annuler les effets de la mise en
mémoire cache par le système d'exploitation. Lors de la compilation des résultats, nous avons séparé le
premier lancement de chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial
après le redémarrage et un ensemble de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les
lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le
temps moyen des lancements suivants.
L'application AppTimer est disponible sur le site Web de PassMark.
Test 3 - Temps d'ouverture d'un document Word
La durée moyenne du lancement de l'interface Word a été calculée au moyen de l'outil AppTimer. Cette
mesure englobe le temps nécessaire pour lancer l'application Word 2007 et ouvrir un document de 10 Mo. Ce
test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque
produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements de Word,
avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le système
d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de chaque série
de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et un ensemble
de valeurs pour les lancements suivants.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les
lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le
temps moyen des lancements suivants.
Test 4 - Durée de lancement d'Internet Explorer
La durée moyenne du lancement de l'interface Internet Explorer a été calculée au moyen de l'outil AppTimer.
Ce test est pratiquement identique au test sur la durée de lancement de l'interface utilisateur. Pour chaque
produit testé, nous avons obtenu un total de 15 échantillons issus de cinq séries de trois lancements d'Internet
Explorer, avec un redémarrage avant chaque série pour annuler les effets de la mise en mémoire cache par le
système d'exploitation. Lors de la compilation des résultats, nous avons séparé le premier lancement de
chaque série de manière à obtenir un ensemble de valeurs pour le lancement initial après le redémarrage et
un ensemble de valeurs pour les lancements suivants.
Pour ce test, nous avons utilisé Internet Explorer 8 (version 8.0.6001.18783) comme navigateur de test.
Nous avons fait la moyenne des durées des lancements suivants afin d'obtenir un temps moyen pour les
lancements suivants. Le résultat final de ce test est une moyenne entre le temps de lancement initial et le
temps moyen des lancements suivants.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page sur 26 Rapport 11 20 December 2010
Test 5 - Vitesse de démarrage
PassMark Software utilise les outils disponibles dans le Windows Performance Toolkit version 4.6 (qui fait
partie du SDK Microsoft Windows 7 disponible sur le site Web de Microsoft) de manière à obtenir des résultats
plus précis et plus cohérents sur la plate-forme Windows 7.
Le processus de démarrage est tout d'abord optimisé avec xbootmgr.exe au moyen de la commande
"xbootmgr.exe -trace boot –prepSystem" qui prépare le système pour le test sur six démarrages
d'optimisation. Les traces de démarrage obtenues avec le processus d'optimisation sont effacées.
Après l'optimisation du démarrage, le test est réalisé au moyen de la commande "xbootmgr.exe -trace boot -
numruns 5". Cette commande démarre le système cinq fois de suite, avec des traces de démarrage détaillées
pour chaque cycle.
Enfin, nous utilisons un outil de post-traitement pour analyser les traces de démarrage et obtenir la valeur
BootTimeViaPostBoot . Cette valeur reflète le temps nécessaire au système pour finaliser tous les processus de
démarrage (uniquement). Le résultat final est la moyenne des cinq traces de démarrage.
Test 6 - Durée d'une analyse à la demande
La durée d'analyse correspond au temps nécessaire à chaque produit pour analyser un échantillon de fichiers.
L'échantillon utilisé était identique dans tous les cas et comprenait une combinaison de fichiers système et de
documents Office. Nous avons utilisé 8 502 fichiers représentant 5,42 Go au total. La plupart de ces fichiers
étaient issus des dossiers système Windows. Etant donné que le type de fichier peut influencer la vitesse
d'analyse, voici le détail des principaux types de fichiers, du nombre de fichiers et de la taille totale des fichiers
de l'échantillon.
.avi 247 1 024 Mo
.dll 773 25 Mo
.exe 730 198 Mo
.gif 681 63 Mo
.doc 160 60 Mo
.docx 267 81 Mo
.jpg 2904 318 Mo
.mp3 333 2 048 Mo
.png 451 27 Mo
.ppt 97 148 Mo
.sys 501 80 Mo
.wav 430 260 Mo
.wma 585 925 Mo
.xls 329 126 Mo
.zip 14 177 Mo
Dans la mesure du possible, nous avons exécuté cette analyse sans lancer l'interface utilisateur du produit, en
cliquant avec le bouton droit de la souris sur le dossier de test et en sélectionnant l'option Analyser maintenant,
bien que certains produits exigent le lancement de l'interface utilisateur pour analyser un dossier. Pour
enregistrer la durée de l'analyse, nous avons utilisé le minuteur ou le système de reporting intégré au produit.
Lorsque cela était impossible, nous avons minuté les temps d'analyse manuellement à l'aide d'un chronomètre.
Pour chaque produit, nous avons pris cinq échantillons avec un redémarrage de la machine avant chaque cycle
afin d'annuler les effets de la mise en mémoire cache par le système d'exploitation.
Nous avons ensuite fait la moyenne des temps des quatre analyses suivantes pour obtenir une durée moyenne
pour les analyses suivantes. Le résultat final de ce test est une moyenne entre la durée de l'analyse initiale et la
durée moyenne des analyses suivantes.
Protection des terminaux Entreprises PassMark Software
Tests de performance Page 24 sur 26 Edition 1 20 December 2010
Test 7 - Durée d'une analyse planifiée
L'ensemble de données utilisé était une copie des fichiers du test Durée d'une analyse à la demande (ci-dessus),
mais le lancement de l'analyse a été programmé à partir de l'interface utilisateur. Lorsque cette option n'était
pas disponible, nous avons programmé l'analyse à partir de la console de gestion (dans la mesure du possible).
Test 8 - Taux moyen d'utilisation du processeur durant l'analyse
Nous utilisons l'outil CPUAvg pour ce test. Le système fait l'objet d'un démarrage minimal et passe dans un état
inactif (environ 5 minutes après le démarrage). Une analyse antivirus est effectuée sur une série prédéfinie de
fichiers tandis que l'outil CPUAvg est exécuté pendant toute la durée de l'analyse.
Test 9 - Vitesse de navigation
Nous avons utilisé un script conjointement avec l'application HTTPWatch (Edition de base, version 6.1) pour
enregistrer le temps nécessaire au chargement successif d'une série de106 sites Web populaires à partir d'un
serveur local. Ce script alimente une liste d'URL dans HTTPWatch, qui donne au navigateur l'instruction de
charger les pages de façon séquentielle et suit le laps de temps nécessaire au navigateur pour charger tous les
éléments sur une seule page.
Pour ce test, nous avons utilisé le navigateur Internet Explorer 8 (version 8.0.6001.18783).
La série de sites Web utilisés dans ce test inclut les premières pages de sites à fort trafic. Il s'agit de sites
commerciaux, de réseaux sociaux, de sites d'informations, de sites financiers et de sites Web de référence.
Le test Vitesse de navigation est exécuté cinq fois et le résultat final est une moyenne de ces cinq échantillons.
Nous redémarrons le serveur local avant de changer de produit et réalisons un essai initial.
Test 10 - Débit réseau
Ce test mesure le temps nécessaire pour télécharger un échantillon de fichiers binaires de différentes tailles et
de différents types sur une connexion réseau de 100 Mo/s. Les fichiers étaient hébergés sur un serveur sous
Windows Server 2008 et IIS 7. Nous avons utilisé CommandTimer.exe conjointement avec GNU Wget (version
1.10.1) pour chronométrer et réaliser le test de téléchargement.
L'échantillon complet était composé de 484 fichiers d'une taille totale de 553 638 694 octets et de deux
catégories de fichiers : fichiers multimédias [74 % du total] et documents [26 % du total]. Le détail des types de
fichiers, du nombre de fichiers et de la taille totale des fichiers de l'échantillon est présenté dans le tableau ci-
dessous :
Format de
fichier
Catégorie Nombre Taille (octets)
JPEG Multimédia 343 30 668 312
GIF Multimédia 9 360 349
PNG Multimédia 5 494 780
MOV Multimédia 7 57 360 371
RM Multimédia 1 5 658 646
AVI Multimédia 8 78 703 408
Protection des terminaux Entreprises PassMark Software
Tests de performance Page 25 sur 26 Edition 1 20 December 2010
Format de
fichier
Catégorie Nombre Taille (octets)
WMV Multimédia 5 46 126 167
MP3 Multimédia 28 191 580 387
PDF Documents 73 136 298 049
ZIP Documents 4 6 295 987
7Z Documents 1 92 238
Total 484 9877
Ce test a été réalisé cinq fois pour obtenir la durée moyenne de téléchargement de cet échantillon de fichiers,
avec un redémarrage de la machine de test entre chaque cycle pour annuler les éventuels effets de mise en
cache.
Test 11 - Copie, déplacement et suppression de fichiers
Ce test mesure le temps nécessaire au système pour copier, déplacer et supprimer un échantillon de fichiers de
différents formats. Cet échantillon était constitué de 809 fichiers représentant 683 410 115 octets au total et
pouvant être catégorisés en documents [28 % du total], fichiers multimédias [60 % du total] et fichiers PE (c'est-
à-dire des fichiers système) [12 % du total].
Ce test a été réalisé cinq fois pour obtenir la durée moyenne de copie, de déplacement et de suppression des
fichiers de l'échantillon, avec un redémarrage de la machine de test entre chaque cycle pour annuler les
éventuels effets de mise en cache.
Test 12 - Compression et décompression de fichiers
Ce test mesure le temps nécessaire pour compresser et décompresser un échantillon de fichiers. Pour ce test,
nous avons utilisé un sous-ensemble des fichiers multimédias et des documents employés dans le test Copie,
déplacement et suppression de fichiers. CommandTimer.exe a enregistré le temps nécessaire à l'outil 7zip.exe
pour compresser les fichiers en un fichier *.zip, puis pour décompresser le fichier *.zip ainsi créé.
Ce sous-ensemble était constitué de 404 fichiers d'une taille totale de 277 346 661 octets. Le détail des types de
fichiers, du nombre de fichiers et de la taille totale des fichiers de l'échantillon est présenté dans le tableau ci-
dessous :
Format de
fichier
Catégorie Nombre Taille (octets)
DOC Documents 8 30 450 176
DOCX Documents 4 13 522 409
PPT Documents 3 5 769 216
PPTX Documents 3 4 146 421
XLS Documents 4 2 660 352
XLSX Documents 4 1 426 054
JPG Multimédia 351 31 375 259
GIF Multimédia 6 148 182
Protection des terminaux Entreprises PassMark Software
Tests de performance Page 26 sur 26 Edition 1 20 December 2010
MOV Multimédia 7 57 360 371
RM Multimédia 1 5 658 646
AVI Multimédia 8 78 703 408
WMV Multimédia 5 46 126 167
Total 404 277 346 661
Ce test a été réalisé cinq fois pour obtenir la vitesse moyenne de compression et de décompression des fichiers,
avec un redémarrage de la machine de test entre chaque cycle pour annuler les éventuels effets de mise en
cache.
Test 13 - Quantité de mémoire utilisée pendant les périodes d'inactivité du
système
L'utilitaire Perflog++ a servi à enregistrer la quantité de mémoire utilisée par les processus système au
démarrage, puis toutes les minutes pendant 15 autres minutes. Nous avons suivi cette procédure une seule fois
pour chaque produit et obtenu un total de 15 échantillons. Nous avons éliminé le premier échantillon pris au
moment du démarrage.
L'utilitaire PerfLog++ enregistre la quantité de mémoire utilisée par tous les processus, et pas seulement par les
processus du produit de protection contre les programmes malveillants. Par conséquent, les processus du
produit ont dû être isolés de tous les autres processus système actifs. Pour les isoler, nous avons utilisé un
programme appelé Process Explorer, exécuté immédiatement après l'enregistrement de la quantité de mémoire
utilisée par PerfLog++. Process Explorer est un logiciel Microsoft Windows Sysinternals qui affiche la liste des
processus DLL actuellement chargés sur le système.
Test 14 - Taux moyen d'utilisation du processeur pendant les périodes
d'inactivité
Nous utilisons l'outil CPUAvg pour ce test. Le système fait l'objet d'un démarrage minimal et passe dans un état
inactif (environ 5 minutes après le démarrage). CPUAvg est ensuite exécuté pendant 5 minutes alors que le
système est inactif.
.