Mesure de la performance

1) vmstat

La commande vmstat fournit des statistiques concernant l'activité CPU, les disques, la mémoire et les kernel threads vmstat [ -f ] [ -i ] [ -s ] [ -I ] [ -t ] [ -v ] [ PhysicalVolume ... ] [Interval [ Count ] ] -f : affiche le nombre de forks depuis le dernier démarrage du système (fork: fonction de duplication d'un processus père -> fils) -i : affiche le nombre d'interruptions prises pour chacun des devices depuis le dernier démarrage du système En général, la commande vmstat est exécutée avec un argument d'intervalle et un argument de nombre rapports souhaités. ex: vmstat 2 5 # exécute 5 fois vmstat avec un intervalle de 2 secondes entre chaque Sans argument, vmstat fournit les statisques depuis le dernier démarrage du système
  • Interpréter les résultats
kthr     memory             page              faults          cpu ----- ----------- ------------------------ ------------ ----------- r  b   avm   fre  re  pi  po  fr   sr  cy  in   sy  cs us sy id wa kthr (infos sur les Kernel THReads) r    processus prêts en attente d'exécution dans la run queue b    processus bloqués en attente de ressources (E/S, demande de pages) dans la wait queue. memory (infos sur la mémoire physique et virtuelle) avm    nombre moyen de pages actives (4ko) de la mémoire virtuelle (une page est considérée active si elle appartient à des processus exécutables ou qui se sont exécutés depuis moins de 20 secondes) fre    nombre moyen  de pages (4ko) de mémoire réelle dans la liste des pages disponibles (freelist). Cette colonne représente la mémoire disponible. L’activité de pagination est reflétée par une diminution significative de la mémoire disponible page (infos sur l’activité de pagination) re    nombre/s de pages réclamées c’est-à-dire le nombre de pages placées dans la liste des pages disponibles (freelist) mais réclamées par leur propriétaire avant qu’elle ne soient réutilisées. pi    pagination in (de l’espace de pagination vers la mémoire réelle) po    pagination out (de la mémoire réelle vers l’espace de pagination) fr    nombre/s de pages mémoire libérées par l’algorithme de remplacement de page durant l’intervalle de mesure. sr    nombre/s de pages/s examinées par l'algorithme de replacement cy    nombre/s de cycles d'horloge pour l'algorithme de replacement vmstat5.po doit être proche de0 et la colonne de vmstat.pi n’est pas très significative car le lancement d’un processus provoque la pagination de son image exécutable et de ses données. Lorsqu’un processus est lancé, le chiffre de cette colonne augmentera por retomber rapidement à un niveau normal. vmstat5.po / vmstat5.fr > 1 / 6(vol de pages) faults (infos sur les processus) in    nombre/s d’intérruption par secondes hors-horloge sy    appels système par seconde. Un appel système provoque l’utilisation par le processus du code système pour son propre compte. (exemple lecture/écriture sur un fichier). cs    taux de changement de contexte par seconde cpu (infos sur l'utilisation du CPU) us    % temps CPU user (process de priorités comprises entre 127 et 50). Lorsqu’un processus s’exécute en mode utilisateur, il utilise son propre code et ne fait pas appel aux ressources du noyau. sy    % temps CPU noyau (processus compris entre 49 et 0) qui résulte à la fois du surcoût induit par l’exécution des process utilisateurs qui ont besoin de ressources noyau (exemple lecture/écriture sur un fichier) et du temps passé à offrir des services système. id     % de temps CPU non utilisé vmstat5.id > 5%, vmstat5.us > 2 x vmstat5.sy, vmstat5.wa < 25%  

2) sar (System Activity Report)

La commande sar peut-être utilisée en temps réel ou a posteriori, pour étudier les performances du système sur une période donnée. /usr/sbin/sar [ { -A | [ -a ] [ -b ] [ -c ] [ -d ][ -k ] [ -m ] [ -q ] [ -r ] [-u ] [ -V ] [ -v ] [ -w ] [ -y ] } ] [ -P ProcessorIdentifier, ... | ALL ] [-ehh [ :mm [ :ss ] ] ] [ -XFile ] [ -fFile ] [ -iSeconds ] [ -oFile ] [ -shh [:mm [ :ss ] ] ] [ Interval [ Number ] ] * Pour une utilisation en temps réel, indiquez à sar, un argument d'intervalle et un argument de nombre rapports souhaités. ex: # sar 2 2 (2 rapports avec un intervalle de 2 secondes) AIX servername 2 5 0037879F4C00    05/28/07 11:08:53    %usr    %sys    %wio   %idle 11:08:55      25      15      19      42 11:08:57      20      11      22      47 Average       23      13      20      44 * Pour une utilisation à posteriori, il convient de planifier en crontab les tâches suivantes : 0 * * * *  /usr/lib/sa/sa1 600 6 & 50 23 * * * /usr/lib/sa/sa2 -A & le script sa1 est une variante de sadc, il collecte et stocke les données dans le binaire /var/adm/sa/sajj (jj pour le jour concerné). L'entrée en crontab ci-dessus ordonnance une prise de performance toutes les 600 secondes, 6 fois de suite = 60 minutes ; la commande étant lancée toutes les heures, les informations seront collectées en permanence, toutes les 10 minutes. le script sa2 exécute la commande sar et produit des rapports quotidiens sous /var/adm/sa/sarjj (jj pour le jour concerné). Il extrait toutes les données du binaire du jour selon les options choisies. Les options de la commande sar
-A sans le flag -P, équivaut à -abckmqruvwy. Avec le flag -P, équivaut à -acmuw
-a Opérations d'accès aux fichiers
-b Activité des buffers
-c Activité des appels système
-d Activité des périphériques de type bloc
-f Extrait les données d'un fichier (créé par le flag -o). Par défaut la valeur est le fichier /var/adm/sa/sajj en cours
-k Activité du noyau
-m Utilisation des IPC
-o Enregistre le résultat dans un binaire
-P Affiche les statistiques par processeur (rajouter l'Identifiant Processeur | ALL)
-q Statistiques de la file d'attente (queue)    % moyen de processus prêts à s'exécuter en swap et en mémoire
-r Activité de la pagination
-u Activité des processeurs
-V Lit un fichier enregistré sur une version précédente
-v Etat des tables du noyau
-w Nombre de changement de contextes par seconde
-y Activité des terminaux
# sar –u : activité des processeurs %usr : % de temps passé en mode utilisateur %sys : % de temps passé en mode système %wio : % de temps durant lequel le processeur est en attente d’une réponse d’une I/O %idle : % de temps durant lequel le processeur n’est pas utilisé sar-u5.idle > 5%, sar-u5.wio doit être faible (entre 5% et 10%) sar-u5.usr > 2 x sar-u5.sys # sar –d : activité des disques device : nom du périphérique %busy : pourcentage de temps durant lequel le disque sert la requête avque : nombre moyen de requête dans la file d’attente r+w/s : lecture/écriture effectuée par seconde blks/s : blocs de 512 octets transférés par seconde. avwait : temps moyen d’attente dans la file d’attente avserv : temps moyen de service pour une requête sar-d5.busy < 20%, sar-d5.avwait < sar-d5.avserv, sar-d5.avserv < 50ms # sar –q : file d’attente en exécution runq-sz : file d’attente des processus en attente d’exécution %runocc : % de temps durant lequel la file d’attente contient des processus swpq-sz : file d’attente des processus swappés en attente d’exécution %swpocc : % de temps durant lequel la file d’attente de swap est occupée par des processus sar-q5.runq.sz < 5 # sar –b : activité des buffers et cache bread/s : nombre de lecture/s du disque vers le cache lread/s : nombre de lecture /s dans le cache %rcache : taux de réussite d’accès en lecture dan le cache bwrit/s : nombre d’écriture/s du cache vers le disque lwrit/s : nombre d’écriture/s dans le cache %wcache : taux de réussite d’accès en écriture dans le cache pread/s : nombre de lecture/s à l’aide de l’appel système physio() pwrit/s : nombre d’écriture/s à l’aide de l’appel système physio() sar-b5.rcache > 95% et sar-b5.wcache > 65% # sar –v : activité des tables du noyau proc-sz : processus actuellement exécutés / processus max (nproc) inod-sz : inodes actuellement en mémoire / inodes max file-sz : taille de la table des fichiers / valeur maximale thrd-sz :  

3) iostat

La commande iostat fournit essentiellement des statistiques concernant l'activité des disques. En général, la commande iostat est exécutée avec un argument d'intervalle et un argument de nombre rapports souhaités. ex: # iostat 2 5 # exécute 5 fois iostat avec un intervalle de 2 secondes entre chaque Sans argument, iostat fournit les statistiques depuis le dernier démarrage du système. Avec argument(s), le premier rapport correspond aux statistiques depuis le démarrage du système. Pour pouvoir bénéficier de iostat, il convient d'autoriser l'historique de l'activité des disques. # smit chgsys    (Change / Show Characteristics of Operating System) Le champs ci-dessous doit être à "true" Continuously maintain DISK I/O history              true iostat [ -s ] [ -a ] [ -d | -t ] [ -T ][ -m ][ PhysicalVolume ... ] [ Interval [Count ] ] -a affiche les statistiques de chaque carte -d affiche uniquement les statistiques concernant les disques -s affiche les statistiques du système -m affiche les statistiques par 'chemin' (si Multi-Path I/O activé) -t affiche uniquement les statistiques concernant l'activité tty (terminaux et pseudo-terminaux) et cpu -T rajoute l'heure à chaque ligne ex: # iostat -a System configuration: lcpu=2 disk=88 tty:      tin         tout   avg-cpu:  % user    % sys     % idle    % iowait 0.0          1.3               2.4      1.7       94.9       0.9 Adapter:                   Kbps      tps    Kb_read   Kb_wrtn scsi0                     34.7       3.2    4269943  25627446 Paths/Disks:       % tm_act     Kbps      tps    Kb_read   Kb_wrtn hdisk0_Path0           1.5      34.7       3.2    4269943  25627446 Adapter:                   Kbps      tps    Kb_read   Kb_wrtn scsi1                     30.3       3.0     490822  25630770 Paths/Disks:       % tm_act     Kbps      tps    Kb_read   Kb_wrtn hdisk1_Path0           1.5      30.3       3.0     490822  25630770 Adapter:                   Kbps      tps    Kb_read   Kb_wrtn fcs0                     1444.3       7.6   18845371  1224352295 Paths/Disks:       % tm_act     Kbps      tps    Kb_read   Kb_wrtn hdisk2                 0.0       0.0       0.0          0         0 hdisk8                 0.0      31.3       0.2        895  26921915 (...) # iostat -t System configuration: lcpu=2 tty:      tin         tout   avg-cpu:  % user    % sys     % idle    % iowait 0.0          1.3               2.4      1.7       94.9       0.9  
  • Interpréter les résultats
avg-cpu (activité CPU) %usr : % de temps CPU utilisateur %sys : % de temps CPU système %idle : % de temps d'inactivité (run queue vide) %iowait : % de temps d'attente I/O tty (activité des terminaux et pseudo-terminaux) tin : nombre de caractères lus par seconde tout : nombre de caractères écrits par seconde disks (activité des disques) %tm_act : % d'activité du disque %Kbps : données transférées en kbytes par seconde (Kb_read + kbytes) Kb_read : données lues en kbytes kbytes : données écrites en kbytes tps : nombre de transferts par seconde  

4) Accounting

Le service "accounting" collecte les données d'utilisation des ressources système et génère des rapports statistiques quotidiens qui peuvent être utilisés pour facturer l'utilisation ou résoudre des problèmes de performance. Ces rapports se trouvent sous /var/adm/acct/sum et se présentent sous la forme "rprtMMJJ" (MM pour le mois et JJD pour le jour). Chaque 1er jour du mois, un rapport mensuel est crée et les rapports quotidiens sont supprimés. Ce rapport mensuel se trouve sous /var/adm/acct/fiscal et se présente sous la forme "fiscrptMM" (MM pour le mois). Ce service peut être d'une aide important, il fournit les informations suivantes : -    dernière connexion des utilisateurs -    nombre de sessions, temps de connexion -    statistiques par utilisateur (consommation CPU, mémoire & disques, temps de connexion, nombre de processus, etc.) -    statistiques par commande (consommation CPU, mémoire & disques) Il est possible de différencier les plages horaires importantes via le fichier /etc/acct/holidays en définissant les plages horaires "Prime Time" et "Non-Prime Time" ; les deux plages sont différenciées dans les rapports. Le fichier "holidays" sert à également à définir les jours fériés. Pour pouvoir utiliser ce service, il faut avoir installé le package "bos.acct" ex: # lslpp -l bos.acct Fileset                      Level  State      Description ---------------------------------------------------------------------------- Path: /usr/lib/objrepos bos.acct                  5.2.0.75  COMMITTED  Accounting Services Path: /etc/objrepos bos.acct                   5.2.0.0  COMMITTED  Accounting Services Pour pouvoir utiliser le service "accounting", il faudra également ordonnancer d'une manière ou d'une autre (ex en crontab) les traitements suivants : * Pour générer les rapports quotidiens (sous /var/adm/acct/sum) /usr/lib/acct/runacct * Pour vérifier les problèmes d'espace /usr/lib/acct/ckpacct ckpacct vérifie l'espace libre sous /var/adm ; si le seuil fixé est dépassé, un message est affiché à la console, un mail est envoyé à root et turnacct est appelé pour suspendre la collecte des informations. ckpacct vérifie la taille de /var/adm/pacct ; si le seuil fixé est dépassé, turnacct est appelé avec l'option switch ce qui génère le fichier pacct devient pacctN et pacct est réinitialisé. * Pour analyser l'utilisation des disques /usr/lib/acct/dodisk Les FS doivent avoir le paramétre "account = true" dans leur config (se rendre dans /etc/filesystems pour vérifier) Le fichier concerné est /var/adm/acct/nite/dacct * pour générer les rapports mensuels  (sous /var/adm/acct/fiscal) /usr/lib/acct/monacct Exemple de fichier /var/adm/acct/sum/rprtMMJJ May 24 23:20 2007 DAILY REPORT FOR AIX Page 1 from Wed May 23 23:20:02 2007 to   Thu May 24 23:20:02 2007 1       openacct 1       runacct 1       acctcon1 TOTAL DURATION: 1440 MINUTES LINE    MINUTES PERCENT # SESS  # ON    # OFF ftp14911        0       0       1       1       1 pts/1   1440    100     2       1       1 pts/2   1440    100     1       1       1 TOTALS  4323    --      10      6       6 LINE : console, pty ou tty utilisée MINUTES : durée d'utilisation en minutes # SESS : nombre de nouvelles connexions # ON : idem # SESS # OFF : nombre de déconnexions May 24 23:20 2007 DAILY USAGE REPORT FOR AIX Page 1 LOGIN    CPU       CPU       KCORE     KCORE     CONNECT   CONNECT   DISK      FEES      # OF        # OF   # DISK UID         NAME     PRIME     NPRIME    PRIME     NPRIME    PRIME     NPRIME    BLOCKS              PROCS       SESS   SAMPLES 0           TOTAL    60        84        732189    253197    1496      2827      0         0         1522158     10     0 0           root     31        69        8375      47173     540       1439      0         0         1413981     4      0 1           daemon   0         0         89        147       0         0         0         0         2695        0      0 UID : User ID LOGIN NAME : nom de l'utilisateur CPU PRIME/NPRIME : temps CPU pour tous les processus de l'utilisateurs (en minutes) KCORE PRIME/NPRIME : total de mémoire utilisée par les processus (en kb par minute) CONNECT PRIME/NPRIME : total de temps de connexion de l'utilisateur (en minutes) DISK BLOCKS : total moyen de l'espace utilisé par l'utilisateur pour les FS ayant l'option "accounting" activée FEES : Total de enregistrements de facturation calculés par la commande chargefee (pour une facturation à la requête (ex: restauration de fichier) # OF PROCS : Total de processus appartenant à l'utilisateur # OF SESS : nombre de connexion de l'utilisateur May 24 23:20 2007 DAILY COMMAND SUMMARY Page 1 TOTAL COMMAND SUMMARY COMMAND      NUMBER    TOTAL     TOTAL    TOTAL       MEAN     MEAN       HOG       CHARS    BLOCKS NAME         CMDS   KCOREMIN   CPU-MIN  REAL-MIN    SIZE-K   CPU-MIN    FACTOR    TRNSFD     READ TOTALS      1522158 985384.00    144.01 388300.31   6842.44      0.00      0.04 8.372e+10    112.00 oracle        22492 878491.25     31.72   9289.43  27694.97      0.00      0.34 2.986e+10      0.00 java              1  48952.55      3.37   1435.73  14528.00      3.37      0.23 2.741e+07      0.00 dsmc             10  28065.89      3.59      5.95   7826.09      0.36     60.28 1.861e+09      0.00 ksh          280796   8080.41     25.18   4365.03    320.85      0.00      0.58 1.292e+09      0.00 (...) COMMAND NAME : nom de la commande exécutée NUMBER CMDS : nombre de fois où la commande est exécutée TOTAL KCOREMIN : total de mémoire utilisée par la commande (en kb par minute) TOTAL CPU-MIN : temps CPU utilisé par la commande (en minutes) TOTAL REAL-MIN : temps réel écoulé pour la commande (en minutes) MEAN SIZE-K : taille moyenne de mémoire utilisée par la commande en minutes-CPU MEAN CPU-MIN : nombre moyen de minutes-CPU par exécution de la commande (= TOTAL CPU-MIN / COMMAND NAME) HOG FACTOR : temps CPU total disponible consommé par le processus durant son exécution CHARS TRNSFD : nombre de caractères transférés par la commande par les appels système read et write BLOCKS READ : nombre d'opérations de lecture et d'écriture des blocs physiques effectuées par la commande May 24 23:20 2007 MONTHLY TOTAL COMMAND SUMMARY Page 1 TOTAL COMMAND SUMMARY COMMAND      NUMBER    TOTAL     TOTAL    TOTAL       MEAN     MEAN       HOG       CHARS    BLOCKS NAME         CMDS   KCOREMIN   CPU-MIN  REAL-MIN    SIZE-K   CPU-MIN    FACTOR    TRNSFD     READ TOTALS     34069395 6.451e+07   4138.80 2.088e+06  15585.73      0.00      0.20 1.524e+12   1502.00 oracle       431267 4.477e+07   1445.00 344211.16  30979.91      0.00      0.42 2.843e+11      0.00 java             23 1.212e+06     83.04  33029.33  14601.56      3.61      0.25 6.367e+08      0.00 (...) May 24 23:20 2007 LAST LOGIN Page 1 (...) 00-00-00  ldap        00-00-00  toto        07-05-24  root Nota Bene : l'écriture 1.123e+9 est égale à 1.123x10 puissance 9 soit 1,123,000,000 et l'écriture 1.123e-9 est égale à 1.123x10 puissance -9 soit 0,000000001123

Plan du site