Bravo pour ce logiciel très simple d'utilisation et très bien écrit et pensé.
Je suis actuellement en train de le tester, et n'ai qu'un seul regret : celui de ne pas avoir par défaut l'ensemble des graphs présentés dans la démo. Néamoins, cela me permettra de me creuser un peu la tête pour trouver comment récupérer le nombre de Hits Apache

Merci

Salut Steph,
en effet, le module server-status, c'est pas très générique...
du coup, j'ai réécrit le update.pl pour qu'il soit plus générique, ce qui donne :

$ cat update.pl
#!/usr/bin/perl

$logpath="/usr/local/apache2/logs/access_log";
$daten=`date --rfc-2822`;
if($daten=~ m/^.*,s(.*)s(.*)s(.*)s(.*):(.*):(.*)s+(.*)$/gi){
$d=$1;$m=$2;$y=$3;$h=$4;$mn=$5;
$daten="$d/$m/$y:$h:$mn";
$daten1="$d/$m/$y:$h:".($mn-1);
$daten2="$d/$m/$y:$h:".($mn-2);
$daten3="$d/$m/$y:$h:".($mn-3);
$daten4="$d/$m/$y:$h:".($mn-4);
$daten5="$d/$m/$y:$h:".($mn-5);
}
open FICH, $logpath;
@filec= <FICH>;
close FICH;
$nbhits=0;
foreach $fich(@filec){
if ($fich =~ /$daten/){$nbhits++;}
if ($fich =~ /$daten1/){$nbhits++;}
if ($fich =~ /$daten2/){$nbhits++;}
if ($fich =~ /$daten3/){$nbhits++;}
if ($fich =~ /$daten4/){$nbhits++;}
if ($fich =~ /$daten5/){$nbhits++;}
}
system( "rrdtool update apache_hits.rrd -t hits N:$nbhits" );

du coup, il y a juste à lui fournir le chemin du log apache, et le tour est joué... en plus, ca marche aussi pour les erreurs.
(ici, j'ai pris pour postulat que le cron est lancé toutes les 5 minutes...)

Sinon, j'ai aussi écrit un graph netstat, qui donne le nombre de connexions réseaux ouvertes à un moment donné. Ca donne :

$ cat create.sh
#!/bin/bash

rrdtool create netstat.rrd
--start `date +%s`
--step 300
DS:netstat:GAUGE:600:U:U
RRA:AVERAGE:0.5:1:2016
RRA:AVERAGE:0.5:6:1344
RRA:AVERAGE:0.5:24:732
RRA:AVERAGE:0.5:144:1460

$ cat graph.pm
$GRAPH_TITLES{'netstat'} = "{#server#} - Nombre de connexions reseau";
$GRAPH_CMDS{'netstat'} = <<"NETSTAT_CMD";
--title "{#server#} - Nombre de connexions reseau"
--vertical-label="nb de connexions"
--lower-limit 0 --upper-limit 100
DEF:netstat={#path#}netstat.rrd:netstat:AVERAGE
AREA:netstat{#color5#}:"Nombre de connexions "
GPRINT:netstat:LAST:"Current\: %3.0lf "
GPRINT:netstat:AVERAGE:"Average\: %3.0lf "
GPRINT:netstat:MAX:"Maximum\: %3.0lf\n"
LINE1:netstat{#linecolor#}
NETSTAT_CMD

1; # Return true

$ cat update.pl
#!/bin/perl

$dummy = `netstat -net -4 |grep -v Active |grep -v Proto|wc -l`;
$dummy=~ /(.*)/;
system("rrdtool update netstat.rrd -t netstat N:$1");


Voilà.

Sinon, j'ai apporté quelques modifications à index.pl et template/index.html pour faire un affichage des graphs sur 2 colonnes. Si tu veux, je peux te les envoyer par mail

Excellent script !!!

Par contre pour le nombre de connexion active sur le serveur WEB.
J'ai pondu cette commande :

netstat -tn | grep ESTABLISHED | grep :80 | wc -l

Comment placer cette comment dans la variable $dummy car je comprends pas trop le 2eme $dummy

Exemple :

$dummy = `netstat -net -4 |grep -v Active |grep -v Proto|wc -l`;
$dummy=~ /(.*)/;

Puis-je utiliser la même structure rrd que la solution de matao ?

Merci et dsl pour ces quesions qui sont peut être stupide.

Salut Gregory,

... une question n'est jamais stupide

Dans le cas des commandes :

netstat -tn | grep ESTABLISHED | grep :80 | wc -l
netstat -net -4 |grep -v Active |grep -v Proto|wc -l

elles retournent directement le résultat sans "fioritures", et donc le "deuxième dummy" ne sers à rien.

Tu peux à la place faire ça:

$dummy = `netstat -net -4 |grep -v Active |grep -v Proto|wc -l`;
system( "rrdtool update apache_hits.rrd -t hits N:$dummy" );

(Attention à bien remplacer $1 par $dummy dans l'appel système par contre !)

Sinon oui, tu peux utiliser la même structure rrd que matao qui s'y prête parfaitement.

Merci

Tu t'es trompé dans le update.pl: tu as mis:

DEF:apache_hits={#path#}apache_hits.rrd:netstat:AVERAGE

au lieu de :

DEF:apache_hits={#path#}apache_hits.rrd:apache_hits:AVERAGE

J'ai un soucis par contre par rapport au nombre de Hits sur Apache.

netstat -tn | grep ESTABLISHED | grep :80 | wc -l me donne ce nombre la a un moment x. Si le script d'update s'execute a x+1 peut être que ce nombre aura changé. Si le script s'execute entre les connexions, mes graphs vont être foireux non ? Un moyen de remedier a cela ?

J'ai fais des copier-coller de ton script et a chaque fois, je prend une erreur quand je lanc ele script d'update. j'ai donc essayé de lancer manuellement le create.sh et je prend un ERROR: Invalid DS type, je comprend pas. Ca me fait uniquement sur ton script. Tous les droits sont bons....

Salut Steph,
J'ai installe eLuna Graph et suivi les conseils d'installation, mais les images des graphs ne sont pas affiches . J'ai la page index.pl mais a la place des images j'ai de "broken links". Est-ce que tu as une idee ?

Merci

Salut Steph,
J'ai instllé cf. aux instructions et j'ai les problemes suivantes :
- le cron ne s'execute pas car il n'y a pas de fichier rrd generé
- en accessant http://localhost/graphs le fichier index.pl n'est pas executé mais il m'est proposé pour telechargement .

Sur Apache 2.0.55(Ubuntu Desktop 6.10) j'ai les modules suivantes activées : svn, python, php, ssl, mod_perl.
Les repertoires sont en ecriture pour l'utilisateur www-data.

Merci pour ton aide

Oui les modules sont bien installees. J'ai execute update.pl a la main. et il m'a cree les bases rrd. J'ai redemare la machine , maintenant le index.pl est bien execute mais il toujours pas d'images ...
Est'ce que les images sont genere a la vole ou genere une fois et "cached" pour quelques minutes ?


Ovidiu

Bonjour,

J'essaye d'installer le script eluna graph sur mon serveur ... mais en vain
quand je vais sur http://monsite/graphs/ j'obtiens : 500 Internal Server Error
j'ai bien suivi les instructions d'installation, mais j'ai du rater quelque chose quelque part ...
j'ai un serveur apache 2, perl avec les modules requis, rrdtool, ...
quand le lance index.pl en ligne de commande j'obtiens seulement le message "This script must be executed as a web script" mais pas d'autres erreur, donc ca semble etre ok
et quand je regarde les logs apache, j'ai ce message d'erreur : "Premature end of script headers: index.pl" et c'est tout

merci de m'eclairer parce que la je bloque completement
MAtthieu

salut Steph,

et a vue de nez tu as absolument raison
les fichiers appartenaient a root ... j'ai changé les droits et ca marche parfaitement !

allez, maintenant je m'attaque à essayer de créer des graphs personalisés. et hop.

merci pour ta reponse rapide et désolé d'avoir posté pour un problème aussi simple mais linux en général est très nouveau pour moi (mais ca me plait de plus en plus !)

Salut tout le monde,

Je partage un peu mon expérience sous OS debian, et le problème des images qui s'affiche pas que j'ai fini par résoudre.

Pour debian : voici les paquets à installer :
#apt-get install perl libhtml-template-expr-perl libdatetime-perl rrdtool
Les dépendances suivront (bien sur). Les paquets à installer sont surement les mêmes ou presque sur les autres distribs.
Si le fichier index.pl se propose en téléchargement au lieu de s'afficher dans le navigateur, lancé la commande ./index.pl dans le rep d'install via la console, il doit retourner "This script must be.....", Si ça affiche autre chose, c'est qu'un paquet manque (je me suis rendu compte ainsi de l'absence de libhtml-template-expr-perl).

Problème d'image :
Je suis pas un pro d'apache (2.2) ni de perl, mais j'avais écrit ça dans mon 000-default :
ScriptAlias /eluna/ /var/www/eluna/
<Directory /var/www/eluna/>
AddHandler cgi-script .pl
Options +ExecCGI
DirectoryIndex index.pl
</Directory>
Je ne sais pas pourquoi, mais avec cette config, les images ne s'affichent pas du tout.
Tout fonctionne correctement une fois qu'on a commenté la ligne :
#ScriptAlias /eluna/ /var/www/eluna/

Après quoi, tout fonctionne correctement. Ormis les statistiques eth0 ?? Il y a marqué "nan" à la place des valeurs. Ce sera mon combat de demain

++ Stephanfo

Effectivement, j'ai mis un script alias, car c'était en général toujours ainsi dans mon fichier avant un directory. Je me ferais pas avoir deux fois. (débutant en config apache, le copier-coller, ça marche pas toujours ).

Sinon, autre combat, autre victoire.
Concernant les traffics ETH0 IN et OUT, je viens de comprendre pourquoi ça marchait pas. Je suis sous debian testing "etch". Le cron génère un environnement différent de la console. Aussi, le répertoire /sbin n'est pas inclut dans $PATH. Résultat, ifconfig .... n'est pas trouvé. Une fois que j'ai mis le chemin complet (/sbn/ipconfig ....) dans le fichier ~/rrd/05_eth0_out/update.pl , ça fonctionne.

Je pense faire un script pour les quotas. Si j'y arrive, je le posterai.

++ Stéphane

PS : Je suis d'accord, vive debian .

Merci pour cette contribution !

thanks

Super, merci ! ... Je vais l'utiliser d'ailleurs

There's no spam filter at this time... but soon captcha t3 extension will be usable on it

hi Sander,

Thanks for your feedback.

Might be a problem of crontab not executed every 5 minutes. If you execute the update.pl script manually, does it works ? if yes => crontab problem. If not, what's happen exactly ? error ? When it works, *.rrd files must be updated every update (manually or crontab), does they ?

You're welcome

Well, hard to debug without access


For the network traffic, try to see if the command executed in the rrd/05_eth0_out/update.sh file returns a number that increases each time

Command is: ifconfig eth0 |grep bytes|cut -d":" -f3|cut -d" " -f1

Or maybe your interface is not named eth0 ?


For the apache hits, are you sure that you correctly configure it ? are you sure that www-browser http://localhost/server-status/ display server-status page ?

If yes, and so if the command www-browser -dump http://localhost/server-status/ | grep "Total accesses" works, try to see if you have created all files with correct rights / owners.

Maybe an idea (that I have corrected in my devel version, which will be released soon, with an english readme) :

try to replace ifconfig by /sbin/ifconfig in update.sh files

Example:

#!/bin/bash

rrdtool update eth0_out.rrd
-t out
N:`/sbin/ifconfig eth0 |grep bytes|cut -d":" -f3|cut -d" " -f1`

Hope it works !

Yes, but it's because you have /sbin in your path, that's not the case for the crontab.

For the second thing, there's no solution that I know...

Well, don't really understand why you want to do do this, but maybe you can change this line:

CDEF:hits_mn=hits,60,*

to:

CDEF:hits_hr=hits,3600,*

(and replace hits_mn by hits_hr in the rest of the file)

my apologize for that, haven't tested

I created a graph that shows my active TorrentFlux torrents. Scripts are below:


************ update.sh ************
#!/bin/bash

a=`ps aux | grep btphptornado| wc -l | sed -e "s/ //g"`
a=`expr $a - 1`

rrdtool update torrent.rrd
-t all
N:$a



************ graph.pm ************
$GRAPH_TITLES{'torrent'} = "{#server#} - Active Torrents";
$GRAPH_CMDS{'torrent'} = <<"PROC_GRAPH_CMD";
--title "{#server#} - Active Torrents"
--vertical-label="Torrents"
--units-exponent 0
--lower-limit 0
DEF:all={#path#}torrent.rrd:all:AVERAGE
AREA:all{#color3#}:"Torrents "
GPRINT:all:LAST:"Current\: %5.0lf "
GPRINT:all:AVERAGE:"Average\: %5.0lf "
GPRINT:all:MAX:"Maximum\: %5.0lf\n"
PROC_GRAPH_CMD



************ create.sh ************
#!/bin/bash

rrdtool create torrent.rrd
--start `date +%s`
--step 300
DS:all:GAUGE:600:U:U
RRA:AVERAGE:0.5:1:2016
RRA:AVERAGE:0.5:6:1344
RRA:AVERAGE:0.5:24:732
RRA:AVERAGE:0.5:144:1460

Génial, simple et efficace ... bravo.
J'ai l'intention d'utiliser ton appli pour monitorer des serveurs web distants.
Cela fonctionne en integrant des commandes SSH dans les update.pl et update.sh
Juste un détail, y a t'il un endroit où je puisse modifier le nom du serveur apparaissant sur les graphs, sans devoir modifier tous les fichiers graph.pm ?

Merci et encore bravo

Merci,
Je n'avais pas regardé dans ce fichier !!!
J'en profite pour te poser une nouvelle question car je débute en rrdtool, y a t'il une commande pour vider les donnèes dans une base rrd, histoire de repartir sur un bon pied après différents tests ?

Merci,

C'est bon pour le "reset" des données.
Par contre, je tente d'ajouter un graphe pour avoir uniquement le load average des 5 dernieres minutes et je n'y arrive pas ! J'ai duplique rrd/01_load en rrd/01_load5mn.
Le fichier .rrd se crée bien, mais pas les fichiers graphe !
Voici mes fichiers de conf :

# cat create.sh
#!/bin/bash

rrdtool create load5mn.rrd
--start `date +%s`
--step 300
DS:load5mn:GAUGE:600:0:U
RRA:AVERAGE:0.5:6:1344

# cat graph.pm
$GRAPH_TITLES{'load5mn'} = "{#server#} - Load Average 5mn";
$GRAPH_CMDS{'load5mn'} = <<"LOAD5MN_GRAPH_CMD";
--title "{#server#} - Load Average 5mn"
--vertical-label=""
--units-exponent 0
--lower-limit 0
DEF:load5mn={#path#}load5mn.rrd:load5mn:AVERAGE
CDEF:mysum=load5mn,+
STACK:load5mn{#dcolor2#}:"load average 5mn"
GPRINT:load5mn:LAST:"Current\: %5.2lf "
GPRINT:load5mn:AVERAGE:"Average\: %5.2lf "
GPRINT:load5mn:MAX:"Max\: %5.2lf\n"
LINE1:mysum{#linecolor#}
LOAD5MN_GRAPH_CMD

1; # Return true

# cat update.sh
dummy=`ssh xxxwww.www.www "cat /proc/loadavg"`

V1=`echo $dummy | cut -d" " -f1`
V2=`echo $dummy | cut -d" " -f2`
V3=`echo $dummy | cut -d" " -f3`

rrdtool update load5mn.rrd -t load5mn N:$V2

-------

J'ai du faire une ou des erreurs

Merci de ton aide ...

Bonjour,

Est ce que quelqu'un a essayé d'installer eluna en multi-server.

Mecri pour vos réponse.

Alors voilà, je fais un test.
J'espère simplement que notre ami Steph n'aura pas oublié de programmer un backoffice pour dégager tous les comments foireux comme celui-ci !!!

Excuse me for writing in English. While I do read French a peu pres my writing is quite terrible.

A few comments about this nice and very usefull script:
- Sander 31/03/2007
rrdtools actually supports logarithmic scaling which with nowadays Gb networking works better than linear graphs, e.g. for log(kBytes/s):
DEF:out2={#path#}eth0_out.rrd:out:AVERAGE
CDEF:out3=out2,1000,/
CDEF:out4=out3,LOG
CDEF:out=out4,0.43429448,*
LINE3:out{#color3#}:"Outbound "
No very elegant. It should be possible to put all in one line.

I would be very pleased to find a simple Eluna script which checks postfix and cyrus IMAP server for ingoing, outgoing and rejected mails. Mailgraph exists, but it would be nice to have it all in one set of scripts and webpages.

Also monitoring SUN Gridengine Queuing system might be interesting: nb. of jobs running in different queues and nb. of jobs waiting.

Finally I'm a bit confused about the fact that the scripts should be run with root privileges. Even for a web server with restricted access this might be a security issue. And as for the update scripts in the Eluna sample package: none of them requires root access if one replaces 'ifconfig' with '/sbin/ifconfig'. I simply run them under a system wide user 'eluna'.

- For logarithmic scaling, can you explain a bit more ? (why do you divide by 1000, and what is 0.43429448 ?)

My preferred unit is kByte, not Byte. The machine is part of a network with quite some background noise, so there is always something going on. As for the factor: CDEF calculates the logarithmic function with Euler's number as base, that is LN or LOG_e. In order to get LOG_10 one has to multiply with LOG_10 e: LOG_10 X = LOG_10 e * LN X.

As for the "costum scripts": I consider this to be a very interesting idea to have individual solutions for specific problems available on eluna.org. In fact I did choose your script from the examples at Tobi Oetiker's web site because Eluna is so flexible. I will use it for a networked system where on different machines different values are of interest for monitoring. So while the principle structure is the same the directories in ./rrd will differ, and I can still have the same index.pl for creating the web pages. Very nice.

Up to now I just did minor changes and wrote a rrd subdirectory for a temperature and humidity sensor. Here the work was mainly in getting the output of this specific sensor which might not be of general interest. But if I manage to write a script for the Gridengine system I will leave a message here and can send an example. This might take some time as I'm busy with other projects right now.

Hello,
i installed your extension page comments in a website.
all is allright.
but i have noch idea how to display all comments and the form by default.
also not by using the link maybe "Comments"
is this possible
and when how?

many greeting

Ulrike

Tout d'abord bravo pour ce super soft! Je cherchais une petite appli (je dis bien petite car j'ai testé les super usines telles que cacti, collectd, munin... ) pour monitorer mon serveur web et force est de constater que j'ai trouvé

Je vous écris ce message pour savoir si vous aviez enregistré des comportements étranges sur l'<Inbound Traffic>. En effet, j'ai essayé de copier un fichier de 700Mo de mon PC à mon serveur. ; le graphe ne monte pas au dessus de 100 k... alors que je devrais plutot avoir plusieurs Mo... des idées ?

Je pense ajouter qq "plugins" à la solution. Je les posterai ici quand je les aurai faits.

Merci!

Ah, en fait j'ai êut ête confondu. L'<Inbound Traffic> mesure en fait le nombre de bits sur l'interface. Ensuite rrdtool fait une moyenne sur les intervalles de temps et en déduit le nbr de bits par seconde. Du coup mon fichier de 700 Mo était chargé aux alentours de 90 Ko/s ce qui apparait comme tel sur le graphe. C'est bien ça que fait ce graphe ?

Si oui comment pourrait on avoir la quantité de donnée transférée ?

Quelle rapidité de réponse . En fait je pense que ce que je souhaite faire ne peut être réalisé grâce à rrdtool. Ce que je voudrais idéalement c'est la quantité de données transférée par heure/jour voire mois et non la moyenne de bits par seconde. Possible avec rrdtools ?

Non en effet, après vérification sur les mailing lists de rrd, c'est pas le top rrdtool pour afficher ce genre d'information (ce qui se comprend d'ailleurs). Je vais voir comment faire ça autrement. Merci pour le support en tout cas.

Bonjour,

Le calcul du traffic réseau est erroné au niveau de la génération du graphique.
Ex: Pour le traffic sortant, dans graph.pm
Il faut rajouter cette ligne après le DEF=
CDEF:outo=out,8,*
Et changer les 5 références suivantes à out en outo

Sinon le taux affiché ne correspond pas à la réalité (vérifié avec iptraf).
Il faut en faire de même pour le trafic entrant (avec in et ino)

Je poursuis avec le script d'affichage de la consommation de ressource.
N'ayant pas de dans mon /proc/meminfo sur gentoo, le calcul s'en retrouve faussé.
J'ai donc changé le calcul pour $mem de la façon suivante dans update.pl :
my $mem = ($total?100-(int(($memfree/$total)*100)):0);

(méthode reprise du calcul de la consommation de swap)

Quelqu'un a-t-il réussi à réaliser un graph de ping, façon smokeping ?
J'avais tenté de le faire il y a quelques temps mais j'obtenais toujours des erreurs, à cause du format numérique de la valeur renvoyée par ping en perl, me semble-t-il.

Merci.

salut Steph,

j'ai finalement trouvé une solution qui fonctionne :
# rrdtool dump mysql_queries.rrd > aaa.xml
editer aaa.xml à la main pour enlever la valeur pic
# rrdtool restore aaa.xml mysql_queries.rrd

Bonjour,

Je suis en train de tester eLuna sur Ubuntu 8.10 sur x86_64 : très joli. J'ai un curieux problème sur Intrepid : on dirait qu'une commande cron n'est pas exécutée si on la fait précéder du nom de l'utilisateur ? il a fallu que je fasse sauter 'root' dans crontab pour que ça marche ? Ça aura été le seul ennui.

Salut Robert, salut Spirit,

Merci à vous deux pour vos feedbacks.

@spirit : très sympa le skin en effet ... peux-tu m'envoyer par email ta source ? je serais intéressé par ajouter dans une prochaine version tes deux graphs sur MySQL. Merci d'avance

Merci pour ta contribution !

@"test" : are you dumb enough not to see that it's a real website ? ... go make your tests elsewhere !

Well, maybe you can be a little more specific ?

Well, I'm not 100% sure if it is connected or not, but for sure, you should start by correcting that !

... If update.pl doesn't work correctly, there's no sense of going further ^^

And so :

- Check that rrdtool is installed
- Check that the dir in which rdtool is installed is in the path

The strange thing is that you've got only errors for this 3 rrds ?

For the images, are they generated ?

If they are generated, (png files in the "graphs" directory), the problem come from web server rights.

... you must have a minimum knowledge of how your system works...

I don't really have the time to help you more sorry.

Juste check :

- Which user is executing update.pl
- Is this user can execute rrdtool without specifying the path ? If not, you must add the rrdtool directory (/usr/bin ?) to the user PATH variable

... For the rest google is your friend

The standard installation procedure in the README file doesn't work for Ubuntu ?

Hello,

You may give more details. What did you try ?

The command used is :

df | grep /home

Does this command work on your system ?

It seems that "/dev/sdb1 1.8T 123G 1.7T 7% /media/data_a" is not supposed to be the output of "df" command, but the output of "df -h" command.

"df | grep /home" on my system give :

"/dev/sda2 721075720 147186264 537549336 22% /home"

Sizes are in bytes, not in "human readable" format.

Hope it helps

df output with a grep

df | grep /media/data_a
/dev/sdb1 1922860900 205056396 1717804504 11% /media/data_a

yes i deleted the .rrd file. And waited for more then two crontabs. What information do you need to help me?

Thanks

Thanks for you help. I fixed the problem. I had an user:group rights problem. Now it is working good.

Thanks!

Thanks for your comment. It would be nice, indeed

... but please, this page is about eLuna Graph System, not about the comment extension!

merci

This page is NOT a test page for the comments extension, you moron!