Centralisation de logs avec Octopussy

Posté le 3 juillet 2009 :: Développement

Octopussy a vu le jour en Aout 2005. Son développeur principal l’a publié sur sourceforge en décembre 2005, mais le logiciel était encore peu utilisé. C’est en Juin 2006, après sa publication sur freshmeat que le nombre d’utilisateur a augmenté et avec lui les premières remontées de bug et les premières contributions.

Octopussy permets de réunir tout les journaux (logs) de serveurs et de services sur une interface web unique. Il permet de les analyser, de générer des alertes ou des rapports, selon les besoins. Il présente de nombreux avantages, et en particulier d’éviter de devoir se connecter sur chaque machine et de la vérifier manuellement. Pour cela, il se base sur Syslog-ng, un outil disponible sur de nombreuses plateformes compatible Unix.

La plupart des logiciels de remontée de logs stockent deux fois la ligne de logs dans une base de données. Une première fois pour découper et traiter les informations et une seconde fois pour le stockage. La loi oblige à garder les ligne de logs intacte car elles peuvent servir de preuve légale. L’approche choisie par Octopussy est différente : il conserve les logs dans leur format de fichiers natifs et les traite directement. Cette approche permet d’accroitre le temps de réponse et confère à l’outil une incroyable capacité de traitement. En production, Octopussy est capable de traiter 1,2 millions lignes de logs par minute. Le choix du Perl comme langage d’implémentation ne doit pas y être étranger.

Octopussy s’installe facilement et reconnaît nativement un certain nombre d’applications (apache, bind, dhcp, …). Pour celles qui ne sont pas intégrées, comme Horde, l’intégration avec Octopussy n’a nécessité que quelques clics.

En terme de fonctionnalités, Octopussy ne se limite pas aux logs applicatifs. Il est capable de générer des rapports ou des graphes à partir de :