Design en implementatie van een schaalbaar logsysteem voor grootschalige Kubernetes-beheerde testbedomgevingen

Abstract

Het Nokia Network Infrastructure (NI) team in Antwerpen voert een modernisering uit op het in-house datacenter waar software-updates van corporate service-routers worden getest. De klassieke combinaties van virtuele machines maken plaats voor een gecontaineriseerde omgeving beheerd door Kubernetes. Deze masterproef focust op het aanleveren van logfiles bij elk van de uitgevoerde testen. De hoofddoelstelling is om de logs realtime beschikbaar te stellen tijdens het uitvoeren van een test en na afloop permanent centraal raadpleegbaar te maken, waarbij de aanpak van de huidige implementatie en de schaalvoordelen van een gedistribueerd systeem optimaal benut worden. Een studie naar de dimensionering van de logfiles, naar de state-of-the-art en naar de concrete behoeften leidde tot het gebruik van de Apache HTTP-server, enerzijds met een vluchtige opstelling tijdens lopende tests per testrun en anderzijds als centraal permanent en geaggregeerd toegangspunt. HAProxy wordt als reverse proxyserver en load balancer gebruikt om aanvragen naar de correcte HTTP-server te routeren. Tot slot is een zelfgeschreven ‘resulthandler’ in Go geïmplementeerd, die de testen traceert en de aansturing tussen de bovengenoemde componenten verzorgt in de Kubernetes-cluster. Deze implementaties ten gevolge van de designkeuzes bieden een betere opvolging en aggregatie van logs, die efficiënter aan de gebruikers van de testruns aangeleverd worden, waarbij het systeem toelaat om ongecompliceerd extra modules toe te voegen.