Querying event logs

Abstract

Organisaties van vandaag zijn complexer dan ooit. Heel wat processen zijn gekoppeld aan elkaar en heel wat gegevens stromen doorheen organisaties. Vroeger werden gegevens enkel opgeslagen in een relationele database zodat er daarna SQL-queries op uit konden gevoerd worden. Er zijn echter een aantal nieuwe applicaties zoals netwerk monitoring, financiële analyse, productie en sensor netwerken waarbij de gegevens niet worden opgeslagen in een relationele database maar als events in een datastroom. Een event log wordt gedefinieerd als 'alles dat gebeurt of niet gebeurt waar de business potentiële interesse in heeft'. Een event wordt gekenmerkt door een timestamp, het tijdstip waarop een bepaalde stap of activiteit heeft plaatsgevonden.

Er vinden continu nieuwe events plaats en het is moeilijk om de betekenisvolle events uit een oneindige dataset te halen. Er zitten regelmatig bepaalde patronen in deze stroom van events. Soms is een bepaald patroon in een datastroom zelfs vereist, maar