CEMEX kreeg te maken met een stortvloed aan fout-positieve meldingen van zijn systeembewakingssoftware. Uiteindelijk heeft het bedrijf software en best practices geïmplementeerd om het aantal valse positieven drastisch te verminderen voor verbeterde monitoring en een betere ervaring voor werknemers en klanten.
Raad me dit! Wanneer is teveel van het goede niet goed? Welnu, voor Juan Murguia Castillo, Cemex IT Operations Director, en zijn team in CEMEX’s Operations Control Center (OCC) diende die vraag zich elke dag.
CEMEX, met hoofdkantoor in Mexico, is een leverancier van bouwmaterialen en een cementproducent. Het produceert en distribueert cement, stortklaar beton en toeslagstoffen in meer dan 50 landen.
En dit is belangrijk: het heeft 66 cementfabrieken, 2.000 stortklaar-betonfaciliteiten, 400 steengroeven, 260 distributiecentra, 80 maritieme terminals en meer dan 41.000 werknemers wereldwijd. Wauw!
Dus, hoe beheert CEMEX in vredesnaam al die faciliteiten en mensen? Een manier is met zijn OCC.
Toezicht houden op operaties wereldwijd
In 2014 lanceerde het bedrijf zijn centrum, gebruikmakend van het SAP-technologieplatform om 22 productiesystemen en meer dan 18.000 gebruikers wereldwijd te monitoren. Het platform is zo ontworpen dat wanneer er iets misgaat met de systemen, er automatisch een waarschuwing wordt gemaakt – in theorie een goede zaak – waardoor het OCC-team eventuele problemen kan detecteren en oplossen voordat het bedrijf wordt getroffen.
Maar wat gebeurt er als je wordt overspoeld met die ‘goede dingen’, en de meeste zijn… vals alarmen? Dat was het geval voor het OCC-team. De situatie werd een speld in de hooiberg voor het team dat op zoek was naar echte problemen in de menigte.
Een vals spoor volgen
Vals-positieve waarschuwingen van welke aard dan ook, in elke branche en van elke bron kunnen verstoringen veroorzaken en de portemonnee van een bedrijf leegmaken. Neem bijvoorbeeld beveiligingswaarschuwingen: “46% van alle uitvaltijd van applicaties” [is] veroorzaakt door valse positieven. . . 75% van de bedrijven besteedde evenveel of meer tijd aan het opsporen van valse positieven dan aan het afhandelen van daadwerkelijke beveiligingsincidenten”, aldus Castillo. De gemiddelde onderneming ontvangt meer dan 10.000 beveiligingswaarschuwingen per dag. Hoewel vaak minder in aantal, kan de stroom van waarschuwingen die niets met beveiliging te maken hebben, toch ook overweldigend zijn, ontdekte het OCC.
“We kregen vaak gemiddeld 200 meldingen per dag die moesten worden opgespoord, wat veel tijd en middelen in beslag nam om te ontdekken dat de meeste valse positieven waren”, zegt Castillo.
Een oplossing die moest worden bijgewerkt
De reden voor de overstroming lag bij de SAP Solution Manager van het technologieplatform. De oudere versie van CEMEX die in het OCC werd ingezet, kon zich niet aanpassen aan terugkerende gedragsvariaties, wat resulteerde in het hoge percentage valse waarschuwingen, of alle onverwachte situaties dekken.
Het OCC-team zou waarschuwingsdrempels instellen met parameters om te bepalen hoe, wanneer en waar een waarschuwing moet worden gecreëerd. Maar als een anomalie onder de drempel lag, kon de anomalie niet worden gedetecteerd.
Het team had beperkt zicht op SAP-applicaties, waardoor het moeilijk was om de status van processen te bepalen. Waarschuwingsvoorspellingen werden ook belemmerd door het gebrek aan procesintelligentie van de Solution Manager. Uiteindelijk moesten de door de software gecreëerde gegevens worden beoordeeld op betrouwbaarheid, wat het team van Castillo weerhield van het nastreven van waardevoller werk.
Het IQ van de Solution Manager verhogen
In de afgelopen twee jaar hebben het OCC-team en SAP samengewerkt om de SAP Solution Manager van CEMEX te leren SAP-operaties intelligent uit te voeren, gebruikmakend van machine learning en kunstmatige intelligentie, ondersteund door best practices. De Machine Learning Extension voor ELP SAP Solution Manager 7.2 is geïmplementeerd als een set microservices, die wordt uitgevoerd in de CEMEX SAP HANA XS Advanced-systeemruimte. Het resultaat?
Het OCC-team heeft nu een uitgebreid overzicht van alle SAP-applicaties die in de CEMEX-onderneming draaien. Problemen zijn gemakkelijker te voorspellen. Terugkerende metrische en waarschuwingsvariaties, onverwachte situaties en afwijkingen onder de drempelwaarde worden herkend en afgehandeld. Redundante waarschuwingen zijn eruit gefilterd, waardoor de redundantie met 82% is teruggebracht.
Over de hele linie een overwinning
Over het algemeen heeft de intelligente Solution Manager de betrouwbaarheid van de operaties verbeterd. “Het aantal vals-positieve waarschuwingen is drastisch gedaald, waardoor het gemakkelijker is om degene te vinden die er toe doen. Hoe sneller we problemen kunnen identificeren en oplossen, hoe minder verstoring van ons bedrijf”, zegt Martha Leal Tapia, CEMEX SAP Service Delivery Lead. Het netto voordeel is dat teams kunnen werken aan proactieve activiteiten, zoals focussen op andere zaken, om de ervaring van zakendoen met CEMEX te verbeteren.
Om meer te weten te komen over de creatieve oplossing van CEMEX die hen een finalistenpositie opleverde bij de SAP Innovation Awards voor 2022, bekijk hun pitchdeck.
