Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment

A problem that is prevalent for testers at Ericsson is that performance test results are continuously generated but not analyzed. The time between occurrence of problems and information about the occurrence is long and variable. This is due to the manual analysis of log files that is time consuming...

Full description

Bibliographic Details
Main Authors: Hededal Klincov, Lazar, Symeri, Ali
Format: Others
Language:English
Published: KTH, Data- och elektroteknik 2017
Subjects:
Online Access:http://urn.kb.se/resolve?urn=urn:nbn:se:kth:diva-208965
id ndltd-UPSALLA1-oai-DiVA.org-kth-208965
record_format oai_dc
spelling ndltd-UPSALLA1-oai-DiVA.org-kth-2089652018-01-14T05:10:32ZDevising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom EquipmentengUtformning av trendbrytningsalgoritm av lagrade nyckelindikatorer för telekomutrustningHededal Klincov, LazarSymeri, AliKTH, Data- och elektroteknikKTH, Data- och elektroteknik2017Trend analysistrend-break-detectionanomaly-detection algorithmkey performance indicatorregressionTrendanalystrendbrytningshittandeavvikelse-hittande algoritmnyckelindikatorregressionSoftware EngineeringProgramvaruteknikProbability Theory and StatisticsSannolikhetsteori och statistikA problem that is prevalent for testers at Ericsson is that performance test results are continuously generated but not analyzed. The time between occurrence of problems and information about the occurrence is long and variable. This is due to the manual analysis of log files that is time consuming and tedious. The requested solution is automation with an algorithm that analyzes the performance and notifies when problems occur. A binary classifier algorithm, based on statistical methods, was developed and evaluated as a solution to the stated problem. The algorithm was evaluated with simulated data and produced an accuracy of 97.54 %, to detect trend breaks. Furthermore, correlation analysis was carried out between performance and hardware to gain insights in how hardware configurations affect test runs. Ett allmänt förekommande problem för testare på Ericsson är att resultat från flera prestandatester genereras kontinuerligt men inte analyseras. Tiden mellan förekommande fel och informationen av dessa är hög och varierande. Detta på grund av manuell analys av loggfiler som är tidsödande och ledsamt. Den efterfrågade lösningen är automatisering med en algoritm, baserad på statistisk metodik, som analyserar data om prestanda och meddelar när problem förekommer. En algoritm för binär klassifikation utvecklades och utvärderades som lösning till det fastställda problemet. Algoritmen utvärderades med simulerad data och alstrade en noggrannhet på 97,54%, för att detektera trendbrott. Dessutom utfördes korrelationsanalys mellan prestandan och hårdvaran för att få insikt i hur hårdvarukonfigurationen påverkar testkörningar. Student thesisinfo:eu-repo/semantics/bachelorThesistexthttp://urn.kb.se/resolve?urn=urn:nbn:se:kth:diva-208965TRITA-STH ; 2017:32application/pdfinfo:eu-repo/semantics/openAccess
collection NDLTD
language English
format Others
sources NDLTD
topic Trend analysis
trend-break-detection
anomaly-detection algorithm
key performance indicator
regression
Trendanalys
trendbrytningshittande
avvikelse-hittande algoritm
nyckelindikator
regression
Software Engineering
Programvaruteknik
Probability Theory and Statistics
Sannolikhetsteori och statistik
spellingShingle Trend analysis
trend-break-detection
anomaly-detection algorithm
key performance indicator
regression
Trendanalys
trendbrytningshittande
avvikelse-hittande algoritm
nyckelindikator
regression
Software Engineering
Programvaruteknik
Probability Theory and Statistics
Sannolikhetsteori och statistik
Hededal Klincov, Lazar
Symeri, Ali
Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
description A problem that is prevalent for testers at Ericsson is that performance test results are continuously generated but not analyzed. The time between occurrence of problems and information about the occurrence is long and variable. This is due to the manual analysis of log files that is time consuming and tedious. The requested solution is automation with an algorithm that analyzes the performance and notifies when problems occur. A binary classifier algorithm, based on statistical methods, was developed and evaluated as a solution to the stated problem. The algorithm was evaluated with simulated data and produced an accuracy of 97.54 %, to detect trend breaks. Furthermore, correlation analysis was carried out between performance and hardware to gain insights in how hardware configurations affect test runs. === Ett allmänt förekommande problem för testare på Ericsson är att resultat från flera prestandatester genereras kontinuerligt men inte analyseras. Tiden mellan förekommande fel och informationen av dessa är hög och varierande. Detta på grund av manuell analys av loggfiler som är tidsödande och ledsamt. Den efterfrågade lösningen är automatisering med en algoritm, baserad på statistisk metodik, som analyserar data om prestanda och meddelar när problem förekommer. En algoritm för binär klassifikation utvecklades och utvärderades som lösning till det fastställda problemet. Algoritmen utvärderades med simulerad data och alstrade en noggrannhet på 97,54%, för att detektera trendbrott. Dessutom utfördes korrelationsanalys mellan prestandan och hårdvaran för att få insikt i hur hårdvarukonfigurationen påverkar testkörningar.
author Hededal Klincov, Lazar
Symeri, Ali
author_facet Hededal Klincov, Lazar
Symeri, Ali
author_sort Hededal Klincov, Lazar
title Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
title_short Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
title_full Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
title_fullStr Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
title_full_unstemmed Devising a Trend-break-detection Algorithm of stored Key Performance Indicators for Telecom Equipment
title_sort devising a trend-break-detection algorithm of stored key performance indicators for telecom equipment
publisher KTH, Data- och elektroteknik
publishDate 2017
url http://urn.kb.se/resolve?urn=urn:nbn:se:kth:diva-208965
work_keys_str_mv AT hededalklincovlazar devisingatrendbreakdetectionalgorithmofstoredkeyperformanceindicatorsfortelecomequipment
AT symeriali devisingatrendbreakdetectionalgorithmofstoredkeyperformanceindicatorsfortelecomequipment
AT hededalklincovlazar utformningavtrendbrytningsalgoritmavlagradenyckelindikatorerfortelekomutrustning
AT symeriali utformningavtrendbrytningsalgoritmavlagradenyckelindikatorerfortelekomutrustning
_version_ 1718609243913846784