You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-31 - 23:30

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Wed Dec 31, 2025 00:45:47)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
28992812387365,14sleep130-21swapper/135
28991952375352,14sleep00-21swapper/00
28991122375353,14sleep80-21swapper/814
28993212341317,15sleep140-21swapper/146
28990212337315,14sleep90-21swapper/915
28992992329306,15sleep110-21swapper/113
28990332329285,36sleep40-21swapper/410
28991462315291,15sleep70-21swapper/713
28992322310288,14sleep10-21swapper/11
28992802309287,14sleep120-21swapper/124
28991812308286,14sleep50-21swapper/511
28991742308286,14sleep150-21swapper/157
28990392308286,14sleep100-21swapper/102
28966042308288,13sleep30-21swapper/39
28993112305283,14sleep60-21swapper/612
28991612304282,14sleep20-21swapper/28
289964699564,11cyclictest0-21swapper/713
289964699435,25cyclictest0-21swapper/713
2899636994140,1cyclictest2247-21snmpd10
2899673994036,3cyclictest2247-21snmpd6
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
289964699404,11cyclictest0-21swapper/713
2899638994039,1cyclictest2247-21snmpd11
2899668993938,1cyclictest0-21swapper/135
289964699394,10cyclictest0-21swapper/713
289964699393,11cyclictest0-21swapper/713
289964699393,11cyclictest0-21swapper/713
289964699393,11cyclictest0-21swapper/713
289964699393,11cyclictest0-21swapper/713
289964699393,11cyclictest0-21swapper/713
2899624993939,0cyclictest0-21swapper/11
2899673993838,0cyclictest0-21swapper/146
2899668993810,27cyclictest0-21swapper/135
2899656993811,1cyclictest0-21swapper/102
289963299360,0cyclictest0-21swapper/39
2899624993636,0cyclictest0-21swapper/11
2899656993535,0cyclictest0-21swapper/102
289964699359,25cyclictest0-21swapper/713
2899643993535,0cyclictest0-21swapper/612
289963299350,0cyclictest0-21swapper/39
2899627993535,0cyclictest0-21swapper/28
2899673993432,2cyclictest0-21swapper/146
289964699348,25cyclictest2983987-21smartctl13
289964699348,25cyclictest0-21swapper/713
2899636993434,0cyclictest0-21swapper/410
2899627993432,1cyclictest2247-21snmpd8
2899668993314,18cyclictest2291954-21kworker/13:0+events5
2899663993333,0cyclictest0-21swapper/124
2899648993333,0cyclictest0-21swapper/814
2899638993310,22cyclictest0-21swapper/511
2899636993333,0cyclictest0-21swapper/410
289963299330,14cyclictest0-21swapper/39
2899668993232,0cyclictest0-21swapper/135
2899668993231,1cyclictest2291954-21kworker/13:0+events5
289966899320,1cyclictest0-21swapper/135
2899638993231,1cyclictest2247-21snmpd11
289963899320,0cyclictest0-21swapper/511
289962499320,31cyclictest0-21swapper/11
2899668993130,1cyclictest2291954-21kworker/13:0+events5
2899668993130,1cyclictest2291954-21kworker/13:0+events5
2899668993130,1cyclictest2291954-21kworker/13:0+events5
2899668993130,1cyclictest2291954-21kworker/13:0+events5
2899668993130,1cyclictest2291954-21kworker/13:0+events5
2899668993129,2cyclictest2291954-21kworker/13:0+events5
289964699315,25cyclictest0-21swapper/713
289964699315,25cyclictest0-21swapper/713
289963899310,0cyclictest0-21swapper/511
2899627993131,0cyclictest0-21swapper/28
2899624993131,0cyclictest0-21swapper/11
289967399300,0cyclictest0-21swapper/146
2899668993029,1cyclictest2291954-21kworker/13:0+events5
2899668993029,1cyclictest2291954-21kworker/13:0+events5
2899668993029,1cyclictest2291954-21kworker/13:0+events5
2899668993029,1cyclictest2291954-21kworker/13:0+events5
2899668993029,1cyclictest2291954-21kworker/13:0+events5
2899668993028,2cyclictest2291954-21kworker/13:0+events5
2899668993012,17cyclictest2291954-21kworker/13:0+events5
2899663993030,0cyclictest0-21swapper/124
2899658993029,1cyclictest0-21swapper/113
289965899300,29cyclictest0-21swapper/113
289964699304,25cyclictest0-21swapper/713
289964699304,25cyclictest0-21swapper/713
2899643993029,1cyclictest2247-21snmpd12
2899643993025,3cyclictest0-21swapper/612
289963899300,27cyclictest0-21swapper/511
2899636993013,17cyclictest2247-21snmpd10
2899668992928,1cyclictest2291954-21kworker/13:0+events5
2899668992928,1cyclictest2291954-21kworker/13:0+events5
2899668992928,1cyclictest2247-21snmpd5
2899663992928,1cyclictest2247-21snmpd4
2899658992929,0cyclictest0-21swapper/113
289965699290,29cyclictest0-21swapper/102
289964699294,25cyclictest0-21swapper/713
289964699294,25cyclictest0-21swapper/713
289964399290,0cyclictest0-21swapper/612
2899677992828,0cyclictest0-21swapper/157
2899677992827,1cyclictest2247-21snmpd7
2899677992826,1cyclictest2247-21snmpd7
289967799280,1cyclictest0-21swapper/157
289967399280,27cyclictest0-21swapper/146
289967399280,27cyclictest0-21swapper/146
289967399280,27cyclictest0-21swapper/146
289966899289,18cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
2899668992827,1cyclictest2291954-21kworker/13:0+events5
289966899280,27cyclictest0-21swapper/135
289966899280,27cyclictest0-21swapper/135
2899663992827,1cyclictest0-21swapper/124
289966399280,27cyclictest0-21swapper/124
2899658992828,0cyclictest0-21swapper/113
2899658992827,1cyclictest2247-21snmpd3
289965899280,1cyclictest0-21swapper/113
2899656992827,1cyclictest0-21swapper/102
289965699280,27cyclictest0-21swapper/102
289965699280,27cyclictest0-21swapper/102
2899652992828,0cyclictest0-21swapper/915
289965299280,27cyclictest0-21swapper/915
289965299280,1cyclictest0-21swapper/915
2899648992826,1cyclictest2247-21snmpd14
289964899280,27cyclictest0-21swapper/814
289964899280,27cyclictest0-21swapper/814
289964899280,27cyclictest0-21swapper/814
289964699280,28cyclictest0-21swapper/713
2899643992827,1cyclictest2247-21snmpd12
2899643992826,1cyclictest2247-21snmpd12
289964399280,1cyclictest0-21swapper/612
2899638992825,3cyclictest2247-21snmpd11
2899638992824,4cyclictest2247-21snmpd11
289963899280,27cyclictest0-21swapper/511
289963899280,27cyclictest0-21swapper/511
289963899280,27cyclictest0-21swapper/511
289963899280,27cyclictest0-21swapper/511
289963699280,27cyclictest0-21swapper/410
289963699280,27cyclictest0-21swapper/410
289963699280,27cyclictest0-21swapper/410
2899632992826,1cyclictest2247-21snmpd9
289963299280,27cyclictest0-21swapper/39
289963299280,27cyclictest0-21swapper/39
289963299280,27cyclictest0-21swapper/39
2899627992827,1cyclictest2247-21snmpd8
2899627992827,1cyclictest2247-21snmpd8
289962799280,27cyclictest0-21swapper/28
289962799280,1cyclictest0-21swapper/28
289962499280,27cyclictest0-21swapper/11
289962499280,27cyclictest0-21swapper/11
289962499280,1cyclictest0-21swapper/11
289962499280,1cyclictest0-21swapper/11
2899622992828,0cyclictest0-21swapper/00
289962299280,27cyclictest0-21swapper/00
289962299280,27cyclictest0-21swapper/00
289967799270,27cyclictest0-21swapper/157
289967799270,27cyclictest0-21swapper/157
2899673992727,0cyclictest0-21swapper/146
2899673992718,8cyclictest100654-21CPU6
289967399270,1cyclictest0-21swapper/146
289966899279,1cyclictest2291954-21kworker/13:0+events5
289966899279,17cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2291954-21kworker/13:0+events5
2899668992726,1cyclictest2247-21snmpd5
2899663992726,1cyclictest2247-21snmpd4
2899663992726,1cyclictest2247-21snmpd4
2899663992726,1cyclictest2247-21snmpd4
2899663992726,1cyclictest2247-21snmpd4
2899663992726,1cyclictest2247-21snmpd4
2899658992726,1cyclictest2247-21snmpd3
2899656992726,1cyclictest2247-21snmpd2
2899656992726,1cyclictest2247-21snmpd2
2899652992726,1cyclictest2247-21snmpd15
2899652992726,1cyclictest2247-21snmpd15
2899652992726,1cyclictest2247-21snmpd15
289965299270,27cyclictest0-21swapper/915
289965299270,1cyclictest0-21swapper/915
2899648992727,0cyclictest0-21swapper/814
2899648992727,0cyclictest0-21swapper/814
2899648992726,1cyclictest2247-21snmpd14
2899643992725,1cyclictest2247-21snmpd12
2899638992726,1cyclictest2247-21snmpd11
2899638992726,1cyclictest2247-21snmpd11
2899638992726,1cyclictest2247-21snmpd11
289963899270,1cyclictest0-21swapper/511
2899636992726,1cyclictest2247-21snmpd10
289963699270,1cyclictest0-21swapper/410
2899632992727,0cyclictest0-21swapper/39
2899632992726,1cyclictest2247-21snmpd9
2899632992726,1cyclictest2247-21snmpd9
2899632992726,1cyclictest2247-21snmpd9
289963299270,26cyclictest0-21swapper/39
2899627992726,1cyclictest2247-21snmpd8
2899624992726,1cyclictest2247-21snmpd1
2899624992726,1cyclictest2247-21snmpd1
2899624992726,1cyclictest2247-21snmpd1
2899624992726,1cyclictest2247-21snmpd1
289962499270,26cyclictest0-21swapper/11
2899622992727,0cyclictest0-21swapper/00
2899622992727,0cyclictest0-21swapper/00
2899622992726,1cyclictest2247-21snmpd0
2899622992725,1cyclictest100654-21CPU0
2899622992723,1cyclictest0-21swapper/00
2899622992722,3cyclictest0-21swapper/00
289962299270,1cyclictest0-21swapper/00
289962299270,1cyclictest0-21swapper/00
2899677992626,0cyclictest0-21swapper/157
2899677992626,0cyclictest0-21swapper/157
2899677992625,1cyclictest2247-21snmpd7
2899673992625,1cyclictest2247-21snmpd6
2899673992625,1cyclictest2247-21snmpd6
2899673992624,1cyclictest2247-21snmpd6
289966899268,17cyclictest2291954-21kworker/13:0+events5
2899668992625,1cyclictest2291954-21kworker/13:0+events5
2899668992625,1cyclictest2291954-21kworker/13:0+events5
2899668992625,1cyclictest2291954-21kworker/13:0+events5
2899663992626,0cyclictest0-21swapper/124
2899663992625,1cyclictest2247-21snmpd4
2899656992625,1cyclictest2247-21snmpd2
2899656992625,1cyclictest2247-21snmpd2
2899656992625,1cyclictest2247-21snmpd2
2899652992625,1cyclictest2247-21snmpd15
289965299260,25cyclictest0-21swapper/915
2899648992625,1cyclictest100644-21vhost-10063714
2899648992625,1cyclictest100644-21vhost-10063714
289964899260,25cyclictest0-21swapper/814
2899643992626,0cyclictest0-21swapper/612
2899638992625,1cyclictest2247-21snmpd11
2899638992625,1cyclictest2247-21snmpd11
2899636992625,1cyclictest2247-21snmpd10
289963299260,0cyclictest0-21swapper/39
2899627992626,0cyclictest0-21swapper/28
2899624992626,0cyclictest0-21swapper/11
2899624992625,1cyclictest0-21swapper/11
289962499260,25cyclictest0-21swapper/11
2899622992625,1cyclictest2247-21snmpd0
2899622992625,1cyclictest2247-21snmpd0
2899677992525,0cyclictest0-21swapper/157
2899673992523,1cyclictest2247-21snmpd6
289966899258,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899668992524,1cyclictest2291954-21kworker/13:0+events5
2899663992525,0cyclictest0-21swapper/124
2899663992525,0cyclictest0-21swapper/124
289966399250,25cyclictest0-21swapper/124
289965899250,24cyclictest0-21swapper/113
289965899250,1cyclictest3223293-21irqstats3
289965899250,19cyclictest3188475-21cut3
2899656992525,0cyclictest0-21swapper/102
2899656992524,1cyclictest2247-21snmpd2
2899652992525,0cyclictest0-21swapper/915
2899648992525,0cyclictest0-21swapper/814
289964699250,24cyclictest0-21swapper/713
289964399250,19cyclictest0-21swapper/612
2899638992525,0cyclictest0-21swapper/511
2899638992524,1cyclictest2247-21snmpd11
2899638992522,3cyclictest2247-21snmpd11
2899638992517,6cyclictest0-21swapper/511
2899638992516,1cyclictest3053056-21cat11
2899638992516,1cyclictest0-21swapper/511
289963899250,20cyclictest3246852-21fschecks_time11
289963899250,1cyclictest3284311-21fschecks_count11
289963899250,18cyclictest3240893-21switchtime11
289963899250,18cyclictest0-21swapper/511
2899636992524,1cyclictest2247-21snmpd10
2899636992524,1cyclictest2247-21snmpd10
2899632992524,1cyclictest2247-21snmpd9
2899627992524,1cyclictest2247-21snmpd8
2899627992524,1cyclictest2247-21snmpd8
2899627992524,1cyclictest0-21swapper/28
2899627992523,1cyclictest2247-21snmpd8
289962799250,19cyclictest0-21swapper/28
289962499253,4cyclictest100648-21CPU1
2899624992524,1cyclictest2247-21snmpd1
2899624992524,1cyclictest2247-21snmpd1
289962499252,3cyclictest0-21swapper/11
289962499250,24cyclictest0-21swapper/11
2899677992424,0cyclictest0-21swapper/157
2899677992424,0cyclictest0-21swapper/157
2899677992423,1cyclictest0-21swapper/157
2899668992423,1cyclictest2291954-21kworker/13:0+events5
2899668992423,1cyclictest2291954-21kworker/13:0+events5
2899663992423,1cyclictest2247-21snmpd4
2899663992423,1cyclictest0-21swapper/124
2899658992423,1cyclictest0-21swapper/113
2899658992416,8cyclictest0-21swapper/113
2899658992416,7cyclictest0-21swapper/113
2899658992416,7cyclictest0-21swapper/113
289965899240,23cyclictest0-21swapper/113
289965899240,23cyclictest0-21swapper/113
289965899240,23cyclictest0-21swapper/113
2899656992423,1cyclictest0-21swapper/102
289965699242,22cyclictest0-21swapper/102
2899656992422,1cyclictest0-21swapper/102
2899652992424,0cyclictest0-21swapper/915
2899652992423,1cyclictest2247-21snmpd15
2899652992423,1cyclictest0-21swapper/915
2899652992423,1cyclictest0-21swapper/915
2899652992423,1cyclictest0-21swapper/915
2899652992423,1cyclictest0-21swapper/915
289965299240,0cyclictest0-21swapper/915
2899648992424,0cyclictest0-21swapper/814
2899648992424,0cyclictest0-21swapper/814
2899648992424,0cyclictest0-21swapper/814
2899648992423,1cyclictest2247-21snmpd14
289964399249,1cyclictest0-21swapper/612
289964399249,1cyclictest0-21swapper/612
2899643992423,1cyclictest2247-21snmpd12
2899643992423,1cyclictest2247-21snmpd12
2899643992423,1cyclictest0-21swapper/612
2899643992423,1cyclictest0-21swapper/612
2899643992423,1cyclictest0-21swapper/612
2899643992423,1cyclictest0-21swapper/612
2899638992423,1cyclictest0-21swapper/511
289963899240,1cyclictest0-21swapper/511
289963899240,18cyclictest3251874-21/usr/share/muni11
289963899240,18cyclictest0-21swapper/511
2899636992424,0cyclictest0-21swapper/410
2899636992423,1cyclictest0-21swapper/410
2899636992423,1cyclictest0-21swapper/410
2899632992424,0cyclictest0-21swapper/39
2899632992423,1cyclictest2247-21snmpd9
2899627992424,0cyclictest0-21swapper/28
2899627992423,1cyclictest2247-21snmpd8
2899627992423,1cyclictest2247-21snmpd8
2899627992423,1cyclictest0-21swapper/28
2899627992422,2cyclictest1177-21lldpd8
289962799240,19cyclictest0-21swapper/28
2899624992421,2cyclictest2247-21snmpd1
2899622992423,1cyclictest2247-21snmpd0
2899622992423,1cyclictest0-21swapper/00
289967799232,3cyclictest0-21swapper/157
2899677992323,0cyclictest0-21swapper/157
2899677992322,1cyclictest2813975-21kworker/15:1+events_freezable_pwr_efficient7
2899677992322,1cyclictest0-21swapper/157
289967799231,20cyclictest100649-21CPU7
2899673992322,1cyclictest2247-21snmpd6
2899673992322,1cyclictest2247-21snmpd6
2899668992321,1cyclictest100652-21CPU5
2899658992317,2cyclictest0-21swapper/113
2899658992316,7cyclictest0-21swapper/113
2899658992316,6cyclictest0-21swapper/113
2899658992315,7cyclictest100655-21CPU3
289965899230,23cyclictest0-21swapper/113
289965899230,23cyclictest0-21swapper/113
289965899230,22cyclictest0-21swapper/113
289965899230,22cyclictest0-21swapper/113
289965899230,18cyclictest100649-21CPU3
289965899230,17cyclictest0-21swapper/113
289965899230,17cyclictest0-21swapper/113
289965899230,17cyclictest0-21swapper/113
289965899230,17cyclictest0-21swapper/113
2899656992323,0cyclictest0-21swapper/102
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional