You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-12 - 09:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Mon Jan 12, 2026 00:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
23542732413369,36sleep120-21swapper/124
23542102385363,14sleep40-21swapper/410
23543862382358,15sleep150-21swapper/157
23543702353329,15sleep00-21swapper/00
23544722337315,14sleep80-21swapper/814
23542282336314,14sleep50-21swapper/511
23542982328305,15sleep10-21swapper/11
23541822327305,14sleep130-21swapper/135
23543542317295,14sleep20-21swapper/28
23542322308287,13sleep90-21swapper/915
23542682307283,15sleep70-21swapper/713
23542902305283,14sleep110-21swapper/113
23542382303281,14sleep140-21swapper/146
23541752302280,14sleep60-21swapper/612
23543932301278,15sleep30-21swapper/39
23542332299277,14sleep100-21swapper/102
2354831994241,1cyclictest2247-21snmpd5
235478599420,1cyclictest0-21swapper/11
235483999410,0cyclictest0-21swapper/157
235483999410,0cyclictest0-21swapper/157
2354811994140,1cyclictest2247-21snmpd14
2354835994040,0cyclictest2247-21snmpd6
2354835994039,1cyclictest0-21swapper/146
2354835994039,1cyclictest0-21swapper/146
235482599400,39cyclictest0-21swapper/113
2354806994040,0cyclictest0-21swapper/713
2354831993938,1cyclictest2247-21snmpd5
235479099390,38cyclictest0-21swapper/28
235483999380,37cyclictest0-21swapper/157
2354839993737,0cyclictest0-21swapper/157
2354816993737,0cyclictest0-21swapper/915
2354796993737,0cyclictest0-21swapper/410
2354821993636,0cyclictest0-21swapper/102
2354804993636,0cyclictest0-21swapper/612
2354785993636,0cyclictest0-21swapper/11
2354785993635,1cyclictest0-21swapper/11
2354800993535,0cyclictest0-21swapper/511
235483199340,34cyclictest0-21swapper/135
2354829993433,1cyclictest2247-21snmpd4
2354793993434,0cyclictest0-21swapper/39
2354783993432,1cyclictest0-21swapper/00
2354783993417,1cyclictest2247-21snmpd0
2354835993333,0cyclictest0-21swapper/146
2354835993330,2cyclictest2247-21snmpd6
2354806993332,1cyclictest0-21swapper/713
2354804993333,0cyclictest0-21swapper/612
2354804993314,18cyclictest0-21swapper/612
235479699330,32cyclictest0-21swapper/410
2354785993332,0cyclictest0-21swapper/11
2354783993332,0cyclictest0-21swapper/00
2354835993228,3cyclictest2247-21snmpd6
2354825993232,0cyclictest0-21swapper/113
2354816993230,1cyclictest2247-21snmpd15
2354800993213,18cyclictest2247-21snmpd11
2354839993130,1cyclictest2247-21snmpd7
2354839993129,2cyclictest2247-21snmpd7
2354831993131,0cyclictest0-21swapper/135
2354825993131,0cyclictest0-21swapper/113
2354804993126,3cyclictest0-21swapper/612
235480099310,0cyclictest0-21swapper/511
2354835993010,19cyclictest0-21swapper/146
2354821993027,3cyclictest2247-21snmpd2
2354806993030,0cyclictest0-21swapper/713
2354806993029,1cyclictest2247-21snmpd13
2354804993030,0cyclictest0-21swapper/612
2354804993026,3cyclictest2247-21snmpd12
2354785993025,4cyclictest2247-21snmpd1
2354783993027,3cyclictest2247-21snmpd0
235478399302,1cyclictest151ktimers/00
235478399300,29cyclictest0-21swapper/00
2354839992926,3cyclictest2247-21snmpd7
2354829992910,18cyclictest2247-21snmpd4
2354804992929,0cyclictest0-21swapper/612
2354800992929,0cyclictest0-21swapper/511
2354800992927,1cyclictest2247-21snmpd11
235480099290,28cyclictest0-21swapper/511
235478399290,28cyclictest0-21swapper/00
2354839992828,0cyclictest0-21swapper/157
235483599287,0cyclictest0-21swapper/146
235483599280,27cyclictest0-21swapper/146
235483199280,27cyclictest0-21swapper/135
235482999288,19cyclictest0-21swapper/124
2354829992828,0cyclictest0-21swapper/124
235482999280,27cyclictest0-21swapper/124
235482999280,27cyclictest0-21swapper/124
2354825992828,0cyclictest0-21swapper/113
2354825992828,0cyclictest0-21swapper/113
235482599280,27cyclictest0-21swapper/113
235482599280,1cyclictest0-21swapper/113
2354816992827,1cyclictest2247-21snmpd15
2354816992827,1cyclictest2247-21snmpd15
2354816992827,1cyclictest2247-21snmpd15
2354816992826,1cyclictest2247-21snmpd15
2354816992826,1cyclictest2247-21snmpd15
2354816992826,1cyclictest2247-21snmpd15
235481699280,27cyclictest0-21swapper/915
235481699280,1cyclictest0-21swapper/915
2354811992828,0cyclictest0-21swapper/814
2354811992827,1cyclictest2247-21snmpd14
235481199280,27cyclictest0-21swapper/814
235481199280,27cyclictest0-21swapper/814
2354806992826,1cyclictest2247-21snmpd13
235480499280,27cyclictest0-21swapper/612
235480499280,27cyclictest0-21swapper/612
2354800992828,0cyclictest0-21swapper/511
2354800992827,1cyclictest2247-21snmpd11
235480099280,27cyclictest0-21swapper/511
235480099280,27cyclictest0-21swapper/511
235480099280,27cyclictest0-21swapper/511
2354796992826,1cyclictest2247-21snmpd10
2354796992825,2cyclictest100647-21CPU10
235479699280,27cyclictest0-21swapper/410
235479699280,27cyclictest0-21swapper/410
235479699280,27cyclictest0-21swapper/410
235479399280,27cyclictest0-21swapper/39
2354790992825,2cyclictest2247-21snmpd8
235479099280,27cyclictest0-21swapper/28
235479099280,27cyclictest0-21swapper/28
235478599281,18cyclictest0-21swapper/11
235478599280,27cyclictest0-21swapper/11
235478599280,27cyclictest0-21swapper/11
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,27cyclictest0-21swapper/00
235478399280,1cyclictest0-21swapper/00
2354839992726,1cyclictest2247-21snmpd7
2354839992726,1cyclictest0-21swapper/157
2354835992726,1cyclictest0-21swapper/146
2354831992726,1cyclictest0-21swapper/135
2354829992726,1cyclictest2247-21snmpd4
235482999270,1cyclictest0-21swapper/124
2354825992727,0cyclictest0-21swapper/113
2354825992726,1cyclictest2247-21snmpd3
2354821992725,1cyclictest2247-21snmpd2
235481699270,1cyclictest0-21swapper/915
2354811992727,0cyclictest941rcuc/814
2354811992726,1cyclictest2247-21snmpd14
2354811992725,1cyclictest2247-21snmpd14
235481199270,1cyclictest0-21swapper/814
2354806992727,0cyclictest0-21swapper/713
2354806992726,1cyclictest2247-21snmpd13
2354806992726,1cyclictest2247-21snmpd13
235480699270,1cyclictest0-21swapper/713
2354804992726,1cyclictest2247-21snmpd12
2354800992726,1cyclictest2247-21snmpd11
235480099270,26cyclictest0-21swapper/511
235480099270,1cyclictest0-21swapper/511
235480099270,1cyclictest0-21swapper/511
2354796992727,0cyclictest0-21swapper/410
235479699270,27cyclictest0-21swapper/410
235479699270,27cyclictest0-21swapper/410
235479699270,0cyclictest0-21swapper/410
2354793992727,0cyclictest0-21swapper/39
2354793992726,1cyclictest2247-21snmpd9
235479399270,1cyclictest0-21swapper/39
2354790992727,0cyclictest0-21swapper/28
235479099270,1cyclictest0-21swapper/28
235478599270,1cyclictest0-21swapper/11
2354783992727,0cyclictest0-21swapper/00
235478399270,26cyclictest0-21swapper/00
235478399270,26cyclictest0-21swapper/00
2354835992626,0cyclictest0-21swapper/146
2354835992626,0cyclictest0-21swapper/146
2354835992625,1cyclictest0-21swapper/146
235483599260,0cyclictest0-21swapper/146
2354829992626,0cyclictest0-21swapper/124
2354829992626,0cyclictest0-21swapper/124
2354829992625,1cyclictest2247-21snmpd4
2354829992625,1cyclictest2247-21snmpd4
235482999260,26cyclictest0-21swapper/124
235482999260,25cyclictest0-21swapper/124
2354825992625,1cyclictest2247-21snmpd3
2354825992625,1cyclictest2247-21snmpd3
2354825992625,1cyclictest0-21swapper/113
2354825992625,1cyclictest0-21swapper/113
2354825992624,1cyclictest2247-21snmpd3
2354821992625,1cyclictest2247-21snmpd2
2354816992625,1cyclictest2247-21snmpd15
2354816992625,1cyclictest2247-21snmpd15
2354811992626,0cyclictest0-21swapper/814
2354811992626,0cyclictest0-21swapper/814
2354811992625,1cyclictest2247-21snmpd14
2354811992625,1cyclictest2247-21snmpd14
2354806992626,0cyclictest0-21swapper/713
2354806992625,1cyclictest2247-21snmpd13
235480699260,25cyclictest0-21swapper/713
2354800992625,1cyclictest2247-21snmpd11
2354796992614,9cyclictest0-21swapper/410
235479699261,19cyclictest0-21swapper/410
2354793992626,0cyclictest0-21swapper/39
2354793992625,1cyclictest2247-21snmpd9
2354783992625,1cyclictest2247-21snmpd0
2354839992524,1cyclictest2247-21snmpd7
2354839992524,1cyclictest2247-21snmpd7
2354835992525,0cyclictest0-21swapper/146
235483599250,18cyclictest0-21swapper/146
235483599250,0cyclictest0-21swapper/146
235483599250,0cyclictest0-21swapper/146
235482999255,19cyclictest2247-21snmpd4
2354829992525,0cyclictest0-21swapper/124
2354829992525,0cyclictest0-21swapper/124
2354829992524,1cyclictest2247-21snmpd4
2354829992524,0cyclictest0-21swapper/124
235482999250,0cyclictest0-21swapper/124
2354821992525,0cyclictest0-21swapper/102
2354821992524,1cyclictest2247-21snmpd2
2354821992523,1cyclictest2689076-21munin-update2
2354816992525,0cyclictest0-21swapper/915
2354816992524,1cyclictest2247-21snmpd15
2354811992524,1cyclictest2247-21snmpd14
2354811992524,1cyclictest0-21swapper/814
235481199250,25cyclictest0-21swapper/814
235481199250,24cyclictest0-21swapper/814
235480699257,1cyclictest2247-21snmpd13
2354806992523,1cyclictest2247-21snmpd13
2354804992525,0cyclictest0-21swapper/612
2354804992525,0cyclictest0-21swapper/612
2354804992524,1cyclictest2247-21snmpd12
2354804992524,1cyclictest2247-21snmpd12
2354800992524,1cyclictest2247-21snmpd11
2354796992524,1cyclictest2247-21snmpd10
2354790992525,0cyclictest0-21swapper/28
235478599251,2cyclictest100652-21CPU1
2354783992524,1cyclictest2247-21snmpd0
2354839992424,0cyclictest0-21swapper/157
2354839992423,1cyclictest2247-21snmpd7
2354839992423,1cyclictest2247-21snmpd7
2354839992423,1cyclictest0-21swapper/157
2354835992424,0cyclictest0-21swapper/146
2354835992424,0cyclictest0-21swapper/146
2354835992424,0cyclictest0-21swapper/146
2354835992423,1cyclictest2247-21snmpd6
2354835992423,1cyclictest0-21swapper/146
235483599240,24cyclictest0-21swapper/146
235483599240,24cyclictest0-21swapper/146
2354831992424,0cyclictest0-21swapper/135
2354831992423,1cyclictest2247-21snmpd5
2354829992424,0cyclictest2303617-21kworker/12:1+events4
2354829992424,0cyclictest0-21swapper/124
2354829992424,0cyclictest0-21swapper/124
2354829992424,0cyclictest0-21swapper/124
2354829992423,1cyclictest0-21swapper/124
2354829992423,1cyclictest0-21swapper/124
2354829992423,1cyclictest0-21swapper/124
2354829992423,1cyclictest0-21swapper/124
2354829992414,3cyclictest181rcu_preempt4
235482999240,24cyclictest0-21swapper/124
235482999240,23cyclictest0-21swapper/124
2354825992424,0cyclictest0-21swapper/113
2354825992423,1cyclictest2247-21snmpd3
2354821992423,1cyclictest2247-21snmpd2
2354821992423,1cyclictest2247-21snmpd2
2354821992423,1cyclictest2247-21snmpd2
2354816992423,1cyclictest2247-21snmpd15
2354816992421,2cyclictest2247-21snmpd15
235481699240,23cyclictest0-21swapper/915
2354811992424,0cyclictest0-21swapper/814
2354811992423,0cyclictest0-21swapper/814
2354806992423,1cyclictest0-21swapper/713
235480699240,0cyclictest0-21swapper/713
235480699240,0cyclictest0-21swapper/713
2354804992423,1cyclictest2247-21snmpd12
235480499240,23cyclictest0-21swapper/612
2354800992423,1cyclictest0-21swapper/511
2354796992424,0cyclictest0-21swapper/410
2354793992424,0cyclictest0-21swapper/39
2354793992423,1cyclictest2247-21snmpd9
2354790992423,1cyclictest0-21swapper/28
2354790992422,1cyclictest2247-21snmpd8
2354790992422,1cyclictest2247-21snmpd8
2354785992424,0cyclictest0-21swapper/11
2354785992423,1cyclictest2247-21snmpd1
2354785992422,1cyclictest2247-21snmpd1
2354785992416,7cyclictest100650-21CPU1
235478599240,23cyclictest0-21swapper/11
235478599240,1cyclictest24254902sleep11
2354783992424,0cyclictest0-21swapper/00
2354783992424,0cyclictest0-21swapper/00
2354783992423,1cyclictest2247-21snmpd0
2354839992323,0cyclictest0-21swapper/157
2354839992322,1cyclictest0-21swapper/157
2354835992323,0cyclictest0-21swapper/146
2354835992323,0cyclictest0-21swapper/146
2354835992323,0cyclictest0-21swapper/146
2354835992323,0cyclictest0-21swapper/146
2354835992323,0cyclictest0-21swapper/146
2354835992322,1cyclictest0-21swapper/146
235483599230,23cyclictest0-21swapper/146
235483599230,0cyclictest0-21swapper/146
235483199235,1cyclictest0-21swapper/135
2354831992323,0cyclictest0-21swapper/135
2354831992323,0cyclictest0-21swapper/135
2354829992323,0cyclictest0-21swapper/124
2354829992313,9cyclictest0-21swapper/124
235482999230,23cyclictest0-21swapper/124
235482999230,23cyclictest0-21swapper/124
235482599230,22cyclictest0-21swapper/113
235482199230,23cyclictest0-21swapper/102
235482199230,22cyclictest0-21swapper/102
2354811992323,0cyclictest0-21swapper/814
2354811992323,0cyclictest0-21swapper/814
2354811992323,0cyclictest0-21swapper/814
2354811992323,0cyclictest0-21swapper/814
2354811992322,1cyclictest2247-21snmpd14
2354806992323,0cyclictest0-21swapper/713
2354806992321,1cyclictest100655-21CPU13
2354806992321,1cyclictest100654-21CPU13
2354806992321,1cyclictest0-21swapper/713
235480699231,21cyclictest100651-21CPU13
2354804992323,0cyclictest0-21swapper/612
2354800992323,0cyclictest0-21swapper/511
2354796992323,0cyclictest0-21swapper/410
2354796992322,1cyclictest0-21swapper/410
2354793992323,0cyclictest0-21swapper/39
2354790992322,1cyclictest2247-21snmpd8
2354790992322,1cyclictest2247-21snmpd8
2354790992322,1cyclictest0-21swapper/28
2354785992315,7cyclictest0-21swapper/11
2354785992315,7cyclictest0-21swapper/11
2354785992315,6cyclictest0-21swapper/11
2354785992315,6cyclictest0-21swapper/11
235478599230,22cyclictest0-21swapper/11
235478599230,1cyclictest0-21swapper/11
235478599230,16cyclictest0-21swapper/11
2354783992323,0cyclictest0-21swapper/00
2354783992322,1cyclictest0-21swapper/00
235478399230,0cyclictest0-21swapper/00
235478399230,0cyclictest0-21swapper/00
235483999223,18cyclictest100654-21CPU7
235483999223,18cyclictest100654-21CPU7
2354839992222,0cyclictest0-21swapper/157
2354839992221,1cyclictest2247-21snmpd7
2354839992221,1cyclictest2247-21snmpd7
2354839992221,1cyclictest2247-21snmpd7
2354835992222,0cyclictest0-21swapper/146
2354835992222,0cyclictest0-21swapper/146
2354835992221,1cyclictest2247-21snmpd6
235483199223,1cyclictest100655-21CPU5
2354829992222,0cyclictest0-21swapper/124
2354829992222,0cyclictest0-21swapper/124
2354829992222,0cyclictest0-21swapper/124
2354829992222,0cyclictest0-21swapper/124
2354829992222,0cyclictest0-21swapper/124
2354829992222,0cyclictest0-21swapper/124
2354829992221,1cyclictest2247-21snmpd4
2354829992219,2cyclictest100654-21CPU4
235482999220,0cyclictest0-21swapper/124
2354825992222,0cyclictest0-21swapper/113
2354821992222,0cyclictest0-21swapper/102
2354821992221,1cyclictest2247-21snmpd2
2354816992221,1cyclictest2247-21snmpd15
2354816992221,1cyclictest0-21swapper/915
2354811992222,0cyclictest0-21swapper/814
2354811992222,0cyclictest0-21swapper/814
2354811992222,0cyclictest0-21swapper/814
2354811992221,1cyclictest0-21swapper/814
235481199220,2cyclictest0-21swapper/814
235480699224,1cyclictest100655-21CPU13
235480699223,18cyclictest100654-21CPU13
2354806992221,1cyclictest0-21swapper/713
2354806992221,1cyclictest0-21swapper/713
2354806992220,1cyclictest100654-21CPU13
2354804992221,1cyclictest2247-21snmpd12
2354804992221,1cyclictest0-21swapper/612
2354804992221,1cyclictest0-21swapper/612
235480099223,18cyclictest100654-21CPU11
2354800992222,0cyclictest0-21swapper/511
2354800992221,1cyclictest2247-21snmpd11
2354800992221,1cyclictest2247-21snmpd11
2354800992221,1cyclictest0-21swapper/511
235480099220,3cyclictest0-21swapper/511
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional