You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-30 - 00:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Sun Mar 29, 2026 00:45:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
37206062368344,16sleep60-21swapper/612
37204822362337,16sleep70-21swapper/713
37204952357332,17sleep20-21swapper/28
37205642355348,5sleep150-21swapper/157
37204122354310,16sleep130-21swapper/135
37192832353345,5sleep110-21swapper/113
37205922352328,16sleep90-21swapper/915
37204022346320,17sleep50-21swapper/511
37206572345321,16sleep00-21swapper/00
37204492343317,17sleep140-21swapper/146
37205672341316,16sleep10-21swapper/11
37203732341318,14sleep100-21swapper/102
37195082340334,4sleep120-21swapper/124
37203842338313,17sleep40-21swapper/410
37204432335309,17sleep80-21swapper/814
37204382333308,16sleep30-21swapper/39
3721000993938,1cyclictest0-21swapper/410
3721042993636,0cyclictest0-21swapper/146
3721018993636,0cyclictest0-21swapper/814
3721029993529,5cyclictest1608-21snmpd3
372101899350,35cyclictest0-21swapper/814
3721014993535,0cyclictest0-21swapper/713
372099599358,20cyclictest0-21swapper/39
3721025993412,3cyclictest0-21swapper/102
3721000993434,0cyclictest0-21swapper/410
3720984993433,0cyclictest0-21swapper/11
372102599330,23cyclictest0-21swapper/102
3721020993311,3cyclictest0-21swapper/915
3721014993333,0cyclictest0-21swapper/713
372104299320,32cyclictest0-21swapper/146
372103499320,31cyclictest0-21swapper/124
3721025993230,1cyclictest0-21swapper/102
3721014993232,0cyclictest0-21swapper/713
372100899320,32cyclictest0-21swapper/612
372099599320,31cyclictest3504109-21kworker/3:0+mm_percpu_wq9
372099599320,31cyclictest3504109-21kworker/3:0+mm_percpu_wq9
3721034993125,6cyclictest0-21swapper/124
3721014993131,0cyclictest0-21swapper/713
3721014993131,0cyclictest0-21swapper/713
3721008993128,3cyclictest1608-21snmpd12
3721008993116,15cyclictest0-21swapper/612
3721005993128,3cyclictest1608-21snmpd11
3721000993128,3cyclictest1608-21snmpd10
372099599310,31cyclictest0-21swapper/39
372099599310,31cyclictest0-21swapper/39
3720990993131,0cyclictest0-21swapper/28
3720984993125,6cyclictest0-21swapper/11
3720981993129,1cyclictest0-21swapper/00
3721039993026,1cyclictest1608-21snmpd5
3721029993026,3cyclictest1608-21snmpd3
3721005993026,3cyclictest1608-21snmpd11
3721005993026,3cyclictest1608-21snmpd11
3721005993026,3cyclictest1608-21snmpd11
3720995993030,0cyclictest0-21swapper/39
372104699294,14cyclictest0-21swapper/157
3721034992925,4cyclictest1608-21snmpd4
372102999292,27cyclictest0-21swapper/113
372102599290,29cyclictest1141ktimers/102
3721020992929,0cyclictest0-21swapper/915
3721020992929,0cyclictest0-21swapper/915
3721020992929,0cyclictest0-21swapper/915
3721020992928,1cyclictest1051ktimers/915
3721018992927,1cyclictest1608-21snmpd14
372104699283,25cyclictest0-21swapper/157
372104699283,14cyclictest0-21swapper/157
372104699283,14cyclictest0-21swapper/157
372104699280,1cyclictest0-21swapper/157
372104299280,27cyclictest0-21swapper/146
372103499280,27cyclictest0-21swapper/124
372103499280,27cyclictest0-21swapper/124
372103499280,27cyclictest0-21swapper/124
372103499280,22cyclictest0-21swapper/124
372102999280,27cyclictest0-21swapper/113
372102999280,27cyclictest0-21swapper/113
372102999280,27cyclictest0-21swapper/113
3721025992827,1cyclictest115-21ksoftirqd/102
372102599280,28cyclictest0-21swapper/102
372102599280,28cyclictest0-21swapper/102
372102599280,27cyclictest3825486-21kworker/10:1+mm_percpu_wq2
3721020992828,0cyclictest3523305-21kworker/9:1-events15
3721020992826,1cyclictest1608-21snmpd15
372102099280,27cyclictest0-21swapper/915
372101499280,27cyclictest0-21swapper/713
372100599280,27cyclictest0-21swapper/511
3721000992828,0cyclictest0-21swapper/410
3720995992827,1cyclictest4106030-21kworker/u64:3+kvfree_rcu_reclaim9
3720995992827,1cyclictest1608-21snmpd9
372099599280,27cyclictest0-21swapper/39
3720990992825,3cyclictest1608-21snmpd8
3720984992827,1cyclictest0-21swapper/11
3720984992826,1cyclictest1608-21snmpd1
3720981992827,1cyclictest1608-21snmpd0
372098199280,27cyclictest0-21swapper/00
372098199280,27cyclictest0-21swapper/00
372098199280,27cyclictest0-21swapper/00
372098199280,27cyclictest0-21swapper/00
3721046992726,1cyclictest1608-21snmpd7
372104699272,14cyclictest0-21swapper/157
3721042992726,1cyclictest1608-21snmpd6
3721042992726,1cyclictest1608-21snmpd6
3721039992727,0cyclictest0-21swapper/135
3721039992726,1cyclictest1608-21snmpd5
372103999270,27cyclictest0-21swapper/135
372103999270,27cyclictest0-21swapper/135
372103999270,1cyclictest0-21swapper/135
3721034992727,0cyclictest0-21swapper/124
3721034992726,1cyclictest0-21swapper/124
3721034992726,1cyclictest0-21swapper/124
3721029992724,3cyclictest1608-21snmpd3
372102999270,1cyclictest0-21swapper/113
3721025992727,0cyclictest0-21swapper/102
3721025992727,0cyclictest0-21swapper/102
3721025992727,0cyclictest0-21swapper/102
3721025992726,1cyclictest1608-21snmpd2
372102599270,27cyclictest0-21swapper/102
3721020992727,0cyclictest3523305-21kworker/9:1+mm_percpu_wq15
372102099270,1cyclictest0-21swapper/915
372102099270,1cyclictest0-21swapper/915
3721018992726,1cyclictest1608-21snmpd14
3721018992726,1cyclictest0-21swapper/814
3721014992727,0cyclictest0-21swapper/713
3721014992726,1cyclictest1608-21snmpd13
3721014992726,1cyclictest1608-21snmpd13
3721008992727,0cyclictest0-21swapper/612
3721005992726,1cyclictest1608-21snmpd11
3721005992726,1cyclictest1608-21snmpd11
3721000992726,1cyclictest1608-21snmpd10
3720995992725,2cyclictest0-21swapper/39
3720995992725,1cyclictest0-21swapper/39
3720995992723,3cyclictest1608-21snmpd9
372099599270,26cyclictest3504109-21kworker/3:0+mm_percpu_wq9
372099599270,26cyclictest0-21swapper/39
3720990992727,0cyclictest0-21swapper/28
3720984992726,1cyclictest1608-21snmpd1
372098499270,27cyclictest0-21swapper/11
3721046992623,3cyclictest1608-21snmpd7
3721046992623,3cyclictest1608-21snmpd7
372104699261,14cyclictest0-21swapper/157
372104699261,14cyclictest0-21swapper/157
372104699261,14cyclictest0-21swapper/157
372104699261,14cyclictest0-21swapper/157
372104699260,1cyclictest0-21swapper/157
372104699260,1cyclictest0-21swapper/157
372104299260,20cyclictest0-21swapper/146
372103499260,25cyclictest0-21swapper/124
372103499260,25cyclictest0-21swapper/124
372103499260,1cyclictest3787471-21fschecks_time4
372103499260,1cyclictest3729735-21expr4
372103499260,1cyclictest3729735-21expr4
3721029992620,1cyclictest1608-21snmpd3
3721029992618,6cyclictest0-21swapper/113
3721025992626,0cyclictest0-21swapper/102
3721025992626,0cyclictest0-21swapper/102
3721025992611,15cyclictest0-21swapper/102
372102099263,1cyclictest0-21swapper/915
3721020992626,0cyclictest0-21swapper/915
3721020992626,0cyclictest0-21swapper/915
3721020992625,1cyclictest1608-21snmpd15
3721020992625,1cyclictest0-21swapper/915
3721018992625,1cyclictest1608-21snmpd14
3721018992625,1cyclictest1608-21snmpd14
3721018992625,1cyclictest1608-21snmpd14
3721018992625,1cyclictest1608-21snmpd14
3721014992625,1cyclictest1608-21snmpd13
3721014992625,1cyclictest1608-21snmpd13
3721014992625,1cyclictest0-21swapper/713
3721008992625,1cyclictest1608-21snmpd12
3721008992625,1cyclictest1608-21snmpd12
372100899260,26cyclictest0-21swapper/612
3721005992626,0cyclictest0-21swapper/511
3721005992625,1cyclictest1608-21snmpd11
3721005992625,1cyclictest1608-21snmpd11
3721005992624,1cyclictest1608-21snmpd11
3721005992624,1cyclictest1608-21snmpd11
3720995992626,0cyclictest0-21swapper/39
3720995992626,0cyclictest0-21swapper/39
3720995992625,1cyclictest1608-21snmpd9
3720981992625,1cyclictest1608-21snmpd0
3720981992625,1cyclictest0-21swapper/00
3720981992625,1cyclictest0-21swapper/00
3721046992525,0cyclictest0-21swapper/157
3721046992524,1cyclictest1608-21snmpd7
3721046992524,1cyclictest0-21swapper/157
3721042992523,1cyclictest1608-21snmpd6
3721042992517,6cyclictest0-21swapper/146
3721042992516,9cyclictest0-21swapper/146
372104299250,19cyclictest0-21swapper/146
372104299250,19cyclictest0-21swapper/146
372104299250,19cyclictest0-21swapper/146
372104299250,19cyclictest0-21swapper/146
372104299250,19cyclictest0-21swapper/146
3721034992524,1cyclictest1608-21snmpd4
3721034992517,8cyclictest0-21swapper/124
372103499250,24cyclictest0-21swapper/124
372103499250,24cyclictest0-21swapper/124
372103499250,1cyclictest40664182sleep124
372103499250,18cyclictest0-21swapper/124
3721025992525,0cyclictest0-21swapper/102
372102599250,0cyclictest0-21swapper/102
3721020992525,0cyclictest0-21swapper/915
3721020992524,1cyclictest1608-21snmpd15
3721020992524,1cyclictest0-21swapper/915
372102099250,24cyclictest3523305-21kworker/9:1-events15
3721018992524,1cyclictest1608-21snmpd14
3721014992525,0cyclictest0-21swapper/713
3721008992525,0cyclictest0-21swapper/612
3721008992524,1cyclictest1608-21snmpd12
3721000992525,0cyclictest0-21swapper/410
3721000992524,1cyclictest1608-21snmpd10
3721000992524,1cyclictest1608-21snmpd10
3721000992524,1cyclictest0-21swapper/410
3721000992521,4cyclictest1608-21snmpd10
372100099250,24cyclictest0-21swapper/410
372100099250,24cyclictest0-21swapper/410
372100099250,17cyclictest0-21swapper/410
3720995992525,0cyclictest3504109-21kworker/3:0-mm_percpu_wq9
3720995992525,0cyclictest0-21swapper/39
3720995992525,0cyclictest0-21swapper/39
372099599250,25cyclictest0-21swapper/39
3720990992522,3cyclictest1608-21snmpd8
3720990992517,7cyclictest0-21swapper/28
372099099250,24cyclictest0-21swapper/28
372099099250,17cyclictest0-21swapper/28
3721046992423,1cyclictest0-21swapper/157
3721042992424,0cyclictest0-21swapper/146
3721042992424,0cyclictest0-21swapper/146
3721042992423,1cyclictest1608-21snmpd6
3721042992423,1cyclictest1608-21snmpd6
3721042992423,1cyclictest0-21swapper/146
3721042992416,6cyclictest0-21swapper/146
3721042992415,6cyclictest0-21swapper/146
372104299240,19cyclictest0-21swapper/146
3721034992424,0cyclictest0-21swapper/124
3721034992424,0cyclictest0-21swapper/124
3721034992423,1cyclictest0-21swapper/124
3721034992416,8cyclictest0-21swapper/124
3721034992416,8cyclictest0-21swapper/124
372103499240,24cyclictest0-21swapper/124
372103499240,24cyclictest0-21swapper/124
372103499240,24cyclictest0-21swapper/124
372103499240,24cyclictest0-21swapper/124
372103499240,23cyclictest0-21swapper/124
372103499240,23cyclictest0-21swapper/124
372103499240,23cyclictest0-21swapper/124
372103499240,22cyclictest0-21swapper/124
372103499240,1cyclictest3817295-21tune2fs4
372103499240,17cyclictest0-21swapper/124
372103499240,17cyclictest0-21swapper/124
372103499240,17cyclictest0-21swapper/124
3721029992424,0cyclictest0-21swapper/113
372102599243,15cyclictest115-21ksoftirqd/102
3721025992423,1cyclictest1608-21snmpd2
3721025992423,1cyclictest1608-21snmpd2
3721018992423,1cyclictest1608-21snmpd14
3721018992423,1cyclictest1608-21snmpd14
3721018992423,1cyclictest1608-21snmpd14
3721014992424,0cyclictest0-21swapper/713
3721008992424,0cyclictest0-21swapper/612
3721008992423,1cyclictest1608-21snmpd12
3721008992423,1cyclictest1608-21snmpd12
3721005992424,0cyclictest0-21swapper/511
3721005992424,0cyclictest0-21swapper/511
3721000992420,3cyclictest1608-21snmpd10
3721000992416,8cyclictest0-21swapper/410
3721000992416,7cyclictest0-21swapper/410
3721000992415,8cyclictest0-21swapper/410
372100099240,24cyclictest0-21swapper/410
372100099240,23cyclictest0-21swapper/410
372100099240,23cyclictest0-21swapper/410
372100099240,17cyclictest0-21swapper/410
372100099240,17cyclictest0-21swapper/410
372100099240,17cyclictest0-21swapper/410
372100099240,17cyclictest0-21swapper/410
3720995992424,0cyclictest0-21swapper/39
3720995992424,0cyclictest0-21swapper/39
3720995992424,0cyclictest0-21swapper/39
3720995992424,0cyclictest0-21swapper/39
3720995992424,0cyclictest0-21swapper/39
3720995992424,0cyclictest0-21swapper/39
3720995992423,1cyclictest1608-21snmpd9
3720995992423,1cyclictest0-21swapper/39
3720995992423,1cyclictest0-21swapper/39
3720990992423,1cyclictest1608-21snmpd8
3720990992423,1cyclictest1608-21snmpd8
3720990992423,1cyclictest1608-21snmpd8
3720990992422,2cyclictest0-21swapper/28
3720990992416,8cyclictest0-21swapper/28
372099099240,22cyclictest0-21swapper/28
372099099240,20cyclictest3728290-21grep8
372099099240,20cyclictest3728290-21grep8
372099099240,17cyclictest0-21swapper/28
372099099240,17cyclictest0-21swapper/28
372099099240,0cyclictest0-21swapper/28
372099099240,0cyclictest0-21swapper/28
3720984992423,1cyclictest1608-21snmpd1
3720984992423,1cyclictest1608-21snmpd1
3720984992423,1cyclictest1608-21snmpd1
3720984992423,1cyclictest1608-21snmpd1
372098199246,0cyclictest0-21swapper/00
3720981992423,1cyclictest1608-21snmpd0
3720981992423,1cyclictest0-21swapper/00
3720981992423,1cyclictest0-21swapper/00
3720981992423,1cyclictest0-21swapper/00
372098199240,23cyclictest0-21swapper/00
3721046992323,0cyclictest0-21swapper/157
3721046992322,1cyclictest0-21swapper/157
3721046992322,1cyclictest0-21swapper/157
3721046992322,1cyclictest0-21swapper/157
372104699230,23cyclictest0-21swapper/157
3721042992322,1cyclictest0-21swapper/146
3721042992322,1cyclictest0-21swapper/146
3721042992322,1cyclictest0-21swapper/146
372104299230,22cyclictest0-21swapper/146
3721039992322,1cyclictest1608-21snmpd5
3721039992322,1cyclictest0-21swapper/135
3721039992322,1cyclictest0-21swapper/135
3721039992322,1cyclictest0-21swapper/135
3721039992322,1cyclictest0-21swapper/135
3721034992317,6cyclictest0-21swapper/124
3721034992316,7cyclictest0-21swapper/124
3721034992316,7cyclictest0-21swapper/124
3721034992316,7cyclictest0-21swapper/124
3721034992316,7cyclictest0-21swapper/124
3721034992316,7cyclictest0-21swapper/124
3721034992316,5cyclictest0-21swapper/124
3721034992316,5cyclictest0-21swapper/124
3721034992315,7cyclictest0-21swapper/124
372103499230,23cyclictest0-21swapper/124
372103499230,23cyclictest0-21swapper/124
372103499230,22cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
372103499230,17cyclictest0-21swapper/124
3721029992322,1cyclictest1608-21snmpd3
3721020992321,1cyclictest1608-21snmpd15
3721018992322,1cyclictest0-21swapper/814
3721014992322,1cyclictest1608-21snmpd13
3721014992322,1cyclictest0-21swapper/713
3721014992322,1cyclictest0-21swapper/713
3721014992322,1cyclictest0-21swapper/713
3721008992322,1cyclictest0-21swapper/612
3721005992322,1cyclictest1608-21snmpd11
3721005992322,1cyclictest1608-21snmpd11
3721005992320,3cyclictest1608-21snmpd11
3721005992319,4cyclictest1608-21snmpd11
3721000992322,1cyclictest1608-21snmpd10
3721000992322,1cyclictest1608-21snmpd10
3721000992316,7cyclictest0-21swapper/410
3721000992316,6cyclictest0-21swapper/410
3721000992315,8cyclictest0-21swapper/410
372100099230,23cyclictest0-21swapper/410
372100099230,23cyclictest0-21swapper/410
372100099230,23cyclictest0-21swapper/410
372100099230,23cyclictest0-21swapper/410
372100099230,23cyclictest0-21swapper/410
372100099230,22cyclictest0-21swapper/410
372100099230,22cyclictest0-21swapper/410
372100099230,17cyclictest0-21swapper/410
372100099230,17cyclictest0-21swapper/410
372100099230,16cyclictest0-21swapper/410
372100099230,16cyclictest0-21swapper/410
372100099230,0cyclictest0-21swapper/410
372100099230,0cyclictest0-21swapper/410
372100099230,0cyclictest0-21swapper/410
372100099230,0cyclictest0-21swapper/410
372100099230,0cyclictest0-21swapper/410
3720995992323,0cyclictest0-21swapper/39
3720995992323,0cyclictest0-21swapper/39
3720995992322,1cyclictest1608-21snmpd9
3720995992322,1cyclictest1608-21snmpd9
3720995992322,1cyclictest1608-21snmpd9
3720995992321,2cyclictest530-21usb-storage9
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional