You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-19 - 03:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Wed Aug 19, 2026 00:45:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
33233472392367,16sleep10-21swapper/11
33232592371347,16sleep30-21swapper/39
33230572358313,17sleep60-21swapper/612
33230862355312,33sleep140-21swapper/146
33231352348304,15sleep70-21swapper/713
33231302348325,15sleep20-21swapper/28
33232642344320,16sleep80-21swapper/814
33232852342316,17sleep100-21swapper/102
33231452342316,17sleep150-21swapper/157
33232522340315,16sleep130-21swapper/135
33231232340313,17sleep120-21swapper/124
33231892339312,18sleep50-21swapper/511
33233382338313,16sleep90-21swapper/915
33232672338313,16sleep110-21swapper/113
33231882336311,16sleep40-21swapper/410
33232212333311,14sleep00-21swapper/00
332371099599,25cyclictest0-21swapper/135
332371099599,25cyclictest0-21swapper/135
36633152500,0sleep40-21swapper/410
332371099479,25cyclictest0-21swapper/135
332371099479,25cyclictest0-21swapper/135
332371099469,36cyclictest0-21swapper/135
332371099469,25cyclictest0-21swapper/135
332371099369,26cyclictest0-21swapper/135
3323710993610,26cyclictest0-21swapper/135
3323686993632,4cyclictest0-21swapper/612
332371099359,25cyclictest0-21swapper/135
332371099359,25cyclictest0-21swapper/135
3323710993510,25cyclictest0-21swapper/135
3323710993510,25cyclictest0-21swapper/135
3323710993510,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099349,25cyclictest0-21swapper/135
332371099338,25cyclictest0-21swapper/135
332370799324,14cyclictest0-21swapper/124
332369699318,23cyclictest0-21swapper/915
3323673993027,3cyclictest1612-21snmpd9
3323686992921,6cyclictest0-21swapper/612
3323686992920,6cyclictest0-21swapper/612
3323673992926,3cyclictest1612-21snmpd9
332372199280,27cyclictest0-21swapper/157
332372199280,27cyclictest0-21swapper/157
332372199280,27cyclictest0-21swapper/157
332372199280,27cyclictest0-21swapper/157
3323713992827,1cyclictest1612-21snmpd6
3323713992827,1cyclictest1612-21snmpd6
3323710992827,1cyclictest1612-21snmpd5
332370799280,27cyclictest0-21swapper/124
3323704992827,1cyclictest1612-21snmpd3
332370499280,27cyclictest0-21swapper/113
3323691992826,1cyclictest1612-21snmpd14
332369199280,27cyclictest0-21swapper/814
3323681992827,1cyclictest1612-21snmpd11
3323677992827,1cyclictest1612-21snmpd10
332367799281,2cyclictest437118-21CPU10
332367399280,27cyclictest0-21swapper/39
332367099280,1cyclictest0-21swapper/28
3323667992827,1cyclictest1612-21snmpd1
332366299280,1cyclictest0-21swapper/00
332372199270,1cyclictest0-21swapper/157
3323713992726,1cyclictest0-21swapper/146
332371399270,27cyclictest0-21swapper/146
332371399270,27cyclictest0-21swapper/146
332371399270,27cyclictest0-21swapper/146
3323704992726,1cyclictest0-21swapper/113
3323704992726,1cyclictest0-21swapper/113
3323704992726,1cyclictest0-21swapper/113
332370499270,27cyclictest0-21swapper/113
332370499270,27cyclictest0-21swapper/113
332370499270,1cyclictest0-21swapper/113
3323700992726,1cyclictest1612-21snmpd2
332370099270,1cyclictest0-21swapper/102
332370099270,1cyclictest0-21swapper/102
3323696992726,1cyclictest1612-21snmpd15
332369699270,27cyclictest0-21swapper/915
3323691992726,1cyclictest1612-21snmpd14
3323691992726,1cyclictest1612-21snmpd14
3323691992726,1cyclictest1612-21snmpd14
3323688992726,1cyclictest1612-21snmpd13
3323688992726,1cyclictest1612-21snmpd13
3323686992724,3cyclictest0-21swapper/612
332368699270,1cyclictest0-21swapper/612
3323681992726,1cyclictest1612-21snmpd11
3323681992726,1cyclictest0-21swapper/511
332368199270,27cyclictest0-21swapper/511
332368199270,1cyclictest0-21swapper/511
3323677992726,1cyclictest1612-21snmpd10
3323677992726,1cyclictest1612-21snmpd10
3323677992726,1cyclictest1612-21snmpd10
3323677992726,1cyclictest1612-21snmpd10
3323677992726,1cyclictest1612-21snmpd10
3323677992726,1cyclictest1612-21snmpd10
3323673992726,1cyclictest1612-21snmpd9
3323670992726,1cyclictest1612-21snmpd8
332367099270,27cyclictest0-21swapper/28
332367099270,27cyclictest0-21swapper/28
332367099270,1cyclictest0-21swapper/28
3323667992726,1cyclictest1612-21snmpd1
332366799270,27cyclictest0-21swapper/11
3323662992726,1cyclictest0-21swapper/00
3323721992625,1cyclictest1612-21snmpd7
3323721992625,1cyclictest0-21swapper/157
3323713992625,1cyclictest1612-21snmpd6
3323713992625,1cyclictest0-21swapper/146
3323713992625,1cyclictest0-21swapper/146
3323700992625,1cyclictest0-21swapper/102
3323696992625,1cyclictest0-21swapper/915
3323691992625,1cyclictest1612-21snmpd14
3323688992625,1cyclictest1612-21snmpd13
3323686992625,1cyclictest0-21swapper/612
3323686992625,1cyclictest0-21swapper/612
3323686992624,1cyclictest1612-21snmpd12
3323681992625,1cyclictest1612-21snmpd11
3323677992625,1cyclictest1612-21snmpd10
3323677992625,1cyclictest1612-21snmpd10
3323677992625,1cyclictest1612-21snmpd10
3323677992625,1cyclictest1612-21snmpd10
3323673992625,1cyclictest1612-21snmpd9
3323673992622,3cyclictest1612-21snmpd9
3323670992625,1cyclictest1612-21snmpd8
3323667992625,1cyclictest1612-21snmpd1
3323667992625,1cyclictest1612-21snmpd1
3323667992625,1cyclictest1612-21snmpd1
3323721992524,1cyclictest1612-21snmpd7
3323721992524,1cyclictest1612-21snmpd7
3323721992524,1cyclictest0-21swapper/157
3323721992523,1cyclictest1612-21snmpd7
3323721992522,2cyclictest1612-21snmpd7
3323713992524,1cyclictest0-21swapper/146
3323710992523,1cyclictest0-21swapper/135
3323707992523,2cyclictest0-21swapper/124
3323704992524,1cyclictest1612-21snmpd3
3323704992524,1cyclictest1612-21snmpd3
3323704992523,2cyclictest1612-21snmpd3
3323700992524,1cyclictest0-21swapper/102
3323696992524,1cyclictest0-21swapper/915
3323691992524,1cyclictest1612-21snmpd14
3323691992524,1cyclictest0-21swapper/814
3323688992524,1cyclictest1612-21snmpd13
3323688992524,1cyclictest1612-21snmpd13
3323686992524,1cyclictest1612-21snmpd12
3323681992524,1cyclictest1612-21snmpd11
3323681992524,1cyclictest1612-21snmpd11
3323677992524,1cyclictest1612-21snmpd10
3323673992524,1cyclictest0-21swapper/39
3323673992524,1cyclictest0-21swapper/39
3323673992524,1cyclictest0-21swapper/39
3323670992524,1cyclictest1612-21snmpd8
3323670992524,1cyclictest1612-21snmpd8
3323670992524,1cyclictest0-21swapper/28
3323667992524,1cyclictest1612-21snmpd1
3323667992524,1cyclictest1612-21snmpd1
3323667992524,1cyclictest0-21swapper/11
3323662992524,1cyclictest2976424-21kworker/0:2+events0
3323662992524,1cyclictest0-21swapper/00
3323662992524,1cyclictest0-21swapper/00
3323721992423,1cyclictest1612-21snmpd7
3323713992423,1cyclictest0-21swapper/146
3323710992423,1cyclictest0-21swapper/135
3323710992423,1cyclictest0-21swapper/135
3323707992423,1cyclictest1612-21snmpd4
332370799240,23cyclictest0-21swapper/124
332370799240,17cyclictest0-21swapper/124
332370799240,0cyclictest0-21swapper/124
3323704992423,1cyclictest0-21swapper/113
3323700992424,0cyclictest0-21swapper/102
3323696992423,1cyclictest1612-21snmpd15
3323691992423,1cyclictest1612-21snmpd14
3323691992423,1cyclictest1612-21snmpd14
3323686992423,1cyclictest1612-21snmpd12
3323686992422,1cyclictest1612-21snmpd12
3323681992423,1cyclictest1612-21snmpd11
3323681992423,1cyclictest0-21swapper/511
3323677992423,1cyclictest1612-21snmpd10
3323677992423,1cyclictest1612-21snmpd10
3323677992423,1cyclictest1612-21snmpd10
3323677992423,1cyclictest0-21swapper/410
3323673992423,1cyclictest0-21swapper/39
3323673992423,1cyclictest0-21swapper/39
3323670992424,0cyclictest0-21swapper/28
3323670992423,1cyclictest1612-21snmpd8
3323670992423,1cyclictest0-21swapper/28
3323667992423,1cyclictest0-21swapper/11
3323662992423,1cyclictest1612-21snmpd0
3323662992423,1cyclictest0-21swapper/00
3323662992423,1cyclictest0-21swapper/00
3323721992322,1cyclictest1612-21snmpd7
3323721992322,1cyclictest0-21swapper/157
3323713992322,1cyclictest1612-21snmpd6
3323713992322,1cyclictest1612-21snmpd6
3323713992322,1cyclictest1612-21snmpd6
3323713992322,1cyclictest0-21swapper/146
3323713992322,1cyclictest0-21swapper/146
3323710992322,1cyclictest0-21swapper/135
3323707992322,1cyclictest0-21swapper/124
3323707992322,1cyclictest0-21swapper/124
3323707992321,2cyclictest0-21swapper/124
3323707992321,2cyclictest0-21swapper/124
3323707992321,2cyclictest0-21swapper/124
332370799230,22cyclictest0-21swapper/124
3323704992322,1cyclictest0-21swapper/113
3323704992318,3cyclictest0-21swapper/113
3323696992322,1cyclictest1612-21snmpd15
3323696992322,1cyclictest0-21swapper/915
3323691992322,1cyclictest1612-21snmpd14
3323691992322,1cyclictest0-21swapper/814
3323688992322,1cyclictest1612-21snmpd13
3323688992322,1cyclictest1612-21snmpd13
3323688992322,1cyclictest0-21swapper/713
3323686992322,1cyclictest1612-21snmpd12
3323686992322,1cyclictest1612-21snmpd12
3323686992317,3cyclictest2991935-21kworker/6:1-events12
3323686992315,6cyclictest2991935-21kworker/6:1+mm_percpu_wq12
3323686992311,9cyclictest2991935-21kworker/6:1+mm_percpu_wq12
3323681992322,1cyclictest0-21swapper/511
3323681992322,1cyclictest0-21swapper/511
3323677992322,1cyclictest1612-21snmpd10
3323677992322,1cyclictest0-21swapper/410
3323677992322,1cyclictest0-21swapper/410
3323673992322,1cyclictest1612-21snmpd9
3323673992322,1cyclictest1612-21snmpd9
3323670992322,1cyclictest1612-21snmpd8
3323670992322,1cyclictest1612-21snmpd8
3323670992322,1cyclictest0-21swapper/28
3323667992322,1cyclictest1612-21snmpd1
332366799230,23cyclictest0-21swapper/11
3323662992322,1cyclictest1612-21snmpd0
3323662992322,1cyclictest0-21swapper/00
3323662992321,1cyclictest1612-21snmpd0
332366299230,1cyclictest0-21swapper/00
3323721992222,0cyclictest0-21swapper/157
3323721992221,1cyclictest0-21swapper/157
3323713992221,1cyclictest1612-21snmpd6
3323710992221,1cyclictest1612-21snmpd5
3323707992221,1cyclictest1612-21snmpd4
3323707992221,1cyclictest0-21swapper/124
3323707992221,1cyclictest0-21swapper/124
3323707992221,1cyclictest0-21swapper/124
3323707992220,2cyclictest0-21swapper/124
3323707992220,2cyclictest0-21swapper/124
3323707992219,3cyclictest0-21swapper/124
3323707992216,6cyclictest0-21swapper/124
3323707992216,6cyclictest0-21swapper/124
3323704992221,1cyclictest0-21swapper/113
3323700992221,1cyclictest0-21swapper/102
3323700992215,3cyclictest0-21swapper/102
3323696992221,1cyclictest1612-21snmpd15
3323696992221,1cyclictest1612-21snmpd15
3323696992221,1cyclictest1612-21snmpd15
3323696992221,1cyclictest0-21swapper/915
3323696992221,1cyclictest0-21swapper/915
3323696992220,2cyclictest1612-21snmpd15
3323691992221,1cyclictest1612-21snmpd14
3323691992221,1cyclictest1612-21snmpd14
3323688992221,1cyclictest1612-21snmpd13
3323688992221,1cyclictest1612-21snmpd13
3323688992219,2cyclictest3502037-31munin-html13
3323686992222,0cyclictest1612-21snmpd12
3323686992221,1cyclictest1612-21snmpd12
3323686992221,1cyclictest0-21swapper/612
332368699220,21cyclictest2991935-21kworker/6:1+mm_percpu_wq12
3323681992221,1cyclictest1612-21snmpd11
3323677992221,1cyclictest1612-21snmpd10
3323673992221,1cyclictest1612-21snmpd9
3323673992210,8cyclictest437123-21CPU9
3323670992221,1cyclictest1612-21snmpd8
3323670992221,1cyclictest0-21swapper/28
3323667992221,1cyclictest1612-21snmpd1
3323662992221,1cyclictest1612-21snmpd0
3323662992221,1cyclictest0-21swapper/00
332372199210,2cyclictest3685259-31munin-graph7
3323713992120,1cyclictest1612-21snmpd6
3323713992120,1cyclictest0-21swapper/146
3323707992120,1cyclictest0-21swapper/124
3323707992120,1cyclictest0-21swapper/124
3323707992119,2cyclictest0-21swapper/124
3323707992115,6cyclictest0-21swapper/124
332370799210,0cyclictest0-21swapper/124
3323704992120,1cyclictest1612-21snmpd3
3323704992120,1cyclictest0-21swapper/113
3323700992120,1cyclictest0-21swapper/102
3323696992120,1cyclictest1612-21snmpd15
3323691992120,1cyclictest0-21swapper/814
3323688992120,1cyclictest0-21swapper/713
3323688992120,1cyclictest0-21swapper/713
3323688992120,1cyclictest0-21swapper/713
3323686992116,3cyclictest2991935-21kworker/6:1-events12
3323686992114,6cyclictest437119-21CPU12
332368699210,18cyclictest771rcuc/612
332368699210,18cyclictest2991935-21kworker/6:1+mm_percpu_wq12
332368699210,17cyclictest2991935-21kworker/6:1+mm_percpu_wq12
332368699210,15cyclictest437118-21CPU12
3323681992120,1cyclictest0-21swapper/511
3323681992120,1cyclictest0-21swapper/511
332368199211,2cyclictest437125-21CPU11
3323673992120,1cyclictest0-21swapper/39
3323673992118,3cyclictest1612-21snmpd9
332367399210,21cyclictest0-21swapper/39
3323670992120,1cyclictest1612-21snmpd8
3323670992120,1cyclictest1612-21snmpd8
332366799219,1cyclictest0-21swapper/11
3323667992120,1cyclictest0-21swapper/11
3323667992120,1cyclictest0-21swapper/11
3323662992121,0cyclictest1612-21snmpd0
3323662992119,1cyclictest1612-21snmpd0
3323662992114,4cyclictest151ktimers/00
332366299211,18cyclictest437115-21CPU0
332366299210,20cyclictest0-21swapper/00
332366299210,18cyclictest0-21swapper/00
3323721992019,1cyclictest0-21swapper/157
3323713992019,1cyclictest0-21swapper/146
3323710992019,1cyclictest0-21swapper/135
3323710992019,1cyclictest0-21swapper/135
3323710992019,1cyclictest0-21swapper/135
3323707992019,1cyclictest1612-21snmpd4
3323707992016,4cyclictest0-21swapper/124
332370799200,19cyclictest0-21swapper/124
332370799200,19cyclictest0-21swapper/124
332370799200,19cyclictest0-21swapper/124
332370799200,18cyclictest0-21swapper/124
332370799200,0cyclictest0-21swapper/124
332370799200,0cyclictest0-21swapper/124
332370799200,0cyclictest0-21swapper/124
3323704992019,1cyclictest1612-21snmpd3
3323704992019,1cyclictest1612-21snmpd3
3323704992019,1cyclictest0-21swapper/113
3323700992019,1cyclictest0-21swapper/102
3323700992016,4cyclictest0-21swapper/102
3323700992014,3cyclictest0-21swapper/102
332370099200,17cyclictest0-21swapper/102
3323696992019,1cyclictest0-21swapper/915
3323696992018,2cyclictest1612-21snmpd15
3323691992019,1cyclictest1612-21snmpd14
3323691992019,1cyclictest0-21swapper/814
332369199200,17cyclictest0-21swapper/814
3323688992019,1cyclictest0-21swapper/713
3323686992019,1cyclictest1612-21snmpd12
3323686992017,3cyclictest0-21swapper/612
3323686992017,3cyclictest0-21swapper/612
3323686992015,3cyclictest2991935-21kworker/6:1-mm_percpu_wq12
3323686992015,3cyclictest0-21swapper/612
3323686992015,3cyclictest0-21swapper/612
3323686992014,3cyclictest2991935-21kworker/6:1-events12
3323686992013,0cyclictest181rcu_preempt12
3323686992011,6cyclictest437120-21CPU12
332368699200,17cyclictest3375514-21fw_conntrack12
332368699200,17cyclictest2991935-21kworker/6:1+mm_percpu_wq12
332368699200,17cyclictest2991935-21kworker/6:1+mm_percpu_wq12
3323681992019,1cyclictest1612-21snmpd11
3323677992019,1cyclictest1612-21snmpd10
3323677992019,1cyclictest0-21swapper/410
3323677992017,3cyclictest437105-21qemu-system-x8610
3323673992019,1cyclictest1612-21snmpd9
3323673992017,3cyclictest0-21swapper/39
332367399201,18cyclictest437124-21CPU9
3323670992019,1cyclictest1612-21snmpd8
3323670992019,1cyclictest0-21swapper/28
3323670992019,1cyclictest0-21swapper/28
3323667992019,1cyclictest0-21swapper/11
3323667992017,2cyclictest437120-21CPU1
3323667992012,6cyclictest0-21swapper/11
3323662992019,1cyclictest1612-21snmpd0
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional