You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-15 - 23:23

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Fri May 15, 2026 00:44:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
126212499575,26cyclictest91048-21CPU7
126212499566,25cyclictest0-21swapper/157
126212499555,39cyclictest91048-21CPU7
126212499555,39cyclictest91048-21CPU7
126212499544,25cyclictest0-21swapper/157
126143424946,2sleep140-21swapper/146
126209499485,26cyclictest1535055-31munin-graph14
126144924644,2sleep100-21swapper/102
126212499455,26cyclictest91048-21CPU7
126173124543,2sleep50-21swapper/511
136098440,43rtkit-daemon0-21swapper/39
126168024442,1sleep90-21swapper/915
126212499434,25cyclictest91048-21CPU7
126172624341,2sleep20-21swapper/28
126144424340,2sleep70-21swapper/713
126212499424,25cyclictest0-21swapper/157
126212499424,25cyclictest0-21swapper/157
126149924240,2sleep60-21swapper/612
126212499404,11cyclictest0-21swapper/157
126212499404,11cyclictest0-21swapper/157
126154023836,2sleep110-21swapper/113
126058823836,1sleep150-21swapper/157
126168423735,2sleep130-21swapper/135
126145623736,1sleep00-21swapper/00
126160923634,2sleep80-21swapper/814
126151123533,2sleep10-21swapper/11
126212499326,25cyclictest0-21swapper/157
1262072993227,4cyclictest1561-21snmpd8
126212499315,25cyclictest0-21swapper/157
126212499315,25cyclictest0-21swapper/157
126212499314,26cyclictest0-21swapper/157
126212499306,11cyclictest0-21swapper/157
126212499305,25cyclictest0-21swapper/157
126212499305,25cyclictest0-21swapper/157
126212499304,26cyclictest0-21swapper/157
126212499304,25cyclictest0-21swapper/157
1262107993026,3cyclictest1561-21snmpd3
1262107993026,3cyclictest1561-21snmpd3
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
126212499294,25cyclictest0-21swapper/157
1262072992926,3cyclictest0-21swapper/28
126207299290,27cyclictest0-21swapper/28
126212499283,25cyclictest0-21swapper/157
126212499280,27cyclictest0-21swapper/157
126211199283,3cyclictest865740-21kworker/12:0+mm_percpu_wq4
1262111992826,1cyclictest1561-21snmpd4
126211199280,27cyclictest0-21swapper/124
126211199280,27cyclictest0-21swapper/124
126210799280,27cyclictest0-21swapper/113
126210799280,27cyclictest0-21swapper/113
126210799280,27cyclictest0-21swapper/113
126210299280,27cyclictest0-21swapper/102
126210299280,27cyclictest0-21swapper/102
126210299280,27cyclictest0-21swapper/102
126210299280,27cyclictest0-21swapper/102
126210299280,27cyclictest0-21swapper/102
1262099992826,1cyclictest1561-21snmpd15
126209999280,27cyclictest0-21swapper/915
126209999280,1cyclictest0-21swapper/915
1262094992825,2cyclictest1561-21snmpd14
126209499280,27cyclictest0-21swapper/814
126209499280,27cyclictest0-21swapper/814
1262087992827,1cyclictest0-21swapper/612
126208799280,27cyclictest0-21swapper/612
1262082992827,1cyclictest1561-21snmpd11
1262082992826,1cyclictest1561-21snmpd11
126208299280,27cyclictest0-21swapper/511
126208299280,27cyclictest0-21swapper/511
1262075992827,1cyclictest1561-21snmpd9
126207599280,27cyclictest0-21swapper/39
126207299280,27cyclictest0-21swapper/28
126207299280,27cyclictest0-21swapper/28
126206499285,1cyclictest0-21swapper/11
126206499280,27cyclictest0-21swapper/11
126205999280,27cyclictest0-21swapper/00
1262124992726,1cyclictest0-21swapper/157
126212499270,1cyclictest0-21swapper/157
126211999270,1cyclictest0-21swapper/146
1262114992726,1cyclictest1561-21snmpd5
1262114992726,1cyclictest1561-21snmpd5
1262114992726,1cyclictest0-21swapper/135
1262114992725,1cyclictest1561-21snmpd5
126211499270,27cyclictest0-21swapper/135
126211499270,27cyclictest0-21swapper/135
126211499270,1cyclictest0-21swapper/135
126211499270,1cyclictest0-21swapper/135
1262111992726,1cyclictest1561-21snmpd4
126211199270,26cyclictest0-21swapper/124
1262107992726,1cyclictest0-21swapper/113
126210799270,27cyclictest0-21swapper/113
1262102992726,1cyclictest1561-21snmpd2
1262102992726,1cyclictest0-21swapper/102
126210299270,1cyclictest0-21swapper/102
1262099992726,1cyclictest1561-21snmpd15
1262099992726,1cyclictest1561-21snmpd15
126209999270,27cyclictest0-21swapper/915
126209999270,1cyclictest0-21swapper/915
126209999270,1cyclictest0-21swapper/915
126209999270,1cyclictest0-21swapper/915
126209999270,1cyclictest0-21swapper/915
1262094992726,1cyclictest1561-21snmpd14
1262094992726,1cyclictest1561-21snmpd14
1262094992726,1cyclictest0-21swapper/814
126209499270,27cyclictest0-21swapper/814
126209499270,27cyclictest0-21swapper/814
1262091992726,1cyclictest1561-21snmpd13
1262091992726,1cyclictest1561-21snmpd13
1262091992726,1cyclictest0-21swapper/713
126209199270,27cyclictest0-21swapper/713
126209199270,27cyclictest0-21swapper/713
1262087992726,1cyclictest0-21swapper/612
1262087992725,1cyclictest1561-21snmpd12
1262082992726,1cyclictest0-21swapper/511
1262082992726,1cyclictest0-21swapper/511
126208299270,26cyclictest0-21swapper/511
1262079992726,1cyclictest1561-21snmpd10
126207999270,27cyclictest1671948-31munin-graph10
126207999270,27cyclictest0-21swapper/410
126207999270,27cyclictest0-21swapper/410
126207999270,1cyclictest0-21swapper/410
126207999270,1cyclictest0-21swapper/410
126207599271,25cyclictest511ktimers/39
1262072992726,1cyclictest0-21swapper/28
1262064992726,1cyclictest1561-21snmpd1
1262064992726,1cyclictest1561-21snmpd1
126206499270,27cyclictest0-21swapper/11
126206499270,27cyclictest0-21swapper/11
126206499270,27cyclictest0-21swapper/11
126206499270,27cyclictest0-21swapper/11
1262059992726,1cyclictest1561-21snmpd0
1262059992726,1cyclictest1561-21snmpd0
126205999270,27cyclictest0-21swapper/00
126205999270,27cyclictest0-21swapper/00
1262124992625,1cyclictest0-21swapper/157
1262119992625,1cyclictest1561-21snmpd6
1262119992625,1cyclictest1561-21snmpd6
1262119992625,1cyclictest0-21swapper/146
1262114992625,1cyclictest1561-21snmpd5
1262111992625,1cyclictest1561-21snmpd4
1262111992625,1cyclictest1561-21snmpd4
1262111992625,1cyclictest1561-21snmpd4
1262111992624,1cyclictest1561-21snmpd4
1262107992624,1cyclictest1561-21snmpd3
1262099992625,1cyclictest1561-21snmpd15
1262099992625,1cyclictest1561-21snmpd15
1262099992625,1cyclictest0-21swapper/915
1262099992625,1cyclictest0-21swapper/915
1262099992624,1cyclictest1561-21snmpd15
1262094992625,1cyclictest1561-21snmpd14
1262094992625,1cyclictest1561-21snmpd14
1262087992625,1cyclictest1561-21snmpd12
1262087992625,1cyclictest1561-21snmpd12
1262087992625,1cyclictest1561-21snmpd12
1262087992625,1cyclictest1561-21snmpd12
1262087992625,1cyclictest1561-21snmpd12
1262082992625,1cyclictest1561-21snmpd11
1262082992625,1cyclictest0-21swapper/511
1262075992625,1cyclictest1561-21snmpd9
1262072992625,1cyclictest0-21swapper/28
1262064992625,1cyclictest1561-21snmpd1
1262064992625,1cyclictest1561-21snmpd1
1262064992625,1cyclictest1561-21snmpd1
1262059992625,1cyclictest1561-21snmpd0
126205999260,1cyclictest0-21swapper/00
1262119992524,1cyclictest1561-21snmpd6
1262119992524,1cyclictest1561-21snmpd6
1262119992524,1cyclictest1561-21snmpd6
1262119992524,1cyclictest0-21swapper/146
1262114992524,1cyclictest1561-21snmpd5
1262114992524,1cyclictest0-21swapper/135
1262111992516,6cyclictest0-21swapper/124
1262111992516,6cyclictest0-21swapper/124
1262102992524,1cyclictest1561-21snmpd2
1262099992524,1cyclictest1561-21snmpd15
1262099992524,1cyclictest1561-21snmpd15
1262099992524,1cyclictest0-21swapper/915
1262099992523,1cyclictest1561-21snmpd15
1262094992524,1cyclictest1561-21snmpd14
1262091992524,1cyclictest1561-21snmpd13
1262091992524,1cyclictest1561-21snmpd13
1262087992524,1cyclictest1561-21snmpd12
1262087992524,1cyclictest0-21swapper/612
1262082992524,1cyclictest1561-21snmpd11
1262082992524,1cyclictest1561-21snmpd11
1262079992524,1cyclictest1561-21snmpd10
1262075992524,1cyclictest0-21swapper/39
1262064992524,1cyclictest1561-21snmpd1
1262064992524,1cyclictest0-21swapper/11
1262059992524,1cyclictest1561-21snmpd0
1262124992424,0cyclictest1561-21snmpd7
1262124992423,1cyclictest1561-21snmpd7
1262119992423,1cyclictest1561-21snmpd6
1262119992423,1cyclictest0-21swapper/146
1262119992423,1cyclictest0-21swapper/146
1262119992423,1cyclictest0-21swapper/146
1262119992423,1cyclictest0-21swapper/146
1262114992423,1cyclictest1561-21snmpd5
1262114992423,1cyclictest0-21swapper/135
1262111992423,1cyclictest1561-21snmpd4
1262107992423,1cyclictest0-21swapper/113
1262102992423,1cyclictest1561-21snmpd2
1262102992423,1cyclictest1561-21snmpd2
1262102992423,1cyclictest1561-21snmpd2
1262102992423,1cyclictest0-21swapper/102
1262099992423,1cyclictest1561-21snmpd15
1262094992423,1cyclictest1561-21snmpd14
1262094992423,1cyclictest1561-21snmpd14
1262094992423,1cyclictest0-21swapper/814
1262091992423,1cyclictest1561-21snmpd13
1262087992423,1cyclictest0-21swapper/612
1262087992422,1cyclictest1561-21snmpd12
1262079992423,1cyclictest1561-21snmpd10
1262079992423,1cyclictest0-21swapper/410
1262079992423,1cyclictest0-21swapper/410
1262075992423,1cyclictest1561-21snmpd9
1262075992423,1cyclictest0-21swapper/39
1262075992423,1cyclictest0-21swapper/39
1262075992423,1cyclictest0-21swapper/39
1262059992423,1cyclictest1561-21snmpd0
1262059992423,1cyclictest1561-21snmpd0
1262059992423,1cyclictest0-21swapper/00
1262124992322,1cyclictest0-21swapper/157
1262119992322,1cyclictest1561-21snmpd6
1262119992322,1cyclictest1561-21snmpd6
1262119992322,1cyclictest1561-21snmpd6
1262119992322,1cyclictest0-21swapper/146
1262114992322,1cyclictest0-21swapper/135
1262111992322,1cyclictest1561-21snmpd4
1262111992322,1cyclictest1561-21snmpd4
1262111992322,1cyclictest0-21swapper/124
1262111992322,1cyclictest0-21swapper/124
1262111992311,9cyclictest865740-21kworker/12:0-events4
1262111992311,9cyclictest865740-21kworker/12:0-events4
1262107992322,1cyclictest1561-21snmpd3
1262107992322,1cyclictest1561-21snmpd3
1262102992322,1cyclictest1561-21snmpd2
1262099992322,1cyclictest0-21swapper/915
1262091992323,0cyclictest0-21swapper/713
1262087992322,1cyclictest0-21swapper/612
1262087992322,1cyclictest0-21swapper/612
1262087992321,1cyclictest1561-21snmpd12
1262082992322,1cyclictest1561-21snmpd11
1262079992322,1cyclictest1561-21snmpd10
1262079992322,1cyclictest1561-21snmpd10
1262079992322,1cyclictest1561-21snmpd10
1262079992322,1cyclictest0-21swapper/410
1262075992322,1cyclictest1561-21snmpd9
1262075992322,1cyclictest0-21swapper/39
1262072992322,1cyclictest1561-21snmpd8
1262064992322,1cyclictest0-21swapper/11
1262059992322,1cyclictest1561-21snmpd0
1262124992220,1cyclictest1561-21snmpd7
1262124992220,1cyclictest1561-21snmpd7
126212499220,21cyclictest1614166-21latency_hist7
1262119992221,1cyclictest0-21swapper/146
1262119992221,1cyclictest0-21swapper/146
1262119992221,1cyclictest0-21swapper/146
1262119992221,1cyclictest0-21swapper/146
1262119992221,1cyclictest0-21swapper/146
126211999220,3cyclictest0-21swapper/146
126211999220,3cyclictest0-21swapper/146
1262114992221,1cyclictest1561-21snmpd5
1262114992221,1cyclictest0-21swapper/135
1262111992221,1cyclictest0-21swapper/124
1262107992221,1cyclictest1561-21snmpd3
1262102992221,1cyclictest1561-21snmpd2
1262094992221,1cyclictest1561-21snmpd14
1262094992221,1cyclictest1561-21snmpd14
1262094992221,1cyclictest1561-21snmpd14
1262094992221,1cyclictest1561-21snmpd14
1262094992221,1cyclictest0-21swapper/814
1262091992221,1cyclictest0-21swapper/713
1262091992221,1cyclictest0-21swapper/713
1262087992221,1cyclictest1561-21snmpd12
1262087992221,1cyclictest1561-21snmpd12
1262087992221,1cyclictest1561-21snmpd12
1262087992221,1cyclictest1561-21snmpd12
1262087992221,1cyclictest122726-21nfsd12
1262087992221,1cyclictest0-21swapper/612
1262087992221,1cyclictest0-21swapper/612
1262082992221,1cyclictest1561-21snmpd11
1262082992221,1cyclictest0-21swapper/511
1262082992221,1cyclictest0-21swapper/511
1262082992220,1cyclictest1561-21snmpd11
1262079992221,1cyclictest1561-21snmpd10
1262075992221,1cyclictest1561-21snmpd9
1262075992221,1cyclictest1561-21snmpd9
1262075992221,1cyclictest0-21swapper/39
1262075992220,1cyclictest0-21swapper/39
1262072992221,1cyclictest0-21swapper/28
1262064992221,1cyclictest1561-21snmpd1
1262064992221,1cyclictest1561-21snmpd1
1262064992221,1cyclictest0-21swapper/11
1262059992221,1cyclictest1561-21snmpd0
1262059992221,1cyclictest1561-21snmpd0
1262059992221,1cyclictest0-21swapper/00
1262124992120,1cyclictest0-21swapper/157
1262114992120,1cyclictest1561-21snmpd5
1262111992120,1cyclictest1561-21snmpd4
1262102992120,1cyclictest1561-21snmpd2
1262102992120,1cyclictest0-21swapper/102
126209999214,12cyclictest0-21swapper/915
1262094992119,2cyclictest1561-21snmpd14
1262091992120,1cyclictest1561-21snmpd13
1262091992120,1cyclictest0-21swapper/713
1262091992120,1cyclictest0-21swapper/713
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262091992119,1cyclictest91048-21CPU13
1262087992120,1cyclictest122726-21nfsd12
1262082992120,1cyclictest1561-21snmpd11
1262075992120,1cyclictest1561-21snmpd9
1262064992120,1cyclictest1561-21snmpd1
1262064992120,1cyclictest0-21swapper/11
1262059992120,1cyclictest1561-21snmpd0
1262059992120,1cyclictest0-21swapper/00
1262124992019,1cyclictest91048-21CPU7
1262124992018,1cyclictest91048-21CPU7
1262124992018,1cyclictest91048-21CPU7
126212499200,19cyclictest91048-21CPU7
126212499200,19cyclictest91048-21CPU7
126212499200,19cyclictest91048-21CPU7
126212499200,19cyclictest0-21swapper/157
126212499200,19cyclictest0-21swapper/157
126212499200,19cyclictest0-21swapper/157
1262119992019,1cyclictest1561-21snmpd6
1262119992019,1cyclictest1561-21snmpd6
126211999200,17cyclictest0-21swapper/146
1262114992017,3cyclictest1267344-21proc_pri5
1262114992017,3cyclictest1267344-21proc_pri5
126211499200,20cyclictest0-21swapper/135
1262111992010,9cyclictest1411311-21open_files4
1262107992019,1cyclictest1561-21snmpd3
1262107992019,1cyclictest0-21swapper/113
126210799200,17cyclictest0-21swapper/113
1262102992019,1cyclictest1561-21snmpd2
1262102992019,1cyclictest0-21swapper/102
1262099992019,1cyclictest1561-21snmpd15
1262099992019,1cyclictest1561-21snmpd15
1262099992019,1cyclictest0-21swapper/915
1262094992019,1cyclictest1561-21snmpd14
1262094992019,1cyclictest0-21swapper/814
1262094992019,1cyclictest0-21swapper/814
1262094992019,1cyclictest0-21swapper/814
1262091992019,1cyclictest91048-21CPU13
1262091992019,1cyclictest0-21swapper/713
1262091992018,1cyclictest91048-21CPU13
1262091992018,1cyclictest91048-21CPU13
1262091992018,1cyclictest91048-21CPU13
1262091992018,1cyclictest91048-21CPU13
1262091992018,1cyclictest91048-21CPU13
126209199200,1cyclictest91048-21CPU13
126209199200,1cyclictest91048-21CPU13
126209199200,19cyclictest91048-21CPU13
1262087992019,1cyclictest1561-21snmpd12
1262087992019,1cyclictest0-21swapper/612
126208799200,19cyclictest1646712-21latency_hist12
126208799200,19cyclictest0-21swapper/612
126208799200,18cyclictest0-21swapper/612
1262082992019,1cyclictest1561-21snmpd11
1262082992019,1cyclictest1561-21snmpd11
1262082992019,1cyclictest0-21swapper/511
1262079992019,1cyclictest0-21swapper/410
1262079992018,1cyclictest91048-21CPU10
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional