You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-27 - 07:32

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Thu Nov 27, 2025 00:46:00)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
29885952357315,14sleep40-21swapper/410
29884942356312,14sleep140-21swapper/146
29884342353309,14sleep80-21swapper/814
29883852349308,14sleep110-21swapper/113
29883782348326,14sleep50-21swapper/511
29885652345309,13sleep130-21swapper/135
29884752342320,14sleep120-21swapper/124
29883892342319,15sleep150-21swapper/157
29885712341319,14sleep20-21swapper/28
29883542341319,14sleep30-21swapper/39
29883382341319,14sleep90-21swapper/915
29883802340318,14sleep60-21swapper/612
29883922338316,14sleep10-21swapper/11
29884192337315,14sleep100-21swapper/102
29884332335313,14sleep70-21swapper/713
29883462334312,14sleep00-21swapper/00
2988972994341,1cyclictest0-21swapper/28
2989022994241,1cyclictest0-21swapper/157
2988986994241,1cyclictest0-21swapper/612
2988978994241,0cyclictest0-21swapper/410
2988993994039,1cyclictest1474-21snmpd14
2988972993936,1cyclictest0-21swapper/28
2989011993838,0cyclictest0-21swapper/124
2988978993836,1cyclictest0-21swapper/410
2989015993737,0cyclictest0-21swapper/135
2989003993737,0cyclictest0-21swapper/102
2988986993736,1cyclictest0-21swapper/612
2988964993635,1cyclictest0-21swapper/00
2989011993534,1cyclictest1474-21snmpd4
2989007993534,1cyclictest0-21swapper/113
2988993993534,1cyclictest0-21swapper/814
2989022993433,1cyclictest0-21swapper/157
2988982993432,1cyclictest1474-21snmpd11
2988975993433,1cyclictest0-21swapper/39
2989018993333,0cyclictest0-21swapper/146
298898899330,8cyclictest0-21swapper/713
2988978993328,3cyclictest0-21swapper/410
2989022993231,1cyclictest2766823-21kworker/15:1+events_freezable_pwr_efficient7
2989018993213,18cyclictest1474-21snmpd6
2989003993231,1cyclictest1474-21snmpd2
2988993993232,0cyclictest0-21swapper/814
2988982993212,19cyclictest1474-21snmpd11
2988982993210,3cyclictest0-21swapper/511
2988967993231,1cyclictest0-21swapper/11
2989015993131,0cyclictest0-21swapper/135
298901199316,24cyclictest0-21swapper/124
2988988993130,1cyclictest1474-21snmpd13
2988967993130,0cyclictest0-21swapper/11
2988986993016,14cyclictest0-21swapper/612
2989015992910,18cyclictest1474-21snmpd5
2989011992923,3cyclictest0-21swapper/124
2988998992923,3cyclictest0-21swapper/915
2988998992923,3cyclictest0-21swapper/915
2988993992923,3cyclictest0-21swapper/814
298898899295,0cyclictest0-21swapper/713
2988972992926,2cyclictest1474-21snmpd8
2989022992828,0cyclictest0-21swapper/157
298902299280,27cyclictest0-21swapper/157
298902299280,27cyclictest0-21swapper/157
298902299280,27cyclictest0-21swapper/157
298901599280,27cyclictest0-21swapper/135
2989011992827,1cyclictest2768047-21kworker/12:1+events_freezable4
2989011992827,1cyclictest0-21swapper/124
2989011992822,3cyclictest0-21swapper/124
298901199280,27cyclictest0-21swapper/124
298900399280,27cyclictest0-21swapper/102
2988993992828,0cyclictest0-21swapper/814
2988993992827,1cyclictest1474-21snmpd14
2988993992824,3cyclictest1474-21snmpd14
298899399280,27cyclictest0-21swapper/814
298899399280,27cyclictest0-21swapper/814
298899399280,27cyclictest0-21swapper/814
298898899284,24cyclictest0-21swapper/713
298898899284,0cyclictest0-21swapper/713
2988988992828,0cyclictest0-21swapper/713
298898899282,1cyclictest0-21swapper/713
298898899282,1cyclictest0-21swapper/713
298898899280,19cyclictest0-21swapper/713
2988982992828,0cyclictest0-21swapper/511
298898299280,27cyclictest0-21swapper/511
298897899280,27cyclictest0-21swapper/410
298897899280,27cyclictest0-21swapper/410
298897299280,27cyclictest0-21swapper/28
298897299280,27cyclictest0-21swapper/28
298897299280,27cyclictest0-21swapper/28
298897299280,27cyclictest0-21swapper/28
298896799280,27cyclictest0-21swapper/11
298896799280,27cyclictest0-21swapper/11
2988964992828,0cyclictest0-21swapper/00
298896499280,27cyclictest0-21swapper/00
298896499280,27cyclictest0-21swapper/00
2989022992726,1cyclictest1474-21snmpd7
2989022992726,1cyclictest1474-21snmpd7
2989022992726,1cyclictest1474-21snmpd7
2989022992726,1cyclictest1474-21snmpd7
2989022992726,1cyclictest0-21swapper/157
2989022992726,1cyclictest0-21swapper/157
2989018992726,1cyclictest1474-21snmpd6
2989018992726,1cyclictest1474-21snmpd6
2989007992726,1cyclictest1474-21snmpd3
2989007992726,1cyclictest1474-21snmpd3
2989003992726,1cyclictest1474-21snmpd2
2988998992726,1cyclictest1474-21snmpd15
2988998992726,1cyclictest0-21swapper/915
298899899270,27cyclictest0-21swapper/915
2988993992726,1cyclictest1474-21snmpd14
298898899273,24cyclictest0-21swapper/713
298898899273,24cyclictest0-21swapper/713
298898899273,24cyclictest0-21swapper/713
298898899273,24cyclictest0-21swapper/713
298898899273,24cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
298898899273,0cyclictest0-21swapper/713
2988988992727,0cyclictest0-21swapper/713
2988988992727,0cyclictest0-21swapper/713
2988988992726,1cyclictest1474-21snmpd13
2988988992726,1cyclictest0-21swapper/713
2988988992726,1cyclictest0-21swapper/713
298898899272,25cyclictest0-21swapper/713
2988986992726,1cyclictest1474-21snmpd12
298898699270,26cyclictest0-21swapper/612
298898699270,26cyclictest0-21swapper/612
298898699270,1cyclictest0-21swapper/612
298898699270,1cyclictest0-21swapper/612
298898699270,1cyclictest0-21swapper/612
2988982992726,1cyclictest1474-21snmpd11
2988982992726,1cyclictest0-21swapper/511
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
2988978992726,1cyclictest1474-21snmpd10
298897899270,21cyclictest0-21swapper/410
298897899270,1cyclictest0-21swapper/410
2988972992726,1cyclictest1474-21snmpd8
2988972992725,1cyclictest0-21swapper/28
298897299270,1cyclictest0-21swapper/28
298897299270,1cyclictest0-21swapper/28
298896499270,1cyclictest0-21swapper/00
2989018992625,1cyclictest1474-21snmpd6
2989015992626,0cyclictest0-21swapper/135
2989015992625,1cyclictest1474-21snmpd5
2989011992625,1cyclictest0-21swapper/124
298900399268,17cyclictest0-21swapper/102
2989003992626,0cyclictest0-21swapper/102
2989003992625,1cyclictest1474-21snmpd2
2988998992626,0cyclictest0-21swapper/915
2988998992626,0cyclictest0-21swapper/915
2988998992625,1cyclictest1474-21snmpd15
2988998992625,1cyclictest0-21swapper/915
298899899260,26cyclictest0-21swapper/915
298898899262,24cyclictest0-21swapper/713
298898899262,11cyclictest0-21swapper/713
298898899262,0cyclictest0-21swapper/713
298898899262,0cyclictest0-21swapper/713
298898899262,0cyclictest0-21swapper/713
298898899261,24cyclictest0-21swapper/713
2988986992625,1cyclictest1474-21snmpd12
2988986992625,1cyclictest1474-21snmpd12
2988986992625,1cyclictest0-21swapper/612
2988982992625,1cyclictest1474-21snmpd11
2988975992625,1cyclictest491rcuc/39
2988972992625,1cyclictest1474-21snmpd8
2988972992625,1cyclictest1474-21snmpd8
2988972992625,1cyclictest0-21swapper/28
2988967992625,0cyclictest0-21swapper/11
2988964992625,1cyclictest0-21swapper/00
2988964992625,1cyclictest0-21swapper/00
2989022992525,0cyclictest0-21swapper/157
2989022992525,0cyclictest0-21swapper/157
2989022992524,1cyclictest1474-21snmpd7
2989022992524,1cyclictest1474-21snmpd7
2989022992524,1cyclictest1474-21snmpd7
2989018992524,1cyclictest0-21swapper/146
2989011992524,1cyclictest1474-21snmpd4
2989011992524,1cyclictest1474-21snmpd4
2989007992524,1cyclictest0-21swapper/113
2989003992524,1cyclictest1474-21snmpd2
2989003992524,1cyclictest1474-21snmpd2
2988998992525,0cyclictest0-21swapper/915
2988998992524,1cyclictest1474-21snmpd15
2988998992524,1cyclictest1474-21snmpd15
2988998992523,1cyclictest1474-21snmpd15
298899399250,18cyclictest0-21swapper/814
298899399250,18cyclictest0-21swapper/814
2988988992524,1cyclictest0-21swapper/713
298898899251,0cyclictest0-21swapper/713
298898899251,0cyclictest0-21swapper/713
298898699250,19cyclictest0-21swapper/612
2988978992525,0cyclictest0-21swapper/410
2988972992524,1cyclictest0-21swapper/28
2988967992524,1cyclictest1474-21snmpd1
2988967992524,1cyclictest1474-21snmpd1
2988967992524,1cyclictest1474-21snmpd1
2988967992524,1cyclictest0-21swapper/11
2988967992524,1cyclictest0-21swapper/11
2988964992524,1cyclictest1474-21snmpd0
2989022992423,1cyclictest1474-21snmpd7
2989022992423,1cyclictest1474-21snmpd7
2989022992423,1cyclictest0-21swapper/157
2989018992423,1cyclictest1474-21snmpd6
2989018992423,1cyclictest1474-21snmpd6
2989015992423,1cyclictest1474-21snmpd5
2989015992423,1cyclictest0-21swapper/135
2989011992424,0cyclictest0-21swapper/124
2989011992423,1cyclictest1474-21snmpd4
2989011992423,1cyclictest1474-21snmpd4
2989011992423,1cyclictest0-21swapper/124
298901199240,3cyclictest0-21swapper/124
298901199240,3cyclictest0-21swapper/124
2989007992424,0cyclictest0-21swapper/113
2989007992423,1cyclictest1474-21snmpd3
2989003992424,0cyclictest0-21swapper/102
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992424,0cyclictest0-21swapper/915
2988998992423,1cyclictest0-21swapper/915
298899399240,18cyclictest0-21swapper/814
298898699248,16cyclictest0-21swapper/612
2988986992423,1cyclictest0-21swapper/612
2988986992423,1cyclictest0-21swapper/612
2988986992423,1cyclictest0-21swapper/612
2988982992423,1cyclictest0-21swapper/511
2988982992423,1cyclictest0-21swapper/511
2988982992416,6cyclictest0-21swapper/511
298898299240,19cyclictest0-21swapper/511
2988978992423,1cyclictest1474-21snmpd10
2988975992423,1cyclictest1474-21snmpd9
2988975992423,1cyclictest1474-21snmpd9
2988975992423,1cyclictest0-21swapper/39
2988972992423,1cyclictest1474-21snmpd8
2988972992423,1cyclictest1474-21snmpd8
2988967992423,1cyclictest1474-21snmpd1
2988967992423,1cyclictest0-21swapper/11
2988964992423,1cyclictest1474-21snmpd0
2989022992322,1cyclictest1474-21snmpd7
2989018992322,1cyclictest0-21swapper/146
2989018992322,1cyclictest0-21swapper/146
2989018992322,1cyclictest0-21swapper/146
2989015992323,0cyclictest0-21swapper/135
2989015992322,1cyclictest1474-21snmpd5
2989015992322,1cyclictest1474-21snmpd5
2989015992322,1cyclictest1474-21snmpd5
2989015992322,1cyclictest0-21swapper/135
2989015992322,1cyclictest0-21swapper/135
2989007992322,1cyclictest0-21swapper/113
2989003992322,1cyclictest0-21swapper/102
2988998992323,0cyclictest0-21swapper/915
2988998992323,0cyclictest0-21swapper/915
2988998992323,0cyclictest0-21swapper/915
2988998992323,0cyclictest0-21swapper/915
2988998992322,1cyclictest0-21swapper/915
298899399230,23cyclictest0-21swapper/814
298899399230,17cyclictest0-21swapper/814
2988988992322,1cyclictest1474-21snmpd13
2988986992322,1cyclictest0-21swapper/612
2988986992322,1cyclictest0-21swapper/612
2988982992323,0cyclictest0-21swapper/511
2988978992323,0cyclictest0-21swapper/410
2988978992322,1cyclictest1474-21snmpd10
2988978992322,1cyclictest1474-21snmpd10
2988975992322,1cyclictest1474-21snmpd9
2988972992323,0cyclictest0-21swapper/28
2988972992322,1cyclictest0-21swapper/28
2988964992322,1cyclictest0-21swapper/00
2989022992222,0cyclictest0-21swapper/157
2989022992221,1cyclictest1474-21snmpd7
2989022992221,1cyclictest0-21swapper/157
2989022992221,1cyclictest0-21swapper/157
2989018992222,0cyclictest0-21swapper/146
2989018992221,1cyclictest0-21swapper/146
2989018992221,1cyclictest0-21swapper/146
2989015992222,0cyclictest0-21swapper/135
2989015992221,1cyclictest0-21swapper/135
2989011992222,0cyclictest2768047-21kworker/12:1+events_freezable4
2989011992222,0cyclictest0-21swapper/124
2989011992221,1cyclictest1474-21snmpd4
2989011992221,1cyclictest0-21swapper/124
2989007992222,0cyclictest0-21swapper/113
2989007992221,1cyclictest1474-21snmpd3
2989007992221,1cyclictest0-21swapper/113
2989003992221,1cyclictest0-21swapper/102
2988998992222,0cyclictest0-21swapper/915
2988998992222,0cyclictest0-21swapper/915
2988998992222,0cyclictest0-21swapper/915
2988998992222,0cyclictest0-21swapper/915
2988993992221,1cyclictest1474-21snmpd14
2988993992221,1cyclictest0-21swapper/814
2988993992216,6cyclictest0-21swapper/814
2988993992216,6cyclictest0-21swapper/814
2988993992215,7cyclictest0-21swapper/814
2988988992221,1cyclictest1474-21snmpd13
2988988992221,1cyclictest1474-21snmpd13
298898899220,3cyclictest0-21swapper/713
2988986992222,0cyclictest0-21swapper/612
2988986992221,1cyclictest1474-21snmpd12
2988986992221,1cyclictest1474-21snmpd12
2988982992222,0cyclictest0-21swapper/511
2988978992221,1cyclictest0-21swapper/410
2988978992218,1cyclictest0-21swapper/410
2988975992221,1cyclictest1474-21snmpd9
2988972992222,0cyclictest0-21swapper/28
2988972992221,1cyclictest0-21swapper/28
2988967992222,0cyclictest0-21swapper/11
2988967992221,1cyclictest1474-21snmpd1
2988967992221,1cyclictest1474-21snmpd1
2988964992221,1cyclictest0-21swapper/00
2988964992217,3cyclictest0-21swapper/00
2989022992121,0cyclictest0-21swapper/157
298902299210,3cyclictest0-21swapper/157
298902299210,21cyclictest0-21swapper/157
298902299210,20cyclictest3181638-21/usr/sbin/munin7
2989018992121,0cyclictest0-21swapper/146
2989018992120,1cyclictest0-21swapper/146
2989018992116,2cyclictest0-21swapper/146
298901899210,20cyclictest2997615-21/usr/sbin/munin6
2989015992121,0cyclictest0-21swapper/135
2989015992120,1cyclictest1474-21snmpd5
2989015992117,3cyclictest3085218-21switchtime5
2989011992121,0cyclictest1474-21snmpd4
2989011992121,0cyclictest1474-21snmpd4
2989011992121,0cyclictest0-21swapper/124
2989011992121,0cyclictest0-21swapper/124
2989011992121,0cyclictest0-21swapper/124
2989011992115,3cyclictest0-21swapper/124
298901199210,3cyclictest0-21swapper/124
2989007992121,0cyclictest0-21swapper/113
2989007992120,1cyclictest1474-21snmpd3
2989007992120,1cyclictest1474-21snmpd3
2989007992120,1cyclictest1474-21snmpd3
2989003992120,1cyclictest1474-21snmpd2
2989003992120,1cyclictest0-21swapper/102
2988998992121,0cyclictest0-21swapper/915
2988998992121,0cyclictest0-21swapper/915
2988998992121,0cyclictest0-21swapper/915
2988998992121,0cyclictest0-21swapper/915
2988998992120,1cyclictest0-21swapper/915
2988998992120,1cyclictest0-21swapper/915
2988993992120,1cyclictest1474-21snmpd14
2988993992116,5cyclictest0-21swapper/814
2988993992115,6cyclictest0-21swapper/814
2988993992115,6cyclictest0-21swapper/814
2988986992117,3cyclictest3099972-21missed_timers12
2988986992117,3cyclictest3069537-21kernelversion12
298898699210,20cyclictest3350447-21proc_pri12
298898299212,2cyclictest1474-21snmpd11
298898299212,18cyclictest3088465-21cstates11
2988982992121,0cyclictest0-21swapper/511
2988982992121,0cyclictest0-21swapper/511
298898299210,18cyclictest0-21swapper/511
2988978992120,1cyclictest0-21swapper/410
2988975992121,0cyclictest0-21swapper/39
2988975992120,1cyclictest1474-21snmpd9
2988975992120,1cyclictest0-21swapper/39
2988975992120,1cyclictest0-21swapper/39
2988975992120,1cyclictest0-21swapper/39
2988972992121,0cyclictest0-21swapper/28
2988972992120,1cyclictest1474-21snmpd8
2988967992120,1cyclictest1474-21snmpd1
2988967992120,1cyclictest0-21swapper/11
2988964992121,0cyclictest0-21swapper/00
2988964992120,1cyclictest0-21swapper/00
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional