You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-04 - 17:23

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Sat Apr 04, 2026 00:45:27)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
13922512353307,15sleep80-21swapper/814
13922512353307,15sleep80-21swapper/814
13923592352307,16sleep70-21swapper/713
13923592352307,16sleep70-21swapper/713
13923002349323,17sleep30-21swapper/39
13923002349323,17sleep30-21swapper/39
13924352347321,16sleep90-21swapper/915
13924352347321,16sleep90-21swapper/915
13923092344319,16sleep120-21swapper/124
13923092344319,16sleep120-21swapper/124
13923972342316,17sleep100-21swapper/102
13923972342316,17sleep100-21swapper/102
13923202341315,17sleep60-21swapper/612
13923202341315,17sleep60-21swapper/612
13923892340314,17sleep20-21swapper/28
13923892340314,17sleep20-21swapper/28
13923182340315,16sleep40-21swapper/410
13923182340315,16sleep40-21swapper/410
13921652339313,17sleep10-21swapper/11
13921652339313,17sleep10-21swapper/11
13924092338312,17sleep50-21swapper/511
13924092338312,17sleep50-21swapper/511
13923112338312,17sleep140-21swapper/146
13923112338312,17sleep140-21swapper/146
13923672337311,17sleep150-21swapper/157
13923672337311,17sleep150-21swapper/157
13922212337310,18sleep130-21swapper/135
13922212337310,18sleep130-21swapper/135
13924552336312,16sleep110-21swapper/113
13924552336312,16sleep110-21swapper/113
13924262331306,16sleep00-21swapper/00
13924262331306,16sleep00-21swapper/00
139285699435,25cyclictest0-21swapper/157
1392812994342,1cyclictest1608-21snmpd10
139285699426,25cyclictest0-21swapper/157
1392820994241,1cyclictest1608-21snmpd12
139285699415,25cyclictest0-21swapper/157
1392847993938,0cyclictest0-21swapper/135
1392812993939,0cyclictest0-21swapper/410
1392802993938,1cyclictest1608-21snmpd8
1392827993736,1cyclictest1335294-21kworker/8:0+mm_percpu_wq14
1392816993737,0cyclictest0-21swapper/511
1392807993735,1cyclictest1608-21snmpd9
1392842993416,1cyclictest1608-21snmpd4
1392856993333,0cyclictest0-21swapper/157
1392793993332,1cyclictest0-21swapper/00
139285699306,11cyclictest0-21swapper/157
139285699306,11cyclictest0-21swapper/157
1392840993026,3cyclictest1608-21snmpd3
1392816993030,0cyclictest0-21swapper/511
139285699295,11cyclictest0-21swapper/157
1392830992929,0cyclictest0-21swapper/915
1392830992929,0cyclictest0-21swapper/915
139283099290,29cyclictest0-21swapper/915
139281699290,23cyclictest0-21swapper/511
1392796992926,2cyclictest1608-21snmpd1
139279699290,1cyclictest0-21swapper/11
139285199280,27cyclictest0-21swapper/146
139284799280,27cyclictest0-21swapper/135
1392836992826,1cyclictest1608-21snmpd2
1392836992826,1cyclictest1608-21snmpd2
1392830992827,1cyclictest1608-21snmpd15
1392830992827,1cyclictest1608-21snmpd15
1392830992827,1cyclictest1608-21snmpd15
1392816992827,1cyclictest1608-21snmpd11
1392816992827,1cyclictest1608-21snmpd11
139280299280,27cyclictest0-21swapper/28
139280299280,21cyclictest0-21swapper/28
1392796992825,3cyclictest1608-21snmpd1
1392793992826,2cyclictest1608-21snmpd0
139279399280,27cyclictest0-21swapper/00
139279399280,27cyclictest0-21swapper/00
1392856992727,0cyclictest0-21swapper/157
1392856992726,1cyclictest1608-21snmpd7
139285699270,27cyclictest0-21swapper/157
139285699270,1cyclictest0-21swapper/157
139285699270,1cyclictest0-21swapper/157
1392851992726,0cyclictest0-21swapper/146
1392842992726,1cyclictest0-21swapper/124
1392842992726,1cyclictest0-21swapper/124
139284299270,27cyclictest0-21swapper/124
139284299270,1cyclictest0-21swapper/124
1392840992726,1cyclictest1608-21snmpd3
1392840992726,1cyclictest1608-21snmpd3
139284099270,27cyclictest0-21swapper/113
139284099270,27cyclictest0-21swapper/113
1392836992727,0cyclictest0-21swapper/102
1392836992726,1cyclictest1608-21snmpd2
139283699270,27cyclictest0-21swapper/102
139283699270,1cyclictest0-21swapper/102
1392830992726,1cyclictest1608-21snmpd15
1392830992726,1cyclictest1608-21snmpd15
1392830992726,1cyclictest0-21swapper/915
1392830992725,2cyclictest1608-21snmpd15
139283099270,27cyclictest0-21swapper/915
1392827992726,1cyclictest1608-21snmpd14
139282799270,26cyclictest0-21swapper/814
139282799270,1cyclictest0-21swapper/814
1392825992727,0cyclictest1392424-21kworker/7:1+events_freezable_pwr_efficient13
139282599270,27cyclictest0-21swapper/713
1392820992727,0cyclictest0-21swapper/612
1392820992726,1cyclictest1608-21snmpd12
139282099270,27cyclictest0-21swapper/612
139282099270,27cyclictest0-21swapper/612
139282099270,1cyclictest0-21swapper/612
1392816992726,1cyclictest1608-21snmpd11
139281699270,27cyclictest0-21swapper/511
1392812992726,1cyclictest1608-21snmpd10
139280799270,1cyclictest0-21swapper/39
1392802992726,1cyclictest0-21swapper/28
139280299270,27cyclictest0-21swapper/28
139279699270,1cyclictest0-21swapper/11
1392793992726,1cyclictest1608-21snmpd0
1392793992726,1cyclictest1608-21snmpd0
1392793992719,6cyclictest0-21swapper/00
1392851992626,0cyclictest0-21swapper/146
1392851992625,1cyclictest1608-21snmpd6
1392851992625,1cyclictest1608-21snmpd6
1392851992625,1cyclictest1608-21snmpd6
1392842992625,1cyclictest1608-21snmpd4
1392842992625,1cyclictest1608-21snmpd4
1392836992625,1cyclictest1608-21snmpd2
1392836992625,1cyclictest1608-21snmpd2
1392830992625,1cyclictest1608-21snmpd15
139282799260,25cyclictest0-21swapper/814
139282799260,0cyclictest0-21swapper/814
139282799260,0cyclictest0-21swapper/814
1392825992625,1cyclictest1608-21snmpd13
1392825992625,1cyclictest0-21swapper/713
1392825992625,1cyclictest0-21swapper/713
1392820992625,1cyclictest1608-21snmpd12
1392820992625,1cyclictest1608-21snmpd12
1392820992624,2cyclictest1608-21snmpd12
1392816992625,1cyclictest1608-21snmpd11
1392812992625,1cyclictest0-21swapper/410
1392807992625,1cyclictest1608-21snmpd9
1392807992625,1cyclictest1608-21snmpd9
1392807992625,1cyclictest1608-21snmpd9
1392807992625,1cyclictest0-21swapper/39
1392802992625,1cyclictest1608-21snmpd8
1392802992625,1cyclictest1608-21snmpd8
1392796992625,1cyclictest1608-21snmpd1
1392796992625,1cyclictest0-21swapper/11
1392796992624,2cyclictest0-21swapper/11
1392796992622,4cyclictest1608-21snmpd1
1392793992626,0cyclictest0-21swapper/00
1392793992626,0cyclictest0-21swapper/00
1392793992625,1cyclictest0-21swapper/00
1392851992525,0cyclictest0-21swapper/146
1392842992525,0cyclictest0-21swapper/124
1392842992524,1cyclictest0-21swapper/124
1392840992524,1cyclictest1608-21snmpd3
1392836992523,1cyclictest1608-21snmpd2
1392830992524,1cyclictest1608-21snmpd15
1392830992524,1cyclictest1608-21snmpd15
1392827992525,0cyclictest0-21swapper/814
1392827992524,1cyclictest1608-21snmpd14
1392825992524,1cyclictest1608-21snmpd13
1392820992525,0cyclictest0-21swapper/612
1392812992524,1cyclictest1608-21snmpd10
1392812992524,1cyclictest1608-21snmpd10
1392812992524,1cyclictest1608-21snmpd10
1392807992523,2cyclictest0-21swapper/39
139280799250,0cyclictest0-21swapper/39
1392802992524,1cyclictest1608-21snmpd8
1392802992524,1cyclictest0-21swapper/28
1392802992517,6cyclictest0-21swapper/28
139280299250,18cyclictest0-21swapper/28
139280299250,18cyclictest0-21swapper/28
1392796992522,3cyclictest1608-21snmpd1
1392793992524,1cyclictest1608-21snmpd0
1392856992424,0cyclictest0-21swapper/157
1392856992424,0cyclictest0-21swapper/157
1392856992423,1cyclictest1608-21snmpd7
1392856992423,1cyclictest1608-21snmpd7
1392856992423,1cyclictest1608-21snmpd7
139285699240,18cyclictest0-21swapper/157
139285699240,18cyclictest0-21swapper/157
1392851992423,1cyclictest1608-21snmpd6
1392851992423,1cyclictest0-21swapper/146
1392847992423,1cyclictest1608-21snmpd5
1392847992423,1cyclictest0-21swapper/135
1392842992423,1cyclictest1608-21snmpd4
1392842992423,1cyclictest0-21swapper/124
1392840992423,1cyclictest1608-21snmpd3
1392840992423,1cyclictest1608-21snmpd3
139284099240,24cyclictest0-21swapper/113
1392836992423,1cyclictest0-21swapper/102
1392836992423,1cyclictest0-21swapper/102
1392830992423,1cyclictest1608-21snmpd15
1392830992423,1cyclictest0-21swapper/915
1392830992423,1cyclictest0-21swapper/915
1392827992424,0cyclictest0-21swapper/814
1392827992424,0cyclictest0-21swapper/814
1392827992424,0cyclictest0-21swapper/814
1392827992424,0cyclictest0-21swapper/814
1392827992423,1cyclictest1608-21snmpd14
1392825992423,1cyclictest1608-21snmpd13
1392825992422,2cyclictest1608-21snmpd13
139282599240,24cyclictest0-21swapper/713
1392820992423,1cyclictest1608-21snmpd12
1392820992423,1cyclictest0-21swapper/612
1392812992423,1cyclictest1608-21snmpd10
1392812992423,1cyclictest0-21swapper/410
1392807992423,1cyclictest1608-21snmpd9
1392807992423,1cyclictest0-21swapper/39
1392807992423,1cyclictest0-21swapper/39
139280799240,18cyclictest0-21swapper/39
1392802992423,1cyclictest0-21swapper/28
1392802992423,1cyclictest0-21swapper/28
139280299240,18cyclictest0-21swapper/28
139279699240,24cyclictest0-21swapper/11
1392793992424,0cyclictest0-21swapper/00
1392793992423,1cyclictest0-21swapper/00
139285699239,14cyclictest0-21swapper/157
1392856992322,1cyclictest1608-21snmpd7
1392856992322,1cyclictest0-21swapper/157
1392856992322,1cyclictest0-21swapper/157
1392851992322,1cyclictest0-21swapper/146
1392847992322,1cyclictest0-21swapper/135
1392847992322,1cyclictest0-21swapper/135
1392842992323,0cyclictest0-21swapper/124
1392842992322,1cyclictest1608-21snmpd4
1392842992322,1cyclictest0-21swapper/124
1392842992322,1cyclictest0-21swapper/124
1392842992322,1cyclictest0-21swapper/124
1392842992322,1cyclictest0-21swapper/124
1392840992322,1cyclictest0-21swapper/113
1392836992322,1cyclictest1608-21snmpd2
1392836992322,1cyclictest1608-21snmpd2
1392836992322,1cyclictest1608-21snmpd2
1392836992322,1cyclictest0-21swapper/102
1392836992322,1cyclictest0-21swapper/102
1392836992322,1cyclictest0-21swapper/102
1392836992321,1cyclictest1608-21snmpd2
1392830992322,1cyclictest0-21swapper/915
1392830992321,2cyclictest1608-21snmpd15
1392827992323,0cyclictest0-21swapper/814
1392827992322,1cyclictest0-21swapper/814
1392827992322,1cyclictest0-21swapper/814
139282799230,23cyclictest0-21swapper/814
139282799230,1cyclictest0-21swapper/814
1392825992322,1cyclictest1608-21snmpd13
1392825992322,1cyclictest0-21swapper/713
139282099234,13cyclictest0-21swapper/612
1392820992322,1cyclictest1608-21snmpd12
1392816992322,1cyclictest0-21swapper/511
139281699230,23cyclictest0-21swapper/511
1392812992322,1cyclictest1608-21snmpd10
1392812992322,1cyclictest0-21swapper/410
1392812992322,1cyclictest0-21swapper/410
1392807992323,0cyclictest0-21swapper/39
139280799232,20cyclictest1791128-21/usr/share/muni9
1392802992322,1cyclictest0-21swapper/28
1392796992322,1cyclictest1608-21snmpd1
1392796992322,1cyclictest0-21swapper/11
1392796992322,1cyclictest0-21swapper/11
1392796992316,7cyclictest0-21swapper/11
1392796992315,0cyclictest0-21swapper/11
139279699230,23cyclictest0-21swapper/11
1392793992322,1cyclictest0-21swapper/00
1392793992320,2cyclictest1608-21snmpd0
1392856992221,1cyclictest1608-21snmpd7
1392856992221,1cyclictest0-21swapper/157
1392851992221,1cyclictest1608-21snmpd6
1392851992221,1cyclictest0-21swapper/146
1392847992221,1cyclictest0-21swapper/135
1392847992221,1cyclictest0-21swapper/135
1392842992221,1cyclictest0-21swapper/124
1392840992221,1cyclictest1608-21snmpd3
1392840992221,1cyclictest0-21swapper/113
139284099220,22cyclictest0-21swapper/113
1392836992221,1cyclictest1608-21snmpd2
139283699220,22cyclictest0-21swapper/102
139282799223,18cyclictest1608-21snmpd14
1392827992222,0cyclictest0-21swapper/814
1392827992221,1cyclictest1608-21snmpd14
1392827992221,1cyclictest1608-21snmpd14
1392827992213,6cyclictest0-21swapper/814
1392825992221,1cyclictest1608-21snmpd13
1392825992221,1cyclictest1608-21snmpd13
1392825992221,1cyclictest0-21swapper/713
1392820992221,1cyclictest1608-21snmpd12
1392812992221,1cyclictest1608-21snmpd10
1392807992221,1cyclictest1608-21snmpd9
1392807992221,1cyclictest1608-21snmpd9
1392807992221,1cyclictest1608-21snmpd9
1392807992215,7cyclictest0-21swapper/39
1392802992221,1cyclictest0-21swapper/28
1392802992216,5cyclictest0-21swapper/28
1392796992222,0cyclictest0-21swapper/11
1392796992221,1cyclictest1608-21snmpd1
139279699220,0cyclictest0-21swapper/11
1392793992221,1cyclictest0-21swapper/00
1392793992220,2cyclictest1608-21snmpd0
1392856992120,1cyclictest0-21swapper/157
1392856992120,1cyclictest0-21swapper/157
139285199212,18cyclictest1608-21snmpd6
139285199212,18cyclictest1608-21snmpd6
1392851992121,0cyclictest0-21swapper/146
1392851992120,1cyclictest0-21swapper/146
139285199211,20cyclictest1608-21snmpd6
1392842992120,1cyclictest1608-21snmpd4
1392842992120,1cyclictest0-21swapper/124
1392840992120,1cyclictest1608-21snmpd3
1392840992116,3cyclictest0-21swapper/113
139284099210,3cyclictest0-21swapper/113
1392836992120,1cyclictest1608-21snmpd2
1392830992120,1cyclictest1608-21snmpd15
1392827992120,1cyclictest1608-21snmpd14
139282799210,21cyclictest0-21swapper/814
139282799210,0cyclictest0-21swapper/814
1392825992120,1cyclictest1608-21snmpd13
1392820992120,1cyclictest0-21swapper/612
1392820992120,1cyclictest0-21swapper/612
1392816992121,0cyclictest0-21swapper/511
1392816992120,1cyclictest1608-21snmpd11
1392816992120,1cyclictest1608-21snmpd11
139281699210,20cyclictest1804134-21/usr/sbin/munin11
1392812992120,1cyclictest1608-21snmpd10
1392807992121,0cyclictest0-21swapper/39
1392807992120,1cyclictest0-21swapper/39
1392802992115,6cyclictest0-21swapper/28
139280299210,3cyclictest0-21swapper/28
139280299210,3cyclictest0-21swapper/28
1392796992120,1cyclictest1608-21snmpd1
1392796992115,6cyclictest0-21swapper/11
1392796992115,0cyclictest0-21swapper/11
1392796992115,0cyclictest0-21swapper/11
139279699210,18cyclictest0-21swapper/11
139279699210,16cyclictest0-21swapper/11
139279699210,0cyclictest0-21swapper/11
1392793992120,1cyclictest1608-21snmpd0
1392793992120,1cyclictest1608-21snmpd0
139279399210,4cyclictest0-21swapper/00
1392856992019,1cyclictest1608-21snmpd7
1392856992017,3cyclictest1796875-21taskset7
139285699200,3cyclictest1442474-21/usr/sbin/munin7
139285199200,18cyclictest0-21swapper/146
1392847992020,0cyclictest0-21swapper/135
1392847992019,1cyclictest1608-21snmpd5
1392842992020,0cyclictest0-21swapper/124
139284299201,19cyclictest1608-21snmpd4
1392840992020,0cyclictest0-21swapper/113
1392840992020,0cyclictest0-21swapper/113
1392840992019,1cyclictest0-21swapper/113
139284099200,20cyclictest1400248-21cut3
1392836992020,0cyclictest0-21swapper/102
1392836992019,1cyclictest1608-21snmpd2
1392827992019,1cyclictest0-21swapper/814
1392827992019,1cyclictest0-21swapper/814
1392825992019,1cyclictest1608-21snmpd13
139282599201,19cyclictest1402718-21cpuspeed_turbos13
139282599200,20cyclictest1777352-21taskset13
139282599200,18cyclictest0-21swapper/713
1392820992019,1cyclictest0-21swapper/612
1392820992019,1cyclictest0-21swapper/612
1392820992019,1cyclictest0-21swapper/612
1392820992019,1cyclictest0-21swapper/612
1392820992019,1cyclictest0-21swapper/612
1392820992017,3cyclictest1600634-21/usr/sbin/munin12
139282099200,3cyclictest1770624-21runrttasks12
139282099200,3cyclictest1508603-21/usr/sbin/munin12
1392816992020,0cyclictest0-21swapper/511
139281699200,2cyclictest1420159-21/usr/sbin/munin11
139281299200,20cyclictest0-21swapper/410
139281299200,1cyclictest0-21swapper/410
1392802992019,1cyclictest0-21swapper/28
1392802992012,6cyclictest0-21swapper/28
1392796992016,4cyclictest0-21swapper/11
1392796992016,3cyclictest0-21swapper/11
1392796992015,0cyclictest0-21swapper/11
1392796992015,0cyclictest0-21swapper/11
139279699200,19cyclictest0-21swapper/11
139279699200,18cyclictest0-21swapper/11
139279699200,18cyclictest0-21swapper/11
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional