You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-23 - 00:14

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Tue Sep 22, 2026 00:45:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
29030002354311,33sleep130-21swapper/135
29028482345319,17sleep60-21swapper/612
29028722341315,17sleep100-21swapper/102
29029342340315,16sleep20-21swapper/28
29029272340314,17sleep120-21swapper/124
29029222340313,17sleep70-21swapper/713
29027832340316,15sleep30-21swapper/39
29027732340315,17sleep110-21swapper/113
29028142339313,17sleep90-21swapper/915
29027672339313,16sleep50-21swapper/511
29030672338312,17sleep80-21swapper/814
29030592337312,16sleep00-21swapper/00
29028662336311,16sleep40-21swapper/410
29027772334307,18sleep140-21swapper/146
29028942332307,16sleep150-21swapper/157
29029682329303,17sleep10-21swapper/11
2903440995013,24cyclictest0-21swapper/135
290344099470,22cyclictest0-21swapper/135
2903437994039,1cyclictest1612-21snmpd4
2903437994039,1cyclictest0-21swapper/124
2903394993938,1cyclictest0-21swapper/28
2903402993838,0cyclictest0-21swapper/410
2903397993736,1cyclictest1612-21snmpd9
2903449993636,0cyclictest0-21swapper/157
290344999360,30cyclictest0-21swapper/157
290344099360,23cyclictest0-21swapper/135
290344099350,22cyclictest0-21swapper/135
290344099350,22cyclictest0-21swapper/135
290344099350,22cyclictest0-21swapper/135
290344099350,22cyclictest0-21swapper/135
2903437993535,0cyclictest0-21swapper/124
2903429993517,17cyclictest0-21swapper/102
2903408993535,0cyclictest0-21swapper/612
2903440993410,11cyclictest0-21swapper/135
2903440993410,10cyclictest0-21swapper/135
2903421993434,0cyclictest0-21swapper/814
2903397993434,0cyclictest0-21swapper/39
2903449993333,0cyclictest0-21swapper/157
290344599330,33cyclictest0-21swapper/146
290344599330,33cyclictest0-21swapper/146
2903429993231,1cyclictest1612-21snmpd2
290342999320,32cyclictest0-21swapper/102
2903387993232,0cyclictest0-21swapper/00
2903387993226,3cyclictest0-21swapper/00
2903445993125,4cyclictest1501ktimers/146
290344099317,24cyclictest0-21swapper/135
290344099317,24cyclictest0-21swapper/135
2903429993131,0cyclictest0-21swapper/102
2903394993131,0cyclictest0-21swapper/28
2903421993030,0cyclictest0-21swapper/814
2903416993030,0cyclictest0-21swapper/713
290344099294,25cyclictest0-21swapper/135
2903432992929,0cyclictest0-21swapper/113
290342999290,0cyclictest0-21swapper/102
2903426992927,1cyclictest1612-21snmpd15
2903397992927,2cyclictest1612-21snmpd9
2903394992928,1cyclictest1612-21snmpd8
2903387992927,2cyclictest1612-21snmpd0
290344599280,27cyclictest0-21swapper/146
290344599280,27cyclictest0-21swapper/146
2903437992827,1cyclictest1612-21snmpd4
290343299280,27cyclictest0-21swapper/113
2903426992816,12cyclictest0-21swapper/915
290342699280,27cyclictest0-21swapper/915
290342699280,27cyclictest0-21swapper/915
290342699280,27cyclictest0-21swapper/915
290342199280,27cyclictest0-21swapper/814
290341699280,27cyclictest0-21swapper/713
290341699280,27cyclictest0-21swapper/713
290341699280,27cyclictest0-21swapper/713
290341699280,27cyclictest0-21swapper/713
290341699280,27cyclictest0-21swapper/713
290341699280,27cyclictest0-21swapper/713
2903406992827,1cyclictest0-21swapper/511
2903406992823,5cyclictest0-21swapper/511
290340699280,27cyclictest0-21swapper/511
2903402992827,1cyclictest1612-21snmpd10
2903397992828,0cyclictest0-21swapper/39
290339499280,27cyclictest0-21swapper/28
290339499280,27cyclictest0-21swapper/28
290339499280,27cyclictest0-21swapper/28
290339299280,27cyclictest0-21swapper/11
290339299280,27cyclictest0-21swapper/11
290339299280,27cyclictest0-21swapper/11
2903449992727,0cyclictest0-21swapper/157
2903449992726,1cyclictest1612-21snmpd7
290344999270,27cyclictest0-21swapper/157
290344999270,1cyclictest0-21swapper/157
290344599277,19cyclictest1501ktimers/146
2903445992726,1cyclictest1612-21snmpd6
2903445992726,1cyclictest0-21swapper/146
290344599270,1cyclictest0-21swapper/146
2903440992725,1cyclictest1612-21snmpd5
2903432992726,1cyclictest1612-21snmpd3
2903432992725,2cyclictest1612-21snmpd3
290343299270,27cyclictest0-21swapper/113
290343299270,27cyclictest0-21swapper/113
2903429992726,1cyclictest1612-21snmpd2
2903429992726,1cyclictest1612-21snmpd2
2903429992726,1cyclictest0-21swapper/102
290342999270,27cyclictest0-21swapper/102
290342999270,27cyclictest0-21swapper/102
290342999270,27cyclictest0-21swapper/102
290342999270,1cyclictest0-21swapper/102
2903426992726,1cyclictest1612-21snmpd15
290342699270,1cyclictest0-21swapper/915
2903421992726,1cyclictest1612-21snmpd14
290341699270,26cyclictest0-21swapper/713
2903408992726,1cyclictest1612-21snmpd12
2903408992726,1cyclictest1612-21snmpd12
290340899270,27cyclictest0-21swapper/612
290340899270,27cyclictest0-21swapper/612
290340899270,27cyclictest0-21swapper/612
290340899270,27cyclictest0-21swapper/612
2903406992727,0cyclictest0-21swapper/511
2903402992726,1cyclictest1612-21snmpd10
2903402992726,1cyclictest0-21swapper/410
290340299270,27cyclictest0-21swapper/410
2903397992726,1cyclictest1612-21snmpd9
2903397992726,1cyclictest1612-21snmpd9
2903397992726,1cyclictest1612-21snmpd9
290339799270,27cyclictest0-21swapper/39
290339799270,1cyclictest0-21swapper/39
2903394992726,1cyclictest1612-21snmpd8
2903394992726,1cyclictest1612-21snmpd8
2903394992726,1cyclictest1612-21snmpd8
2903394992726,1cyclictest1612-21snmpd8
2903394992726,1cyclictest0-21swapper/28
2903394992726,1cyclictest0-21swapper/28
2903394992726,1cyclictest0-21swapper/28
290339299270,1cyclictest0-21swapper/11
2903387992726,1cyclictest1612-21snmpd0
290338799270,27cyclictest0-21swapper/00
290338799270,27cyclictest0-21swapper/00
290338799270,1cyclictest0-21swapper/00
2903449992625,1cyclictest0-21swapper/157
290344999260,26cyclictest0-21swapper/157
290344599266,19cyclictest151-21ksoftirqd/146
2903445992625,1cyclictest1612-21snmpd6
2903445992619,6cyclictest0-21swapper/146
2903437992625,1cyclictest1612-21snmpd4
2903437992625,1cyclictest0-21swapper/124
2903437992625,1cyclictest0-21swapper/124
290343299265,3cyclictest0-21swapper/113
2903432992625,1cyclictest1612-21snmpd3
2903432992625,1cyclictest1612-21snmpd3
2903429992625,1cyclictest1612-21snmpd2
2903429992625,1cyclictest0-21swapper/102
2903426992625,1cyclictest0-21swapper/915
2903421992625,1cyclictest1612-21snmpd14
290342199260,19cyclictest0-21swapper/814
2903416992626,0cyclictest0-21swapper/713
290340899260,0cyclictest0-21swapper/612
2903406992626,0cyclictest0-21swapper/511
2903406992625,1cyclictest437113-21vhost-43710511
2903406992625,1cyclictest0-21swapper/511
2903406992625,1cyclictest0-21swapper/511
2903406992623,3cyclictest437113-21vhost-43710511
2903402992625,1cyclictest0-21swapper/410
2903392992624,1cyclictest1612-21snmpd1
290344599254,20cyclictest1501ktimers/146
290344599252,22cyclictest1501ktimers/146
290344599252,22cyclictest1501ktimers/146
290344599252,22cyclictest0-21swapper/146
2903445992519,6cyclictest1501ktimers/146
2903445992519,6cyclictest1501ktimers/146
2903445992519,6cyclictest1501ktimers/146
2903445992519,6cyclictest0-21swapper/146
2903445992518,7cyclictest1501ktimers/146
2903445992510,15cyclictest1501ktimers/146
2903437992525,0cyclictest0-21swapper/124
2903437992524,1cyclictest1612-21snmpd4
2903432992524,1cyclictest0-21swapper/113
2903432992524,1cyclictest0-21swapper/113
2903432992524,1cyclictest0-21swapper/113
2903432992523,2cyclictest1612-21snmpd3
2903426992524,1cyclictest1612-21snmpd15
2903426992524,1cyclictest0-21swapper/915
2903421992524,1cyclictest0-21swapper/814
2903416992525,0cyclictest0-21swapper/713
2903408992524,1cyclictest1612-21snmpd12
2903408992524,1cyclictest1612-21snmpd12
290340899250,25cyclictest0-21swapper/612
2903406992525,0cyclictest0-21swapper/511
2903406992524,1cyclictest1612-21snmpd11
2903406992523,1cyclictest1612-21snmpd11
2903402992524,1cyclictest1612-21snmpd10
2903397992524,1cyclictest1612-21snmpd9
2903397992524,1cyclictest0-21swapper/39
2903394992524,1cyclictest1612-21snmpd8
2903392992524,1cyclictest1612-21snmpd1
2903392992524,1cyclictest1612-21snmpd1
2903392992523,1cyclictest1612-21snmpd1
2903449992423,1cyclictest0-21swapper/157
2903449992423,1cyclictest0-21swapper/157
2903449992422,2cyclictest0-21swapper/157
2903445992423,1cyclictest0-21swapper/146
2903445992418,6cyclictest1501ktimers/146
2903445992418,6cyclictest1501ktimers/146
2903445992418,6cyclictest0-21swapper/146
2903445992418,6cyclictest0-21swapper/146
2903445992418,6cyclictest0-21swapper/146
2903440992410,14cyclictest0-21swapper/135
290344099240,11cyclictest0-21swapper/135
290344099240,11cyclictest0-21swapper/135
2903437992423,1cyclictest1612-21snmpd4
2903432992423,1cyclictest0-21swapper/113
2903429992423,1cyclictest1612-21snmpd2
2903429992423,1cyclictest1612-21snmpd2
2903429992423,1cyclictest0-21swapper/102
2903429992423,1cyclictest0-21swapper/102
2903429992423,1cyclictest0-21swapper/102
2903426992423,1cyclictest1612-21snmpd15
2903421992423,1cyclictest0-21swapper/814
2903421992423,1cyclictest0-21swapper/814
2903416992423,1cyclictest0-21swapper/713
2903408992423,1cyclictest1612-21snmpd12
2903408992423,1cyclictest0-21swapper/612
2903402992423,1cyclictest1612-21snmpd10
2903402992423,1cyclictest1612-21snmpd10
2903402992423,1cyclictest0-21swapper/410
2903397992423,1cyclictest1612-21snmpd9
2903397992423,1cyclictest1612-21snmpd9
2903397992423,1cyclictest1612-21snmpd9
2903397992423,1cyclictest0-21swapper/39
2903397992422,1cyclictest1612-21snmpd9
2903394992424,0cyclictest0-21swapper/28
2903394992423,1cyclictest0-21swapper/28
2903394992423,1cyclictest0-21swapper/28
2903394992422,1cyclictest1612-21snmpd8
2903394992421,2cyclictest437118-21CPU8
2903392992423,1cyclictest1612-21snmpd1
2903392992423,1cyclictest1612-21snmpd1
2903392992423,1cyclictest0-21swapper/11
2903392992422,2cyclictest0-21swapper/11
2903387992424,0cyclictest0-21swapper/00
2903387992423,1cyclictest0-21swapper/00
2903445992323,0cyclictest0-21swapper/146
290344599232,20cyclictest1501ktimers/146
2903445992322,0cyclictest0-21swapper/146
2903445992317,6cyclictest0-21swapper/146
2903445992317,6cyclictest0-21swapper/146
2903440992322,1cyclictest1612-21snmpd5
2903440992310,13cyclictest0-21swapper/135
2903440992310,13cyclictest0-21swapper/135
2903440992310,13cyclictest0-21swapper/135
2903437992322,1cyclictest1612-21snmpd4
2903437992322,1cyclictest0-21swapper/124
2903432992322,1cyclictest0-21swapper/113
2903429992322,1cyclictest1612-21snmpd2
2903429992322,1cyclictest1612-21snmpd2
2903429992322,1cyclictest0-21swapper/102
2903429992322,1cyclictest0-21swapper/102
2903426992322,1cyclictest1612-21snmpd15
2903426992322,1cyclictest0-21swapper/915
2903408992322,1cyclictest1612-21snmpd12
2903408992322,1cyclictest1612-21snmpd12
2903408992322,1cyclictest0-21swapper/612
2903406992323,0cyclictest0-21swapper/511
2903406992323,0cyclictest0-21swapper/511
2903406992323,0cyclictest0-21swapper/511
2903406992323,0cyclictest0-21swapper/511
2903406992322,1cyclictest3039455-21kworker/u64:2+kvfree_rcu_reclaim11
2903406992322,1cyclictest0-21swapper/511
2903402992322,1cyclictest1612-21snmpd10
2903397992322,1cyclictest1612-21snmpd9
2903397992322,1cyclictest0-21swapper/39
2903397992322,1cyclictest0-21swapper/39
2903394992322,1cyclictest1612-21snmpd8
2903394992322,1cyclictest0-21swapper/28
2903394992322,1cyclictest0-21swapper/28
2903392992323,0cyclictest0-21swapper/11
2903392992322,1cyclictest1612-21snmpd1
2903392992322,1cyclictest0-21swapper/11
2903392992314,9cyclictest0-21swapper/11
2903387992322,1cyclictest1612-21snmpd0
2903387992322,1cyclictest0-21swapper/00
2903387992322,1cyclictest0-21swapper/00
2903387992322,1cyclictest0-21swapper/00
290344999222,3cyclictest1612-21snmpd7
2903449992221,1cyclictest1612-21snmpd7
2903449992221,1cyclictest1612-21snmpd7
2903445992221,1cyclictest2836710-21kworker/14:2+mm_percpu_wq6
2903445992221,1cyclictest0-21swapper/146
2903445992221,1cyclictest0-21swapper/146
2903445992218,4cyclictest1501ktimers/146
2903445992217,4cyclictest1501ktimers/146
290344599220,4cyclictest0-21swapper/146
290344099221,20cyclictest1612-21snmpd5
2903437992222,0cyclictest0-21swapper/124
2903437992222,0cyclictest0-21swapper/124
2903437992221,1cyclictest1612-21snmpd4
2903437992221,1cyclictest1387-21lldpd4
2903432992221,1cyclictest1612-21snmpd3
2903432992221,1cyclictest0-21swapper/113
2903429992222,0cyclictest0-21swapper/102
2903429992222,0cyclictest0-21swapper/102
2903429992221,1cyclictest1612-21snmpd2
290342699222,3cyclictest0-21swapper/915
2903426992221,1cyclictest1612-21snmpd15
2903421992221,1cyclictest1612-21snmpd14
2903416992221,1cyclictest1612-21snmpd13
2903416992221,1cyclictest1612-21snmpd13
2903416992221,1cyclictest1612-21snmpd13
290341699221,20cyclictest1612-21snmpd13
2903408992222,0cyclictest0-21swapper/612
2903406992222,0cyclictest0-21swapper/511
2903406992222,0cyclictest0-21swapper/511
2903406992222,0cyclictest0-21swapper/511
2903406992220,1cyclictest1612-21snmpd11
290340699220,3cyclictest3305091-21tune2fs11
2903402992222,0cyclictest0-21swapper/410
2903402992221,1cyclictest0-21swapper/410
2903397992221,1cyclictest1612-21snmpd9
2903397992221,1cyclictest0-21swapper/39
2903397992221,1cyclictest0-21swapper/39
2903394992221,1cyclictest0-21swapper/28
2903394992214,7cyclictest437126-21CPU8
2903392992222,0cyclictest0-21swapper/11
2903392992221,1cyclictest1612-21snmpd1
2903392992221,1cyclictest1612-21snmpd1
2903392992221,1cyclictest1612-21snmpd1
2903392992221,1cyclictest1612-21snmpd1
2903392992221,1cyclictest0-21swapper/11
2903387992221,1cyclictest1612-21snmpd0
2903387992221,1cyclictest1612-21snmpd0
2903449992120,1cyclictest0-21swapper/157
290344999210,17cyclictest0-21swapper/157
2903445992120,1cyclictest1501ktimers/146
2903445992120,1cyclictest0-21swapper/146
2903445992120,1cyclictest0-21swapper/146
2903445992117,4cyclictest1501ktimers/146
2903445992117,4cyclictest1501ktimers/146
2903445992117,4cyclictest1501ktimers/146
2903445992115,6cyclictest1501ktimers/146
2903445992115,6cyclictest1501ktimers/146
2903445992115,6cyclictest1501ktimers/146
2903445992112,6cyclictest1501ktimers/146
290344599211,17cyclictest1501ktimers/146
2903440992110,11cyclictest0-21swapper/135
2903440992110,11cyclictest0-21swapper/135
2903437992120,1cyclictest1612-21snmpd4
2903437992120,1cyclictest1612-21snmpd4
2903437992120,1cyclictest1612-21snmpd4
2903437992120,1cyclictest0-21swapper/124
2903437992120,1cyclictest0-21swapper/124
2903432992120,1cyclictest1612-21snmpd3
2903432992120,1cyclictest1612-21snmpd3
2903432992120,1cyclictest0-21swapper/113
2903432992120,1cyclictest0-21swapper/113
2903432992120,1cyclictest0-21swapper/113
2903432992120,1cyclictest0-21swapper/113
2903429992120,1cyclictest1612-21snmpd2
2903429992120,1cyclictest1612-21snmpd2
2903429992120,1cyclictest1612-21snmpd2
2903426992121,0cyclictest0-21swapper/915
2903426992120,1cyclictest0-21swapper/915
2903421992120,1cyclictest1612-21snmpd14
2903421992120,1cyclictest1612-21snmpd14
2903421992120,1cyclictest0-21swapper/814
2903421992120,1cyclictest0-21swapper/814
2903416992121,0cyclictest0-21swapper/713
290341699210,20cyclictest3186067-21/usr/sbin/munin13
290341699210,20cyclictest1283-21runrttasks13
290340899213,18cyclictest2571051-21kworker/6:3+events12
2903408992120,1cyclictest1612-21snmpd12
2903408992120,1cyclictest0-21swapper/612
290340899210,21cyclictest0-21swapper/612
2903406992120,1cyclictest0-21swapper/511
290340699210,21cyclictest0-21swapper/511
290340699210,20cyclictest2906715-31munin-html11
290340699210,1cyclictest437113-21vhost-43710511
2903402992121,0cyclictest0-21swapper/410
2903402992118,3cyclictest516-21plymouthd10
2903397992121,0cyclictest0-21swapper/39
2903397992121,0cyclictest0-21swapper/39
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional