You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-05 - 20:58

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Wed Aug 05, 2026 00:45:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
34328712393367,17sleep60-21swapper/612
34314982378353,16sleep40-21swapper/410
34329152359314,16sleep140-21swapper/146
34329642351308,33sleep90-21swapper/915
34328232351325,17sleep100-21swapper/102
34327882346320,17sleep130-21swapper/135
34328762342317,16sleep110-21swapper/113
34329212341319,14sleep30-21swapper/39
34328012341317,15sleep70-21swapper/713
34327582340332,5sleep10-21swapper/11
34328302339316,14sleep00-21swapper/00
34328022339314,16sleep80-21swapper/814
34327912339312,17sleep150-21swapper/157
34329302337312,16sleep120-21swapper/124
34328352336311,16sleep50-21swapper/511
34327592336311,16sleep20-21swapper/28
343338599380,25cyclictest0-21swapper/135
343333899310,30cyclictest0-21swapper/28
343333899310,27cyclictest0-21swapper/28
3433338993027,3cyclictest1612-21snmpd8
343338599294,14cyclictest0-21swapper/135
343338599294,14cyclictest0-21swapper/135
343337699294,14cyclictest0-21swapper/113
3433338992925,3cyclictest0-21swapper/28
3433393992826,2cyclictest1612-21snmpd7
3433393992826,2cyclictest1612-21snmpd7
343339399280,27cyclictest0-21swapper/157
343339399280,27cyclictest0-21swapper/157
3433389992826,2cyclictest1612-21snmpd6
343338999280,2cyclictest0-21swapper/146
343338999280,27cyclictest0-21swapper/146
343338599284,13cyclictest0-21swapper/135
3433385992827,1cyclictest0-21swapper/135
3433382992827,1cyclictest1612-21snmpd4
343338299280,27cyclictest0-21swapper/124
343338299280,27cyclictest0-21swapper/124
343338299280,27cyclictest0-21swapper/124
343337699280,27cyclictest0-21swapper/113
3433371992827,1cyclictest1612-21snmpd2
343336699280,27cyclictest0-21swapper/915
343336699280,27cyclictest0-21swapper/915
3433353992826,1cyclictest1612-21snmpd12
343335399280,27cyclictest0-21swapper/612
3433351992827,1cyclictest1612-21snmpd11
343335199280,27cyclictest0-21swapper/511
343335199280,1cyclictest0-21swapper/511
3433342992826,2cyclictest1612-21snmpd9
343333399280,27cyclictest0-21swapper/11
3433393992726,1cyclictest0-21swapper/157
343339399270,27cyclictest0-21swapper/157
3433389992726,1cyclictest1612-21snmpd6
3433389992726,1cyclictest1612-21snmpd6
3433389992725,2cyclictest1612-21snmpd6
343338999270,27cyclictest0-21swapper/146
343338999270,27cyclictest0-21swapper/146
343338999270,27cyclictest0-21swapper/146
343338999270,27cyclictest0-21swapper/146
343338999270,1cyclictest0-21swapper/146
343338599274,13cyclictest0-21swapper/135
3433385992726,1cyclictest1612-21snmpd5
3433382992726,1cyclictest1612-21snmpd4
3433382992726,1cyclictest1612-21snmpd4
3433382992726,1cyclictest0-21swapper/124
3433376992726,1cyclictest0-21swapper/113
3433376992726,1cyclictest0-21swapper/113
3433376992725,1cyclictest1612-21snmpd3
3433371992726,1cyclictest1612-21snmpd2
343337199270,27cyclictest0-21swapper/102
343337199270,27cyclictest0-21swapper/102
343337199270,27cyclictest0-21swapper/102
343337199270,27cyclictest0-21swapper/102
3433366992726,1cyclictest1612-21snmpd15
3433366992726,1cyclictest1612-21snmpd15
343336699270,1cyclictest0-21swapper/915
343336699270,1cyclictest0-21swapper/915
343336699270,1cyclictest0-21swapper/915
343336699270,1cyclictest0-21swapper/915
343335799270,27cyclictest0-21swapper/713
343335799270,27cyclictest0-21swapper/713
343335799270,1cyclictest0-21swapper/713
343335399270,27cyclictest0-21swapper/612
343335399270,1cyclictest0-21swapper/612
343335399270,1cyclictest0-21swapper/612
343335199270,26cyclictest0-21swapper/511
3433346992726,1cyclictest1612-21snmpd10
3433346992726,1cyclictest1612-21snmpd10
343334699270,27cyclictest0-21swapper/410
343334699270,27cyclictest0-21swapper/410
343334699270,27cyclictest0-21swapper/410
343334699270,27cyclictest0-21swapper/410
343334699270,1cyclictest0-21swapper/410
343334699270,1cyclictest0-21swapper/410
3433342992726,1cyclictest1612-21snmpd9
343334299270,27cyclictest0-21swapper/39
3433338992726,1cyclictest1612-21snmpd8
3433338992723,3cyclictest1612-21snmpd8
3433333992726,1cyclictest1612-21snmpd1
3433333992726,1cyclictest1612-21snmpd1
343333399270,27cyclictest0-21swapper/11
343333399270,27cyclictest0-21swapper/11
343333399270,27cyclictest0-21swapper/11
343333399270,27cyclictest0-21swapper/11
3433326992726,1cyclictest1612-21snmpd0
3433326992725,1cyclictest1612-21snmpd0
3433393992625,1cyclictest1612-21snmpd7
3433389992625,1cyclictest1612-21snmpd6
3433389992625,1cyclictest0-21swapper/146
3433385992625,1cyclictest0-21swapper/135
343338599260,26cyclictest3515716-21/usr/sbin/munin5
343338599260,26cyclictest0-21swapper/135
343338599260,26cyclictest0-21swapper/135
3433382992625,1cyclictest1612-21snmpd4
3433376992624,1cyclictest1612-21snmpd3
3433376992624,1cyclictest1612-21snmpd3
3433371992625,1cyclictest1612-21snmpd2
3433371992625,1cyclictest1612-21snmpd2
3433366992625,1cyclictest1612-21snmpd15
3433366992624,1cyclictest1612-21snmpd15
3433357992625,1cyclictest1612-21snmpd13
343335399265,13cyclictest0-21swapper/612
3433353992625,1cyclictest0-21swapper/612
343335399260,26cyclictest0-21swapper/612
3433351992625,1cyclictest0-21swapper/511
3433351992625,1cyclictest0-21swapper/511
3433342992625,1cyclictest1612-21snmpd9
3433342992625,1cyclictest1612-21snmpd9
3433342992625,1cyclictest1612-21snmpd9
3433338992625,1cyclictest1612-21snmpd8
3433333992625,1cyclictest1612-21snmpd1
3433333992625,1cyclictest0-21swapper/11
3433326992624,1cyclictest1612-21snmpd0
3433326992624,1cyclictest1612-21snmpd0
3433326992624,1cyclictest1612-21snmpd0
3433393992524,1cyclictest1612-21snmpd7
3433393992524,1cyclictest1612-21snmpd7
3433389992524,1cyclictest1612-21snmpd6
3433389992524,1cyclictest1612-21snmpd6
3433389992524,1cyclictest0-21swapper/146
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
343338599250,25cyclictest0-21swapper/135
3433382992524,1cyclictest0-21swapper/124
3433371992524,1cyclictest0-21swapper/102
3433366992524,1cyclictest0-21swapper/915
3433362992524,1cyclictest1612-21snmpd14
3433362992524,1cyclictest0-21swapper/814
3433351992524,1cyclictest1612-21snmpd11
3433346992524,1cyclictest1612-21snmpd10
3433346992524,1cyclictest1612-21snmpd10
3433342992524,1cyclictest1612-21snmpd9
3433342992524,1cyclictest1612-21snmpd9
3433338992524,1cyclictest1612-21snmpd8
3433338992517,8cyclictest0-21swapper/28
343333899250,16cyclictest0-21swapper/28
343333899250,0cyclictest0-21swapper/28
343333899250,0cyclictest0-21swapper/28
343333899250,0cyclictest0-21swapper/28
3433333992524,1cyclictest1612-21snmpd1
3433333992524,1cyclictest1612-21snmpd1
3433326992524,1cyclictest1612-21snmpd0
3433326992524,1cyclictest0-21swapper/00
343332699250,0cyclictest0-21swapper/00
3433393992423,1cyclictest1612-21snmpd7
3433393992423,1cyclictest1612-21snmpd7
3433393992423,1cyclictest1612-21snmpd7
343338999240,24cyclictest0-21swapper/146
3433385992423,1cyclictest1612-21snmpd5
3433382992423,1cyclictest1612-21snmpd4
3433376992423,1cyclictest0-21swapper/113
3433376992422,1cyclictest1612-21snmpd3
3433371992423,1cyclictest0-21swapper/102
3433362992423,1cyclictest1612-21snmpd14
3433357992423,1cyclictest1612-21snmpd13
3433353992423,1cyclictest0-21swapper/612
3433351992423,1cyclictest0-21swapper/511
3433351992423,1cyclictest0-21swapper/511
3433351992423,1cyclictest0-21swapper/511
3433351992422,1cyclictest1612-21snmpd11
3433346992423,1cyclictest1612-21snmpd10
3433346992423,1cyclictest0-21swapper/410
3433342992423,1cyclictest1612-21snmpd9
3433342992423,1cyclictest1612-21snmpd9
3433342992423,1cyclictest0-21swapper/39
3433342992423,1cyclictest0-21swapper/39
343334299241,21cyclictest437115-21CPU9
3433338992423,1cyclictest0-21swapper/28
3433333992423,1cyclictest1612-21snmpd1
3433333992423,1cyclictest1612-21snmpd1
3433333992422,1cyclictest1612-21snmpd1
3433326992423,1cyclictest0-21swapper/00
3433393992322,1cyclictest0-21swapper/157
3433389992322,1cyclictest1612-21snmpd6
3433389992322,1cyclictest1612-21snmpd6
3433382992322,1cyclictest0-21swapper/124
3433382992322,1cyclictest0-21swapper/124
3433371992322,1cyclictest1612-21snmpd2
3433371992322,1cyclictest1612-21snmpd2
3433371992322,1cyclictest1612-21snmpd2
3433371992322,1cyclictest0-21swapper/102
3433371992322,1cyclictest0-21swapper/102
3433366992322,1cyclictest0-21swapper/915
3433366992322,1cyclictest0-21swapper/915
3433362992322,1cyclictest1612-21snmpd14
3433362992322,1cyclictest0-21swapper/814
3433357992322,1cyclictest0-21swapper/713
3433353992322,1cyclictest1612-21snmpd12
3433353992322,1cyclictest1612-21snmpd12
3433353992322,1cyclictest1612-21snmpd12
3433353992322,1cyclictest1612-21snmpd12
3433353992322,1cyclictest0-21swapper/612
3433353992322,1cyclictest0-21swapper/612
3433346992322,1cyclictest1612-21snmpd10
3433346992322,1cyclictest1612-21snmpd10
3433346992322,1cyclictest1612-21snmpd10
3433346992322,1cyclictest1612-21snmpd10
3433346992322,1cyclictest1612-21snmpd10
3433342992322,1cyclictest0-21swapper/39
3433342992322,1cyclictest0-21swapper/39
3433342992322,1cyclictest0-21swapper/39
3433342992322,1cyclictest0-21swapper/39
3433338992322,1cyclictest0-21swapper/28
3433338992322,1cyclictest0-21swapper/28
3433333992322,1cyclictest1612-21snmpd1
3433333992322,1cyclictest0-21swapper/11
3433333992322,1cyclictest0-21swapper/11
3433326992322,1cyclictest0-21swapper/00
3433326992322,1cyclictest0-21swapper/00
3433326992322,1cyclictest0-21swapper/00
3433326992322,1cyclictest0-21swapper/00
3433326992322,1cyclictest0-21swapper/00
3433393992221,1cyclictest1612-21snmpd7
3433389992221,1cyclictest1612-21snmpd6
3433389992221,1cyclictest0-21swapper/146
3433389992221,1cyclictest0-21swapper/146
3433389992221,1cyclictest0-21swapper/146
3433389992221,1cyclictest0-21swapper/146
3433389992221,1cyclictest0-21swapper/146
3433389992219,2cyclictest437121-21CPU6
3433385992221,1cyclictest1612-21snmpd5
3433385992221,1cyclictest1612-21snmpd5
3433382992221,1cyclictest0-21swapper/124
3433376992220,1cyclictest437117-21CPU3
3433371992221,1cyclictest1612-21snmpd2
3433371992221,1cyclictest0-21swapper/102
3433371992221,1cyclictest0-21swapper/102
3433366992221,1cyclictest1612-21snmpd15
3433366992221,1cyclictest0-21swapper/915
3433366992221,1cyclictest0-21swapper/915
3433366992221,1cyclictest0-21swapper/915
3433362992221,1cyclictest0-21swapper/814
3433362992221,1cyclictest0-21swapper/814
3433362992221,1cyclictest0-21swapper/814
3433362992221,1cyclictest0-21swapper/814
3433357992221,1cyclictest1612-21snmpd13
3433357992221,1cyclictest0-21swapper/713
3433357992221,1cyclictest0-21swapper/713
3433357992221,1cyclictest0-21swapper/713
3433353992222,0cyclictest0-21swapper/612
3433353992221,1cyclictest1612-21snmpd12
3433353992221,1cyclictest0-21swapper/612
3433353992221,1cyclictest0-21swapper/612
3433351992221,1cyclictest1612-21snmpd11
3433346992221,1cyclictest0-21swapper/410
3433342992212,7cyclictest437117-21CPU9
3433338992221,1cyclictest0-21swapper/28
3433338992221,1cyclictest0-21swapper/28
343333899220,0cyclictest0-21swapper/28
3433333992221,1cyclictest1612-21snmpd1
3433333992221,1cyclictest0-21swapper/11
3433326992221,1cyclictest0-21swapper/00
3433326992221,1cyclictest0-21swapper/00
3433389992120,1cyclictest1612-21snmpd6
3433389992120,1cyclictest1612-21snmpd6
3433385992120,1cyclictest1612-21snmpd5
3433382992120,1cyclictest1612-21snmpd4
3433382992119,1cyclictest1612-21snmpd4
343338299210,18cyclictest0-21swapper/124
3433376992120,1cyclictest1612-21snmpd3
3433376992120,1cyclictest0-21swapper/113
343337699210,20cyclictest0-21swapper/113
343337199211,20cyclictest437105-21qemu-system-x862
3433366992120,1cyclictest1612-21snmpd15
3433366992120,1cyclictest0-21swapper/915
3433366992120,1cyclictest0-21swapper/915
3433362992120,1cyclictest1612-21snmpd14
3433362992120,1cyclictest1612-21snmpd14
3433362992120,1cyclictest1612-21snmpd14
3433362992120,1cyclictest1612-21snmpd14
3433357992120,1cyclictest1612-21snmpd13
3433353992120,1cyclictest0-21swapper/612
3433351992120,1cyclictest1612-21snmpd11
3433351992120,1cyclictest1612-21snmpd11
3433351992120,1cyclictest1612-21snmpd11
3433351992120,1cyclictest1612-21snmpd11
3433351992120,1cyclictest0-21swapper/511
3433346992120,1cyclictest1612-21snmpd10
3433342992120,1cyclictest1612-21snmpd9
3433338992120,1cyclictest0-21swapper/28
3433338992120,1cyclictest0-21swapper/28
343333899210,16cyclictest0-21swapper/28
3433333992120,1cyclictest1612-21snmpd1
3433333992120,1cyclictest1612-21snmpd1
3433333992120,1cyclictest0-21swapper/11
3433333992120,0cyclictest0-21swapper/11
3433326992120,1cyclictest1612-21snmpd0
3433393992019,1cyclictest1612-21snmpd7
3433393992019,1cyclictest0-21swapper/157
3433393992018,1cyclictest1612-21snmpd7
3433385992016,4cyclictest0-21swapper/135
3433382992019,1cyclictest1612-21snmpd4
3433382992019,1cyclictest1387-21lldpd4
3433382992019,1cyclictest0-21swapper/124
3433382992019,1cyclictest0-21swapper/124
3433382992019,1cyclictest0-21swapper/124
3433376992019,1cyclictest0-21swapper/113
3433376992019,1cyclictest0-21swapper/113
3433376992019,1cyclictest0-21swapper/113
3433376992018,2cyclictest0-21swapper/113
3433371992019,1cyclictest1612-21snmpd2
3433371992019,1cyclictest0-21swapper/102
3433366992019,1cyclictest1612-21snmpd15
3433362992019,1cyclictest1612-21snmpd14
3433362992019,1cyclictest1612-21snmpd14
3433357992019,1cyclictest1612-21snmpd13
3433357992019,1cyclictest0-21swapper/713
3433357992018,2cyclictest3542112-31munin-graph13
3433353992019,1cyclictest1612-21snmpd12
3433353992018,1cyclictest3807890-21memory12
343335199200,19cyclictest0-21swapper/511
3433346992019,1cyclictest1612-21snmpd10
3433346992019,1cyclictest1612-21snmpd10
3433346992019,1cyclictest0-21swapper/410
3433338992019,1cyclictest1612-21snmpd8
3433338992019,1cyclictest1612-21snmpd8
3433338992019,1cyclictest0-21swapper/28
343333899200,17cyclictest0-21swapper/28
343333899200,17cyclictest0-21swapper/28
3433333992019,1cyclictest1612-21snmpd1
3433333992019,1cyclictest0-21swapper/11
343333399200,17cyclictest0-21swapper/11
3433326992018,1cyclictest0-21swapper/00
343332699201,18cyclictest3710119-21awk0
3433393991918,1cyclictest1387-21lldpd7
3433393991918,1cyclictest0-21swapper/157
3433393991917,1cyclictest437117-21CPU7
3433393991917,1cyclictest437117-21CPU7
343339399190,19cyclictest0-21swapper/157
3433389991918,1cyclictest0-21swapper/146
343338999190,19cyclictest0-21swapper/146
3433382991917,1cyclictest437117-21CPU4
3433376991918,1cyclictest1221rcuc/113
3433376991917,2cyclictest0-21swapper/113
343337699191,1cyclictest1231ktimers/113
343337699191,1cyclictest1231ktimers/113
343337699191,1cyclictest1231ktimers/113
343337699191,1cyclictest1231ktimers/113
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional