You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-24 - 01:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot5s.osadl.org (updated Wed Dec 24, 2025 00:45:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
12788472346305,33sleep70-21swapper/713
12790622345321,15sleep40-21swapper/410
12790232343321,14sleep10-21swapper/11
12788522339297,14sleep120-21swapper/124
12791212338313,16sleep60-21swapper/612
12790462335311,15sleep50-21swapper/511
12789602326304,14sleep80-21swapper/814
12789912324301,15sleep30-21swapper/39
12789842322298,15sleep130-21swapper/135
12789002319297,14sleep20-21swapper/28
12790512318296,14sleep100-21swapper/102
12789612317295,14sleep90-21swapper/915
12790552316294,14sleep140-21swapper/146
12790582315293,14sleep00-21swapper/00
12790162307284,14sleep110-21swapper/113
12790392306283,14sleep150-21swapper/157
127947399521,26cyclictest100654-21CPU13
14497952490,0sleep100-21swapper/102
1279494994341,1cyclictest2247-21snmpd4
1279473994141,0cyclictest0-21swapper/713
1279506993939,0cyclictest0-21swapper/157
1279473993939,0cyclictest0-21swapper/713
1279483993837,1cyclictest2247-21snmpd2
1279458993838,0cyclictest0-21swapper/39
1279458993838,0cyclictest0-21swapper/39
1279473993737,0cyclictest0-21swapper/713
1279473993736,1cyclictest0-21swapper/713
1279471993737,0cyclictest0-21swapper/612
1279506993534,1cyclictest0-21swapper/157
127945499350,0cyclictest0-21swapper/28
1279466993434,0cyclictest0-21swapper/511
1279458993433,1cyclictest0-21swapper/39
1279458993413,2cyclictest2247-21snmpd9
1279454993434,0cyclictest0-21swapper/28
1279454993434,0cyclictest0-21swapper/28
1279478993333,0cyclictest0-21swapper/915
1279454993332,1cyclictest0-21swapper/28
1279454993332,1cyclictest0-21swapper/28
1279506993232,0cyclictest0-21swapper/157
1279501993231,1cyclictest2247-21snmpd6
127950199320,31cyclictest0-21swapper/146
127947399326,25cyclictest0-21swapper/713
127947199320,32cyclictest0-21swapper/612
127949499310,1cyclictest0-21swapper/124
1279491993131,0cyclictest0-21swapper/113
1279452993130,1cyclictest0-21swapper/11
1279447993131,0cyclictest0-21swapper/00
1279506993030,0cyclictest0-21swapper/157
1279501993030,0cyclictest0-21swapper/146
1279473993027,2cyclictest2247-21snmpd13
127947399300,30cyclictest0-21swapper/713
1279471993025,3cyclictest0-21swapper/612
1279471993025,3cyclictest0-21swapper/612
1279462993024,3cyclictest0-21swapper/410
127944799307,3cyclictest0-21swapper/00
127949199290,29cyclictest0-21swapper/113
127947899290,20cyclictest0-21swapper/915
1279473992927,1cyclictest2247-21snmpd13
1279473992927,1cyclictest2247-21snmpd13
1279473992927,1cyclictest2247-21snmpd13
1279466992925,3cyclictest0-21swapper/511
1279462992929,0cyclictest0-21swapper/410
1279462992912,17cyclictest2247-21snmpd10
1279462992912,17cyclictest2247-21snmpd10
127945499290,28cyclictest0-21swapper/28
127945499290,1cyclictest0-21swapper/28
1279506992826,1cyclictest2247-21snmpd7
127950699280,27cyclictest0-21swapper/157
127950699280,27cyclictest0-21swapper/157
127950699280,27cyclictest0-21swapper/157
127950699280,19cyclictest0-21swapper/157
127950199280,27cyclictest0-21swapper/146
127950199280,27cyclictest0-21swapper/146
1279498992828,0cyclictest0-21swapper/135
1279498992827,1cyclictest2247-21snmpd5
127949899280,27cyclictest0-21swapper/135
127949499280,27cyclictest0-21swapper/124
127949499280,27cyclictest0-21swapper/124
1279491992828,0cyclictest0-21swapper/113
127949199280,1cyclictest0-21swapper/113
1279483992826,1cyclictest2247-21snmpd2
127948399280,27cyclictest0-21swapper/102
1279478992826,1cyclictest2247-21snmpd15
127947899280,27cyclictest0-21swapper/915
127947899280,27cyclictest0-21swapper/915
127947899280,27cyclictest0-21swapper/915
127947899280,27cyclictest0-21swapper/915
127947899280,27cyclictest0-21swapper/915
1279476992827,1cyclictest2247-21snmpd14
1279476992827,1cyclictest0-21swapper/814
127947399280,27cyclictest0-21swapper/713
127947199280,27cyclictest0-21swapper/612
127947199280,27cyclictest0-21swapper/612
1279466992827,1cyclictest2247-21snmpd11
127946699280,27cyclictest0-21swapper/511
1279462992827,1cyclictest2247-21snmpd10
1279462992827,1cyclictest0-21swapper/410
127946299280,27cyclictest0-21swapper/410
127946299280,27cyclictest0-21swapper/410
127946299280,27cyclictest0-21swapper/410
127945899280,27cyclictest0-21swapper/39
1279454992828,0cyclictest0-21swapper/28
1279454992827,1cyclictest2247-21snmpd8
1279454992827,1cyclictest0-21swapper/28
127945299280,27cyclictest0-21swapper/11
127945299280,1cyclictest0-21swapper/11
1279447992828,0cyclictest0-21swapper/00
1279447992828,0cyclictest0-21swapper/00
1279506992726,1cyclictest2247-21snmpd7
1279501992726,1cyclictest2247-21snmpd6
1279501992725,1cyclictest2247-21snmpd6
127950199270,26cyclictest0-21swapper/146
1279498992727,0cyclictest0-21swapper/135
1279498992726,1cyclictest2247-21snmpd5
127949899270,26cyclictest0-21swapper/135
1279494992726,1cyclictest2247-21snmpd4
127949499270,26cyclictest0-21swapper/124
127949499270,1cyclictest0-21swapper/124
127949199270,1cyclictest0-21swapper/113
1279483992726,1cyclictest2247-21snmpd2
127948399270,27cyclictest0-21swapper/102
1279478992727,0cyclictest0-21swapper/915
1279478992726,1cyclictest2247-21snmpd15
1279478992725,1cyclictest2247-21snmpd15
1279478992725,1cyclictest2247-21snmpd15
1279478992725,1cyclictest0-21swapper/915
1279476992726,1cyclictest2247-21snmpd14
1279476992716,9cyclictest0-21swapper/814
127947699271,20cyclictest0-21swapper/814
127947699270,1cyclictest0-21swapper/814
127947699270,1cyclictest0-21swapper/814
1279473992727,0cyclictest0-21swapper/713
1279473992726,1cyclictest2247-21snmpd13
1279471992727,0cyclictest0-21swapper/612
1279471992726,1cyclictest2247-21snmpd12
1279471992726,1cyclictest2247-21snmpd12
1279471992726,1cyclictest2247-21snmpd12
1279471992725,1cyclictest2247-21snmpd12
1279471992725,1cyclictest2247-21snmpd12
127947199270,26cyclictest0-21swapper/612
127947199270,1cyclictest0-21swapper/612
1279466992727,0cyclictest0-21swapper/511
1279466992726,1cyclictest2247-21snmpd11
1279466992726,1cyclictest2247-21snmpd11
1279466992726,1cyclictest2247-21snmpd11
1279462992727,0cyclictest0-21swapper/410
1279462992726,1cyclictest2247-21snmpd10
127945899279,1cyclictest2247-21snmpd9
1279458992726,1cyclictest2247-21snmpd9
1279458992725,1cyclictest2247-21snmpd9
127945899270,27cyclictest0-21swapper/39
1279454992727,0cyclictest0-21swapper/28
1279454992726,1cyclictest2247-21snmpd8
1279454992726,1cyclictest2247-21snmpd8
1279454992726,1cyclictest0-21swapper/28
127945499270,1cyclictest0-21swapper/28
1279452992726,1cyclictest2247-21snmpd1
1279452992726,1cyclictest2247-21snmpd1
1279452992726,1cyclictest2247-21snmpd1
127945299270,1cyclictest0-21swapper/11
1279447992725,1cyclictest2247-21snmpd0
1279447992725,1cyclictest2247-21snmpd0
1279447992725,1cyclictest2247-21snmpd0
127944799270,1cyclictest0-21swapper/00
1279501992625,1cyclictest2247-21snmpd6
1279501992625,1cyclictest2247-21snmpd6
1279498992625,1cyclictest2247-21snmpd5
1279494992624,1cyclictest2247-21snmpd4
1279491992625,1cyclictest2247-21snmpd3
1279483992625,1cyclictest2247-21snmpd2
1279478992625,1cyclictest2247-21snmpd15
127947899260,17cyclictest0-21swapper/915
1279476992626,0cyclictest0-21swapper/814
1279476992624,1cyclictest2247-21snmpd14
127947699262,18cyclictest0-21swapper/814
1279473992624,1cyclictest2247-21snmpd13
127947399262,11cyclictest0-21swapper/713
127947399262,11cyclictest0-21swapper/713
1279471992625,1cyclictest2247-21snmpd12
127947199260,25cyclictest0-21swapper/612
1279466992625,1cyclictest2247-21snmpd11
1279466992625,1cyclictest0-21swapper/511
1279462992625,1cyclictest2247-21snmpd10
1279462992625,1cyclictest2247-21snmpd10
1279462992625,1cyclictest2247-21snmpd10
1279462992625,1cyclictest2247-21snmpd10
1279452992625,1cyclictest2247-21snmpd1
1279452992625,1cyclictest2247-21snmpd1
1279452992624,1cyclictest2247-21snmpd1
1279447992625,1cyclictest2247-21snmpd0
1279447992625,1cyclictest2247-21snmpd0
1279447992624,1cyclictest2247-21snmpd0
1279447992624,1cyclictest2247-21snmpd0
1279447992624,1cyclictest2247-21snmpd0
1279447992624,1cyclictest2247-21snmpd0
1279506992524,1cyclictest2247-21snmpd7
127950699250,19cyclictest0-21swapper/157
1279501992525,0cyclictest0-21swapper/146
1279501992525,0cyclictest0-21swapper/146
1279501992524,1cyclictest2247-21snmpd6
1279501992524,1cyclictest2247-21snmpd6
1279501992523,1cyclictest2247-21snmpd6
1279498992525,0cyclictest0-21swapper/135
1279494992524,1cyclictest2247-21snmpd4
1279494992524,1cyclictest2247-21snmpd4
1279483992523,1cyclictest2247-21snmpd2
1279478992524,1cyclictest2247-21snmpd15
1279476992524,1cyclictest2247-21snmpd14
1279476992524,1cyclictest2247-21snmpd14
1279476992516,6cyclictest0-21swapper/814
127947699250,18cyclictest0-21swapper/814
1279473992524,1cyclictest2247-21snmpd13
1279473992524,1cyclictest0-21swapper/713
1279471992525,0cyclictest0-21swapper/612
1279471992523,1cyclictest2247-21snmpd12
1279466992524,1cyclictest2247-21snmpd11
1279462992524,1cyclictest2247-21snmpd10
1279458992523,2cyclictest0-21swapper/39
1279458992523,2cyclictest0-21swapper/39
1279454992524,1cyclictest2247-21snmpd8
1279454992523,2cyclictest0-21swapper/28
1279454992516,2cyclictest1378067-21latency8
127945499250,19cyclictest100657-21CPU8
127945499250,18cyclictest100652-21CPU8
1279447992524,1cyclictest2247-21snmpd0
1279447992524,1cyclictest2247-21snmpd0
1279447992523,1cyclictest2247-21snmpd0
1279506992424,0cyclictest0-21swapper/157
1279498992424,0cyclictest0-21swapper/135
1279498992424,0cyclictest0-21swapper/135
1279498992423,1cyclictest0-21swapper/135
1279494992424,0cyclictest0-21swapper/124
1279494992424,0cyclictest0-21swapper/124
1279494992423,1cyclictest2247-21snmpd4
1279494992423,1cyclictest0-21swapper/124
1279494992423,1cyclictest0-21swapper/124
1279491992423,1cyclictest0-21swapper/113
1279483992423,1cyclictest0-21swapper/102
1279483992416,6cyclictest0-21swapper/102
127948399240,23cyclictest0-21swapper/102
127948399240,23cyclictest0-21swapper/102
1279478992423,1cyclictest2247-21snmpd15
1279476992423,1cyclictest0-21swapper/814
1279476992416,6cyclictest0-21swapper/814
127947699241,17cyclictest0-21swapper/814
127947699240,18cyclictest0-21swapper/814
127947399240,11cyclictest0-21swapper/713
1279471992423,1cyclictest0-21swapper/612
1279466992423,1cyclictest2247-21snmpd11
1279466992423,1cyclictest2247-21snmpd11
1279466992423,1cyclictest2247-21snmpd11
1279462992423,1cyclictest0-21swapper/410
1279458992423,1cyclictest0-21swapper/39
1279454992416,1cyclictest100653-21CPU8
1279454992416,1cyclictest100653-21CPU8
1279452992423,1cyclictest2247-21snmpd1
1279447992424,0cyclictest0-21swapper/00
1279447992423,1cyclictest0-21swapper/00
1279506992322,1cyclictest0-21swapper/157
127950699230,23cyclictest0-21swapper/157
1279501992323,0cyclictest0-21swapper/146
1279501992322,1cyclictest0-21swapper/146
1279501992322,1cyclictest0-21swapper/146
127950199232,20cyclictest100650-21CPU6
127950199232,20cyclictest100650-21CPU6
127949899232,3cyclictest0-21swapper/135
1279494992322,1cyclictest2247-21snmpd4
1279494992322,1cyclictest2247-21snmpd4
1279494992322,1cyclictest2247-21snmpd4
1279494992322,1cyclictest0-21swapper/124
1279494992322,1cyclictest0-21swapper/124
127949199239,14cyclictest0-21swapper/113
1279491992322,1cyclictest2247-21snmpd3
1279491992322,1cyclictest0-21swapper/113
1279491992322,1cyclictest0-21swapper/113
1279483992322,1cyclictest0-21swapper/102
1279478992322,1cyclictest0-21swapper/915
1279478992322,1cyclictest0-21swapper/915
1279476992323,0cyclictest0-21swapper/814
1279476992322,1cyclictest2247-21snmpd14
1279476992322,1cyclictest0-21swapper/814
1279476992322,1cyclictest0-21swapper/814
1279476992322,1cyclictest0-21swapper/814
1279476992322,1cyclictest0-21swapper/814
1279476992321,2cyclictest0-21swapper/814
1279476992315,6cyclictest0-21swapper/814
1279476992314,9cyclictest0-21swapper/814
1279476992314,7cyclictest0-21swapper/814
127947699230,3cyclictest0-21swapper/814
127947699230,17cyclictest0-21swapper/814
127947699230,17cyclictest0-21swapper/814
1279473992323,0cyclictest0-21swapper/713
1279473992323,0cyclictest0-21swapper/713
1279473992322,1cyclictest2247-21snmpd13
1279473992322,1cyclictest0-21swapper/713
127947399232,20cyclictest0-21swapper/713
1279473992320,3cyclictest0-21swapper/713
1279473992320,2cyclictest1-21systemd13
1279473992320,2cyclictest1-21systemd13
1279466992323,0cyclictest0-21swapper/511
1279462992322,1cyclictest2247-21snmpd10
1279454992322,1cyclictest2247-21snmpd8
127945299234,17cyclictest100656-21CPU1
1279447992323,0cyclictest0-21swapper/00
1279447992322,1cyclictest2247-21snmpd0
1279501992214,6cyclictest0-21swapper/146
1279498992222,0cyclictest0-21swapper/135
1279498992222,0cyclictest0-21swapper/135
1279498992222,0cyclictest0-21swapper/135
1279498992222,0cyclictest0-21swapper/135
1279498992222,0cyclictest0-21swapper/135
1279498992221,1cyclictest0-21swapper/135
1279498992221,1cyclictest0-21swapper/135
1279494992222,0cyclictest0-21swapper/124
1279491992222,0cyclictest0-21swapper/113
1279491992222,0cyclictest0-21swapper/113
1279491992221,1cyclictest2247-21snmpd3
127949199220,21cyclictest0-21swapper/113
127949199220,21cyclictest0-21swapper/113
127947899222,3cyclictest0-21swapper/915
1279478992221,1cyclictest0-21swapper/915
1279478992219,2cyclictest100656-21CPU15
1279476992214,6cyclictest0-21swapper/814
1279476992214,6cyclictest0-21swapper/814
127947399223,19cyclictest0-21swapper/713
127947399223,18cyclictest1371142-21/usr/sbin/munin13
127947399223,18cyclictest1348485-21fschecks_time13
127947399223,18cyclictest0-21swapper/713
127947399222,19cyclictest0-21swapper/713
1279473992220,2cyclictest0-21swapper/713
1279473992220,1cyclictest2247-21snmpd13
127947399221,21cyclictest0-21swapper/713
127947199223,18cyclictest100654-21CPU12
1279471992221,1cyclictest2247-21snmpd12
1279471992221,1cyclictest2247-21snmpd12
1279462992222,0cyclictest0-21swapper/410
1279462992220,2cyclictest2247-21snmpd10
1279462992220,2cyclictest2247-21snmpd10
127946299220,3cyclictest0-21swapper/410
127945899222,19cyclictest100649-21CPU9
1279454992217,2cyclictest100656-21CPU8
127945499220,21cyclictest0-21swapper/28
127945499220,18cyclictest1484458-21chrt8
127945499220,18cyclictest1348318-21df_inode8
127945499220,18cyclictest0-21swapper/28
127945299220,22cyclictest0-21swapper/11
127945299220,22cyclictest0-21swapper/11
1279447992222,0cyclictest0-21swapper/00
1279447992222,0cyclictest0-21swapper/00
127944799220,2cyclictest0-21swapper/00
127950699212,13cyclictest0-21swapper/157
127950699212,13cyclictest0-21swapper/157
1279506992120,1cyclictest2247-21snmpd7
1279506992120,1cyclictest0-21swapper/157
1279506992120,1cyclictest0-21swapper/157
127950699211,19cyclictest100655-21CPU7
127950699210,17cyclictest0-21swapper/157
127950199213,17cyclictest100650-21CPU6
127950199212,18cyclictest100655-21CPU6
1279501992121,0cyclictest0-21swapper/146
1279501992120,1cyclictest0-21swapper/146
127950199211,2cyclictest100656-21CPU6
127950199211,2cyclictest100656-21CPU6
127950199211,19cyclictest100649-21CPU6
1279498992120,1cyclictest2247-21snmpd5
1279498992120,1cyclictest2247-21snmpd5
1279498992114,7cyclictest0-21swapper/135
127949899210,3cyclictest0-21swapper/135
1279494992121,0cyclictest0-21swapper/124
1279494992120,1cyclictest0-21swapper/124
1279494992117,4cyclictest100652-21CPU4
1279494992117,4cyclictest100652-21CPU4
1279494992115,5cyclictest0-21swapper/124
127949499210,20cyclictest1303456-21chrt4
1279491992121,0cyclictest0-21swapper/113
1279491992120,1cyclictest2247-21snmpd3
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional