You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-14 - 21:08

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot3s.osadl.org (updated Sun Jun 14, 2026 12:45:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2121664999994,2cyclictest0-21swapper/012:05:010
2121664999994,2cyclictest0-21swapper/012:05:010
212166499871,58cyclictest150-21pr/ttyS210:00:570
212166499871,58cyclictest150-21pr/ttyS210:00:570
212166499822,65cyclictest48-21kcompactd010:50:020
2121664998137,39cyclictest16850irq/134-800000011:50:010
212166499811,47cyclictest2125154-21latency_hist08:15:020
2121671998011,16cyclictest131rcu_preempt09:00:032
2121664997826,16cyclictest0-21swapper/009:40:550
212167199776,6cyclictest131rcu_preempt12:35:022
212166499771,72cyclictest2216473-21ssh12:30:470
212166499763,38cyclictest0-21swapper/007:45:020
2121664997516,50cyclictest16850irq/134-800000010:45:240
212166499751,39cyclictest2127877-21munin-run09:10:000
212166499742,67cyclictest3467602-21systemd-journal11:28:430
2121669997327,8cyclictest2176317-21cron11:00:001
2121664997333,36cyclictest2166741-21ssh10:37:490
2121669997226,11cyclictest3467602-21systemd-journal12:24:321
2121669997226,11cyclictest3467602-21systemd-journal12:24:311
2121664997130,24cyclictest2200586-21ssh11:54:580
2121664997119,34cyclictest16850irq/134-800000010:22:320
2121664997119,34cyclictest16850irq/134-800000010:22:310
212166499711,66cyclictest1-21systemd09:40:000
212166499711,40cyclictest2190746-21ssh11:32:270
2121664997027,39cyclictest16950irq/224-800000012:29:510
212166499702,64cyclictest2177550-21ssh11:02:330
212166499702,38cyclictest2145327-21sshd09:49:330
2121664997019,48cyclictest150-21pr/ttyS210:33:390
2121664997019,48cyclictest150-21pr/ttyS210:33:390
212166499691,39cyclictest2126805-21sshd08:46:330
2121664996830,34cyclictest2136460-21sh09:29:400
2121664996830,34cyclictest2136460-21sh09:29:390
2121664996827,37cyclictest2130612-21ssh09:16:030
2121664996826,38cyclictest2201125-21ssh11:55:410
2121664996826,38cyclictest2201125-21ssh11:55:400
2121664996821,42cyclictest16850irq/134-800000012:11:330
2121664996821,42cyclictest16850irq/134-800000012:11:320
212166499681,34cyclictest2220366-21munin-run12:40:010
212167199672,13cyclictest2133878-21ssh09:23:432
212166999677,26cyclictest2169829-21cut10:45:001
212166499673,31cyclictest2152946-21ssh10:06:270
2121671996622,40cyclictest30-21ksoftirqd/211:27:352
212167199662,16cyclictest2121984-21cat07:15:022
212167199662,13cyclictest2157492-21ssh10:16:462
2121671996618,44cyclictest2220157-21ssh12:39:402
212166499662,59cyclictest2210113-21ssh12:16:230
2121664996624,25cyclictest2155911-21ssh10:13:190
212166499661,61cyclictest0-21swapper/011:15:000
212166499661,29cyclictest2124208-21cron08:00:000
2121671996525,36cyclictest2138671-21sh09:34:372
212167199651,14cyclictest2210043-21ssh12:16:132
212167199651,14cyclictest2203827-21ssh12:02:012
212167199651,14cyclictest2203827-21ssh12:02:002
212167199651,13cyclictest2192844-21ssh11:37:062
212167199651,13cyclictest2168863-21ssh10:42:392
212167199651,13cyclictest2146058-21ssh09:50:502
2121669996527,11cyclictest23-21ksoftirqd/108:30:011
2121664996533,28cyclictest16850irq/134-800000010:59:330
2121664996524,37cyclictest12-21ksoftirqd/009:25:010
212166499651,60cyclictest0-21swapper/009:30:110
2121664996515,45cyclictest275-21dbus-daemon08:05:020
212166499651,37cyclictest0-21swapper/009:56:140
212167199642,13cyclictest2200049-21ssh11:53:372
212167199642,12cyclictest2152728-21ssh10:05:572
212167199641,14cyclictest2165795-21ssh10:35:312
212167199641,13cyclictest364-21snmpd09:55:482
212167199641,13cyclictest2175833-21ssh10:58:442
212167199641,13cyclictest2135137-21ssh09:26:092
212167199641,13cyclictest2135137-21ssh09:26:092
212167199641,13cyclictest2130290-21ssh09:15:212
212167199641,12cyclictest2208376-21ssh12:12:412
212167199641,12cyclictest2208376-21ssh12:12:402
212167199641,12cyclictest2171942-21ssh10:49:592
212167199641,12cyclictest2129143-21ssh09:12:402
212167199641,12cyclictest2125765-21sshd08:25:342
2121669996429,9cyclictest2129970-21sed09:15:011
2121664996457,5cyclictest19350irq/34-mmc111:25:030
212166499643,56cyclictest2179328-21sshd11:06:330
212166499643,32cyclictest2168495-21ssh10:41:490
212166499641,59cyclictest0-21swapper/010:27:010
212167199632,14cyclictest2160964-21ssh10:24:572
212167199632,14cyclictest2160964-21ssh10:24:572
212167199632,13cyclictest2195796-21ssh11:43:592
212167199631,14cyclictest2206339-21ssh12:07:472
212167199631,14cyclictest2144843-21ssh09:48:262
212167199631,13cyclictest2202374-21ssh11:58:512
212167199631,13cyclictest2202374-21ssh11:58:512
212167199631,13cyclictest2176733-21ssh11:00:212
212167199631,13cyclictest2172325-21ssh10:50:212
212167199631,11cyclictest2150189-21ssh10:00:052
212167199631,11cyclictest2150189-21ssh10:00:042
2121664996337,23cyclictest16950irq/224-800000011:36:140
212167199622,12cyclictest2191670-21ssh11:34:462
2121671996220,37cyclictest30-21ksoftirqd/211:06:412
212167199621,14cyclictest2215957-21ssh12:29:592
212167199621,13cyclictest2212712-21ssh12:22:242
212167199621,13cyclictest2212712-21ssh12:22:242
212167199621,13cyclictest2186694-21ssh11:23:162
212167199621,13cyclictest2181465-21ssh11:11:242
212167199621,12cyclictest2183623-21ssh11:16:172
2121664996231,26cyclictest2147328-21ssh09:54:070
212166499621,58cyclictest0-21swapper/012:06:010
212166499621,57cyclictest12-21ksoftirqd/009:12:550
212166499621,57cyclictest0-21swapper/011:15:100
2121671996133,24cyclictest3467602-21systemd-journal07:38:332
212167199611,18cyclictest2154837-21ssh10:10:432
212167199611,14cyclictest2122901-21munin-run07:35:012
212167199611,12cyclictest2139949-21ssh09:37:162
2121669996133,8cyclictest23-21ksoftirqd/111:45:011
212166499613,53cyclictest2126266-21sshd08:35:070
212166499613,53cyclictest2126266-21sshd08:35:070
212166499611,56cyclictest2125219-21sshd08:15:040
212166499611,56cyclictest2123885-21sshd07:50:030
2121671996013,9cyclictest2124969-21sshd08:10:042
212166499602,53cyclictest2212362-21ssh12:21:270
212166499602,53cyclictest2212362-21ssh12:21:260
212166499601,55cyclictest0-21swapper/010:16:320
212166499601,54cyclictest2127592-21sshd09:02:330
2121674995941,12cyclictest1-21systemd10:40:003
212167199592,14cyclictest2162710-21ssh10:28:462
212167199592,12cyclictest2123684-21munin-run07:50:012
2121671995912,14cyclictest275-21dbus-daemon09:10:012
212167199591,12cyclictest2163797-21ssh10:30:532
212167199591,12cyclictest2163797-21ssh10:30:522
212166499592,53cyclictest2122611-21sshd07:27:330
212166499591,54cyclictest0-21swapper/011:45:010
212167199581,12cyclictest364-21snmpd08:48:542
212166499582,50cyclictest2123164-21basename07:40:010
212166499581,51cyclictest48-21kcompactd007:47:400
212166499581,51cyclictest48-21kcompactd007:16:360
212166499581,51cyclictest48-21kcompactd007:16:360
2121671995721,32cyclictest30-21ksoftirqd/208:35:072
2121671995721,32cyclictest30-21ksoftirqd/208:35:072
212167199571,13cyclictest2197410-21ssh11:47:322
212167199561,16cyclictest2142265-21rm09:42:242
212166499561,50cyclictest48-21kcompactd007:31:020
212166499561,50cyclictest364-21snmpd07:20:460
212166499561,49cyclictest48-21kcompactd008:28:440
212167199551,15cyclictest2122371-21cron07:25:002
212167199551,13cyclictest364-21snmpd08:53:492
212167199551,13cyclictest364-21snmpd08:53:492
2121669995536,14cyclictest275-21dbus-daemon12:20:001
212166499551,49cyclictest48-21kcompactd008:59:150
212166499551,49cyclictest48-21kcompactd007:12:420
212166499551,49cyclictest364-21snmpd08:54:170
212166499551,49cyclictest364-21snmpd08:54:160
2121674995434,14cyclictest2141049-21systemctl09:40:003
2121671995412,10cyclictest2122290-21sed07:20:022
2121671995412,10cyclictest2122290-21sed07:20:022
212166499542,47cyclictest2126052-21munin-run08:35:000
212167199533,9cyclictest2124208-21cron08:00:012
212167199532,11cyclictest364-21snmpd08:06:232
212167199531,16cyclictest364-21snmpd07:52:082
2121671995310,8cyclictest2126585-21cut08:45:002
212167499526,41cyclictest2194080-21ssh11:40:023
212167199523,20cyclictest2121695-21latency_hist07:10:012
212167199522,14cyclictest2125273-21munin-run08:20:002
212166499521,46cyclictest2124715-21sshd08:05:040
2121669995131,16cyclictest3467602-21systemd-journal11:30:011
2121669995131,14cyclictest275-21dbus-daemon08:40:011
2121669995131,14cyclictest275-21dbus-daemon08:40:011
212167499503,4cyclictest131rcu_preempt11:28:553
2121674995022,20cyclictest275-21dbus-daemon12:40:003
2121669995034,12cyclictest1-21systemd11:15:011
2121669995034,11cyclictest2162252-21sshd10:27:341
212166499501,45cyclictest2125513-21sshd08:20:330
212166499501,44cyclictest364-21snmpd08:41:310
2121674994933,12cyclictest1-21systemd10:05:013
2121674994933,12cyclictest1-21systemd10:05:013
2121674994933,11cyclictest309-21in:imuxsock08:45:023
2121674994931,13cyclictest275-21dbus-daemon10:55:013
2121674994931,13cyclictest1-21systemd10:35:023
2121674994931,13cyclictest1-21systemd10:35:013
2121674994921,18cyclictest1-21systemd09:50:003
212167199493,15cyclictest2123419-21munin-run07:45:002
212167199491,13cyclictest2122759-21sed07:30:022
212167499483,3cyclictest131rcu_preempt11:53:403
2121674994831,12cyclictest275-21dbus-daemon07:15:003
2121674994811,25cyclictest275-21dbus-daemon08:15:013
2121671994816,28cyclictest30-21ksoftirqd/208:03:162
2121671994813,10cyclictest30-21ksoftirqd/208:25:012
2121669994833,10cyclictest309-21in:imuxsock12:00:021
2121669994833,10cyclictest309-21in:imuxsock12:00:021
2121669994831,12cyclictest2122113-21systemctl07:20:001
2121669994831,12cyclictest2122113-21systemctl07:20:001
212166499481,42cyclictest0-21swapper/007:10:030
212167499473,4cyclictest131rcu_preempt12:31:003
2121674994727,16cyclictest3467602-21systemd-journal09:30:003
2121674994727,16cyclictest3467602-21systemd-journal09:30:003
212167499472,4cyclictest131rcu_preempt12:26:193
212167499472,3cyclictest131rcu_preempt10:57:403
2121669994734,10cyclictest23-21ksoftirqd/112:09:591
2121669994730,14cyclictest2135689-21sshd09:27:331
2121669994730,14cyclictest2135689-21sshd09:27:321
2121669994728,14cyclictest23-21ksoftirqd/107:30:021
2121669994727,15cyclictest2167586-21munin-run10:40:011
212167499465,3cyclictest131rcu_preempt11:06:033
212167499463,3cyclictest131rcu_preempt11:21:523
2121674994629,13cyclictest3467602-21systemd-journal12:15:023
2121674994629,13cyclictest3467602-21systemd-journal12:15:013
2121674994629,13cyclictest0-21swapper/312:25:013
2121674994629,13cyclictest0-21swapper/312:25:013
2121674994625,16cyclictest275-21dbus-daemon11:05:003
2121674994624,17cyclictest275-21dbus-daemon11:20:013
2121674994623,16cyclictest1-21systemd09:55:023
2121669994634,9cyclictest2186815-21sshd11:23:331
2121669994633,8cyclictest2123665-21cron07:50:001
2121669994631,10cyclictest3467602-21systemd-journal10:50:011
212167499454,4cyclictest131rcu_preempt09:20:163
212167499452,4cyclictest131rcu_preempt12:15:453
212167499451,3cyclictest131rcu_preempt09:34:303
2121669994528,13cyclictest3467602-21systemd-journal08:55:021
2121669994528,13cyclictest3467602-21systemd-journal07:50:021
212167499445,8cyclictest2194357-1kworker/u9:111:59:103
212167499445,8cyclictest2194357-1kworker/u9:111:59:093
212167499445,27cyclictest2158779-21ssh10:20:013
2121674994433,9cyclictest37-21ksoftirqd/307:40:013
2121674994428,12cyclictest275-21dbus-daemon12:10:003
2121674994427,13cyclictest1-21systemd10:15:013
2121674994422,15cyclictest2127335-21modprobe09:00:003
2121674994420,18cyclictest275-21dbus-daemon09:15:013
2121674994414,6cyclictest131rcu_preempt12:05:003
2121674994414,6cyclictest131rcu_preempt12:04:593
212166999442,3cyclictest131rcu_preempt09:21:391
212167499437,5cyclictest131rcu_preempt09:10:003
212167499431,3cyclictest131rcu_preempt10:40:433
212167199432,11cyclictest1-21systemd09:04:332
2121669994331,8cyclictest23-21ksoftirqd/111:16:361
2121669994329,10cyclictest3467602-21systemd-journal10:13:331
2121669994328,11cyclictest23-21ksoftirqd/110:16:501
2121669994328,11cyclictest2215969-21cron12:29:591
2121669994326,11cyclictest275-21dbus-daemon10:25:011
2121669994326,11cyclictest275-21dbus-daemon10:25:011
212166999432,5cyclictest2145473-21munin-run09:50:001
212167499426,25cyclictest2127639-21latency_hist09:05:013
2121674994230,9cyclictest37-21ksoftirqd/311:13:273
2121674994226,12cyclictest37-21ksoftirqd/308:20:003
2121674994222,15cyclictest3467602-21systemd-journal10:50:003
2121669994230,8cyclictest23-21ksoftirqd/109:35:011
2121669994227,11cyclictest23-21ksoftirqd/110:00:001
2121669994223,14cyclictest1-21systemd11:50:021
212166999421,3cyclictest131rcu_preempt10:05:121
212166999421,24cyclictest2127871-21diskmemload11:05:031
212167499414,24cyclictest2132184-21latency_hist09:20:013
212167499412,4cyclictest131rcu_preempt09:59:423
2121674994118,16cyclictest275-21dbus-daemon08:10:003
212167199415,10cyclictest0-21swapper/208:34:232
212166999413,4cyclictest131rcu_preempt11:40:001
2121669994128,8cyclictest3467602-21systemd-journal07:35:001
2121669994126,12cyclictest2163649-21sshd10:30:331
2121669994126,12cyclictest2163649-21sshd10:30:331
212167499405,3cyclictest131rcu_preempt11:45:553
212167499403,4cyclictest131rcu_preempt10:20:313
212167499403,4cyclictest131rcu_preempt10:20:303
2121674994029,8cyclictest37-21ksoftirqd/311:45:033
2121674994028,9cyclictest37-21ksoftirqd/311:31:393
2121674994027,9cyclictest3467602-21systemd-journal08:38:333
2121674994027,9cyclictest3467602-21systemd-journal08:38:333
2121674994026,10cyclictest309-21in:imuxsock08:05:003
2121674994024,12cyclictest37-21ksoftirqd/310:08:533
2121674994016,16cyclictest275-21dbus-daemon08:25:013
212166999405,30cyclictest2124726-21kworker/u8:208:25:021
2121669994029,8cyclictest23-21ksoftirqd/111:10:011
2121669994027,10cyclictest2191944-21latency_hist11:35:021
212166999402,3cyclictest131rcu_preempt11:58:551
212166999402,3cyclictest131rcu_preempt11:58:541
2121669994020,15cyclictest275-21dbus-daemon09:45:011
2121669994013,8cyclictest23-21ksoftirqd/109:16:361
2121674993930,6cyclictest37-21ksoftirqd/307:55:013
2121674993926,9cyclictest3467602-21systemd-journal07:30:003
2121674993925,7cyclictest2122092-21cron07:20:003
2121674993925,7cyclictest2122092-21cron07:20:003
2121669993929,8cyclictest23-21ksoftirqd/108:05:021
2121669993928,9cyclictest23-21ksoftirqd/108:45:001
2121669993927,9cyclictest23-21ksoftirqd/112:32:491
2121669993927,10cyclictest23-21ksoftirqd/112:36:281
2121669993924,11cyclictest23-21ksoftirqd/109:54:221
212167499385,4cyclictest150-21pr/ttyS207:50:003
212167499384,24cyclictest1-21systemd09:45:013
2121674993828,8cyclictest37-21ksoftirqd/307:45:023
2121674993823,11cyclictest309-21in:imuxsock08:45:003
2121669993830,4cyclictest2125266-21sh08:20:001
2121669993827,8cyclictest2122351-21sshd07:20:331
2121669993827,7cyclictest23-21ksoftirqd/109:35:241
2121669993826,8cyclictest2124187-21sshd07:55:331
2121669993811,6cyclictest131rcu_preempt12:11:261
2121669993811,6cyclictest131rcu_preempt12:11:251
212167499373,3cyclictest131rcu_preempt10:28:283
212167499373,30cyclictest2123947-21kworker/u8:108:30:023
212167499371,3cyclictest131rcu_preempt08:00:003
2121669993728,5cyclictest2123146-21munin-plugin-st07:40:011
2121669993726,8cyclictest23-21ksoftirqd/110:00:451
2121669993726,8cyclictest23-21ksoftirqd/110:00:451
2121669993726,8cyclictest2126815-21sshd08:49:331
212166999372,5cyclictest2172924-21ssh10:51:501
2121669993725,8cyclictest275-21dbus-daemon09:05:001
2121669993725,10cyclictest23-21ksoftirqd/108:53:341
2121669993725,10cyclictest23-21ksoftirqd/108:53:331
2121674993626,6cyclictest2122479-21latency_hist07:25:013
2121669993627,5cyclictest2127880-21sh09:10:001
212166999362,6cyclictest0-21swapper/107:45:021
2121669993625,8cyclictest23-21ksoftirqd/111:51:411
2121669993625,8cyclictest23-21ksoftirqd/107:10:021
2121674993523,8cyclictest37-21ksoftirqd/308:53:013
2121674993523,8cyclictest37-21ksoftirqd/308:53:013
2121674993520,10cyclictest3467602-21systemd-journal08:32:343
2121669993524,9cyclictest23-21ksoftirqd/108:10:011
2121669993520,9cyclictest3467602-21systemd-journal08:12:331
2121674993322,9cyclictest37-21ksoftirqd/307:35:023
2121669993225,4cyclictest2121840-21latency_hist07:15:011
2121669993220,9cyclictest23-21ksoftirqd/108:35:021
2121674993023,4cyclictest2121585-21latency_hist07:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional