You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-23 - 11:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot5s.osadl.org (updated Sun Aug 23, 2026 00:44:21)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2164999260,2cyclictest6551-21sh22:28:221
21650992523,1cyclictest19433-21irqstats00:35:302
2164899250,24cyclictest9159-21ssh23:28:080
21651992424,0cyclictest18422-1kworker/u9:222:13:223
21651992423,1cyclictest0-21swapper/323:45:253
2165199242,21cyclictest14918-21diskmemload23:27:413
2165199240,24cyclictest0-21swapper/322:48:393
2165199240,23cyclictest3941-21apt-get22:55:263
2165199240,23cyclictest20181-21ssh00:06:213
2165199240,23cyclictest16087-21basename23:35:003
2165199240,23cyclictest14918-21diskmemload22:54:223
2165199240,23cyclictest14918-21diskmemload22:21:493
2165199240,23cyclictest14918-21diskmemload00:24:153
2165199240,1cyclictest0-21swapper/323:55:313
2165099240,24cyclictest14918-21diskmemload22:53:002
2165099240,23cyclictest24002-21cron19:15:002
21649992422,1cyclictest16632-21ssh00:04:051
21649992422,1cyclictest0-21swapper/122:18:371
2164999240,24cyclictest0-21swapper/100:19:021
2164999240,23cyclictest8908-21latency_hist23:00:011
2164999240,23cyclictest0-21swapper/123:38:411
2164999240,23cyclictest0-21swapper/123:27:381
2164999240,1cyclictest0-21swapper/122:09:321
2164999240,0cyclictest0-21swapper/122:52:471
21648992423,1cyclictest0-21swapper/021:26:150
21648992423,0cyclictest0-21swapper/022:25:240
2164899241,2cyclictest4910-21cron23:25:000
2164899240,24cyclictest14918-21diskmemload00:27:330
2164899240,23cyclictest14918-21diskmemload23:40:150
2164899240,23cyclictest0-21swapper/020:55:240
2164899240,23cyclictest0-21swapper/000:32:320
2164899240,22cyclictest0-21swapper/021:33:350
2164899240,0cyclictest62550irq/127-eno121:20:510
2164899240,0cyclictest0-21swapper/022:37:210
21651992323,0cyclictest14918-21diskmemload22:40:123
21651992323,0cyclictest0-21swapper/323:20:263
21651992322,1cyclictest0-21swapper/321:05:263
21651992320,2cyclictest8368-21missed_timers00:25:313
2165199230,2cyclictest25326-21ssh00:10:543
2165199230,23cyclictest0-21swapper/323:00:133
2165199230,23cyclictest0-21swapper/322:15:443
2165199230,23cyclictest0-21swapper/300:02:333
2165199230,22cyclictest9209-21sh22:30:303
2165199230,22cyclictest15395-21ssh00:31:293
2165199230,0cyclictest14918-21diskmemload22:25:163
2165199230,0cyclictest0-21swapper/321:28:183
21650992323,0cyclictest14918-21diskmemload22:56:032
21650992323,0cyclictest0-21swapper/222:31:462
21650992323,0cyclictest0-21swapper/221:10:022
21650992323,0cyclictest0-21swapper/200:13:462
21650992323,0cyclictest0-21swapper/200:03:212
21650992322,0cyclictest0-21swapper/222:12:052
21650992322,0cyclictest0-21swapper/200:22:522
21650992321,1cyclictest0-21swapper/219:20:002
21650992320,2cyclictest4893-21cat20:50:002
21650992320,2cyclictest3938-21rm23:23:372
21650992320,0cyclictest0-21swapper/200:09:462
2165099230,2cyclictest23236-21ssh23:11:362
2165099230,23cyclictest0-21swapper/200:34:232
2165099230,22cyclictest5184-21rm21:57:592
2165099230,22cyclictest29784-21sh23:45:472
2165099230,22cyclictest14918-21diskmemload23:26:042
2165099230,22cyclictest13610-21ssh22:35:132
2165099230,22cyclictest1222-21dump-pmu-power00:20:002
2165099230,22cyclictest0-21swapper/223:58:352
2165099230,0cyclictest14918-21diskmemload23:05:562
2165099230,0cyclictest14918-21diskmemload21:45:382
2165099230,0cyclictest0-21swapper/223:34:312
2165099230,0cyclictest0-21swapper/221:15:062
21649992323,0cyclictest0-21swapper/123:34:081
21649992323,0cyclictest0-21swapper/123:08:181
21649992323,0cyclictest0-21swapper/121:12:191
21649992322,0cyclictest0-21swapper/123:51:491
21649992322,0cyclictest0-21swapper/123:21:131
21649992322,0cyclictest0-21swapper/122:38:251
21649992321,1cyclictest14918-21diskmemload00:10:281
21649992321,1cyclictest0-21swapper/123:16:501
21649992321,1cyclictest0-21swapper/122:45:411
21649992321,1cyclictest0-21swapper/120:15:001
21649992321,1cyclictest0-21swapper/100:38:041
2164999230,23cyclictest0-21swapper/123:01:071
2164999230,23cyclictest0-21swapper/121:43:361
2164999230,22cyclictest29994-21ssh23:46:021
2164999230,22cyclictest27705-21munin-plugin-st20:30:011
2164999230,22cyclictest2759-21sh21:26:091
2164999230,22cyclictest14944-21perf21:10:001
2164999230,22cyclictest0-21swapper/123:40:041
2164999230,22cyclictest0-21swapper/100:20:261
2164999230,0cyclictest0-21swapper/121:37:051
2164999230,0cyclictest0-21swapper/121:23:051
21648992323,0cyclictest62550irq/127-eno122:46:110
21648992323,0cyclictest0-21swapper/022:52:430
21648992323,0cyclictest0-21swapper/021:48:070
21648992323,0cyclictest0-21swapper/000:17:120
21648992323,0cyclictest0-21swapper/000:06:250
21648992321,1cyclictest24377-21diskmemload22:15:270
21648992321,1cyclictest1221-21perf19:35:000
21648992321,1cyclictest0-21swapper/023:09:260
21648992321,1cyclictest0-21swapper/022:31:060
21648992321,1cyclictest0-21swapper/021:55:320
21648992321,1cyclictest0-21swapper/021:17:080
21648992321,1cyclictest0-21swapper/020:10:000
21648992321,1cyclictest0-21swapper/000:11:170
21648992320,2cyclictest22057-21wc23:10:330
21648992320,2cyclictest21674-21sh23:40:000
2164899231,1cyclictest62550irq/127-eno122:41:350
2164899230,2cyclictest19545-21grep22:10:330
2164899230,23cyclictest0-21swapper/023:52:080
2164899230,23cyclictest0-21swapper/023:47:130
2164899230,23cyclictest0-21swapper/000:22:080
2164899230,22cyclictest31465-21sh23:19:430
2164899230,22cyclictest2152-21awk22:25:000
2164899230,22cyclictest17909-21ssh21:10:440
2164899230,22cyclictest13575-21sh21:35:420
2164899230,22cyclictest10538-21ssh22:02:420
2164899230,21cyclictest0-21swapper/023:58:520
2164899230,0cyclictest0-21swapper/022:56:430
21651992222,0cyclictest23190-21apt-get20:20:243
21651992222,0cyclictest0-21swapper/321:35:263
21651992220,2cyclictest6922-21ssh22:00:103
21651992220,2cyclictest2948-21ssh21:55:323
21651992220,1cyclictest25236-21sh23:42:073
21651992220,1cyclictest24002-21ntp_states21:45:293
21651992220,1cyclictest18162-21irqstats21:40:293
21651992220,1cyclictest0-21swapper/322:37:073
2165199220,22cyclictest31052-21ssh23:19:043
2165199220,21cyclictest29125-21apt-get19:25:233
2165199220,21cyclictest20763-21apt-get20:15:243
2165199220,21cyclictest0-21swapper/322:05:273
2165199220,21cyclictest0-21swapper/320:35:243
2165199220,21cyclictest0-21swapper/319:55:243
2165199220,1cyclictest914-21sh23:50:213
2165199220,1cyclictest6049-21munin-run19:45:013
2165199220,1cyclictest24553-21rm21:16:483
2165199220,1cyclictest0-21swapper/323:11:153
2165199220,0cyclictest0-21swapper/323:06:593
21650992222,0cyclictest0-21swapper/223:02:232
21650992222,0cyclictest0-21swapper/222:40:112
21650992222,0cyclictest0-21swapper/222:21:552
21650992222,0cyclictest0-21swapper/221:30:442
21650992220,1cyclictest9738-21ssh22:01:432
21650992220,1cyclictest0-21swapper/222:19:042
21650992220,1cyclictest0-21swapper/221:41:452
21650992218,4cyclictest0-21swapper/200:25:162
2165099220,2cyclictest16638-21ssh23:35:242
2165099220,22cyclictest27717-21ssh22:46:422
2165099220,22cyclictest0-21swapper/221:20:042
2165099220,21cyclictest28898-21sh23:16:122
2165099220,21cyclictest22913-21sendmail-msp20:20:002
2165099220,21cyclictest0-21swapper/221:50:542
2165099220,21cyclictest0-21swapper/220:40:252
2165099220,1cyclictest606-21dbus-daemon20:00:002
2165099220,1cyclictest12370-21ssh22:05:032
2165099220,1cyclictest0-21swapper/223:40:112
21649992222,0cyclictest0-21swapper/122:33:531
21649992221,0cyclictest0-21swapper/121:55:041
21649992220,1cyclictest313-21systemd-journal19:50:011
2164999220,21cyclictest14918-21diskmemload22:22:071
2164999220,21cyclictest0-21swapper/121:51:301
2164999220,21cyclictest0-21swapper/121:30:241
2164999220,21cyclictest0-21swapper/120:00:231
2164999220,21cyclictest0-21swapper/119:40:251
2164999220,21cyclictest0-21swapper/100:31:271
2164999220,1cyclictest14918-21diskmemload22:11:531
2164999220,1cyclictest0-21swapper/123:57:161
2164999220,1cyclictest0-21swapper/123:10:051
2164999220,1cyclictest0-21swapper/121:15:241
2164999220,0cyclictest0-21swapper/122:00:121
21648992221,1cyclictest5177-21chrt20:50:260
21648992221,0cyclictest0-21swapper/019:40:250
2164899220,22cyclictest0-21swapper/000:38:290
2164899220,21cyclictest17319-21apt-get21:40:250
2164899220,21cyclictest14868-21ssh22:05:550
2164899220,21cyclictest0-21swapper/023:30:580
2164899220,1cyclictest0-21swapper/021:50:020
21651992121,0cyclictest18368-21apt-get20:10:253
21651992121,0cyclictest15974-21apt-get20:05:253
21651992121,0cyclictest0-21swapper/319:50:013
21651992121,0cyclictest0-21swapper/300:15:033
21651992120,1cyclictest16581-21sh23:35:203
2165199210,21cyclictest14918-21diskmemload21:51:003
2165199210,20cyclictest24312-21apt-get19:15:253
2165199210,20cyclictest19579-21ssh00:35:303
2165199210,20cyclictest0-21swapper/321:30:393
2165199210,0cyclictest329-21apt-get20:40:253
2165199210,0cyclictest0-21swapper/321:10:173
21650992121,0cyclictest0-21swapper/223:50:462
21650992120,1cyclictest3925-21apt-get19:40:252
21650992119,1cyclictest28835-21cron19:25:002
21650992118,2cyclictest8402-21cron19:50:012
2165099210,21cyclictest0-21swapper/221:35:122
2165099210,0cyclictest0-21swapper/222:25:342
2165099210,0cyclictest0-21swapper/220:05:252
21649992120,0cyclictest0-21swapper/120:35:241
21648992121,0cyclictest0-21swapper/000:01:160
2164899210,1cyclictest15700-21perf20:05:000
2164899210,0cyclictest0-21swapper/021:05:260
21651992020,0cyclictest0-21swapper/320:25:243
21651992020,0cyclictest0-21swapper/319:35:243
2165199200,0cyclictest0-21swapper/320:00:233
21650992020,0cyclictest0-21swapper/221:00:022
21650992020,0cyclictest0-21swapper/220:50:262
21650992020,0cyclictest0-21swapper/220:25:002
21650992020,0cyclictest0-21swapper/220:10:252
21650992019,1cyclictest25584-21apt-get20:25:242
2165099200,0cyclictest1495-21apt-get19:35:242
21649992020,0cyclictest0-21swapper/119:55:241
21649992020,0cyclictest0-21swapper/119:50:241
21649992018,1cyclictest0-21swapper/119:25:001
2164999200,19cyclictest3620-21idleruntime-cro19:40:001
21648992020,0cyclictest0-21swapper/020:25:240
21651991919,0cyclictest0-21swapper/321:00:023
21650991919,0cyclictest30376-21apt-get20:35:242
21650991918,1cyclictest13524-21apt-get20:00:232
21649991919,0cyclictest0-21swapper/120:30:251
21649991919,0cyclictest0-21swapper/119:10:241
21649991918,1cyclictest0-21swapper/120:05:251
21649991918,1cyclictest0-21swapper/119:25:231
21649991916,2cyclictest26421-21idleruntime-cro19:20:001
2164999190,18cyclictest0-21swapper/120:20:241
21648991918,1cyclictest21918-21apt-get19:10:240
21648991918,0cyclictest0-21swapper/019:20:250
21651991818,0cyclictest0-21swapper/320:45:263
21651991818,0cyclictest0-21swapper/319:20:253
21651991818,0cyclictest0-21swapper/319:10:243
21650991818,0cyclictest0-21swapper/219:50:242
21649991818,0cyclictest0-21swapper/120:15:241
21648991818,0cyclictest0-21swapper/019:55:240
21651991717,0cyclictest0-21swapper/320:50:263
21649991717,0cyclictest0-21swapper/120:50:261
21649991715,1cyclictest2501-21munin-run20:45:011
21648991717,0cyclictest0-21swapper/020:45:260
21648991717,0cyclictest0-21swapper/019:15:250
21648991715,1cyclictest20481-21perf20:15:000
2164899170,13cyclictest0-21swapper/020:34:560
21650991614,1cyclictest31521-21apt-get19:30:242
2165099160,15cyclictest14952-21munin-run21:10:002
2164999160,15cyclictest0-21swapper/120:50:001
21648991615,1cyclictest0-21swapper/019:50:010
21648991614,1cyclictest3595-21cron19:40:000
2164899160,15cyclictest23714-21perl20:20:260
21651991515,0cyclictest0-21swapper/320:55:243
21650991515,0cyclictest7569-21apt-get20:55:242
21650991515,0cyclictest0-21swapper/220:30:242
21649991515,0cyclictest0-21swapper/119:30:251
2164999150,1cyclictest8966-21switchtime20:55:321
21651991414,0cyclictest0-21swapper/320:30:163
2165199140,14cyclictest0-21swapper/319:50:113
2165199140,14cyclictest0-21swapper/319:32:013
21650991414,0cyclictest0-21swapper/219:25:182
21648991414,0cyclictest30376-21apt-get20:35:240
2164899140,14cyclictest0-21swapper/020:40:460
2164899140,14cyclictest0-21swapper/020:15:170
2164899140,0cyclictest0-21swapper/021:00:480
2164899140,0cyclictest0-21swapper/019:50:200
2164899140,0cyclictest0-21swapper/019:26:330
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional