You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-18 - 17:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot5s.osadl.org (updated Wed Mar 18, 2026 12:44:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2071899270,25cyclictest313-21systemd-journal10:25:000
2072099260,25cyclictest25174-21sh09:51:081
2072899250,24cyclictest0-21swapper/309:37:203
20724992522,3cyclictest0-21swapper/212:17:362
20724992522,0cyclictest0-21swapper/212:39:482
2072499250,24cyclictest0-21swapper/209:57:452
20720992525,0cyclictest0-21swapper/109:21:281
2072099250,24cyclictest0-21swapper/109:47:421
2071899250,24cyclictest27616-21sh10:53:180
20728992423,1cyclictest14088-21diskmemload10:50:533
2072899242,21cyclictest1463-21sh10:28:563
20728992422,1cyclictest0-21swapper/311:50:213
2072899241,2cyclictest0-21swapper/311:37:203
2072899240,23cyclictest25441-21modprobe11:22:223
2072899240,23cyclictest14088-21diskmemload12:01:583
2072899240,23cyclictest0-21swapper/312:07:333
2072899240,23cyclictest0-21swapper/309:10:333
2072499240,24cyclictest0-21swapper/210:39:412
2072499240,23cyclictest27796-21unixbench_singl09:52:282
2072499240,23cyclictest18632-21ssh11:16:182
2072499240,1cyclictest0-21swapper/209:26:352
20720992423,1cyclictest20158-21ssh12:17:381
20720992421,2cyclictest29142-21ssh11:25:581
2072099240,2cyclictest3728-21ssh09:30:521
2072099240,2cyclictest14674-21ssh09:40:541
2072099240,2cyclictest1392-21sh11:30:051
2072099240,24cyclictest0-21swapper/112:32:541
2072099240,23cyclictest1945-21ssh09:59:271
2072099240,23cyclictest14088-21diskmemload10:45:561
2072099240,0cyclictest14088-21diskmemload11:44:511
2072099240,0cyclictest0-21swapper/112:29:071
20718992423,1cyclictest14088-21diskmemload10:49:210
2071899241,22cyclictest0-21swapper/011:59:090
2071899240,24cyclictest14088-21diskmemload11:30:510
2071899240,24cyclictest0-21swapper/011:39:090
2071899240,23cyclictest313-21systemd-journal07:45:000
2071899240,23cyclictest14088-21diskmemload12:19:470
2071899240,23cyclictest14088-21diskmemload10:57:370
2071899240,23cyclictest0-21swapper/009:45:420
2071899240,1cyclictest11517-21ssh11:08:490
2071899240,0cyclictest0-21swapper/011:15:200
2071899240,0cyclictest0-21swapper/009:32:010
20728992323,0cyclictest0-21swapper/312:19:043
20728992323,0cyclictest0-21swapper/311:59:473
20728992323,0cyclictest0-21swapper/311:05:063
20728992323,0cyclictest0-21swapper/310:45:463
20728992321,2cyclictest34-21ksoftirqd/307:47:173
20728992320,2cyclictest357-21rm10:58:133
2072899230,23cyclictest14088-21diskmemload12:11:093
2072899230,23cyclictest14088-21diskmemload12:11:093
2072899230,23cyclictest0-21swapper/310:01:113
2072899230,22cyclictest24263-21apt-get10:20:023
2072899230,22cyclictest20709-21ptp4l11:17:263
2072899230,22cyclictest16400-21sh11:13:113
2072899230,22cyclictest10438-21ssh12:39:383
2072899230,1cyclictest2066-21ssh11:31:043
2072899230,0cyclictest14088-21diskmemload12:29:453
2072899230,0cyclictest0-21swapper/311:28:473
2072899230,0cyclictest0-21swapper/310:36:593
2072899230,0cyclictest0-21swapper/309:57:213
2072899230,0cyclictest0-21swapper/309:28:283
20724992323,0cyclictest0-21swapper/211:28:032
20724992323,0cyclictest0-21swapper/210:42:222
20724992323,0cyclictest0-21swapper/209:16:312
20724992321,1cyclictest2750-21sh10:30:262
20724992321,1cyclictest0-21swapper/211:57:232
20724992321,1cyclictest0-21swapper/209:41:062
20724992321,1cyclictest0-21swapper/209:20:412
20724992320,0cyclictest0-21swapper/211:32:032
2072499230,2cyclictest3698-21ssh10:01:462
2072499230,23cyclictest14088-21diskmemload10:56:202
2072499230,23cyclictest0-21swapper/211:09:272
2072499230,23cyclictest0-21swapper/210:50:272
2072499230,23cyclictest0-21swapper/209:12:252
2072499230,22cyclictest25486-21sh07:20:012
2072499230,22cyclictest15893-21ssh12:14:042
2072499230,22cyclictest15893-21ssh12:14:042
2072499230,22cyclictest14106-21latency_hist09:10:012
2072499230,22cyclictest13402-21ssh11:42:022
2072499230,22cyclictest0-21swapper/211:21:302
2072499230,22cyclictest0-21swapper/211:12:182
2072499230,22cyclictest0-21swapper/211:00:212
2072499230,1cyclictest14088-21diskmemload10:15:282
2072499230,0cyclictest0-21swapper/212:24:232
20720992323,0cyclictest16190-21ssh12:14:311
20720992323,0cyclictest16190-21ssh12:14:311
20720992323,0cyclictest14088-21diskmemload10:40:211
20720992323,0cyclictest0-21swapper/111:45:401
20720992323,0cyclictest0-21swapper/110:14:271
20720992323,0cyclictest0-21swapper/109:12:171
20720992321,1cyclictest25218-21ssh10:21:261
20720992321,1cyclictest0-21swapper/110:02:091
20720992320,2cyclictest13923-21sh11:12:071
20720992320,2cyclictest1339-21sh12:00:561
2072099230,2cyclictest23673-21rm11:51:381
2072099230,23cyclictest0-21swapper/112:06:431
2072099230,23cyclictest0-21swapper/110:38:341
2072099230,23cyclictest0-21swapper/110:17:181
2072099230,22cyclictest12446-21apt-get08:00:021
2072099230,22cyclictest0-21swapper/110:56:151
2072099230,1cyclictest0-21swapper/111:56:581
2072099230,0cyclictest0-21swapper/109:35:271
20718992323,0cyclictest14088-21diskmemload10:41:430
20718992323,0cyclictest0-21swapper/012:36:180
20718992323,0cyclictest0-21swapper/011:43:340
20718992323,0cyclictest0-21swapper/010:06:310
20718992323,0cyclictest0-21swapper/009:58:440
20718992323,0cyclictest0-21swapper/009:51:480
20718992321,1cyclictest25262-21apt-get09:20:030
2071899231,21cyclictest3702-21sh10:31:510
2071899230,2cyclictest7571-21cron07:50:000
2071899230,2cyclictest26340-21ssh11:52:580
2071899230,2cyclictest15371-21rm09:11:410
2071899230,23cyclictest14088-21diskmemload11:24:330
2071899230,23cyclictest14088-21diskmemload10:15:160
2071899230,23cyclictest0-21swapper/012:14:200
2071899230,23cyclictest0-21swapper/012:14:200
2071899230,23cyclictest0-21swapper/010:01:000
2071899230,23cyclictest0-21swapper/009:28:380
2071899230,22cyclictest22389-21rm12:20:380
2071899230,1cyclictest6207-21rm12:05:190
2071899230,1cyclictest24063-21ssh09:19:160
2071899230,1cyclictest15984-21ssh09:42:200
2071899230,0cyclictest0-21swapper/009:37:010
20728992222,0cyclictest14088-21diskmemload12:23:403
20728992222,0cyclictest14088-21diskmemload11:01:413
20728992222,0cyclictest0-21swapper/312:30:563
20728992222,0cyclictest0-21swapper/311:48:343
20728992222,0cyclictest0-21swapper/310:07:163
20728992222,0cyclictest0-21swapper/309:20:073
20728992221,0cyclictest14088-21diskmemload09:40:393
20728992220,1cyclictest25018-21ssh09:50:533
20728992220,1cyclictest14103-21perf09:10:013
20728992220,1cyclictest0-21swapper/310:30:133
20728992220,1cyclictest0-21swapper/309:16:123
20728992217,4cyclictest10051-21awk07:55:003
2072899220,22cyclictest0-21swapper/308:02:193
2072899220,21cyclictest0-21swapper/310:16:303
2072899220,21cyclictest0-21swapper/309:30:173
2072899220,1cyclictest22475-21lockfile-create08:20:013
2072899220,0cyclictest0-21swapper/310:40:493
2072899220,0cyclictest0-21swapper/310:10:323
20724992222,0cyclictest0-21swapper/212:32:432
20724992222,0cyclictest0-21swapper/212:27:232
20724992222,0cyclictest0-21swapper/209:30:042
20724992221,1cyclictest6705-21rm11:35:072
20724992221,1cyclictest0-21swapper/207:47:172
20724992220,1cyclictest0-21swapper/209:35:232
20724992217,2cyclictest14088-21diskmemload09:45:452
2072499220,21cyclictest5193-21dump-pmu-power07:45:002
2072499220,21cyclictest14088-21diskmemload12:02:002
2072499220,21cyclictest0-21swapper/208:20:012
2072499220,1cyclictest14869-21df10:12:202
2072499220,1cyclictest0-21swapper/211:50:552
2072499220,1cyclictest0-21swapper/211:45:062
2072499220,0cyclictest0-21swapper/210:48:422
2072499220,0cyclictest0-21swapper/207:12:192
20720992222,0cyclictest0-21swapper/110:50:351
20720992222,0cyclictest0-21swapper/110:29:071
20720992222,0cyclictest0-21swapper/109:15:121
20720992221,1cyclictest8561-21ssh10:06:201
20720992220,1cyclictest7358-21sh11:36:051
20720992220,1cyclictest0-21swapper/111:05:461
20720992219,2cyclictest24621-21/usr/sbin/munin11:22:251
2072099220,21cyclictest2487-21apt-get08:47:191
2072099220,21cyclictest0-21swapper/110:30:031
2072099220,21cyclictest0-21swapper/109:25:251
2072099220,21cyclictest0-21swapper/107:57:171
2072099220,21cyclictest0-21swapper/107:40:011
20718992222,0cyclictest0-21swapper/010:25:050
20718992221,1cyclictest2078-21ssh11:00:250
20718992220,1cyclictest9295-21perf09:00:010
20718992220,1cyclictest14043-21ssh10:11:350
20718992220,1cyclictest0-21swapper/012:03:370
2071899220,22cyclictest0-21swapper/011:14:020
2071899220,21cyclictest17374-21ssh11:45:060
2071899220,21cyclictest0-21swapper/010:35:180
2071899220,1cyclictest4350-21ssh12:33:090
2071899220,1cyclictest27255-21awk08:30:010
2071899220,0cyclictest0-21swapper/011:27:080
20728992120,1cyclictest9750-21apt-get09:02:183
20728992120,1cyclictest9750-21apt-get09:02:183
20728992119,1cyclictest2810-21awk07:40:013
20728992119,1cyclictest20047-21perf08:15:013
2072899210,21cyclictest0-21swapper/308:27:183
20724992121,0cyclictest0-21swapper/212:06:052
2072499210,20cyclictest0-21swapper/210:20:022
2072499210,1cyclictest0-21swapper/210:06:302
2072499210,0cyclictest29645-21ssh10:25:072
2072499210,0cyclictest0-21swapper/208:27:182
20720992121,0cyclictest0-21swapper/107:27:161
2072099210,21cyclictest5890-21ssh12:35:021
2072099210,0cyclictest9750-21apt-get09:02:181
2072099210,0cyclictest9750-21apt-get09:02:181
2071899210,1cyclictest0-21swapper/007:27:170
2071899210,0cyclictest0-21swapper/008:07:190
2071899210,0cyclictest0-21swapper/007:32:180
20728992020,0cyclictest0-21swapper/308:32:173
20728992020,0cyclictest0-21swapper/307:57:173
20728992020,0cyclictest0-21swapper/307:42:193
20728992019,0cyclictest0-21swapper/308:47:193
2072899200,0cyclictest0-21swapper/308:37:193
2072899200,0cyclictest0-21swapper/308:22:183
20724992020,0cyclictest27692-21apt-get08:32:172
20724992020,0cyclictest0-21swapper/208:57:182
20724992019,0cyclictest0-21swapper/208:47:192
20724992018,1cyclictest606-21dbus-daemon08:45:002
20724992018,1cyclictest17642-21sh08:10:012
2072099200,20cyclictest0-21swapper/107:17:191
2072099200,0cyclictest0-21swapper/108:32:181
20718992020,0cyclictest0-21swapper/009:07:190
20718992020,0cyclictest0-21swapper/008:47:190
20718992020,0cyclictest0-21swapper/008:32:170
20718992018,2cyclictest62550irq/127-eno108:22:180
20718992018,1cyclictest606-21dbus-daemon08:55:000
20718992017,2cyclictest22473-21perf08:20:010
20728991919,0cyclictest0-21swapper/307:27:173
20728991919,0cyclictest0-21swapper/307:22:193
20728991918,1cyclictest21127-21apt-get07:12:193
20724991918,1cyclictest13296-21apt-get08:02:192
2072499190,18cyclictest28331-21apt-get07:27:172
20720991919,0cyclictest12145-21apt-get09:07:191
20720991919,0cyclictest0-21swapper/108:52:191
20720991919,0cyclictest0-21swapper/107:22:191
20720991914,0cyclictest0-21swapper/108:12:171
20718991919,0cyclictest0-21swapper/007:12:190
20728991818,0cyclictest0-21swapper/308:07:193
20728991817,0cyclictest30728-21apt-get07:32:183
20724991818,0cyclictest0-21swapper/208:22:182
20724991818,0cyclictest0-21swapper/207:37:192
20720991818,0cyclictest8032-21apt-get07:52:191
20720991818,0cyclictest0-21swapper/108:45:001
20720991818,0cyclictest0-21swapper/107:32:181
2072099180,17cyclictest4227-21needreboot07:42:231
20718991818,0cyclictest23521-21apt-get07:17:190
20718991818,0cyclictest0-21swapper/008:42:190
20718991815,2cyclictest11685-21cron09:05:010
20718991815,2cyclictest11685-21cron09:05:010
20724991717,0cyclictest0-21swapper/208:12:172
20724991717,0cyclictest0-21swapper/207:52:192
20720991716,1cyclictest22904-21apt-get08:22:181
20720991715,1cyclictest23070-21cron07:15:001
20718991717,0cyclictest30091-21apt-get08:37:190
20718991717,0cyclictest0-21swapper/007:22:190
20718991715,1cyclictest0-21swapper/007:40:010
2071899170,17cyclictest10065-21munin-plugin-st07:55:000
20728991614,1cyclictest0-21swapper/308:52:193
20728991613,2cyclictest25468-21run-parts07:20:013
2072499160,15cyclictest0-21swapper/208:37:192
20720991616,0cyclictest20478-21apt-get08:17:191
2072099160,1cyclictest17628-21cron08:10:011
2071899160,15cyclictest12476-21munin-run08:00:000
20728991515,0cyclictest0-21swapper/308:57:183
20724991515,0cyclictest10480-21apt-get07:57:172
20724991515,0cyclictest0-21swapper/209:02:172
20724991515,0cyclictest0-21swapper/209:02:172
2072099150,1cyclictest30730-21hddtemp_smartct08:37:221
20718991515,0cyclictest0-21swapper/008:02:190
2072899140,14cyclictest0-21swapper/308:42:043
20724991414,0cyclictest0-21swapper/207:30:222
2072499140,14cyclictest0-21swapper/208:50:022
2072499140,0cyclictest0-21swapper/207:20:432
2072099140,14cyclictest0-21swapper/108:25:211
2072099140,14cyclictest0-21swapper/107:45:131
2072099140,0cyclictest0-21swapper/108:55:111
2071899140,14cyclictest0-21swapper/008:10:110
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional