You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-13 - 20:44

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot5s.osadl.org (updated Fri Mar 13, 2026 12:44:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2516999280,2cyclictest19414-21latency_hist11:45:013
2516999270,2cyclictest7193-21dump-pmu-power07:40:013
2516999260,25cyclictest17556-21ssh10:11:003
2516999260,25cyclictest0-21swapper/311:39:513
2516999260,22cyclictest0-21swapper/310:24:543
2516999260,22cyclictest0-21swapper/309:53:483
2516999260,22cyclictest0-21swapper/309:53:483
2516999260,0cyclictest0-21swapper/310:43:273
2516499260,25cyclictest18504-21diskmemload10:45:232
25162992623,2cyclictest15477-21ssh10:08:061
25169992521,3cyclictest0-21swapper/312:21:383
2516999250,24cyclictest27352-21ssh10:51:143
2516999250,24cyclictest0-21swapper/310:05:043
2516999250,24cyclictest0-21swapper/309:55:293
2516999250,21cyclictest0-21swapper/311:09:513
2516999250,1cyclictest1958-21munin-run09:25:003
2516999250,0cyclictest0-21swapper/310:01:523
25164992523,1cyclictest0-21swapper/209:35:082
25169992423,1cyclictest18504-21diskmemload12:01:063
25169992422,1cyclictest1665-21apt-get08:36:543
25169992421,3cyclictest0-21swapper/310:37:413
25169992421,2cyclictest16728-21kworker/u8:010:45:453
25169992420,3cyclictest18504-21diskmemload09:15:213
25169992420,3cyclictest0-21swapper/311:11:143
25169992419,4cyclictest2888-21ssh10:57:063
25169992419,4cyclictest23028-21ssh10:16:223
2516999240,24cyclictest0-21swapper/312:37:493
2516999240,23cyclictest32723-21apt-get07:26:533
2516999240,23cyclictest18504-21diskmemload09:45:293
2516999240,23cyclictest18504-21diskmemload09:35:013
2516999240,23cyclictest18504-21diskmemload09:25:053
2516999240,23cyclictest0-21swapper/311:53:533
2516999240,23cyclictest0-21swapper/309:11:253
2516999240,20cyclictest18504-21diskmemload12:29:463
2516999240,20cyclictest0-21swapper/312:12:483
2516999240,0cyclictest0-21swapper/312:05:113
25164992422,1cyclictest0-21swapper/211:25:412
25164992422,1cyclictest0-21swapper/211:25:412
2516499240,24cyclictest0-21swapper/210:57:522
2516499240,23cyclictest18504-21diskmemload10:39:522
2516499240,23cyclictest18504-21diskmemload09:17:432
2516499240,23cyclictest16680-21cron10:10:012
2516499240,23cyclictest0-21swapper/212:19:552
2516499240,23cyclictest0-21swapper/211:43:212
2516499240,23cyclictest0-21swapper/211:05:122
2516499240,1cyclictest7607-21ssh10:01:442
2516499240,0cyclictest0-21swapper/212:30:242
25162992423,1cyclictest0-21swapper/112:22:481
25162992423,1cyclictest0-21swapper/111:37:111
25162992422,1cyclictest20233-21apt-get12:16:551
25162992422,1cyclictest0-21swapper/112:11:461
25162992422,1cyclictest0-21swapper/110:27:021
2516299240,23cyclictest19385-21cron11:45:011
2516299240,23cyclictest0-21swapper/110:00:131
2516299240,0cyclictest0-21swapper/110:54:021
2516299240,0cyclictest0-21swapper/109:15:151
25158992423,1cyclictest18504-21diskmemload11:15:450
25158992423,1cyclictest18504-21diskmemload09:42:420
25158992423,1cyclictest16394-21ssh10:40:240
2515899240,23cyclictest62550irq/127-eno111:33:130
2515899240,23cyclictest28252-21ssh09:50:140
2515899240,23cyclictest28252-21ssh09:50:140
2515899240,23cyclictest18504-21diskmemload09:16:450
2515899240,1cyclictest18504-21diskmemload11:48:400
25169992321,2cyclictest0-21swapper/312:32:573
25169992321,1cyclictest0-21swapper/308:25:013
25169992320,3cyclictest0-21swapper/311:29:353
25169992320,3cyclictest0-21swapper/311:29:353
25169992320,3cyclictest0-21swapper/311:15:473
25169992318,4cyclictest19244-21cron08:05:003
2516999230,23cyclictest0-21swapper/310:34:353
2516999230,22cyclictest0-21swapper/311:57:063
2516999230,20cyclictest0-21swapper/311:46:513
2516999230,0cyclictest0-21swapper/310:29:353
2516999230,0cyclictest0-21swapper/309:40:063
25164992323,0cyclictest0-21swapper/212:07:082
25164992323,0cyclictest0-21swapper/210:33:122
25164992323,0cyclictest0-21swapper/210:16:322
25164992323,0cyclictest0-21swapper/209:21:322
2516499230,23cyclictest18504-21diskmemload12:27:102
2516499230,23cyclictest0-21swapper/211:45:272
2516499230,22cyclictest18504-21diskmemload11:33:182
2516499230,22cyclictest18504-21diskmemload11:11:372
2516499230,22cyclictest16960-21ssh12:12:272
2516499230,22cyclictest0-21swapper/211:22:322
2516499230,22cyclictest0-21swapper/210:42:082
2516499230,0cyclictest0-21swapper/209:14:032
25162992323,0cyclictest15848-21kworker/u8:011:21:101
25162992323,0cyclictest0-21swapper/112:04:351
25162992323,0cyclictest0-21swapper/111:56:511
25162992323,0cyclictest0-21swapper/111:46:451
25162992323,0cyclictest0-21swapper/110:16:501
25162992323,0cyclictest0-21swapper/109:49:281
25162992321,1cyclictest21417-21rm11:16:091
25162992321,1cyclictest0-21swapper/111:25:151
25162992321,1cyclictest0-21swapper/111:25:151
2516299230,23cyclictest0-21swapper/111:53:511
2516299230,23cyclictest0-21swapper/110:30:071
2516299230,23cyclictest0-21swapper/109:40:081
2516299230,22cyclictest6539-21ssh11:01:551
2516299230,22cyclictest32263-21mailstats12:27:021
2516299230,22cyclictest28804-21ssh09:51:121
2516299230,22cyclictest28804-21ssh09:51:121
2516299230,22cyclictest16170-21sh11:11:081
2516299230,22cyclictest0-21swapper/110:21:421
2516299230,1cyclictest31604-21apt-get10:55:041
2516299230,0cyclictest0-21swapper/112:39:211
2516299230,0cyclictest0-21swapper/112:07:291
2516299230,0cyclictest0-21swapper/109:10:551
25158992323,0cyclictest18504-21diskmemload09:48:150
25158992323,0cyclictest0-21swapper/012:31:470
25158992323,0cyclictest0-21swapper/011:10:560
25158992323,0cyclictest0-21swapper/010:58:340
25158992323,0cyclictest0-21swapper/010:15:380
25158992323,0cyclictest0-21swapper/010:06:140
25158992323,0cyclictest0-21swapper/009:14:260
25158992321,1cyclictest9538-21awk09:31:580
25158992321,1cyclictest19412-21ls11:45:010
25158992321,1cyclictest13304-21idleruntime-cro09:00:010
2515899231,21cyclictest18504-21diskmemload09:37:020
2515899230,23cyclictest18504-21diskmemload11:39:470
2515899230,23cyclictest0-21swapper/011:07:460
2515899230,22cyclictest19280-21ssh12:15:340
2515899230,22cyclictest13774-21ssh12:10:200
2515899230,22cyclictest0-21swapper/012:20:560
2515899230,1cyclictest29141-21ssh11:22:180
25169992222,0cyclictest0-21swapper/311:23:253
25169992220,2cyclictest0-21swapper/309:31:063
25169992216,5cyclictest0-21swapper/309:10:013
2516999220,2cyclictest5449-21ssh11:00:393
2516999220,21cyclictest29926-21munin-plugin-st07:20:013
2516999220,21cyclictest18504-21diskmemload12:15:133
2516999220,21cyclictest0-21swapper/311:31:403
2516999220,21cyclictest0-21swapper/307:41:523
25164992222,0cyclictest18504-21diskmemload11:01:332
25164992222,0cyclictest0-21swapper/210:50:282
25164992222,0cyclictest0-21swapper/210:10:032
25164992222,0cyclictest0-21swapper/209:25:302
25164992220,1cyclictest14408-21turbostat.cron07:55:002
25164992220,1cyclictest0-21swapper/212:36:472
2516499220,22cyclictest0-21swapper/210:25:042
2516499220,22cyclictest0-21swapper/209:50:102
2516499220,22cyclictest0-21swapper/209:50:102
2516499220,21cyclictest7301-21ssh09:30:112
2516499220,21cyclictest1241-21cron08:35:012
2516499220,21cyclictest1-21systemd08:20:012
2516499220,21cyclictest0-21swapper/212:20:192
2516499220,21cyclictest0-21swapper/211:58:422
2516499220,21cyclictest0-21swapper/211:15:592
2516499220,21cyclictest0-21swapper/210:20:162
2516499220,21cyclictest0-21swapper/207:31:532
2516499220,21cyclictest0-21swapper/207:11:512
2516499220,1cyclictest0-21swapper/211:50:172
2516499220,1cyclictest0-21swapper/211:37:362
2516499220,1cyclictest0-21swapper/209:49:092
2516499220,0cyclictest18504-21diskmemload12:01:002
2516499220,0cyclictest18504-21diskmemload09:40:432
25162992222,0cyclictest0-21swapper/111:32:051
25162992222,0cyclictest0-21swapper/110:45:391
25162992222,0cyclictest0-21swapper/110:36:051
25162992222,0cyclictest0-21swapper/109:20:291
25162992221,1cyclictest26891-21apt-get08:21:511
25162992220,1cyclictest10870-21perf08:55:001
2516299220,2cyclictest17103-21ssh10:10:191
2516299220,21cyclictest16407-21sh10:40:251
2516299220,21cyclictest1264-21perf08:35:011
2516299220,21cyclictest0-21swapper/111:05:341
2516299220,21cyclictest0-21swapper/109:36:211
2516299220,21cyclictest0-21swapper/109:25:011
2516299220,21cyclictest0-21swapper/107:11:511
2516299220,1cyclictest5765-21sh12:32:211
2516299220,1cyclictest11273-21apt-get08:56:531
2516299220,1cyclictest0-21swapper/109:32:001
2516299220,0cyclictest0-21swapper/109:58:081
25158992222,0cyclictest18504-21diskmemload10:51:200
25158992222,0cyclictest18504-21diskmemload09:27:010
25158992222,0cyclictest0-21swapper/012:25:180
25158992222,0cyclictest0-21swapper/010:45:310
25158992222,0cyclictest0-21swapper/008:41:540
25158992220,2cyclictest7707-21rm12:35:030
2515899220,22cyclictest29681-21ssh11:54:580
2515899220,22cyclictest0-21swapper/010:21:390
2515899220,22cyclictest0-21swapper/007:11:510
2515899220,21cyclictest5341-21rm10:30:030
2515899220,21cyclictest18504-21diskmemload11:01:470
2515899220,21cyclictest0-21swapper/012:05:160
2515899220,21cyclictest0-21swapper/010:35:020
2515899220,21cyclictest0-21swapper/008:31:530
2515899220,1cyclictest29488-21ssh09:20:290
2515899220,1cyclictest0-21swapper/010:00:010
2515899220,0cyclictest30508-21sh11:55:500
2515899220,0cyclictest18504-21diskmemload11:27:070
2515899220,0cyclictest18504-21diskmemload11:27:070
2515899220,0cyclictest18504-21diskmemload09:55:490
2515899220,0cyclictest0-21swapper/010:10:060
2516999210,2cyclictest24247-21latency_hist08:15:013
2516999210,1cyclictest25511-21apt-get07:11:513
2516999210,0cyclictest0-21swapper/308:26:523
2516999210,0cyclictest0-21swapper/308:06:533
25164992120,1cyclictest15678-21apt-get09:05:022
2516299210,20cyclictest0-21swapper/109:01:531
2516299210,0cyclictest4088-21apt-get08:41:541
2515899210,20cyclictest24466-21apt-get08:16:540
2515899210,0cyclictest0-21swapper/012:00:180
25169992020,0cyclictest0-21swapper/308:46:533
25164992020,0cyclictest0-21swapper/207:16:532
2516499200,20cyclictest0-21swapper/208:41:542
25162992020,0cyclictest0-21swapper/108:06:531
25162992020,0cyclictest0-21swapper/107:26:531
25158992020,0cyclictest0-21swapper/008:46:530
25158992020,0cyclictest0-21swapper/007:46:520
25158992020,0cyclictest0-21swapper/007:26:530
2515899200,20cyclictest0-21swapper/009:01:530
2515899200,0cyclictest0-21swapper/008:36:540
2515899200,0cyclictest0-21swapper/007:31:530
25169991919,0cyclictest0-21swapper/307:46:523
25169991917,1cyclictest0-21swapper/307:51:523
25164991919,0cyclictest0-21swapper/208:21:522
25164991919,0cyclictest0-21swapper/208:11:522
25164991919,0cyclictest0-21swapper/207:41:522
25164991919,0cyclictest0-21swapper/207:21:512
25164991918,1cyclictest17228-21apt-get08:01:532
2516499190,18cyclictest19676-21apt-get08:06:532
25162991919,0cyclictest16479-21apt-get09:06:541
25162991919,0cyclictest12415-21apt-get07:51:521
25162991919,0cyclictest0-21swapper/108:46:541
25162991918,1cyclictest0-21swapper/107:35:011
25158991919,0cyclictest0-21swapper/007:51:520
25158991919,0cyclictest0-21swapper/007:41:520
25162991817,1cyclictest0-21swapper/107:16:541
25158991818,0cyclictest0-21swapper/007:16:540
25158991817,1cyclictest22069-21apt-get08:11:520
25158991817,0cyclictest0-21swapper/008:01:530
25158991817,0cyclictest0-21swapper/007:36:530
2516999170,3cyclictest0-21swapper/307:31:573
25164991717,0cyclictest0-21swapper/207:46:522
25164991716,0cyclictest0-21swapper/209:01:522
25162991714,2cyclictest11998-21apt07:50:001
2516999160,16cyclictest6092-21perf08:45:003
2516999160,0cyclictest0-21swapper/308:15:093
25164991616,0cyclictest0-21swapper/208:56:532
25164991614,1cyclictest0-21swapper/207:56:572
25164991613,2cyclictest7206-21perf07:40:012
2516299160,15cyclictest30325-21apt-get07:21:521
25158991616,0cyclictest0-21swapper/009:06:540
25158991616,0cyclictest0-21swapper/008:51:540
2516999150,2cyclictest0-21swapper/308:56:533
2516999150,1cyclictest0-21swapper/307:21:533
25164991515,0cyclictest0-21swapper/208:36:542
2516299150,6cyclictest31465-21latency_hist08:30:011
2516999140,14cyclictest0-21swapper/309:01:033
2516999140,14cyclictest0-21swapper/308:50:093
2516999140,14cyclictest0-21swapper/308:30:353
2516499140,14cyclictest0-21swapper/208:50:432
2516499140,14cyclictest0-21swapper/208:45:092
2516499140,14cyclictest0-21swapper/208:26:112
2516499140,14cyclictest0-21swapper/207:25:092
25162991414,0cyclictest0-21swapper/108:35:131
25162991414,0cyclictest0-21swapper/108:15:191
2516299140,14cyclictest0-21swapper/108:11:011
2516299140,14cyclictest0-21swapper/107:40:071
2516299140,14cyclictest0-21swapper/107:35:111
2516299140,0cyclictest0-21swapper/108:01:031
2516299140,0cyclictest0-21swapper/107:55:131
25158991414,0cyclictest0-21swapper/008:25:100
25158991414,0cyclictest0-21swapper/007:55:170
25158991414,0cyclictest0-21swapper/007:20:460
2515899140,14cyclictest0-21swapper/008:20:110
2515899140,0cyclictest0-21swapper/008:05:090
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional