You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-15 - 00:59

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Sun Jun 14, 2026 12:43:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
8846991021,82cyclictest17323-21unixbench_multi07:30:310
115442980,54sleep18050irq/56-dwc_otg_09:37:271
115442980,54sleep18050irq/56-dwc_otg_09:37:271
884699941,67cyclictest3630-21grep10:05:340
8846999315,74cyclictest4907-21/usr/sbin/munin10:45:270
884699931,4cyclictest25943-21ssh12:30:020
884699921,7cyclictest5523-21ssh11:25:230
884699915,69cyclictest15566-21unixbench_singl07:25:300
884699911,4cyclictest7218-21latency_hist08:35:030
884699902,71cyclictest0-21swapper/010:22:380
884699891,4cyclictest22017-21unixbench_singl11:05:320
884699884,56cyclictest354-21munin-run11:20:020
884699881,5cyclictest1808-21tail09:25:300
8846998512,57cyclictest18756-21sed09:45:290
33422840,3sleep123-21ksoftirqd/109:28:011
884699831,4cyclictest727-21runrttasks10:16:580
884699831,4cyclictest20417-21timerandwakeup10:25:300
884699821,4cyclictest9036-21aten_rbpower_cu11:30:140
884699821,4cyclictest9036-21aten_rbpower_cu11:30:140
204572820,5sleep1884799cyclictest12:22:331
884699817,53cyclictest21413-21apt-get11:45:140
884699811,59cyclictest25226-21taskset09:54:030
884699811,51cyclictest28976-21aten_rbpower_po08:05:180
884699809,56cyclictest727-21runrttasks10:34:030
884699802,47cyclictest0-21swapper/009:55:150
884699801,5cyclictest28838-21/usr/sbin/munin09:20:160
884699796,62cyclictest0-21swapper/010:11:580
884699791,51cyclictest0-21swapper/009:35:140
884699791,51cyclictest0-21swapper/009:35:140
884699791,4cyclictest3156-21rm11:22:340
884699781,4cyclictest9614-21/usr/sbin/munin12:10:270
884699771,5cyclictest6107-21sed09:30:310
884699771,3cyclictest0-21swapper/009:00:030
256692770,5sleep3884999cyclictest11:10:253
884699766,50cyclictest0-21swapper/009:15:300
8846997515,46cyclictest0-21swapper/011:59:200
884699751,4cyclictest26561-21ssh11:11:130
170882750,2sleep117089-21if_wlan011:00:201
170882750,2sleep117089-21if_wlan011:00:201
884699742,5cyclictest17604-21grep09:00:290
8846997415,23cyclictest8327-21ssh10:50:150
884699741,4cyclictest21135-21latency_hist11:45:020
884699738,51cyclictest32228-21apt-get10:40:140
884699731,4cyclictest544-21ssh10:02:350
884699731,3cyclictest0-21swapper/012:22:030
884699722,4cyclictest0-21swapper/012:19:120
8846997221,34cyclictest12381-21wc07:20:020
884699721,4cyclictest27409-21sed12:30:280
884699711,5cyclictest30115-21ssh10:36:560
884699711,5cyclictest14565-21sed09:40:290
884699711,55cyclictest23452-21ssh09:13:490
884699711,4cyclictest0-21swapper/012:35:390
884699711,10cyclictest0-21swapper/011:36:400
884699701,7cyclictest8211-21timerandwakeup08:35:280
884699701,5cyclictest19074-21ssh11:02:390
884699701,5cyclictest19074-21ssh11:02:390
884699701,5cyclictest0-21swapper/012:02:250
884699701,5cyclictest0-21swapper/012:02:250
884699701,4cyclictest0-21swapper/007:20:140
8846996919,28cyclictest9565-21/usr/sbin/munin08:40:210
8846996919,28cyclictest9565-21/usr/sbin/munin08:40:210
884699691,4cyclictest5501-21apt-get12:05:130
884699683,43cyclictest8862-21/usr/sbin/munin07:10:290
884699682,4cyclictest0-21swapper/007:54:480
884699678,46cyclictest27097-21aten_rbpower_cu08:00:170
884699672,8cyclictest0-21swapper/007:38:240
884699671,5cyclictest0-21swapper/010:56:580
884699671,4cyclictest27028-21ssh11:50:480
884699661,4cyclictest727-21runrttasks09:08:300
884699661,4cyclictest727-21runrttasks09:08:300
884699661,4cyclictest2045-21cpuspeed08:20:170
884699661,4cyclictest125-21systemd-journal08:46:350
884699661,3cyclictest265952sleep007:57:110
884699661,3cyclictest265952sleep007:57:110
884699651,4cyclictest0-21swapper/007:46:250
8846996512,29cyclictest0-21swapper/008:15:260
884699641,4cyclictest5189-21taskset08:29:310
884699641,3cyclictest142002sleep008:51:450
84302643,13sleep10-21swapper/107:08:101
884999632,3cyclictest0-21swapper/309:20:033
884699637,42cyclictest0-21swapper/007:43:510
884699631,49cyclictest31889-21taskset08:10:420
884999611,4cyclictest0-21swapper/307:45:203
884999604,14cyclictest7950irq/56-dwc_otg_09:00:163
884999591,3cyclictest0-21swapper/312:20:243
884999571,6cyclictest8050irq/56-dwc_otg_07:20:283
884999561,5cyclictest0-21swapper/311:42:483
8849995615,4cyclictest727-21runrttasks10:12:283
884999561,4cyclictest27520-21ssh10:35:023
884999556,10cyclictest8050irq/56-dwc_otg_09:10:163
884999553,3cyclictest7850irq/56-dwc_otg10:20:173
884999552,8cyclictest0-21swapper/312:15:143
884999552,6cyclictest21972-21grep09:50:163
8849995514,4cyclictest26023-21if_wlan011:50:213
8848995525,5cyclictest23882-21fschecks_count10:30:172
8848995516,8cyclictest8050irq/56-dwc_otg_11:20:132
884999542,4cyclictest7850irq/56-dwc_otg11:25:193
884999541,4cyclictest30678-21ssh10:00:173
884999541,49cyclictest8050irq/56-dwc_otg_09:25:133
884999541,3cyclictest0-21swapper/310:45:283
884999532,5cyclictest8742-21ssh10:50:203
884999531,9cyclictest7950irq/56-dwc_otg_09:40:053
884999531,5cyclictest8050irq/56-dwc_otg_08:00:223
884999531,5cyclictest28964-21/usr/sbin/munin08:05:183
884999531,4cyclictest8050irq/56-dwc_otg_11:00:023
884999531,3cyclictest0-21swapper/310:36:413
884999525,3cyclictest0-21swapper/312:11:473
884999523,4cyclictest0-21swapper/311:33:273
884999523,4cyclictest0-21swapper/311:33:273
884999522,4cyclictest19886-21diskmemload11:09:153
884999521,4cyclictest8050irq/56-dwc_otg_12:05:223
884999521,4cyclictest0-21swapper/309:45:563
8849995211,4cyclictest22847-21rm12:25:223
884999521,10cyclictest0-21swapper/309:36:593
884999521,10cyclictest0-21swapper/309:36:593
884999519,7cyclictest166092sleep311:00:153
884999519,7cyclictest166092sleep311:00:153
884999511,4cyclictest20780-21ssh10:25:423
884999511,4cyclictest0-21swapper/310:44:573
884999511,3cyclictest0-21swapper/311:37:383
884999511,12cyclictest0-21swapper/309:20:143
8848995112,13cyclictest0-21swapper/212:30:142
884999506,5cyclictest0-21swapper/311:58:233
884999502,9cyclictest0-21swapper/308:57:263
884999501,6cyclictest21748-21sort11:45:203
8849995016,31cyclictest8109-21sh09:33:543
8849995014,5cyclictest8050irq/56-dwc_otg_11:20:153
884999501,3cyclictest0-21swapper/312:00:103
884999501,3cyclictest0-21swapper/312:00:103
884999501,13cyclictest8050irq/56-dwc_otg_10:17:283
884999501,11cyclictest29724-21ssh11:15:233
884999501,11cyclictest25168-21cut07:55:033
884899503,6cyclictest7850irq/56-dwc_otg09:45:132
8847995035,12cyclictest29668-21ssh11:55:131
884999491,3cyclictest8050irq/56-dwc_otg_10:06:573
8849994910,35cyclictest10898-21latency_hist08:45:033
8849994910,35cyclictest10898-21latency_hist08:45:033
884999482,3cyclictest8050irq/56-dwc_otg_12:32:483
884999481,6cyclictest31880-21ssh12:35:463
884999481,3cyclictest0-21swapper/309:56:533
8848994814,8cyclictest8050irq/56-dwc_otg_10:10:142
8847994824,4cyclictest30867-21fschecks_time10:00:201
884999471,5cyclictest12368-21awk07:20:023
884799472,12cyclictest8050irq/56-dwc_otg_09:45:131
8849994614,4cyclictest10510-21date07:15:023
884999461,3cyclictest0-21swapper/308:54:433
884899468,24cyclictest0-21swapper/209:05:162
884899468,24cyclictest0-21swapper/209:05:162
884899463,3cyclictest0-21swapper/209:15:132
8848994618,4cyclictest22438-21fschecks_count12:25:182
884799467,25cyclictest0-21swapper/109:00:151
884999451,4cyclictest8050irq/56-dwc_otg_08:00:033
884999451,4cyclictest8050irq/56-dwc_otg_08:00:033
884999451,4cyclictest8050irq/56-dwc_otg_07:28:003
884899457,24cyclictest0-21swapper/212:20:162
884799453,38cyclictest8050irq/56-dwc_otg_10:15:131
83512453,12sleep00-21swapper/007:07:080
884999446,4cyclictest8050irq/56-dwc_otg_09:09:013
884999446,4cyclictest8050irq/56-dwc_otg_09:09:013
884899447,23cyclictest0-21swapper/207:40:162
8847994419,5cyclictest18707-21/usr/sbin/munin09:05:211
8847994419,5cyclictest18707-21/usr/sbin/munin09:05:211
884999431,4cyclictest7295-21apt-get08:35:153
884999431,3cyclictest7950irq/56-dwc_otg_08:11:073
884999431,16cyclictest5523-21cut08:30:163
884899436,23cyclictest0-21swapper/208:45:082
884899434,4cyclictest0-21swapper/212:10:152
884899434,23cyclictest7950irq/56-dwc_otg_10:50:142
884799437,25cyclictest0-21swapper/107:15:071
8847994316,17cyclictest8050irq/56-dwc_otg_12:30:141
8847994314,18cyclictest0-21swapper/109:15:131
10142431,4sleep10-21swapper/110:40:331
884999426,4cyclictest7950irq/56-dwc_otg_08:15:133
8849994212,4cyclictest18049-21aten_rbpower_en07:35:163
884799427,22cyclictest0-21swapper/107:40:161
884899414,23cyclictest0-21swapper/207:15:072
884799417,5cyclictest25558-21rm11:10:221
884799417,22cyclictest0-21swapper/108:45:081
884799416,7cyclictest23612-21ssh10:30:131
884999402,5cyclictest750-21snmpd08:24:353
884899408,22cyclictest0-21swapper/210:37:142
884899407,24cyclictest0-21swapper/208:25:162
8848994019,4cyclictest31-21ksoftirqd/210:25:322
8847994020,4cyclictest17372-21sh12:19:281
8848993918,12cyclictest301ktimersoftd/209:10:172
8847993910,14cyclictest0-21swapper/108:35:141
884899387,24cyclictest0-21swapper/208:15:152
8848993812,7cyclictest0-21swapper/209:45:022
884799382,16cyclictest0-21swapper/110:36:031
884799381,25cyclictest0-21swapper/108:50:081
884799381,25cyclictest0-21swapper/108:10:161
884899377,23cyclictest0-21swapper/211:25:162
884899376,8cyclictest31-21ksoftirqd/211:55:132
884899371,24cyclictest4870-21ssh09:30:162
884799376,20cyclictest30444-21ssh12:35:151
884799376,14cyclictest8050irq/56-dwc_otg_09:55:311
884799374,18cyclictest8050irq/56-dwc_otg_11:15:291
884799374,16cyclictest8050irq/56-dwc_otg_08:25:311
8847993716,5cyclictest16956-21grep07:30:271
8847993714,11cyclictest19370-21ssh10:25:151
8847993712,15cyclictest8050irq/56-dwc_otg_12:10:151
884899361,26cyclictest8927-21ls08:40:032
884899361,23cyclictest1657-21ls09:25:292
8848993612,13cyclictest0-21swapper/207:46:162
8848993611,5cyclictest7850irq/56-dwc_otg10:55:282
884799367,7cyclictest0-21swapper/110:10:161
884799361,6cyclictest22101-21missed_timers11:45:241
8847993613,14cyclictest0-21swapper/108:55:231
884799361,20cyclictest25337-21aten_rbpower_en07:55:171
884799361,20cyclictest25337-21aten_rbpower_en07:55:171
189692360,2sleep20-21swapper/207:35:282
884899359,17cyclictest29036-21ssh11:54:302
884899357,19cyclictest0-21swapper/209:00:152
884899352,4cyclictest7850irq/56-dwc_otg11:20:022
884799355,6cyclictest7850irq/56-dwc_otg09:50:211
884799354,7cyclictest8050irq/56-dwc_otg_08:05:321
884799351,24cyclictest4724-21missed_timers10:45:241
884999341,10cyclictest0-21swapper/308:26:173
884899348,14cyclictest8050irq/56-dwc_otg_09:50:232
884899347,5cyclictest8050irq/56-dwc_otg_12:15:192
884899344,21cyclictest8050irq/56-dwc_otg_09:55:142
884899343,8cyclictest0-21swapper/210:40:152
884899342,9cyclictest21437-21ssh11:45:162
884899342,5cyclictest0-21swapper/211:30:132
884899342,5cyclictest0-21swapper/211:30:132
8848993418,6cyclictest32687-21idleruntime-cro09:25:022
8848993410,5cyclictest8050irq/56-dwc_otg_10:05:172
884799346,5cyclictest8050irq/56-dwc_otg_07:50:291
884799346,12cyclictest7950irq/56-dwc_otg_10:05:341
884799343,14cyclictest0-21swapper/111:06:481
884799342,8cyclictest0-21swapper/110:50:141
884799342,26cyclictest8050irq/56-dwc_otg_12:25:111
884799342,13cyclictest0-21swapper/111:45:021
8847993419,4cyclictest8050irq/56-dwc_otg_09:10:311
884799341,17cyclictest7850irq/56-dwc_otg11:50:301
884899339,12cyclictest0-21swapper/212:39:312
884899337,7cyclictest8050irq/56-dwc_otg_07:55:202
884899337,7cyclictest8050irq/56-dwc_otg_07:55:202
884899337,12cyclictest8050irq/56-dwc_otg_08:55:282
884899335,24cyclictest24866-21ssh11:10:142
884899333,8cyclictest7850irq/56-dwc_otg11:35:192
884899332,8cyclictest0-21swapper/208:50:132
884899332,24cyclictest8050irq/56-dwc_otg_10:15:132
8848993310,10cyclictest7850irq/56-dwc_otg11:02:002
8848993310,10cyclictest7850irq/56-dwc_otg11:02:002
884799337,6cyclictest15523-21if_err_eth010:20:201
884799337,17cyclictest0-21swapper/109:30:451
884799337,12cyclictest7850irq/56-dwc_otg09:25:021
8847993321,5cyclictest5453-21ssh12:05:091
884799331,3cyclictest7950irq/56-dwc_otg_11:30:121
884799331,3cyclictest7950irq/56-dwc_otg_11:30:121
158312331,28sleep219886-21diskmemload10:20:252
884899328,6cyclictest7850irq/56-dwc_otg07:25:302
884899326,5cyclictest7850irq/56-dwc_otg10:00:092
884899324,18cyclictest8050irq/56-dwc_otg_08:05:012
884899322,20cyclictest0-21swapper/207:51:022
884899321,7cyclictest30044-21grep08:05:322
884899321,5cyclictest10403-21head09:35:302
884899321,5cyclictest10403-21head09:35:302
884799327,15cyclictest0-21swapper/107:46:161
884799326,13cyclictest8050irq/56-dwc_otg_08:40:241
884799326,13cyclictest8050irq/56-dwc_otg_08:40:241
884799324,18cyclictest5748-21fschecks_count08:30:211
8847993217,12cyclictest23-21ksoftirqd/111:20:141
884799321,22cyclictest0-21swapper/112:00:301
884799321,22cyclictest0-21swapper/112:00:301
8847993210,4cyclictest0-21swapper/111:25:451
884999311,11cyclictest0-21swapper/307:30:563
884899317,15cyclictest0-21swapper/210:45:162
884799318,11cyclictest15518-21grep07:25:301
884799317,4cyclictest0-21swapper/109:40:101
884799317,12cyclictest7850irq/56-dwc_otg10:55:171
8847993123,6cyclictest12652-21aten_rbpower_en07:20:171
884799311,19cyclictest13539-21ls11:35:201
884799311,14cyclictest10483-21apt-key07:15:031
211132310,5sleep221114-21sh11:45:022
884899307,4cyclictest8050irq/56-dwc_otg_08:10:252
884899306,6cyclictest7950irq/56-dwc_otg_11:05:172
884899303,16cyclictest0-21swapper/212:00:422
884899303,16cyclictest0-21swapper/212:00:422
884799307,11cyclictest1561-21kworker/1:108:20:141
884799301,19cyclictest0-21swapper/107:35:291
884999291,5cyclictest0-21swapper/308:47:523
884899292,19cyclictest0-21swapper/208:44:202
884899292,19cyclictest0-21swapper/208:44:202
884899292,13cyclictest6741-21ssh12:05:302
884899291,17cyclictest2867-21ls08:20:292
884799291,18cyclictest0-21swapper/108:00:061
884799291,15cyclictest0-21swapper/108:20:031
70382297,10sleep30-21swapper/307:05:173
884899283,10cyclictest7950irq/56-dwc_otg_07:33:252
884899282,5cyclictest7950irq/56-dwc_otg_07:25:022
69342283,15sleep20-21swapper/207:05:032
884999272,9cyclictest0-21swapper/307:42:153
884899278,4cyclictest7850irq/56-dwc_otg08:30:232
884899261,5cyclictest8862-21/usr/sbin/munin07:10:252
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional