You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-18 - 04:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack7slot3s.osadl.org (updated Fri Sep 18, 2026 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
559421210,7sleep23034999cyclictest23:10:032
559421210,7sleep23034999cyclictest23:10:032
1756321100,7sleep33035099cyclictest21:20:423
3034799892,28cyclictest3922-21/usr/sbin/munin00:30:450
38742880,6sleep23034999cyclictest22:25:422
38742880,6sleep23034999cyclictest22:25:422
30348998822,55cyclictest0-21swapper/119:25:371
3034799842,67cyclictest0-21swapper/022:50:390
30347998322,6cyclictest18121-21ssh23:25:400
3034999811,61cyclictest13679-21vmstat19:50:532
3034999801,55cyclictest2741-21/usr/sbin/munin19:20:532
3034799802,25cyclictest0-21swapper/019:25:530
3034999798,58cyclictest7950irq/56-dwc_otg_00:13:592
3034799792,69cyclictest25957-21cut23:35:400
30347997823,7cyclictest7850irq/56-dwc_otg_22:42:050
30347997819,9cyclictest7950irq/56-dwc_otg_20:10:220
3034799781,27cyclictest20980-21ssh21:25:240
30348997732,27cyclictest11186-21ssh22:35:381
30347997720,44cyclictest0-21swapper/022:09:370
30347997715,5cyclictest0-21swapper/021:35:230
30347997714,13cyclictest7850irq/56-dwc_otg_00:40:240
3034799771,16cyclictest29246-21/usr/sbin/munin22:15:560
3034799771,14cyclictest0-21swapper/021:46:160
253932770,2sleep20-21swapper/222:11:032
3034999761,58cyclictest7321-21ssh21:49:132
3034799763,22cyclictest25176-21rm22:10:530
3034799761,15cyclictest0-21swapper/021:18:240
30347997610,62cyclictest101ktimersoftd/021:20:470
3034999751,54cyclictest0-21swapper/223:53:272
3034799753,20cyclictest0-21swapper/022:56:010
238672750,4sleep323827-21ssh22:10:233
3034999741,49cyclictest22192-21/usr/sbin/munin23:30:432
30347997417,13cyclictest0-21swapper/023:05:520
30347997417,13cyclictest0-21swapper/023:05:520
30347997412,12cyclictest7850irq/56-dwc_otg_19:55:430
13512740,3sleep08902-21diskmemload22:22:090
3034999731,59cyclictest14436-21ssh22:39:482
3034999731,57cyclictest26064-21ssh22:54:352
3034999731,48cyclictest17316-21df21:20:382
3034799737,5cyclictest1121-21tr23:45:360
30347997325,39cyclictest19911-21ssh22:45:510
30347997321,5cyclictest7750irq/56-dwc_otg21:10:370
30347997315,11cyclictest0-21swapper/019:48:370
30347997313,11cyclictest0-21swapper/023:17:570
3034799731,23cyclictest22776-21switchtime23:30:510
135772730,2sleep10-21swapper/100:00:521
3034999723,47cyclictest0-21swapper/222:34:402
3034999721,45cyclictest20782-21ssh22:46:512
30347997219,8cyclictest0-21swapper/023:52:470
30347997215,5cyclictest27434-21taskset00:18:490
3034999711,56cyclictest10637-21taskset23:56:302
3034999711,55cyclictest26455-21ssh21:31:052
3034799714,16cyclictest25214-21/usr/sbin/munin20:25:420
3034799712,18cyclictest0-21swapper/023:40:470
3034999707,44cyclictest26863-21unixbench-2d23:35:522
3034999703,48cyclictest7850irq/56-dwc_otg_20:52:172
3034999701,54cyclictest2688-21ssh00:28:332
3034999701,52cyclictest14295-21apt-get19:55:352
3034799702,59cyclictest0-21swapper/021:36:420
30347997014,12cyclictest0-21swapper/023:11:460
3034799701,24cyclictest0-21swapper/021:59:270
3034799701,23cyclictest10119-21ssh23:55:530
3034999694,53cyclictest18710-21ssh00:07:012
3034999694,53cyclictest18710-21ssh00:07:012
3034999691,56cyclictest31106-21ssh22:19:352
3034999691,55cyclictest15975-21ssh00:04:202
30348996920,30cyclictest4365-21ssh00:30:411
3034799693,7cyclictest13595-21unixbench_multi19:50:520
3034799692,13cyclictest0-21swapper/021:50:520
30347996918,42cyclictest0-21swapper/020:00:450
30347996918,42cyclictest0-21swapper/020:00:450
30347996916,44cyclictest0-21swapper/000:04:450
3034799691,18cyclictest21860-21date00:10:550
30347996911,6cyclictest417350cut21:45:230
3034999681,51cyclictest8686-21pluginstate00:35:492
3034999681,48cyclictest4199-21entropy00:30:392
3034999681,47cyclictest17843-21latency_hist20:05:242
3034999681,47cyclictest17843-21latency_hist20:05:242
3034999681,46cyclictest10224-21ssh21:51:592
3034799681,5cyclictest0-21swapper/023:04:040
30347996814,3cyclictest0-21swapper/000:20:390
3034999671,55cyclictest7795-21ssh23:11:392
3034999671,53cyclictest14034-21ssh21:56:482
3034999671,52cyclictest18148-21ssh22:02:112
3034999671,50cyclictest30465-21ssh21:36:152
3034999671,49cyclictest31181-21sshd00:23:282
3034999671,48cyclictest29877-21/usr/sbin/munin23:40:422
30347996712,5cyclictest14360-21chrt22:39:380
3034799671,17cyclictest9612-21expr19:40:490
3034999661,55cyclictest2179-21ssh21:41:462
3034999661,50cyclictest21930-21ssh22:06:562
3034999661,48cyclictest13648-21/usr/sbin/munin21:15:422
3034999661,47cyclictest11655-21ssh21:13:042
3034799669,11cyclictest0-21swapper/022:02:200
3034799668,12cyclictest0-21swapper/021:02:210
3034799662,26cyclictest0-21swapper/020:47:410
3034799662,22cyclictest0-21swapper/023:21:140
3034799662,22cyclictest0-21swapper/023:21:140
3034799662,20cyclictest0-21swapper/020:22:270
3034799662,17cyclictest0-21swapper/000:26:160
3034799661,19cyclictest0-21swapper/019:32:470
3034799661,17cyclictest8924-21rm22:31:380
3034799661,16cyclictest0-21swapper/000:06:500
3034799661,16cyclictest0-21swapper/000:06:500
3034999653,49cyclictest0-21swapper/222:55:452
3034999651,46cyclictest20566-21ssh23:28:392
3034999651,45cyclictest7850irq/56-dwc_otg_22:24:452
3034999651,45cyclictest0-21swapper/220:50:232
3034999651,41cyclictest22250-21ls21:25:512
30348996518,27cyclictest32103-21latency_hist19:15:231
3034799652,25cyclictest0-21swapper/021:07:370
3034799652,21cyclictest5491-21sh22:27:360
3034799652,21cyclictest5491-21sh22:27:360
30347996516,3cyclictest0-21swapper/020:20:000
3034999642,50cyclictest7950irq/56-dwc_otg_00:15:502
3034999642,47cyclictest0-21swapper/220:10:232
3034999642,46cyclictest32543-21taskset23:01:542
3034999641,50cyclictest15383-21ssh23:21:082
3034999641,50cyclictest15383-21ssh23:21:082
3034799641,18cyclictest0-21swapper/020:32:270
3034799641,17cyclictest0-21swapper/020:57:130
3034999631,51cyclictest17082-21ssh22:42:172
3034999631,45cyclictest7950irq/56-dwc_otg_19:25:352
3034999621,48cyclictest0-21swapper/223:15:592
30348996217,19cyclictest3232-21rm23:47:311
30347996217,11cyclictest0-21swapper/020:54:470
30347996213,10cyclictest0-21swapper/019:14:300
3034799621,17cyclictest0-21swapper/019:21:010
49032610,6sleep13034899cyclictest22:26:251
49032610,6sleep13034899cyclictest22:26:251
30348996114,28cyclictest30149-21ssh00:21:251
3034799611,19cyclictest0-21swapper/020:37:450
18982610,2sleep10-21swapper/100:27:001
3034899609,19cyclictest0-21swapper/122:44:261
30348996017,25cyclictest24661-21ssh22:51:481
3034799602,21cyclictest0-21swapper/019:19:010
30347996013,5cyclictest7850irq/56-dwc_otg_20:15:230
30347996013,5cyclictest7850irq/56-dwc_otg_20:15:230
3034999592,46cyclictest0-21swapper/221:10:132
3034999592,43cyclictest7950irq/56-dwc_otg_20:39:542
3034999591,42cyclictest3078-21ssh23:47:132
30348995918,15cyclictest26607-21expr23:35:491
30348995917,22cyclictest15287-21ssh21:59:161
30348995912,19cyclictest13565-21sed19:50:511
30348995910,31cyclictest0-21swapper/121:25:291
3034899586,21cyclictest7950irq/56-dwc_otg_20:55:361
30348995820,24cyclictest12833-21munin-run21:15:231
30348995816,13cyclictest14379-21aten_rbpower_po19:55:361
30348995815,26cyclictest0-21swapper/119:45:301
3034999572,47cyclictest0-21swapper/219:14:312
3034999571,40cyclictest8547-21munin-run19:40:222
3034999571,36cyclictest0-21swapper/220:42:162
30348995717,21cyclictest24255-21rm23:33:121
3034999561,51cyclictest20152-21/usr/sbin/munin20:10:412
3034999561,51cyclictest20152-21/usr/sbin/munin20:10:412
3034999561,38cyclictest12081-21taskset19:48:302
30348995617,22cyclictest16571-21ssh23:23:291
30348995617,22cyclictest16571-21ssh23:23:291
30348995615,20cyclictest7850irq/56-dwc_otg_21:20:431
30348995610,24cyclictest2985-21kworker/u8:223:05:501
30348995610,24cyclictest2985-21kworker/u8:223:05:501
3034799561,36cyclictest32413-21latency_hist20:45:230
133442560,6sleep33035099cyclictest00:00:463
3035099559,30cyclictest0-21swapper/321:50:353
3034999551,49cyclictest9271-21/usr/sbin/munin19:40:432
3034999551,43cyclictest16203-21systemd-journal20:57:102
3034999551,41cyclictest5153-21seq19:30:272
3034999551,39cyclictest0-21swapper/219:15:432
30348995521,20cyclictest11493-21ssh21:54:311
30348995519,14cyclictest7260-21ssh21:49:051
30348995517,13cyclictest11335-21ssh00:40:131
30348995512,13cyclictest19340-21ssh23:26:121
3034799559,31cyclictest101ktimersoftd/019:35:410
3035099548,29cyclictest0-21swapper/320:40:293
3034999542,48cyclictest25055-21latency_hist20:25:232
3034999541,49cyclictest5525-21apt-get21:00:342
3034999541,49cyclictest27750-21/usr/sbin/munin20:30:482
3034999541,41cyclictest23136-21taskset20:19:532
3034899548,29cyclictest0-21swapper/100:05:381
3034899548,29cyclictest0-21swapper/100:05:381
30348995421,15cyclictest6603-21interrupts23:10:421
30348995416,22cyclictest26642-21sh21:31:271
30348995414,17cyclictest22542-21kworker/u8:322:56:591
30348995413,18cyclictest7950irq/56-dwc_otg_23:59:361
3034899539,27cyclictest0-21swapper/120:10:291
3034899539,27cyclictest0-21swapper/120:10:291
3034899538,27cyclictest0-21swapper/120:30:361
30348995322,16cyclictest10477-21ssh23:15:421
30348995318,19cyclictest6564-21rm23:51:221
30348995318,13cyclictest12828-21latency_hist21:15:241
30348995315,18cyclictest0-21swapper/123:40:411
30348995310,25cyclictest0-21swapper/122:21:111
11262530,6sleep33035099cyclictest22:21:443
30348995217,17cyclictest31100-21ssh22:19:341
30348995217,14cyclictest30440-21ssh21:36:121
3035099518,28cyclictest0-21swapper/322:35:383
3035099517,19cyclictest7950irq/56-dwc_otg_19:25:343
3034999511,38cyclictest7950irq/56-dwc_otg_20:29:572
3034899519,24cyclictest17981-21ssh22:01:501
30348995115,20cyclictest7750irq/56-dwc_otg22:46:561
30348995115,13cyclictest16430-21tune2fs20:00:411
30348995115,13cyclictest16430-21tune2fs20:00:411
30348995115,12cyclictest32385-21ssh23:01:341
30348995115,12cyclictest26051-21ssh22:12:221
30348995111,24cyclictest2933-21runrttasks19:23:101
285162513,12sleep00-21swapper/019:05:280
285162513,12sleep00-21swapper/019:05:280
3035099508,28cyclictest0-21swapper/323:20:373
3035099508,28cyclictest0-21swapper/323:20:373
3035099508,26cyclictest0-21swapper/320:10:283
3035099508,26cyclictest0-21swapper/320:10:283
3035099508,26cyclictest0-21swapper/319:20:363
30350995022,17cyclictest28364-21rm00:20:233
3034899503,31cyclictest0-21swapper/122:05:331
30348995017,12cyclictest23540-21ssh00:13:521
30348995016,16cyclictest24253-1kworker/u9:100:15:281
30348995013,25cyclictest24927-21taskset20:24:491
3035099497,31cyclictest12285-21ssh21:55:373
30350994918,13cyclictest7950irq/56-dwc_otg_23:35:353
3034899498,23cyclictest0-21swapper/120:40:291
30348994919,11cyclictest6692-21sshd19:35:011
30348994918,12cyclictest9315-21ssh22:32:251
30348994912,18cyclictest3294-21ssh21:43:581
3035099488,29cyclictest0-21swapper/320:00:363
3035099488,29cyclictest0-21swapper/320:00:363
3035099488,26cyclictest0-21swapper/323:10:363
3034899487,27cyclictest0-21swapper/120:05:371
30348994814,15cyclictest10025-21taskset19:41:321
30348994813,14cyclictest1180-21runrttasks20:17:201
3035099472,22cyclictest0-21swapper/319:20:233
3035099471,7cyclictest7850irq/56-dwc_otg_00:25:533
3034899479,14cyclictest952-21taskset19:16:181
30348994715,12cyclictest26760-21chrt20:30:111
30348994711,14cyclictest3522-21date20:55:231
3035099468,27cyclictest0-21swapper/323:00:383
3035099467,25cyclictest0-21swapper/321:25:293
3035099461,8cyclictest7950irq/56-dwc_otg_20:05:373
3035099458,23cyclictest0-21swapper/321:05:373
3035099458,22cyclictest0-21swapper/323:55:293
3035099458,22cyclictest0-21swapper/319:40:363
3035099451,34cyclictest22711-21grep20:15:533
30348994525,6cyclictest744050wget21:05:381
300082450,2sleep30-21swapper/300:21:093
3035099447,27cyclictest0-21swapper/319:45:303
3035099433,11cyclictest0-21swapper/321:40:363
3034899438,20cyclictest1180-21runrttasks21:02:341
30348994317,14cyclictest8439-21chrt19:39:141
30350994229,5cyclictest7950irq/56-dwc_otg_21:12:503
30350994221,10cyclictest7850irq/56-dwc_otg_00:30:383
30350994122,11cyclictest24867-21ssh23:34:253
30350994118,20cyclictest8136-21fschecks_count00:35:413
3035099411,21cyclictest0-21swapper/321:31:023
3034899411,29cyclictest0-21swapper/120:45:341
3035099409,18cyclictest0-21swapper/323:05:363
3035099409,18cyclictest0-21swapper/323:05:363
3035099406,7cyclictest39-21ksoftirqd/300:06:433
3035099406,7cyclictest39-21ksoftirqd/300:06:433
3035099404,5cyclictest7950irq/56-dwc_otg_22:00:513
3035099404,4cyclictest7850irq/56-dwc_otg_23:25:453
3035099404,24cyclictest24600-21sed20:20:523
3035099401,29cyclictest29796-21ls23:40:393
30350994012,11cyclictest13127-21/usr/sbin/munin21:15:493
3035099392,19cyclictest39-21ksoftirqd/322:42:053
30350993914,8cyclictest7850irq/56-dwc_otg_19:50:473
3035099391,28cyclictest0-21swapper/321:40:243
3035099391,27cyclictest0-21swapper/322:50:523
3035099391,25cyclictest28947-21timerandwakeup22:15:523
30350993912,18cyclictest64952sleep319:32:283
3034899399,12cyclictest30169-21chrt20:37:411
3035099387,17cyclictest0-21swapper/320:30:363
3035099386,22cyclictest0-21swapper/319:10:353
3035099383,25cyclictest39-21ksoftirqd/300:14:113
30350993821,7cyclictest7750irq/56-dwc_otg19:55:533
3035099381,8cyclictest39-21ksoftirqd/323:16:163
30350993812,9cyclictest7950irq/56-dwc_otg_20:55:023
30350993811,18cyclictest381ktimersoftd/322:30:543
30350993811,12cyclictest381ktimersoftd/323:52:213
3035099378,22cyclictest0-21swapper/320:55:363
30350993716,12cyclictest4823-21latency_hist23:50:243
30350993714,6cyclictest4812-21if_eth021:45:433
3035099367,14cyclictest0-21swapper/322:27:153
3035099367,14cyclictest0-21swapper/322:27:153
3035099362,23cyclictest0-21swapper/322:10:283
3035099362,22cyclictest0-21swapper/320:35:493
3035099362,17cyclictest0-21swapper/319:35:523
3035099361,23cyclictest0-21swapper/322:59:313
3035099356,7cyclictest20261-21grep22:45:553
3035099352,10cyclictest39-21ksoftirqd/321:02:113
3035099345,16cyclictest25250-21aten_rbpower_cu20:25:363
3035099341,11cyclictest7950irq/56-dwc_otg_20:45:353
296002324,15sleep20-21swapper/219:05:502
296002324,15sleep20-21swapper/219:05:502
298932303,20sleep10-21swapper/119:08:001
298932303,20sleep10-21swapper/119:08:001
285442294,14sleep328626-21aten_rbpower_vo19:05:353
285442294,14sleep328626-21aten_rbpower_vo19:05:353
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional