You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-22 - 11:26

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack7slot3s.osadl.org (updated Tue Sep 22, 2026 00:43:39)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2091825240,6sleep30-21swapper/319:05:513
3107521670,2sleep10-21swapper/123:52:371
21745991322,94cyclictest0-21swapper/021:35:360
21745991322,94cyclictest0-21swapper/021:35:360
21745991102,88cyclictest0-21swapper/023:46:140
21745991077,47cyclictest0-21swapper/023:25:370
21745991041,83cyclictest32010-21ssh21:50:390
21745991041,83cyclictest32010-21ssh21:50:390
21745991022,69cyclictest0-21swapper/021:45:250
2174599991,77cyclictest5695-21ssh22:39:570
2174599981,21cyclictest0-21swapper/019:30:400
2174599971,81cyclictest0-21swapper/023:10:470
2174599941,73cyclictest0-21swapper/023:15:550
2174599932,77cyclictest0-21swapper/019:45:520
2174599932,77cyclictest0-21swapper/019:45:520
2174599931,76cyclictest0-21swapper/000:06:300
2174599931,74cyclictest17852-21ls22:55:250
2174599931,71cyclictest0-21swapper/021:55:500
21745999260,18cyclictest0-21swapper/019:10:270
2174599921,75cyclictest0-21swapper/023:51:180
2174599911,74cyclictest1413-21grep19:40:550
2174599911,42cyclictest0-21swapper/021:15:380
2174599901,74cyclictest0-21swapper/023:41:130
2174599901,71cyclictest18222-21wget22:55:410
2174599896,69cyclictest1180-21runrttasks23:59:090
2174599894,65cyclictest0-21swapper/021:10:560
2174599882,60cyclictest0-21swapper/000:35:540
2174599881,71cyclictest0-21swapper/023:00:490
2174599881,3cyclictest0-21swapper/020:48:420
2174599872,71cyclictest0-21swapper/019:59:390
2174599871,5cyclictest6420-21sed23:20:560
2174699863,12cyclictest20188-21snmpd19:10:271
2174599861,5cyclictest0-21swapper/023:05:400
2174599861,4cyclictest0-21swapper/000:13:540
2174599852,68cyclictest0-21swapper/022:32:120
2174599851,63cyclictest0-21swapper/021:45:470
2174599848,16cyclictest0-21swapper/021:20:390
2174599841,71cyclictest0-21swapper/022:21:520
2174599841,63cyclictest28483-21ssh22:26:190
2174599834,65cyclictest22503-21rm00:23:240
2174599831,65cyclictest0-21swapper/023:36:270
2174599822,59cyclictest0-21swapper/022:47:590
2174599821,76cyclictest9857-21munin-run22:45:250
2174599821,71cyclictest30332-21ssh00:33:240
2174599821,62cyclictest0-21swapper/000:03:540
2174599821,5cyclictest18248-21rm21:32:230
2174599821,5cyclictest10035-21seq22:03:350
318942810,2sleep20-21swapper/221:50:272
318942810,2sleep20-21swapper/221:50:272
2174599814,63cyclictest0-21swapper/022:12:580
2174599812,70cyclictest0-21swapper/019:15:530
2174599812,56cyclictest0-21swapper/021:27:100
2174599811,65cyclictest0-21swapper/021:03:530
54732800,2sleep20-21swapper/221:15:532
2174599801,5cyclictest15840-21sh23:33:390
2174599801,3cyclictest0-21swapper/019:52:570
2174599792,62cyclictest0-21swapper/000:28:470
2174599791,54cyclictest19881-21ssh22:15:500
91402780,3sleep30-21swapper/323:25:273
21745997820,44cyclictest7950irq/56-dwc_otg_20:35:450
2174599771,5cyclictest8876-21chrt20:02:020
2174599771,57cyclictest0-21swapper/000:19:130
2174599771,57cyclictest0-21swapper/000:19:130
2174599761,58cyclictest0-21swapper/021:06:250
2174599761,3cyclictest0-21swapper/022:06:130
2174599761,3cyclictest0-21swapper/022:06:130
301692750,1sleep10-21swapper/121:47:281
21745997517,46cyclictest7850irq/56-dwc_otg_19:20:290
2174599721,3cyclictest0-21swapper/020:58:520
2174599721,3cyclictest0-21swapper/020:51:140
197982720,3sleep337-21rcuc/321:35:243
21745997116,35cyclictest7950irq/56-dwc_otg_19:35:380
2174599711,3cyclictest0-21swapper/020:14:120
2174799702,3cyclictest0-21swapper/200:15:382
2174799702,3cyclictest0-21swapper/200:15:382
21747997011,4cyclictest7850irq/56-dwc_otg_22:07:282
21747997011,4cyclictest7850irq/56-dwc_otg_22:07:282
2174599701,57cyclictest0-21swapper/020:23:540
2174599701,3cyclictest0-21swapper/020:41:230
2174599691,5cyclictest0-21swapper/019:29:330
2174599691,3cyclictest0-21swapper/020:07:100
2174799688,5cyclictest0-21swapper/223:44:052
21747996811,5cyclictest9732-21ssh22:45:122
2174599681,64cyclictest0-21swapper/020:16:530
2174599681,64cyclictest0-21swapper/020:16:530
21745996816,37cyclictest7750irq/56-dwc_otg20:25:410
214552682,12sleep10-21swapper/119:10:111
2174799676,11cyclictest7950irq/56-dwc_otg_21:40:452
2174699677,44cyclictest0-21swapper/123:09:541
2174799665,4cyclictest7950irq/56-dwc_otg_23:05:512
2174699669,43cyclictest21744-21cyclictest22:37:501
2174699666,4cyclictest0-21swapper/121:25:591
2174699665,5cyclictest7850irq/56-dwc_otg_19:50:251
2174699665,5cyclictest7850irq/56-dwc_otg_19:50:251
2174699665,45cyclictest0-21swapper/123:16:211
2174599651,3cyclictest0-21swapper/020:30:520
2174699647,10cyclictest7950irq/56-dwc_otg_23:20:491
2174699641,14cyclictest22259-21diskstats23:00:401
2174799636,9cyclictest7950irq/56-dwc_otg_19:55:252
2174799633,11cyclictest7950irq/56-dwc_otg_19:45:452
2174799633,11cyclictest7950irq/56-dwc_otg_19:45:452
2174799631,14cyclictest16203-21systemd-journal00:36:412
2174799631,13cyclictest6119-21ssh21:58:342
2174699635,4cyclictest7750irq/56-dwc_otg00:27:501
2174699631,8cyclictest7750irq/56-dwc_otg21:40:221
2174699631,8cyclictest7750irq/56-dwc_otg21:40:221
2174699631,8cyclictest0-21swapper/100:15:381
2174699631,8cyclictest0-21swapper/100:15:381
2174699631,15cyclictest7950irq/56-dwc_otg_22:50:441
2174699631,12cyclictest0-21swapper/123:30:541
2174799629,36cyclictest0-21swapper/200:30:272
2174799628,5cyclictest7850irq/56-dwc_otg_20:35:512
2174799628,32cyclictest0-21swapper/219:55:312
2174799627,6cyclictest32617-21diskmemload22:27:082
2174799623,10cyclictest7950irq/56-dwc_otg_22:50:262
2174799621,4cyclictest0-21swapper/221:45:552
2174699627,9cyclictest7850irq/56-dwc_otg_21:16:511
2174699625,11cyclictest7950irq/56-dwc_otg_20:30:251
2174699623,13cyclictest0-21swapper/119:15:381
2174699621,7cyclictest24286-21wget21:40:401
2174699621,15cyclictest32618-21memory21:50:471
2174699621,15cyclictest32618-21memory21:50:471
2174799614,4cyclictest7750irq/56-dwc_otg22:55:532
2174799613,13cyclictest16203-21systemd-journal21:06:542
2174699617,5cyclictest7850irq/56-dwc_otg_22:25:421
2174699617,13cyclictest0-21swapper/122:17:171
2174699611,16cyclictest0-21swapper/122:08:571
2174699611,16cyclictest0-21swapper/122:08:571
2174799606,4cyclictest7950irq/56-dwc_otg_22:40:062
2174799601,6cyclictest14540-21fschecks_time22:50:432
2174799601,13cyclictest32617-21diskmemload00:04:052
2174699607,9cyclictest7850irq/56-dwc_otg_00:34:111
2174699605,5cyclictest7950irq/56-dwc_otg_19:50:421
2174699602,16cyclictest7950irq/56-dwc_otg_22:45:341
2174699601,4cyclictest7950irq/56-dwc_otg_21:35:201
2174799597,8cyclictest7950irq/56-dwc_otg_20:19:102
2174799597,8cyclictest7950irq/56-dwc_otg_20:19:102
2174799596,14cyclictest7950irq/56-dwc_otg_23:45:522
21747995912,5cyclictest7750irq/56-dwc_otg23:56:332
2174699597,40cyclictest602-21ssh22:32:381
2174699595,5cyclictest7750irq/56-dwc_otg00:35:421
2174699593,6cyclictest4761-21grep21:55:571
2174699593,10cyclictest0-21swapper/122:25:061
2174699592,11cyclictest0-21swapper/123:59:191
2174699591,13cyclictest17012-21ssh22:11:531
2174799587,8cyclictest7950irq/56-dwc_otg_00:24:012
2174799587,12cyclictest0-21swapper/221:35:192
2174799583,11cyclictest7950irq/56-dwc_otg_23:00:432
2174799581,6cyclictest17585-21irqstats23:35:452
2174799581,13cyclictest1759-21ssh22:34:552
2174799581,13cyclictest0-21swapper/223:21:272
2174699583,15cyclictest0-21swapper/123:44:091
2174699583,11cyclictest6071-21taskset00:01:511
2174699582,4cyclictest7750irq/56-dwc_otg21:20:371
21746995820,34cyclictest5839-21aten_rbpower_en19:55:381
2174699581,5cyclictest9550irq/80-mmc019:25:251
2174699581,3cyclictest0-21swapper/121:11:161
2174699581,12cyclictest7850irq/56-dwc_otg_19:31:451
2174799574,5cyclictest0-21swapper/222:00:532
2174799571,8cyclictest13145-21munin-node23:30:362
2174799571,11cyclictest7750irq/56-dwc_otg23:54:182
2174699574,4cyclictest7950irq/56-dwc_otg_21:05:411
2174699573,9cyclictest0-21swapper/123:13:481
2174699573,4cyclictest7950irq/56-dwc_otg_23:46:241
2174699572,4cyclictest7750irq/56-dwc_otg00:11:341
2174699571,6cyclictest20188-21snmpd00:06:351
2174699571,6cyclictest18906-21ssh22:55:511
2174699571,4cyclictest7950irq/56-dwc_otg_22:02:541
2174699571,4cyclictest7750irq/56-dwc_otg23:28:441
21746995710,5cyclictest0-21swapper/120:10:261
2174799567,5cyclictest7950irq/56-dwc_otg_19:15:422
2174799565,4cyclictest7950irq/56-dwc_otg_21:01:332
2174799562,5cyclictest1413-21ssh23:15:402
2174799561,13cyclictest0-21swapper/200:10:462
2174699568,4cyclictest0-21swapper/123:35:531
2174699562,10cyclictest7950irq/56-dwc_otg_00:24:001
2174699561,11cyclictest0-21swapper/120:41:301
214662563,47sleep20-21swapper/219:10:202
240972550,4sleep3381ktimersoftd/321:40:323
21747995510,4cyclictest0-21swapper/222:13:172
2174699555,3cyclictest0-21swapper/120:15:471
2174699555,3cyclictest0-21swapper/120:15:471
2174699555,12cyclictest6398-21wget22:40:401
2174699554,8cyclictest0-21swapper/120:53:551
2174799546,5cyclictest7850irq/56-dwc_otg_20:20:462
2174799544,5cyclictest7950irq/56-dwc_otg_21:22:272
2174799543,4cyclictest7950irq/56-dwc_otg_21:40:252
2174799543,4cyclictest7950irq/56-dwc_otg_21:40:252
2174799542,10cyclictest0-21swapper/200:29:152
2174699545,9cyclictest31192-21fschecks_count19:35:441
2174699543,9cyclictest28370-21sed19:25:551
2174699542,5cyclictest8907-21chrt20:02:271
2174699541,5cyclictest1790-21taskset19:45:011
2174799534,9cyclictest7850irq/56-dwc_otg_00:09:252
2174799531,15cyclictest0-21swapper/222:24:352
2174699531,6cyclictest16253-21chrt20:23:591
2174799525,11cyclictest0-21swapper/223:27:592
2174699521,9cyclictest7950irq/56-dwc_otg_20:36:081
2174699521,5cyclictest25080-21chrt20:46:351
2174699521,5cyclictest10888-21chrt20:09:441
2174699521,4cyclictest304762sleep121:01:301
2174699521,12cyclictest0-21swapper/120:56:261
2174799517,8cyclictest7950irq/56-dwc_otg_19:20:312
2174699511,7cyclictest19614-21vmstat20:30:571
2174799506,12cyclictest7950irq/56-dwc_otg_22:17:082
2174799497,9cyclictest7950irq/56-dwc_otg_21:11:392
2174799491,15cyclictest0-21swapper/221:29:562
241602470,6sleep32174899cyclictest00:25:443
2174799473,10cyclictest7850irq/56-dwc_otg_23:10:382
2174899456,5cyclictest7950irq/56-dwc_otg_23:45:363
2174799453,22cyclictest0-21swapper/219:10:282
2174799451,33cyclictest10227-21/usr/sbin/munin20:05:542
214322452,35sleep00-21swapper/019:09:530
21748994418,15cyclictest3963-21latency_hist00:00:253
21748994411,8cyclictest0-21swapper/319:10:273
2174799431,16cyclictest0-21swapper/219:27:072
2174899422,23cyclictest0-21swapper/319:40:253
2174899421,23cyclictest0-21swapper/322:17:393
2174799427,4cyclictest7750irq/56-dwc_otg19:35:372
21747994218,5cyclictest301ktimersoftd/220:10:492
21748994124,5cyclictest27865-21wget00:30:423
21748994116,12cyclictest7750irq/56-dwc_otg22:11:073
2174799411,14cyclictest0-21swapper/220:56:272
21747994110,13cyclictest7950irq/56-dwc_otg_20:50:432
2174899403,19cyclictest7850irq/56-dwc_otg_19:20:463
2174899402,8cyclictest7850irq/56-dwc_otg_22:40:433
21748994023,6cyclictest5801-21aten_rbpower_cu19:55:373
2174899391,28cyclictest5380-21switchtime21:15:523
21748993912,14cyclictest4622-21fschecks_count00:00:443
2174899388,25cyclictest0-21swapper/320:25:393
2174899386,22cyclictest12291-21ssh21:25:373
2174899382,22cyclictest7850irq/56-dwc_otg_20:40:493
21748993818,6cyclictest12248-21aten_rbpower_vo00:10:423
2174799384,17cyclictest7950irq/56-dwc_otg_20:30:502
2174899373,6cyclictest7850irq/56-dwc_otg_23:30:523
2174899372,26cyclictest0-21swapper/323:19:463
21748993717,4cyclictest7950irq/56-dwc_otg_23:40:323
2174899371,6cyclictest7950irq/56-dwc_otg_22:45:403
2174899371,6cyclictest7850irq/56-dwc_otg_00:38:153
2174899371,28cyclictest0-21swapper/322:03:073
2174899371,27cyclictest16998-21ssh22:53:533
21748993712,13cyclictest15993-21/usr/sbin/munin00:15:463
21748993712,13cyclictest15993-21/usr/sbin/munin00:15:463
2174899371,19cyclictest0-21swapper/320:05:403
2174899371,14cyclictest30079-21rm23:10:413
2174899365,4cyclictest0-21swapper/300:25:133
2174899362,24cyclictest0-21swapper/322:26:223
21748993621,13cyclictest7950irq/56-dwc_otg_21:55:443
21748993614,13cyclictest23947-21aten_rbpower_vo20:45:403
21748993613,5cyclictest27533-21aten_rbpower_po20:55:403
21748993613,5cyclictest0-21swapper/323:05:513
2174899361,26cyclictest24030-21switchtime22:20:513
143722361,3sleep30-21swapper/322:09:273
143722361,3sleep30-21swapper/322:09:273
21748993529,3cyclictest0-21swapper/321:05:433
2174899352,7cyclictest7850irq/56-dwc_otg_21:15:263
2174899352,5cyclictest7950irq/56-dwc_otg_23:00:363
21748993510,16cyclictest7950irq/56-dwc_otg_22:35:513
2174799357,7cyclictest7950irq/56-dwc_otg_20:50:252
193722350,4sleep318095-21/usr/sbin/munin22:55:573
2174899349,11cyclictest0-21swapper/321:47:543
2174899348,22cyclictest0-21swapper/320:00:423
21748993427,5cyclictest14573-21cron20:20:253
21748993427,5cyclictest14573-21cron20:20:253
2174899342,23cyclictest22840-21rm21:38:423
2174899342,23cyclictest22840-21rm21:38:423
2174899342,19cyclictest7750irq/56-dwc_otg00:05:433
2174899342,16cyclictest0-21swapper/322:30:523
21748993415,11cyclictest0-21swapper/320:50:433
2174899341,15cyclictest7750irq/56-dwc_otg20:30:553
2174799342,21cyclictest0-21swapper/220:43:152
2174899338,21cyclictest0-21swapper/319:40:393
2174899338,18cyclictest0-21swapper/323:22:433
2174899333,16cyclictest0-21swapper/323:36:543
2174899333,14cyclictest7850irq/56-dwc_otg_19:25:393
21748993311,4cyclictest0-21swapper/321:50:493
21748993311,4cyclictest0-21swapper/321:50:493
2174799338,6cyclictest7850irq/56-dwc_otg_20:00:462
2174799334,10cyclictest7950irq/56-dwc_otg_20:28:532
21748993227,3cyclictest0-21swapper/319:50:393
2174899322,6cyclictest8609-21df_inode21:20:413
21748993225,5cyclictest21791-21sh20:40:253
2174899321,4cyclictest7950irq/56-dwc_otg_19:15:473
2174899321,20cyclictest0-21swapper/320:10:313
2174899314,5cyclictest7950irq/56-dwc_otg_23:50:513
2174899312,4cyclictest7750irq/56-dwc_otg21:00:373
2174799317,5cyclictest7950irq/56-dwc_otg_19:30:412
2174899307,7cyclictest14491-21kworker/3:120:20:463
2174799307,9cyclictest7950irq/56-dwc_otg_19:40:532
2174899296,5cyclictest7750irq/56-dwc_otg19:30:533
2174899293,14cyclictest7950irq/56-dwc_otg_19:45:483
2174899293,14cyclictest7950irq/56-dwc_otg_19:45:483
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional