You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-18 - 20:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #5, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack5slot3s.osadl.org (updated Wed Mar 18, 2026 12:44:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
258512238162,24sleep00-21swapper/007:05:560
261462235160,24sleep30-21swapper/307:09:453
260652205169,24sleep10-21swapper/107:08:421
259772205167,25sleep20-21swapper/207:07:352
1981721780,5sleep12626299cyclictest08:05:161
1437621300,4sleep12626299cyclictest09:05:241
26272991191,116cyclictest0-21swapper/312:28:423
2627299112104,2cyclictest0-21swapper/309:13:513
26272999591,3cyclictest0-21swapper/310:00:593
26272999187,3cyclictest0-21swapper/311:47:533
26272996359,3cyclictest0-21swapper/307:59:223
12402550,1sleep10-21swapper/111:05:111
10962500,3sleep22626899cyclictest08:35:232
26272994036,3cyclictest0-21swapper/309:47:013
26272994023,2cyclictest6554-21kworker/3:207:51:143
26272993930,3cyclictest0-21swapper/310:57:343
26262993921,6cyclictest0-21swapper/111:14:541
2626299391,30cyclictest0-21swapper/110:30:381
26258993925,3cyclictest0-21swapper/011:48:220
26262993621,3cyclictest0-21swapper/108:51:581
26262993520,5cyclictest0-21swapper/107:44:301
26262993425,3cyclictest0-21swapper/111:48:221
26262993417,9cyclictest0-21swapper/107:28:501
26262993417,9cyclictest0-21swapper/107:28:501
2626299341,20cyclictest0-21swapper/108:28:301
26272993330,2cyclictest0-21swapper/310:22:073
2626899330,21cyclictest0-21swapper/208:00:182
2626299335,10cyclictest0-21swapper/109:35:181
2625899338,3cyclictest0-21swapper/009:07:340
2625899331,8cyclictest0-21swapper/009:49:580
2625899331,19cyclictest0-21swapper/011:18:260
26272993216,5cyclictest16524-21kworker/3:111:01:243
26272993216,5cyclictest16524-21kworker/3:111:01:243
2625899321,9cyclictest0-21swapper/011:38:140
26258993219,5cyclictest0-21swapper/010:55:020
26258993218,3cyclictest0-21swapper/012:16:460
2627299311,23cyclictest16524-21kworker/3:108:43:333
2626899311,13cyclictest16280-21latency_hist11:40:022
2626299319,10cyclictest8972-21threads11:20:231
2626299311,17cyclictest0-21swapper/109:59:181
2625899318,3cyclictest0-21swapper/008:13:160
26258993123,5cyclictest0-21swapper/011:03:380
26258993123,5cyclictest0-21swapper/011:03:380
26258993117,3cyclictest0-21swapper/011:50:340
26258993114,8cyclictest0-21swapper/009:58:340
2625899311,10cyclictest0-21swapper/007:36:290
26272993018,2cyclictest16524-21kworker/3:109:21:363
2627299300,23cyclictest16524-21kworker/3:108:33:523
2626899300,12cyclictest0-21swapper/208:48:342
2626299305,3cyclictest0-21swapper/107:52:591
2626299303,15cyclictest86550irq/126-enp1s0-09:48:581
2626299301,26cyclictest32734-21processes07:20:221
2626299301,16cyclictest0-21swapper/110:21:021
2625899306,3cyclictest0-21swapper/011:44:340
26258993017,3cyclictest0-21swapper/012:11:580
26258993017,3cyclictest0-21swapper/012:11:580
2625899301,10cyclictest0-21swapper/010:37:120
129312300,2sleep20-21swapper/210:15:282
2627299291,20cyclictest16524-21kworker/3:109:06:163
2626899290,11cyclictest0-21swapper/210:38:072
2626299291,26cyclictest0-21swapper/108:34:121
2626299291,17cyclictest0-21swapper/112:03:421
2626299291,14cyclictest18297-21unixbench_singl08:00:261
2626299291,14cyclictest0-21swapper/110:04:061
2626299291,12cyclictest17574-40dnf10:27:361
2625899296,3cyclictest0-21swapper/009:16:370
2625899294,9cyclictest0-21swapper/012:37:540
26258992917,3cyclictest0-21swapper/007:59:340
26258992916,3cyclictest0-21swapper/009:32:180
2625899291,12cyclictest0-21swapper/009:50:300
2625899291,12cyclictest0-21swapper/009:50:300
2627299287,13cyclictest86750irq/128-enp1s0-12:22:193
2626299286,3cyclictest0-21swapper/107:18:481
2626299281,11cyclictest0-21swapper/111:42:421
2625899286,3cyclictest0-21swapper/008:56:580
2625899285,3cyclictest0-21swapper/007:52:380
2625899285,3cyclictest0-21swapper/007:33:460
2625899282,18cyclictest86750irq/128-enp1s0-09:24:220
2625899281,18cyclictest0-21swapper/007:18:020
2625899281,14cyclictest0-21swapper/011:05:350
2625899281,12cyclictest0-21swapper/008:05:100
2625899281,10cyclictest0-21swapper/010:26:500
2627299279,8cyclictest16524-21kworker/3:110:19:003
2627299278,8cyclictest16524-21kworker/3:108:47:093
2627299277,3cyclictest6554-21kworker/3:208:24:343
2627299276,13cyclictest86750irq/128-enp1s0-10:31:463
2627299272,9cyclictest6554-21kworker/3:207:47:063
2627299271,24cyclictest16524-21kworker/3:109:50:023
2627299271,24cyclictest16524-21kworker/3:109:50:023
2627299271,20cyclictest6554-21kworker/3:207:31:523
2627299270,12cyclictest2699-21kworker/3:211:29:223
2626899270,3cyclictest0-21swapper/209:32:142
2626899270,17cyclictest0-21swapper/210:56:182
2626299271,23cyclictest15531-21df_inode09:10:121
2626299271,13cyclictest0-21swapper/107:37:081
2625899275,3cyclictest0-21swapper/010:48:140
2625899271,9cyclictest0-21swapper/012:09:100
2625899271,9cyclictest0-21swapper/011:24:060
2625899271,12cyclictest0-21swapper/010:01:260
2625899271,11cyclictest0-21swapper/010:21:560
170982270,4sleep230-21rcuc/210:25:232
2627299269,7cyclictest2699-21kworker/3:211:32:403
2627299268,8cyclictest16524-21kworker/3:110:29:223
2627299266,14cyclictest86750irq/128-enp1s0-09:15:103
2627299262,16cyclictest2699-21kworker/3:211:23:023
2627299262,11cyclictest16524-21kworker/3:110:10:143
26272992615,4cyclictest16176-21kworker/3:111:56:163
2627299261,3cyclictest16524-21kworker/3:109:25:143
26272992610,6cyclictest16524-21kworker/3:108:53:403
26272992610,3cyclictest6554-21kworker/3:207:24:303
2627299260,22cyclictest16524-21kworker/3:109:33:123
2627299260,19cyclictest16176-21kworker/3:112:18:373
2626899261,9cyclictest0-21swapper/210:30:592
2626899261,6cyclictest0-21swapper/210:00:122
2626899261,6cyclictest0-21swapper/209:25:112
2626899261,10cyclictest0-21swapper/212:37:502
2626299261,9cyclictest0-21swapper/111:34:431
26262992614,5cyclictest0-21swapper/109:32:141
2626299261,3cyclictest0-21swapper/107:58:081
2626299261,2cyclictest0-21swapper/108:20:201
2626299261,21cyclictest32736-21memory12:15:191
2626299261,13cyclictest0-21swapper/108:10:181
2626299261,12cyclictest0-21swapper/112:13:021
2626299261,12cyclictest0-21swapper/112:13:021
2626299261,12cyclictest0-21swapper/111:38:461
2626299261,12cyclictest0-21swapper/110:49:501
2626299261,12cyclictest0-21swapper/110:06:281
2625899268,3cyclictest0-21swapper/009:12:150
2625899263,9cyclictest0-21swapper/008:03:320
2625899261,9cyclictest0-21swapper/012:01:420
2625899261,7cyclictest0-21swapper/008:22:240
26258992614,8cyclictest30722chrt07:26:360
26258992614,8cyclictest30722chrt07:26:360
2627299259,5cyclictest6554-21kworker/3:207:37:523
2627299258,8cyclictest2699-21kworker/3:211:38:043
2627299257,8cyclictest16524-21kworker/3:110:05:263
2627299257,8cyclictest16524-21kworker/3:108:37:443
2627299255,7cyclictest86750irq/128-enp1s0-12:35:143
2627299255,13cyclictest86750irq/128-enp1s0-10:39:023
26272992514,2cyclictest16176-21kworker/3:111:50:043
2627299251,16cyclictest86550irq/126-enp1s0-09:40:173
26272992511,2cyclictest6554-21kworker/3:207:14:423
2627299250,20cyclictest16524-21kworker/3:110:49:063
2626899251,6cyclictest0-21swapper/212:28:252
2626899251,10cyclictest0-21swapper/212:24:502
2626899251,10cyclictest0-21swapper/210:12:542
2626899251,10cyclictest0-21swapper/208:20:152
2626299257,4cyclictest0-21swapper/111:25:181
2626299255,13cyclictest86550irq/126-enp1s0-12:39:301
2626299252,3cyclictest0-21swapper/109:23:461
2626299251,9cyclictest0-21swapper/107:48:061
26262992516,3cyclictest0-21swapper/111:50:341
26262992512,3cyclictest0-21swapper/110:54:141
2626299251,17cyclictest0-21swapper/109:15:351
2626299251,13cyclictest0-21swapper/107:32:021
2626299251,10cyclictest0-21swapper/110:56:501
2626299251,10cyclictest0-21swapper/108:59:161
2625899259,3cyclictest0-21swapper/008:42:340
2625899254,3cyclictest0-21swapper/011:33:400
2625899251,12cyclictest0-21swapper/010:50:300
2625899251,11cyclictest28123-21chrt07:11:180
2625899251,10cyclictest0-21swapper/011:58:480
2625899251,10cyclictest0-21swapper/010:43:460
2625899251,10cyclictest0-21swapper/009:29:280
2625899251,10cyclictest0-21swapper/009:03:330
26258992510,3cyclictest3634-21munin-run12:25:010
26258992510,3cyclictest0-21swapper/011:13:220
26258992510,3cyclictest0-21swapper/009:35:380
2627299249,7cyclictest16176-21kworker/3:112:09:363
2627299248,7cyclictest6554-21kworker/3:207:44:403
2627299247,13cyclictest86750irq/128-enp1s0-12:12:313
2627299247,13cyclictest86750irq/128-enp1s0-12:12:303
2627299241,16cyclictest16176-21kworker/3:112:00:483
2627299241,14cyclictest0-21swapper/310:42:393
2627299241,11cyclictest0-21swapper/312:30:223
2626899241,9cyclictest0-21swapper/209:51:022
2626899241,9cyclictest0-21swapper/209:51:022
2626899241,9cyclictest0-21swapper/207:26:542
2626899241,9cyclictest0-21swapper/207:26:542
2626899241,16cyclictest14964-21diskmemload12:08:262
2626899241,15cyclictest0-21swapper/211:55:152
2626899241,15cyclictest0-21swapper/211:15:582
2626899241,14cyclictest0-21swapper/209:55:462
2626899241,11cyclictest0-21swapper/211:48:302
2626899241,11cyclictest0-21swapper/211:02:502
2626899241,11cyclictest0-21swapper/211:02:502
2626899241,10cyclictest0-21swapper/211:07:582
2626899241,10cyclictest0-21swapper/210:50:422
2626899240,9cyclictest0-21swapper/207:20:222
2626899240,13cyclictest0-21swapper/211:20:142
2626899240,11cyclictest0-21swapper/210:45:302
2626899240,10cyclictest0-21swapper/212:14:302
2626899240,10cyclictest0-21swapper/212:14:302
2626899240,10cyclictest0-21swapper/211:53:032
26262992413,3cyclictest0-21swapper/109:25:111
2626299241,16cyclictest0-21swapper/108:47:381
2626299241,14cyclictest0-21swapper/109:53:071
2626299241,14cyclictest0-21swapper/109:53:061
2626299241,11cyclictest0-21swapper/110:44:501
2626299241,11cyclictest0-21swapper/110:39:221
2625899248,3cyclictest0-21swapper/008:46:140
2625899248,3cyclictest0-21swapper/007:21:040
2625899245,3cyclictest0-21swapper/009:43:580
2625899241,13cyclictest0-21swapper/012:33:380
2625899241,10cyclictest0-21swapper/012:25:440
2625899241,10cyclictest0-21swapper/010:13:560
2625899240,11cyclictest0-21swapper/007:48:560
2627299239,5cyclictest16524-21kworker/3:109:02:123
2627299239,3cyclictest6554-21kworker/3:208:14:423
2627299237,8cyclictest6554-21kworker/3:207:18:083
2627299237,7cyclictest2699-21kworker/3:211:07:083
2627299236,9cyclictest6554-21kworker/3:208:05:323
2627299236,3cyclictest6554-21kworker/3:207:29:343
2627299236,3cyclictest6554-21kworker/3:207:29:343
2627299234,11cyclictest0-21swapper/309:38:163
2627299231,6cyclictest0-21swapper/311:42:433
26272992311,2cyclictest16524-21kworker/3:110:51:113
2626899238,4cyclictest30065-21expr08:30:112
2626899237,7cyclictest0-21swapper/211:10:502
2626899231,9cyclictest0-21swapper/210:43:182
2626899231,9cyclictest0-21swapper/208:58:182
2626899231,6cyclictest0-21swapper/209:38:442
2626899231,4cyclictest0-21swapper/212:33:182
2626899231,14cyclictest0-21swapper/212:16:422
2626899231,10cyclictest0-21swapper/211:29:422
2626899231,10cyclictest0-21swapper/209:46:222
2626899230,9cyclictest0-21swapper/210:07:422
2626899230,10cyclictest0-21swapper/207:47:022
2626299238,3cyclictest0-21swapper/112:33:341
2626299238,3cyclictest0-21swapper/112:22:261
2626299232,7cyclictest0-21swapper/108:15:341
2626299231,7cyclictest0-21swapper/112:06:041
2626299231,3cyclictest23239-21cat11:55:121
26262992313,3cyclictest0-21swapper/112:28:251
2626299231,10cyclictest0-21swapper/111:17:221
26262992310,7cyclictest5719-1kworker/u9:209:41:261
2625899239,3cyclictest0-21swapper/007:41:340
2625899237,3cyclictest0-21swapper/010:33:080
2625899237,3cyclictest0-21swapper/010:16:260
2625899233,3cyclictest0-21swapper/008:32:100
26258992317,3cyclictest0-21swapper/008:37:220
2625899231,11cyclictest0-21swapper/010:08:400
2625899230,3cyclictest0-21swapper/008:51:380
2627299227,7cyclictest6554-21kworker/3:208:01:323
2627299227,2cyclictest6554-21kworker/3:208:16:403
2627299226,6cyclictest0-21swapper/311:15:323
2627299221,12cyclictest0-21swapper/309:55:173
2626899221,6cyclictest0-21swapper/211:32:292
2626899221,10cyclictest0-21swapper/207:36:062
2626899220,9cyclictest0-21swapper/209:16:342
2626899220,10cyclictest0-21swapper/209:00:142
2626299229,5cyclictest0-21swapper/110:16:181
2626299228,3cyclictest0-21swapper/108:39:341
2626299225,3cyclictest0-21swapper/110:14:301
2626299221,2cyclictest0-21swapper/111:02:251
2626299221,2cyclictest0-21swapper/111:02:251
2625899226,3cyclictest0-21swapper/011:27:560
37122210,4sleep3401ktimersoftd/311:10:153
2627299217,2cyclictest6554-21kworker/3:208:27:443
2627299211,11cyclictest8890-21expr08:55:123
2626899218,3cyclictest25342-21awk08:20:012
26268992114,4cyclictest6513-21tr08:50:122
2626899211,13cyclictest0-21swapper/211:41:102
2626899211,12cyclictest0-21swapper/210:20:302
2626899211,11cyclictest0-21swapper/208:07:222
2626899211,10cyclictest0-21swapper/207:33:102
2626899210,9cyclictest0-21swapper/212:00:072
2626899210,9cyclictest0-21swapper/209:40:182
2626299212,6cyclictest0-21swapper/107:11:021
2626299211,18cyclictest0-21swapper/109:02:011
2625899211,13cyclictest0-21swapper/008:26:020
2626899206,8cyclictest0-21swapper/209:05:222
2626899201,12cyclictest0-21swapper/208:28:262
2626899201,10cyclictest0-21swapper/207:19:102
2626899200,8cyclictest0-21swapper/207:14:582
2626899200,10cyclictest0-21swapper/209:20:102
2625899206,3cyclictest0-21swapper/008:18:340
2626899191,12cyclictest0-21swapper/209:11:462
2626899190,12cyclictest0-21swapper/207:44:582
2626899190,11cyclictest0-21swapper/208:40:382
2626299198,3cyclictest0-21swapper/108:41:541
2626899180,9cyclictest0-21swapper/207:50:182
2626899171,10cyclictest0-21swapper/208:12:012
2626899165,3cyclictest86850irq/129-enp1s0-07:55:182
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional