You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-16 - 01:10

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #0

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System r0s0s.osadl.org (updated Sat Nov 15, 2025 12:46:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
48582304296,5sleep70-21swapper/707:07:197
49372292256,28sleep00-21swapper/007:08:250
48462292256,27sleep40-21swapper/407:07:084
48472289256,25sleep50-21swapper/507:07:095
47602287267,13sleep10-21swapper/107:05:521
49212286266,13sleep30-21swapper/307:08:123
48482285266,12sleep60-21swapper/607:07:106
49022284265,12sleep20-21swapper/207:07:542
50662128122,2sleep70-21swapper/707:10:007
5538994341,2cyclictest67505-21kworker/u16:0+events_unbound09:25:010
5542994036,4cyclictest53246-21kworker/u16:1+flush-8:009:00:284
5543993633,2cyclictest14301-21ntpq07:25:245
5540993532,2cyclictest106053-21latency_hist10:40:012
5542993432,2cyclictest46520-21kworker/u16:4+flush-8:008:45:284
5545993330,2cyclictest88272-21cat10:00:177
554599330,30cyclictest0-21swapper/710:06:277
5544993330,2cyclictest833-21snmpd12:25:116
5543993330,2cyclictest833-21snmpd10:26:315
5543993330,2cyclictest833-21snmpd07:11:165
5542993328,5cyclictest82503-21kworker/u16:3+events_unbound09:49:574
5540993330,2cyclictest95342-21cat10:15:152
5539993330,2cyclictest9149-21cat07:15:151
553999330,30cyclictest0-21swapper/110:09:361
5545993230,1cyclictest833-21snmpd08:42:297
5545993230,1cyclictest833-21snmpd07:52:297
5545993230,1cyclictest833-21snmpd07:29:327
5545993229,2cyclictest833-21snmpd09:17:537
5545993229,2cyclictest23287-21cat07:45:167
5545993229,2cyclictest119069-21cat11:05:157
554599320,31cyclictest0-21swapper/709:28:477
554599320,31cyclictest0-21swapper/709:28:477
554599320,31cyclictest0-21swapper/708:58:317
554599320,30cyclictest0-21swapper/712:12:587
554599320,30cyclictest0-21swapper/708:46:257
5544993230,2cyclictest833-21snmpd09:48:456
5544993230,2cyclictest833-21snmpd08:56:136
5544993230,2cyclictest833-21snmpd08:42:196
5544993230,2cyclictest833-21snmpd07:36:476
5544993230,2cyclictest833-21snmpd07:36:476
5544993229,2cyclictest97683-21cat10:20:176
5544993229,2cyclictest833-21snmpd10:55:026
554499320,32cyclictest0-21swapper/609:41:306
554499320,31cyclictest0-21swapper/607:34:116
5543993230,1cyclictest833-21snmpd11:29:575
5543993229,2cyclictest833-21snmpd09:05:085
554399320,31cyclictest0-21swapper/512:26:295
554399320,31cyclictest0-21swapper/509:50:045
554399320,31cyclictest0-21swapper/507:48:145
554399320,30cyclictest0-21swapper/509:30:115
554399320,29cyclictest0-21swapper/507:15:475
5542993231,1cyclictest87645-21/usr/sbin/munin10:00:244
5542993231,1cyclictest52914-21kworker/u16:0+events_unbound09:10:234
5542993230,2cyclictest833-21snmpd12:31:264
5542993230,2cyclictest833-21snmpd07:26:054
5542993230,2cyclictest32708-21kworker/u16:0+flush-8:008:25:274
5542993229,3cyclictest833-21snmpd09:36:204
5542993229,3cyclictest833-21snmpd07:17:174
5542993229,2cyclictest833-21snmpd11:02:294
5541993230,2cyclictest833-21snmpd12:15:193
5541993230,2cyclictest833-21snmpd07:10:043
5541993230,2cyclictest30360-21cat08:00:143
5541993230,2cyclictest149840-21cat12:10:173
5540993230,2cyclictest833-21snmpd07:29:202
5540993229,2cyclictest71217-21cat09:25:162
5540993229,2cyclictest71217-21cat09:25:152
554099320,32cyclictest0-21swapper/209:09:562
5539993230,2cyclictest833-21snmpd12:22:021
5539993230,2cyclictest833-21snmpd11:20:031
5539993230,2cyclictest833-21snmpd09:22:381
5539993229,2cyclictest833-21snmpd11:43:361
5539993229,2cyclictest833-21snmpd11:00:021
5539993229,2cyclictest833-21snmpd07:50:501
553999320,29cyclictest0-21swapper/109:52:211
5538993230,2cyclictest833-21snmpd11:40:390
5538993230,2cyclictest833-21snmpd11:09:560
5538993230,2cyclictest833-21snmpd07:55:210
5538993230,2cyclictest833-21snmpd07:40:440
5538993230,2cyclictest833-21snmpd07:12:130
5545993130,1cyclictest833-21snmpd09:07:597
5545993129,1cyclictest833-21snmpd12:16:317
5545993128,2cyclictest85901-21cat09:55:177
5545993128,2cyclictest833-21snmpd11:42:307
5545993128,2cyclictest833-21snmpd08:38:437
5545993128,2cyclictest833-21snmpd08:08:547
5545993128,2cyclictest128515-21cat11:25:177
554599310,30cyclictest0-21swapper/710:16:167
554599310,30cyclictest0-21swapper/709:35:297
554599310,30cyclictest0-21swapper/709:13:537
554599310,30cyclictest0-21swapper/707:30:067
554599310,1cyclictest0-21swapper/708:22:457
5544993130,1cyclictest833-21snmpd10:42:166
5544993130,1cyclictest833-21snmpd10:07:336
5544993129,2cyclictest833-21snmpd08:13:286
5544993128,2cyclictest124865-21kworker/u16:2+flush-8:012:10:156
554499310,31cyclictest0-21swapper/609:08:416
554499310,30cyclictest0-21swapper/610:29:286
554499310,30cyclictest0-21swapper/610:00:576
554499310,30cyclictest0-21swapper/608:34:466
554499310,30cyclictest0-21swapper/607:28:366
554499310,30cyclictest0-21swapper/607:22:146
554499310,1cyclictest0-21swapper/607:57:336
5543993130,1cyclictest833-21snmpd12:06:465
5543993130,1cyclictest833-21snmpd10:30:195
5543993130,1cyclictest833-21snmpd07:32:025
5543993129,2cyclictest833-21snmpd10:40:525
5543993129,1cyclictest833-21snmpd10:12:005
5543993129,1cyclictest833-21snmpd09:57:275
5543993129,1cyclictest833-21snmpd08:49:315
5543993128,2cyclictest833-21snmpd10:38:015
554399310,30cyclictest0-21swapper/512:17:195
554399310,30cyclictest0-21swapper/508:32:375
554399310,28cyclictest0-21swapper/510:24:375
554399310,1cyclictest0-21swapper/511:32:275
554399310,1cyclictest0-21swapper/509:20:445
554399310,1cyclictest0-21swapper/508:15:165
5542993130,1cyclictest833-21snmpd08:51:554
5542993130,1cyclictest833-21snmpd07:23:274
5542993129,2cyclictest833-21snmpd07:10:284
5542993129,2cyclictest15040-21kworker/u16:2+flush-8:008:10:234
5542993129,1cyclictest833-21snmpd09:50:244
5542993129,1cyclictest833-21snmpd07:55:184
5542993125,6cyclictest146129-21kworker/u16:1+events_unbound12:21:064
554299310,31cyclictest0-21swapper/412:00:144
554299310,31cyclictest0-21swapper/411:28:004
554299310,31cyclictest0-21swapper/409:29:304
554299310,31cyclictest0-21swapper/409:29:294
554299310,31cyclictest0-21swapper/408:17:194
554299310,30cyclictest0-21swapper/410:35:164
554299310,1cyclictest0-21swapper/410:18:554
554299310,1cyclictest0-21swapper/408:40:174
5541993131,0cyclictest0-21swapper/311:28:093
5541993131,0cyclictest0-21swapper/308:57:133
5541993131,0cyclictest0-21swapper/307:34:163
5541993130,1cyclictest833-21snmpd10:16:473
5541993130,1cyclictest833-21snmpd09:42:003
5541993130,1cyclictest833-21snmpd09:35:173
554199310,31cyclictest0-21swapper/307:52:383
554199310,30cyclictest0-21swapper/312:21:413
554199310,1cyclictest0-21swapper/310:00:173
554199310,1cyclictest0-21swapper/309:28:503
554199310,1cyclictest0-21swapper/309:28:503
5540993130,1cyclictest833-21snmpd10:48:112
5540993129,2cyclictest119103-21cat11:05:162
5540993129,1cyclictest0-21swapper/208:47:262
554099310,30cyclictest0-21swapper/208:25:542
554099310,30cyclictest0-21swapper/207:33:232
554099310,30cyclictest0-21swapper/207:23:052
554099310,1cyclictest0-21swapper/210:26:072
554099310,1cyclictest0-21swapper/210:10:362
5539993130,1cyclictest833-21snmpd12:05:401
5539993130,1cyclictest833-21snmpd12:04:071
5539993130,1cyclictest833-21snmpd09:14:321
5539993128,2cyclictest833-21snmpd11:20:001
5539993128,2cyclictest833-21snmpd11:20:001
553999310,30cyclictest0-21swapper/111:12:291
553999310,30cyclictest0-21swapper/110:38:581
553999310,30cyclictest0-21swapper/108:48:161
553999310,1cyclictest0-21swapper/111:47:301
553999310,1cyclictest0-21swapper/110:56:531
5538993130,1cyclictest833-21snmpd12:19:040
5538993130,1cyclictest833-21snmpd11:11:050
5538993130,1cyclictest833-21snmpd09:25:140
5538993130,1cyclictest833-21snmpd09:25:140
5538993130,1cyclictest833-21snmpd07:20:260
5538993130,1cyclictest106168-21kworker/0:0+events12:05:140
5538993129,1cyclictest0-21swapper/008:11:550
553899310,30cyclictest0-21swapper/009:52:000
553899310,1cyclictest0-21swapper/010:46:320
553899310,1cyclictest0-21swapper/009:35:470
553899310,1cyclictest0-21swapper/008:25:030
5545993029,1cyclictest833-21snmpd11:32:097
5545993029,1cyclictest833-21snmpd11:23:157
5545993028,1cyclictest833-21snmpd10:38:167
5545993027,2cyclictest83562-21cat09:50:157
554599300,29cyclictest0-21swapper/711:49:367
5544993029,1cyclictest833-21snmpd11:45:246
5544993028,2cyclictest833-21snmpd11:21:156
5544993028,2cyclictest833-21snmpd07:44:446
5544993028,2cyclictest59000-21cat09:00:166
5544993027,2cyclictest94066-21kworker/u16:3+flush-8:011:15:136
5544993027,2cyclictest94066-21kworker/u16:3+flush-8:011:15:136
5544993027,2cyclictest159776-21cat12:30:186
5544993026,3cyclictest0-21swapper/612:09:076
554499300,30cyclictest0-21swapper/611:43:126
554499300,30cyclictest0-21swapper/611:37:546
554499300,30cyclictest0-21swapper/609:26:596
554499300,30cyclictest0-21swapper/609:26:596
554499300,30cyclictest0-21swapper/607:14:446
554499300,29cyclictest0-21swapper/612:36:596
554499300,1cyclictest0-21swapper/612:18:466
554499300,1cyclictest0-21swapper/611:53:016
554499300,1cyclictest0-21swapper/611:31:516
5543993028,2cyclictest833-21snmpd11:07:235
5543993028,2cyclictest833-21snmpd07:21:595
5543993028,1cyclictest833-21snmpd11:15:445
5543993028,1cyclictest833-21snmpd11:15:445
5543993028,1cyclictest833-21snmpd11:03:325
5543993028,1cyclictest0-21swapper/512:02:105
554399300,30cyclictest0-21swapper/508:40:165
554399300,29cyclictest0-21swapper/509:13:475
5542993029,1cyclictest833-21snmpd11:11:504
5542993029,1cyclictest833-21snmpd09:59:434
554299300,30cyclictest107498-21ntpq10:40:264
554299300,30cyclictest0-21swapper/412:37:174
554299300,30cyclictest0-21swapper/412:25:564
554299300,30cyclictest0-21swapper/412:11:194
554299300,30cyclictest0-21swapper/411:55:434
554299300,30cyclictest0-21swapper/411:17:484
554299300,30cyclictest0-21swapper/411:17:484
554299300,30cyclictest0-21swapper/410:33:044
554299300,30cyclictest0-21swapper/408:55:164
554299300,30cyclictest0-21swapper/408:35:154
554299300,30cyclictest0-21swapper/408:24:184
554299300,30cyclictest0-21swapper/407:47:024
554299300,30cyclictest0-21swapper/407:40:354
5541993030,0cyclictest0-21swapper/312:35:573
5541993030,0cyclictest0-21swapper/308:06:453
5541993029,1cyclictest833-21snmpd10:25:343
5541993029,1cyclictest833-21snmpd09:20:063
5541993028,2cyclictest133174-21cat11:35:173
554199300,30cyclictest0-21swapper/311:18:323
554199300,30cyclictest0-21swapper/311:18:323
554199300,30cyclictest0-21swapper/310:32:373
554199300,30cyclictest0-21swapper/309:08:023
554199300,30cyclictest0-21swapper/308:21:573
554199300,30cyclictest0-21swapper/307:49:533
554199300,1cyclictest0-21swapper/309:17:443
5540993029,1cyclictest833-21snmpd12:35:112
5540993029,1cyclictest833-21snmpd11:53:582
5540993029,1cyclictest833-21snmpd07:45:002
5540993028,2cyclictest833-21snmpd09:11:442
5540993028,1cyclictest0-21swapper/208:16:212
554099300,30cyclictest0-21swapper/211:39:062
554099300,30cyclictest0-21swapper/210:20:462
554099300,30cyclictest0-21swapper/208:35:042
554099300,30cyclictest0-21swapper/208:21:282
554099300,29cyclictest0-21swapper/212:15:042
554099300,1cyclictest0-21swapper/210:30:552
5539993029,1cyclictest833-21snmpd11:58:281
5539993029,1cyclictest833-21snmpd10:12:211
5539993029,1cyclictest833-21snmpd09:29:451
5539993029,1cyclictest833-21snmpd09:29:441
5539993029,1cyclictest833-21snmpd08:53:071
5539993027,2cyclictest833-21snmpd08:32:121
553999300,30cyclictest0-21swapper/110:03:361
553999300,30cyclictest0-21swapper/108:12:421
553999300,30cyclictest0-21swapper/107:37:171
553999300,30cyclictest0-21swapper/107:37:171
553999300,1cyclictest0-21swapper/108:59:521
5538993029,1cyclictest833-21snmpd10:54:320
5538993028,2cyclictest833-21snmpd11:56:490
5538993028,2cyclictest833-21snmpd09:15:020
553899300,30cyclictest0-21swapper/011:27:000
553899300,30cyclictest0-21swapper/009:30:150
553899300,30cyclictest0-21swapper/008:42:010
553899300,29cyclictest0-21swapper/010:10:030
5545992927,1cyclictest0-21swapper/709:22:447
5545992926,2cyclictest833-21snmpd10:48:507
5544992928,1cyclictest833-21snmpd10:53:266
5544992928,1cyclictest833-21snmpd10:19:026
5544992928,1cyclictest79902-21kworker/u16:1+flush-8:010:10:196
5544992927,2cyclictest833-21snmpd09:31:026
5543992928,1cyclictest833-21snmpd11:47:185
5543992928,1cyclictest833-21snmpd11:21:275
5543992927,2cyclictest833-21snmpd11:51:195
5543992926,2cyclictest833-21snmpd08:59:325
5543992926,2cyclictest833-21snmpd08:20:335
554399290,29cyclictest0-21swapper/507:39:505
554399290,29cyclictest0-21swapper/507:39:505
5542992928,1cyclictest93485-21pmu-power10:10:304
5542992928,1cyclictest90125-21/usr/sbin/munin10:05:144
554299290,29cyclictest0-21swapper/409:44:484
554299290,29cyclictest0-21swapper/407:38:504
554299290,29cyclictest0-21swapper/407:38:504
5541992928,1cyclictest833-21snmpd10:51:263
5541992928,1cyclictest833-21snmpd08:54:193
5541992927,2cyclictest85876-21cat09:55:163
5541992927,2cyclictest833-21snmpd08:35:473
554199290,29cyclictest0-21swapper/311:49:573
554199290,28cyclictest0-21swapper/311:54:463
5540992928,1cyclictest833-21snmpd11:41:272
5540992928,1cyclictest833-21snmpd11:27:212
5540992928,1cyclictest833-21snmpd11:22:392
5540992928,1cyclictest833-21snmpd11:01:262
5540992928,1cyclictest833-21snmpd10:06:512
5540992928,1cyclictest833-21snmpd10:01:432
5540992928,1cyclictest833-21snmpd09:46:362
5540992928,1cyclictest833-21snmpd09:03:102
5540992928,1cyclictest833-21snmpd07:15:562
5540992927,2cyclictest833-21snmpd12:30:442
5540992927,2cyclictest833-21snmpd11:48:182
5540992927,2cyclictest833-21snmpd10:50:092
5540992926,2cyclictest833-21snmpd08:10:242
554099290,28cyclictest0-21swapper/209:33:442
5539992928,1cyclictest833-21snmpd12:36:441
5539992928,1cyclictest833-21snmpd09:49:161
5539992927,2cyclictest833-21snmpd10:24:281
5539992925,3cyclictest0-21swapper/110:30:431
553999290,29cyclictest0-21swapper/108:20:271
553999290,27cyclictest0-21swapper/109:41:361
5538992928,1cyclictest833-21snmpd12:22:260
5538992928,1cyclictest833-21snmpd11:02:150
5538992928,1cyclictest833-21snmpd08:37:340
5538992928,1cyclictest833-21snmpd08:04:540
5538992928,1cyclictest0-21swapper/008:45:370
5538992927,2cyclictest833-21snmpd12:37:260
5538992927,2cyclictest833-21snmpd12:01:250
553899290,29cyclictest0-21swapper/010:09:540
553899290,29cyclictest0-21swapper/009:12:450
553899290,29cyclictest0-21swapper/008:54:490
553899290,28cyclictest0-21swapper/011:24:250
553899290,28cyclictest0-21swapper/009:01:490
5545992826,1cyclictest833-21snmpd10:55:477
5545992825,2cyclictest833-21snmpd10:50:327
5544992827,1cyclictest833-21snmpd10:32:056
5544992825,3cyclictest0-21swapper/610:35:136
554499280,28cyclictest0-21swapper/608:38:056
5543992827,1cyclictest833-21snmpd10:04:485
5542992826,2cyclictest833-21snmpd10:24:344
5542992826,1cyclictest99938-21fschecks_time10:25:174
5542992826,1cyclictest33085-21awk08:05:244
554299280,28cyclictest0-21swapper/410:52:264
5541992827,1cyclictest833-21snmpd12:34:593
5541992827,1cyclictest833-21snmpd08:13:343
5541992827,1cyclictest15040-21kworker/u16:2+events_unbound07:40:203
554199280,28cyclictest0-21swapper/309:12:263
5540992827,1cyclictest833-21snmpd08:40:192
5540992827,1cyclictest833-21snmpd08:07:312
5540992826,2cyclictest833-21snmpd12:09:282
5540992825,2cyclictest0-21swapper/207:45:262
554099280,28cyclictest0-21swapper/211:17:262
554099280,28cyclictest0-21swapper/211:17:262
554099280,27cyclictest0-21swapper/207:39:032
554099280,27cyclictest0-21swapper/207:39:022
5539992827,1cyclictest833-21snmpd11:35:121
5539992827,1cyclictest833-21snmpd10:49:441
5539992827,1cyclictest833-21snmpd07:40:171
5539992826,1cyclictest0-21swapper/108:07:361
553999280,27cyclictest0-21swapper/109:37:291
5538992827,1cyclictest833-21snmpd12:27:260
5538992827,1cyclictest16182-21cat07:30:150
5538992826,2cyclictest833-21snmpd11:18:260
5538992826,2cyclictest833-21snmpd11:18:260
5545992726,1cyclictest833-21snmpd08:14:487
5545992725,1cyclictest0-21swapper/711:18:147
5545992725,1cyclictest0-21swapper/711:18:147
5545992724,2cyclictest833-21snmpd12:35:087
5545992724,2cyclictest81546-21ntpq09:45:247
5545992723,3cyclictest0-21swapper/708:53:197
5544992726,1cyclictest833-21snmpd11:58:346
5544992726,1cyclictest833-21snmpd09:11:296
5544992726,1cyclictest833-21snmpd08:02:156
5544992726,1cyclictest833-21snmpd07:15:186
554499270,27cyclictest0-21swapper/609:16:146
5543992726,1cyclictest833-21snmpd08:29:515
5543992726,1cyclictest833-21snmpd07:41:265
5543992725,1cyclictest0-21swapper/512:22:445
5542992726,1cyclictest833-21snmpd10:58:414
5542992726,1cyclictest52914-21kworker/u16:0+flush-8:009:10:004
5542992725,2cyclictest833-21snmpd11:48:544
5542992725,1cyclictest0-21swapper/411:35:144
5541992726,1cyclictest0-21swapper/308:31:003
5541992725,2cyclictest833-21snmpd10:40:223
5541992725,1cyclictest0-21swapper/311:10:473
5541992725,1cyclictest0-21swapper/310:57:563
5540992726,1cyclictest833-21snmpd12:23:502
5540992725,2cyclictest833-21snmpd09:16:202
554099270,27cyclictest0-21swapper/208:57:442
5539992726,1cyclictest833-21snmpd11:52:191
5539992726,1cyclictest0-21swapper/112:25:411
5539992726,1cyclictest0-21swapper/112:19:341
5539992726,1cyclictest0-21swapper/108:18:011
5539992725,1cyclictest833-21snmpd11:08:261
5539992725,1cyclictest0-21swapper/111:34:541
5539992725,1cyclictest0-21swapper/108:28:061
5539992723,2cyclictest0-21swapper/109:15:231
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional