You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-19 - 03:57

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #0

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System r0s0s.osadl.org (updated Fri Dec 19, 2025 00:46:25)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1949122323309,9sleep50-21swapper/519:05:285
1959772299278,13sleep40-21swapper/419:09:294
1959502294282,7sleep60-21swapper/619:09:066
1959362291271,12sleep10-21swapper/119:08:541
1959852288268,13sleep30-21swapper/319:09:353
1958492285266,12sleep20-21swapper/219:07:422
1958452285264,13sleep70-21swapper/719:07:397
1958902284265,12sleep00-21swapper/019:08:120
196486993935,2cyclictest275718-21kworker/u16:2+events_unbound22:05:203
196486993735,1cyclictest235825-21fw_packets20:25:143
196486993633,3cyclictest334114-21kworker/u16:2+events_unbound23:50:183
196486993632,4cyclictest238777-21ntpq20:30:233
196486993632,1cyclictest95-21kcompactd023:20:253
19648899340,33cyclictest0-21swapper/522:18:225
196486993432,2cyclictest360545-21ntpq00:30:233
196486993432,2cyclictest284823-21ntpq22:00:253
196486993427,2cyclictest45-21ksoftirqd/322:57:553
19648599340,1cyclictest0-21swapper/219:55:042
196484993430,3cyclictest870-21snmpd23:52:281
19649099330,31cyclictest277222-21ntp_states21:45:257
196489993333,0cyclictest0-21swapper/623:48:196
196487993330,2cyclictest870-21snmpd23:49:494
196486993332,1cyclictest264129-21irqstats21:20:223
196486993331,2cyclictest289736-21ntp_states22:10:253
196486993331,2cyclictest168478-21kworker/u16:3-events_unbound20:40:003
196486993331,1cyclictest282207-21ntpq21:55:243
196486993330,1cyclictest221002-21ipmitool19:55:163
196485993330,2cyclictest870-21snmpd23:32:572
196485993330,2cyclictest870-21snmpd19:25:022
196485993329,3cyclictest870-21snmpd20:43:402
196485993324,5cyclictest870-21snmpd23:25:122
196490993230,2cyclictest870-21snmpd22:00:487
196490993230,2cyclictest870-21snmpd20:05:437
196490993230,2cyclictest870-21snmpd19:23:207
196490993230,1cyclictest870-21snmpd00:27:337
196490993229,2cyclictest870-21snmpd23:41:287
196490993228,3cyclictest0-21swapper/720:11:367
19649099320,32cyclictest0-21swapper/700:21:587
19649099320,31cyclictest0-21swapper/722:25:377
19649099320,30cyclictest0-21swapper/722:08:257
196489993232,0cyclictest0-21swapper/623:10:476
19648999321,30cyclictest0-21swapper/621:25:536
196488993230,2cyclictest870-21snmpd00:09:055
196488993229,2cyclictest870-21snmpd21:33:315
19648899320,31cyclictest0-21swapper/523:02:295
19648899320,31cyclictest0-21swapper/519:43:395
19648899320,30cyclictest217920-21apt-get19:50:125
19648899320,30cyclictest0-21swapper/521:02:055
19648899320,30cyclictest0-21swapper/520:00:275
196487993230,2cyclictest1849915-21ntpd20:13:124
196487993230,1cyclictest870-21snmpd20:45:084
196487993230,1cyclictest332629-21ntpq23:35:244
196487993229,2cyclictest870-21snmpd22:54:174
196487993229,2cyclictest870-21snmpd22:54:174
196487993229,2cyclictest870-21snmpd20:05:014
196486993231,1cyclictest0-21swapper/320:50:143
196486993230,2cyclictest870-21snmpd22:25:223
196486993230,1cyclictest335284-21ntpq23:40:253
196485993228,3cyclictest870-21snmpd23:58:592
196485993226,5cyclictest870-21snmpd00:35:172
19648599320,31cyclictest0-21swapper/219:36:112
19648599320,31cyclictest0-21swapper/200:20:162
19648499320,31cyclictest0-21swapper/121:21:081
19648499320,31cyclictest0-21swapper/120:55:161
19648499320,31cyclictest0-21swapper/120:55:151
196483993230,2cyclictest870-21snmpd23:31:480
196483993230,2cyclictest870-21snmpd22:00:420
196483993230,2cyclictest870-21snmpd20:39:320
196483993230,2cyclictest870-21snmpd19:48:370
196490993130,1cyclictest870-21snmpd22:11:537
196490993130,1cyclictest870-21snmpd21:05:477
196490993130,1cyclictest870-21snmpd20:46:447
196490993129,2cyclictest870-21snmpd20:03:317
196490993129,2cyclictest870-21snmpd19:45:217
196490993129,1cyclictest870-21snmpd22:53:127
196490993129,1cyclictest870-21snmpd22:53:127
196490993129,1cyclictest870-21snmpd00:31:057
196490993129,1cyclictest0-21swapper/700:16:477
196490993128,2cyclictest870-21snmpd19:56:457
196490993128,2cyclictest304138-21cat22:40:157
19649099310,30cyclictest0-21swapper/723:59:407
19649099310,30cyclictest0-21swapper/723:10:547
19649099310,30cyclictest0-21swapper/721:17:397
19649099310,30cyclictest0-21swapper/720:57:247
19649099310,30cyclictest0-21swapper/720:57:237
19649099310,30cyclictest0-21swapper/720:30:117
19649099310,30cyclictest0-21swapper/720:18:177
19649099310,30cyclictest0-21swapper/700:14:137
19649099310,28cyclictest0-21swapper/721:23:177
19649099310,1cyclictest0-21swapper/721:54:257
196489993130,1cyclictest870-21snmpd22:21:326
196489993130,1cyclictest870-21snmpd22:08:566
196489993130,1cyclictest870-21snmpd20:44:056
196489993129,2cyclictest870-21snmpd23:40:166
19648999311,0cyclictest0-21swapper/623:55:016
19648999310,31cyclictest0-21swapper/622:57:546
19648999310,31cyclictest0-21swapper/619:21:036
19648999310,30cyclictest0-21swapper/621:56:166
19648999310,30cyclictest0-21swapper/621:41:456
19648999310,30cyclictest0-21swapper/621:36:096
19648999310,30cyclictest0-21swapper/621:34:466
19648999310,30cyclictest0-21swapper/619:56:406
19648999310,30cyclictest0-21swapper/619:29:426
19648999310,1cyclictest0-21swapper/620:20:016
19648999310,1cyclictest0-21swapper/620:07:216
19648999310,1cyclictest0-21swapper/600:35:366
196488993130,1cyclictest870-21snmpd22:02:235
196488993130,1cyclictest870-21snmpd21:15:575
196488993130,1cyclictest870-21snmpd21:14:565
196488993130,1cyclictest870-21snmpd20:16:465
196488993130,1cyclictest870-21snmpd19:20:515
196488993129,2cyclictest870-21snmpd00:25:115
196488993128,2cyclictest870-21snmpd22:37:035
196488993128,2cyclictest870-21snmpd19:14:085
19648899310,30cyclictest0-21swapper/521:38:485
19648899310,30cyclictest0-21swapper/520:25:255
19648899310,30cyclictest0-21swapper/520:14:435
19648899310,30cyclictest0-21swapper/519:35:055
19648899310,30cyclictest0-21swapper/519:28:025
19648899310,30cyclictest0-21swapper/500:13:375
19648899310,1cyclictest0-21swapper/521:29:235
19648899310,1cyclictest0-21swapper/520:37:505
196487993130,1cyclictest870-21snmpd00:20:374
196487993129,1cyclictest870-21snmpd22:43:544
196487993129,1cyclictest870-21snmpd21:52:074
196487993129,1cyclictest870-21snmpd19:22:354
196487993128,2cyclictest1849915-21ntpd22:33:134
19648799310,31cyclictest0-21swapper/400:37:384
19648799310,30cyclictest0-21swapper/419:40:144
19648799310,1cyclictest0-21swapper/421:13:064
196486993130,1cyclictest870-21snmpd23:46:243
196486993130,1cyclictest870-21snmpd22:48:003
196486993130,1cyclictest870-21snmpd22:47:593
196486993130,1cyclictest870-21snmpd22:23:343
196486993130,1cyclictest870-21snmpd21:28:143
196486993129,2cyclictest870-21snmpd21:10:423
196486993129,2cyclictest870-21snmpd20:58:093
196486993129,2cyclictest870-21snmpd20:58:083
196486993129,2cyclictest0-21swapper/321:45:263
196486993129,1cyclictest244007-21/usr/sbin/munin20:40:243
196486993126,2cyclictest45-21ksoftirqd/319:45:123
196486993125,6cyclictest8701snmpd23:01:543
196486993125,3cyclictest171rcu_preempt00:20:153
19648699312,29cyclictest45-21ksoftirqd/319:40:253
19648699311,30cyclictest203665-21ntpq19:20:203
19648699310,31cyclictest326555-21cstates23:25:123
19648699310,31cyclictest0-21swapper/321:15:273
19648699310,30cyclictest431rcuc/322:30:243
19648699310,30cyclictest0-21swapper/322:15:413
19648699310,30cyclictest0-21swapper/321:44:303
19648699310,30cyclictest0-21swapper/320:23:253
19648699310,30cyclictest0-21swapper/320:16:233
19648699310,30cyclictest0-21swapper/320:10:283
19648699310,30cyclictest0-21swapper/319:12:203
19648699310,30cyclictest0-21swapper/300:17:553
19648699310,1cyclictest279847-21ntpq21:50:253
19648699310,1cyclictest0-21swapper/319:54:153
19648699310,1cyclictest0-21swapper/300:27:543
196485993130,1cyclictest870-21snmpd21:16:182
196485993130,1cyclictest870-21snmpd00:07:312
196485993128,3cyclictest870-21snmpd23:48:322
19648599310,30cyclictest0-21swapper/223:08:012
19648599310,30cyclictest0-21swapper/221:23:362
19648599310,30cyclictest0-21swapper/220:53:192
19648599310,30cyclictest0-21swapper/220:32:502
19648599310,30cyclictest0-21swapper/219:30:132
19648599310,30cyclictest0-21swapper/200:26:142
19648599310,1cyclictest0-21swapper/223:22:012
19648599310,1cyclictest0-21swapper/222:08:582
19648599310,1cyclictest0-21swapper/219:17:092
196484993130,1cyclictest870-21snmpd22:17:101
196484993130,1cyclictest870-21snmpd22:05:581
196484993130,1cyclictest870-21snmpd21:59:061
196484993130,1cyclictest870-21snmpd21:28:121
196484993130,1cyclictest870-21snmpd20:26:131
196484993129,1cyclictest870-21snmpd19:42:271
196484993129,1cyclictest870-21snmpd19:22:411
196484993128,2cyclictest870-21snmpd19:53:251
196484993128,2cyclictest870-21snmpd00:12:161
19648499310,31cyclictest0-21swapper/122:39:381
19648499310,31cyclictest0-21swapper/122:22:471
19648499310,30cyclictest0-21swapper/123:05:161
19648499310,30cyclictest0-21swapper/122:57:091
19648499310,30cyclictest0-21swapper/122:42:061
19648499310,30cyclictest0-21swapper/121:15:421
19648499310,30cyclictest0-21swapper/120:40:161
19648499310,30cyclictest0-21swapper/120:08:491
19648499310,30cyclictest0-21swapper/100:25:361
19648499310,30cyclictest0-21swapper/100:15:201
19648499310,1cyclictest0-21swapper/123:21:121
19648499310,1cyclictest0-21swapper/122:25:561
19648499310,1cyclictest0-21swapper/119:33:111
196483993130,1cyclictest870-21snmpd21:12:270
196483993130,1cyclictest870-21snmpd19:59:580
196483993129,2cyclictest870-21snmpd22:43:570
196483993129,2cyclictest870-21snmpd20:41:590
196483993129,2cyclictest301615-21cat22:35:150
196483993129,2cyclictest289187-21cat22:10:140
19648399310,31cyclictest0-21swapper/022:46:090
19648399310,31cyclictest0-21swapper/022:46:080
19648399310,30cyclictest0-21swapper/021:20:420
19648399310,30cyclictest0-21swapper/020:52:410
19648399310,1cyclictest0-21swapper/019:27:330
196490993029,1cyclictest870-21snmpd21:31:307
196490993029,1cyclictest870-21snmpd21:26:457
196490993029,1cyclictest870-21snmpd19:10:447
196490993028,2cyclictest870-21snmpd22:49:057
196490993028,2cyclictest870-21snmpd22:49:057
196490993028,2cyclictest870-21snmpd00:05:087
19649099300,29cyclictest0-21swapper/723:20:127
196489993029,1cyclictest870-21snmpd22:11:496
196489993029,1cyclictest870-21snmpd21:47:136
196489993029,1cyclictest870-21snmpd20:54:506
196489993029,1cyclictest870-21snmpd19:33:486
19648999300,30cyclictest0-21swapper/623:32:246
19648999300,30cyclictest0-21swapper/623:05:026
19648999300,30cyclictest0-21swapper/622:38:446
19648999300,30cyclictest0-21swapper/622:25:466
19648999300,30cyclictest0-21swapper/619:16:146
196488993029,1cyclictest870-21snmpd22:59:515
196488993029,1cyclictest870-21snmpd21:21:455
196488993029,1cyclictest870-21snmpd20:43:495
196488993029,1cyclictest870-21snmpd20:24:445
196488993029,1cyclictest870-21snmpd19:33:275
19648899300,30cyclictest0-21swapper/521:42:405
19648899300,29cyclictest0-21swapper/519:56:315
196487993029,1cyclictest870-21snmpd00:34:084
196487993028,1cyclictest870-21snmpd23:43:014
196487993028,1cyclictest870-21snmpd21:04:304
196487993027,2cyclictest1849915-21ntpd23:28:124
19648799300,30cyclictest0-21swapper/423:30:524
19648799300,30cyclictest0-21swapper/422:06:284
19648799300,30cyclictest0-21swapper/422:00:574
19648799300,30cyclictest0-21swapper/421:09:534
19648799300,30cyclictest0-21swapper/420:57:484
19648799300,30cyclictest0-21swapper/420:57:474
19648799300,30cyclictest0-21swapper/419:47:014
19648799300,30cyclictest0-21swapper/400:28:334
196486993028,2cyclictest870-21snmpd23:35:073
196486993027,2cyclictest45-21ksoftirqd/320:46:293
196486993026,4cyclictest0-21swapper/322:38:133
19648699301,29cyclictest343066-21ntpq23:55:253
19648699300,30cyclictest45-21ksoftirqd/322:40:263
19648699300,30cyclictest431rcuc/323:10:263
19648699300,30cyclictest0-21swapper/323:19:483
19648699300,30cyclictest0-21swapper/320:00:123
19648699300,30cyclictest0-21swapper/319:15:233
196485993028,1cyclictest870-21snmpd23:35:342
196485993028,1cyclictest870-21snmpd23:04:382
196485993028,1cyclictest870-21snmpd22:18:112
196485993028,1cyclictest870-21snmpd20:39:592
196485993028,1cyclictest870-21snmpd20:07:102
19648599300,30cyclictest0-21swapper/221:40:162
196484993029,1cyclictest870-21snmpd21:38:461
196484993029,1cyclictest870-21snmpd19:59:151
196484993028,1cyclictest870-21snmpd21:45:161
196484993027,2cyclictest870-21snmpd22:46:031
196484993027,2cyclictest870-21snmpd22:46:021
196484993027,2cyclictest240853-21cat20:35:151
196483993029,1cyclictest870-21snmpd21:47:190
196483993028,2cyclictest870-21snmpd23:51:530
196483993028,2cyclictest870-21snmpd00:35:150
19648399300,30cyclictest0-21swapper/023:38:460
19648399300,30cyclictest0-21swapper/023:13:340
19648399300,30cyclictest0-21swapper/022:16:500
19648399300,30cyclictest0-21swapper/021:25:110
19648399300,30cyclictest0-21swapper/020:55:490
19648399300,30cyclictest0-21swapper/020:55:490
19648399300,30cyclictest0-21swapper/020:24:460
19648399300,30cyclictest0-21swapper/020:19:440
19648399300,30cyclictest0-21swapper/020:11:520
19648399300,30cyclictest0-21swapper/019:15:470
19648399300,30cyclictest0-21swapper/000:31:110
19648399300,29cyclictest0-21swapper/022:56:050
19648399300,29cyclictest0-21swapper/020:02:580
196490992928,1cyclictest870-21snmpd22:15:317
196490992928,1cyclictest870-21snmpd19:33:357
196490992928,1cyclictest0-21swapper/720:21:587
196490992926,2cyclictest870-21snmpd22:20:017
196489992927,2cyclictest870-21snmpd23:40:016
196488992928,1cyclictest870-21snmpd22:54:595
196488992928,1cyclictest870-21snmpd22:54:595
196488992926,2cyclictest870-21snmpd23:09:345
19648899290,29cyclictest0-21swapper/500:16:315
196487992928,1cyclictest870-21snmpd23:07:454
196487992928,1cyclictest870-21snmpd21:29:094
196487992928,1cyclictest870-21snmpd20:19:504
196487992926,2cyclictest870-21snmpd21:21:204
19648799290,29cyclictest0-21swapper/423:51:224
19648799290,29cyclictest0-21swapper/423:15:294
196486992927,2cyclictest870-21snmpd22:52:183
196486992927,2cyclictest870-21snmpd22:52:183
19648699290,29cyclictest0-21swapper/321:30:303
19648699290,29cyclictest0-21swapper/319:25:203
19648699290,29cyclictest0-21swapper/300:38:123
19648699290,29cyclictest0-21swapper/300:00:163
19648699290,28cyclictest0-21swapper/323:05:313
196485992928,1cyclictest870-21snmpd22:55:362
196485992928,1cyclictest870-21snmpd22:38:002
196485992927,1cyclictest870-21snmpd00:30:092
19648599290,28cyclictest0-21swapper/221:11:382
196484992928,1cyclictest870-21snmpd21:33:121
196484992927,1cyclictest870-21snmpd20:20:591
196484992927,1cyclictest870-21snmpd19:39:241
196484992926,2cyclictest870-21snmpd20:00:461
19648499290,28cyclictest0-21swapper/123:18:491
196483992928,1cyclictest870-21snmpd21:35:070
196483992928,1cyclictest870-21snmpd21:06:590
196483992927,2cyclictest870-21snmpd23:05:380
196483992927,2cyclictest870-21snmpd19:36:450
196490992827,1cyclictest870-21snmpd23:39:487
196490992826,2cyclictest299162-21cat22:30:167
196490992825,2cyclictest314322-21cat23:00:167
196490992824,3cyclictest870-21snmpd23:16:467
19648999280,28cyclictest0-21swapper/620:15:326
196488992827,1cyclictest870-21snmpd23:52:195
196488992827,1cyclictest870-21snmpd20:08:375
196488992826,2cyclictest870-21snmpd23:22:105
196487992827,1cyclictest870-21snmpd22:28:344
196487992827,1cyclictest870-21snmpd20:31:114
196487992827,1cyclictest0-21swapper/421:49:254
196487992825,2cyclictest870-21snmpd00:19:054
19648799280,28cyclictest0-21swapper/423:03:184
196486992826,2cyclictest0-21swapper/300:12:363
19648699280,28cyclictest347089-21kworker/3:1+events_power_efficient00:07:053
19648699280,28cyclictest0-21swapper/323:30:193
19648699280,28cyclictest0-21swapper/321:35:263
19648699280,28cyclictest0-21swapper/320:05:253
19648699280,28cyclictest0-21swapper/319:35:123
196485992827,1cyclictest870-21snmpd21:31:102
196484992827,1cyclictest870-21snmpd21:12:571
196484992827,1cyclictest870-21snmpd19:26:271
196484992827,1cyclictest870-21snmpd00:32:021
196484992826,1cyclictest0-21swapper/122:51:381
196484992826,1cyclictest0-21swapper/122:51:381
196484992825,2cyclictest870-21snmpd22:10:381
19648499280,27cyclictest0-21swapper/123:41:341
19648499280,27cyclictest0-21swapper/123:12:331
196483992827,1cyclictest870-21snmpd20:48:490
196490992724,2cyclictest218507-21cat19:50:167
196489992726,1cyclictest870-21snmpd21:53:426
196489992726,1cyclictest870-21snmpd20:33:076
196489992726,1cyclictest870-21snmpd20:12:046
196489992726,1cyclictest870-21snmpd19:12:326
196489992726,1cyclictest0-21swapper/623:00:096
196489992726,1cyclictest0-21swapper/622:18:206
196489992726,1cyclictest0-21swapper/600:07:136
196489992725,2cyclictest870-21snmpd22:40:416
19648999270,26cyclictest0-21swapper/619:42:566
196488992726,1cyclictest870-21snmpd20:54:375
196488992725,2cyclictest337493-21cat23:45:155
196488992725,1cyclictest0-21swapper/522:23:235
196488992725,1cyclictest0-21swapper/521:59:095
19648899270,26cyclictest0-21swapper/520:56:545
19648899270,26cyclictest0-21swapper/520:56:535
196487992726,1cyclictest870-21snmpd23:24:334
196487992726,1cyclictest870-21snmpd22:59:354
196487992726,1cyclictest870-21snmpd22:35:054
196487992724,2cyclictest870-21snmpd00:08:174
196486992726,1cyclictest0-21swapper/321:05:013
196486992725,2cyclictest0-21swapper/321:00:143
196486992725,2cyclictest0-21swapper/319:30:303
196485992726,1cyclictest870-21snmpd21:56:122
196485992726,1cyclictest870-21snmpd21:35:452
196485992725,1cyclictest0-21swapper/220:25:142
196485992724,2cyclictest1849915-21ntpd20:58:132
196485992724,2cyclictest1849915-21ntpd20:58:122
196484992726,1cyclictest870-21snmpd20:48:231
196484992726,1cyclictest0-21swapper/120:50:251
196484992726,1cyclictest0-21swapper/120:16:171
196484992725,1cyclictest870-21snmpd22:30:501
196484992724,2cyclictest870-21snmpd23:29:511
196483992726,1cyclictest870-21snmpd23:58:250
196490992625,1cyclictest870-21snmpd00:03:437
196490992625,1cyclictest0-21swapper/722:56:087
196490992624,2cyclictest870-21snmpd23:48:047
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional