You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-09 - 01:22

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #0

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System r0s0s.osadl.org (updated Tue Dec 09, 2025 00:46:20)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
5817562310280,23sleep50-21swapper/519:07:255
5817522301291,6sleep10-21swapper/119:07:221
5817142299276,19sleep40-21swapper/419:06:534
5819282298284,9sleep20-21swapper/219:09:482
5817102292257,27sleep00-21swapper/019:06:480
5818732291257,26sleep30-21swapper/319:09:003
5817352286267,12sleep70-21swapper/719:07:127
5817162285266,12sleep60-21swapper/619:06:546
58241899374,1cyclictest171rcu_preempt21:05:135
582417993730,3cyclictest833-21snmpd21:27:594
582418993634,2cyclictest710716-21ipmitool23:35:155
582418993634,2cyclictest0-21swapper/523:40:265
582418993632,2cyclictest721825-21kworker/u16:4+events_unbound00:36:225
58242099350,34cyclictest0-21swapper/720:55:257
58241899354,31cyclictest673730-21munin-run22:20:015
582418993534,1cyclictest0-21swapper/519:50:265
582418993530,1cyclictest171rcu_preempt20:25:185
582418993530,1cyclictest171rcu_preempt19:48:395
582415993534,1cyclictest630341-21kworker/u16:3+flush-8:021:08:242
58241899344,30cyclictest692064-21ntp_states22:55:275
582418993432,0cyclictest0-21swapper/519:33:255
582418993432,0cyclictest0-21swapper/519:33:245
582418993431,2cyclictest1708265-21systemd-journal22:37:485
582418993431,1cyclictest0-21swapper/522:14:045
582415993430,3cyclictest833-21snmpd21:00:312
582413993431,2cyclictest630341-21kworker/u16:3+flush-8:020:50:010
582420993330,2cyclictest833-21snmpd22:43:257
582420993330,2cyclictest833-21snmpd19:10:197
582420993330,2cyclictest833-21snmpd00:37:537
582420993330,2cyclictest612369-21cat20:10:157
58241899333,30cyclictest609801-21df20:05:155
582418993331,0cyclictest0-21swapper/521:47:515
582418993330,3cyclictest0-21swapper/521:22:035
582418993330,1cyclictest0-21swapper/523:58:505
582418993330,1cyclictest0-21swapper/523:48:115
58241899331,0cyclictest171rcu_preempt19:10:255
58241899330,30cyclictest171rcu_preempt21:38:085
582417993330,2cyclictest833-21snmpd22:45:544
582417993330,2cyclictest614710-21cat20:15:154
582416993330,2cyclictest833-21snmpd20:38:083
582414993330,2cyclictest833-21snmpd22:11:161
582414993330,2cyclictest833-21snmpd19:29:231
58241499330,30cyclictest0-21swapper/123:27:211
582420993230,1cyclictest833-21snmpd00:05:207
582420993229,2cyclictest833-21snmpd23:47:137
58242099320,31cyclictest0-21swapper/722:54:087
58242099320,30cyclictest0-21swapper/720:48:077
58242099320,30cyclictest0-21swapper/720:38:407
582419993230,2cyclictest833-21snmpd22:33:526
582419993230,2cyclictest833-21snmpd20:39:536
582419993230,2cyclictest650789-21cat21:30:156
582418993231,1cyclictest0-21swapper/500:30:145
582418993231,0cyclictest61-21ksoftirqd/520:23:535
582418993230,2cyclictest833-21snmpd19:58:135
582418993230,2cyclictest61-21ksoftirqd/519:42:305
582418993230,2cyclictest0-21swapper/521:01:285
582418993230,2cyclictest0-21swapper/520:45:355
582418993230,0cyclictest0-21swapper/523:20:375
582418993230,0cyclictest0-21swapper/522:47:325
582418993230,0cyclictest0-21swapper/500:01:565
582418993229,2cyclictest0-21swapper/523:50:125
582418993228,1cyclictest0-21swapper/523:26:365
58241899322,30cyclictest0-21swapper/519:19:265
58241899322,29cyclictest692696-21kworker/u16:2+flush-8:023:30:325
58241899320,32cyclictest0-21swapper/500:25:125
58241899320,1cyclictest171rcu_preempt21:50:245
58241899320,1cyclictest171rcu_preempt20:15:265
582417993230,1cyclictest833-21snmpd22:42:224
582417993230,1cyclictest833-21snmpd21:35:024
582417993229,2cyclictest833-21snmpd21:43:494
582417993229,2cyclictest833-21snmpd20:42:504
582417993229,2cyclictest833-21snmpd19:14:044
58241799320,31cyclictest0-21swapper/419:44:454
58241799320,31cyclictest0-21swapper/400:01:134
58241799320,30cyclictest0-21swapper/423:45:134
58241799320,30cyclictest0-21swapper/419:31:574
58241799320,30cyclictest0-21swapper/419:31:564
58241799320,29cyclictest0-21swapper/422:12:504
582416993230,2cyclictest833-21snmpd22:19:193
582416993230,2cyclictest833-21snmpd22:14:283
582416993230,2cyclictest684391-21cat22:40:143
582416993230,2cyclictest629234-21cat20:45:173
582416993230,2cyclictest626858-21cat20:40:143
582416993230,1cyclictest833-21snmpd21:30:203
582415993230,2cyclictest833-21snmpd20:34:382
582415993230,1cyclictest833-21snmpd22:03:422
582415993229,3cyclictest833-21snmpd20:27:182
58241599320,31cyclictest0-21swapper/220:44:342
582414993230,2cyclictest833-21snmpd20:28:001
582414993230,2cyclictest833-21snmpd00:27:051
582414993230,1cyclictest833-21snmpd19:39:201
582414993229,2cyclictest833-21snmpd23:58:081
582414993229,2cyclictest833-21snmpd23:38:091
582414993229,2cyclictest833-21snmpd21:23:261
582414993229,2cyclictest833-21snmpd21:08:241
582414993229,2cyclictest732080-21cat00:20:151
582414993229,2cyclictest689209-21cat22:50:171
582414993229,2cyclictest626870-21cat20:40:151
58241499320,31cyclictest0-21swapper/123:30:281
58241499320,30cyclictest0-21swapper/123:10:201
582413993230,2cyclictest833-21snmpd21:35:180
582413993230,2cyclictest641302-21cat21:10:180
582413993230,1cyclictest833-21snmpd23:20:210
582413993229,2cyclictest655567-21cat21:40:150
582420993129,1cyclictest833-21snmpd21:25:337
582420993128,2cyclictest833-21snmpd19:56:327
58242099310,30cyclictest0-21swapper/723:25:097
58242099310,30cyclictest0-21swapper/719:36:567
58242099310,30cyclictest0-21swapper/700:23:417
582419993130,1cyclictest833-21snmpd22:26:526
582419993130,1cyclictest833-21snmpd21:17:146
582419993130,1cyclictest833-21snmpd20:57:226
582419993130,1cyclictest833-21snmpd19:31:236
582419993130,1cyclictest833-21snmpd19:31:236
582419993130,1cyclictest833-21snmpd00:24:476
582419993129,1cyclictest833-21snmpd23:06:476
582419993128,2cyclictest679959-21kworker/u16:3+flush-8:023:10:136
58241999310,30cyclictest0-21swapper/623:55:406
58241999310,30cyclictest0-21swapper/623:50:476
58241999310,30cyclictest0-21swapper/621:04:506
58241999310,30cyclictest0-21swapper/620:16:396
58241999310,30cyclictest0-21swapper/600:30:266
58241999310,1cyclictest0-21swapper/621:55:516
58241999310,1cyclictest0-21swapper/620:40:076
582418993130,1cyclictest833-21snmpd23:11:105
582418993130,1cyclictest833-21snmpd20:03:365
582418993130,1cyclictest802-21mta-sts-daemon00:07:245
582418993129,2cyclictest833-21snmpd23:08:175
582418993129,2cyclictest61-21ksoftirqd/521:40:205
582418993129,2cyclictest0-21swapper/522:34:075
582418993129,2cyclictest0-21swapper/522:08:235
582418993129,2cyclictest0-21swapper/522:00:585
582418993129,2cyclictest0-21swapper/519:25:335
582418993129,1cyclictest0-21swapper/523:15:445
582418993128,2cyclictest16-21pr/tty020:50:325
58241899312,29cyclictest0-21swapper/521:15:205
58241899312,29cyclictest0-21swapper/520:55:295
58241899311,30cyclictest0-21swapper/522:51:225
58241899311,30cyclictest0-21swapper/500:11:045
58241899310,31cyclictest0-21swapper/500:19:145
58241899310,30cyclictest0-21swapper/521:55:295
58241899310,30cyclictest0-21swapper/521:31:305
58241899310,1cyclictest61-21ksoftirqd/522:20:125
58241899310,1cyclictest171rcu_preempt22:25:395
58241899310,0cyclictest0-21swapper/520:10:415
582417993130,1cyclictest833-21snmpd23:31:254
582417993130,1cyclictest833-21snmpd20:02:004
582417993128,2cyclictest833-21snmpd20:08:254
58241799310,30cyclictest0-21swapper/423:37:514
58241799310,30cyclictest0-21swapper/423:03:564
58241799310,30cyclictest0-21swapper/422:04:464
58241799310,30cyclictest0-21swapper/419:53:034
58241799310,30cyclictest0-21swapper/419:15:054
58241799310,29cyclictest0-21swapper/419:24:214
582416993130,1cyclictest833-21snmpd21:41:573
582416993130,1cyclictest833-21snmpd21:24:533
582416993129,2cyclictest833-21snmpd00:32:113
582416993129,2cyclictest729444-21cat00:15:163
582416993129,1cyclictest833-21snmpd23:40:103
582416993129,1cyclictest833-21snmpd21:02:383
58241699310,31cyclictest0-21swapper/319:36:183
58241699310,30cyclictest0-21swapper/323:30:183
58241699310,30cyclictest0-21swapper/323:28:313
58241699310,1cyclictest0-21swapper/323:55:523
58241699310,1cyclictest0-21swapper/321:54:133
58241699310,1cyclictest0-21swapper/319:42:203
582415993130,1cyclictest833-21snmpd23:02:202
582415993130,1cyclictest833-21snmpd22:07:252
582415993130,1cyclictest833-21snmpd21:21:332
582415993130,1cyclictest833-21snmpd20:19:242
582415993130,1cyclictest833-21snmpd00:37:032
582415993129,1cyclictest833-21snmpd19:35:262
58241599310,31cyclictest0-21swapper/222:27:072
58241599310,31cyclictest0-21swapper/222:17:412
58241599310,30cyclictest0-21swapper/223:45:172
58241599310,30cyclictest0-21swapper/222:30:102
58241599310,1cyclictest0-21swapper/223:37:192
58241599310,1cyclictest0-21swapper/222:59:062
58241599310,1cyclictest0-21swapper/221:25:352
58241599310,1cyclictest0-21swapper/219:57:212
58241599310,1cyclictest0-21swapper/219:30:572
58241599310,1cyclictest0-21swapper/219:30:562
582414993130,1cyclictest833-21snmpd20:50:171
582414993130,1cyclictest833-21snmpd00:10:101
58241499310,30cyclictest0-21swapper/123:07:351
58241499310,30cyclictest0-21swapper/122:46:121
58241499310,30cyclictest0-21swapper/122:38:191
58241499310,1cyclictest0-21swapper/123:49:221
58241499310,1cyclictest0-21swapper/122:06:541
58241499310,1cyclictest0-21swapper/120:21:391
582413993130,1cyclictest833-21snmpd22:08:570
582413993130,1cyclictest833-21snmpd19:32:480
582413993130,1cyclictest833-21snmpd19:32:470
582413993129,2cyclictest833-21snmpd21:58:180
582413993129,2cyclictest660253-21cat21:50:150
582413993128,2cyclictest833-21snmpd22:35:470
582413993128,2cyclictest720076-21cat23:55:150
582413993128,2cyclictest600358-21cat19:45:150
58241399310,31cyclictest0-21swapper/023:00:140
58241399310,30cyclictest0-21swapper/023:49:280
58241399310,30cyclictest0-21swapper/020:34:310
58241399310,30cyclictest0-21swapper/020:23:510
58241399310,1cyclictest0-21swapper/021:29:570
58241399310,1cyclictest0-21swapper/020:25:550
582420993028,2cyclictest833-21snmpd22:34:197
582420993028,2cyclictest833-21snmpd21:54:017
582420993028,1cyclictest833-21snmpd21:14:297
582420993027,2cyclictest833-21snmpd21:42:437
582420993027,2cyclictest833-21snmpd00:10:017
582420993027,2cyclictest602713-21cat19:50:157
582420993025,1cyclictest833-21snmpd00:15:097
58242099300,30cyclictest0-21swapper/720:17:017
58242099300,29cyclictest0-21swapper/722:39:267
58242099300,29cyclictest0-21swapper/719:22:397
58242099300,1cyclictest0-21swapper/723:19:197
58242099300,1cyclictest0-21swapper/721:59:247
582419993029,1cyclictest833-21snmpd20:51:046
582419993029,1cyclictest833-21snmpd19:58:456
582419993028,2cyclictest833-21snmpd22:09:276
582419993028,2cyclictest833-21snmpd22:04:276
582419993028,2cyclictest833-21snmpd19:50:386
58241999300,30cyclictest0-21swapper/623:03:326
58241999300,30cyclictest0-21swapper/622:55:356
58241999300,30cyclictest0-21swapper/622:15:466
58241999300,30cyclictest0-21swapper/620:04:286
58241999300,1cyclictest0-21swapper/600:07:226
582418993030,0cyclictest0-21swapper/522:41:595
582418993028,2cyclictest685919-21kworker/5:0-events23:00:435
582418993028,2cyclictest0-21swapper/520:40:455
582418993028,2cyclictest0-21swapper/519:36:165
58241899300,30cyclictest0-21swapper/521:25:105
58241899300,30cyclictest0-21swapper/520:37:105
58241899300,30cyclictest0-21swapper/520:30:195
58241899300,30cyclictest0-21swapper/519:22:275
58241899300,30cyclictest0-21swapper/500:20:075
582417993029,1cyclictest833-21snmpd22:19:104
582417993029,1cyclictest833-21snmpd22:07:544
582417993029,1cyclictest833-21snmpd21:04:104
582417993028,1cyclictest833-21snmpd00:16:454
582417993027,2cyclictest833-21snmpd23:26:394
582417993027,2cyclictest833-21snmpd23:17:184
582417993027,2cyclictest833-21snmpd20:34:104
582417993027,2cyclictest833-21snmpd00:14:324
582417993027,2cyclictest724800-21cat00:05:174
58241799300,1cyclictest0-21swapper/422:30:444
582416993029,1cyclictest833-21snmpd23:20:033
582416993029,1cyclictest833-21snmpd23:09:333
582416993029,1cyclictest833-21snmpd22:25:253
582416993029,1cyclictest833-21snmpd21:26:183
582416993028,2cyclictest833-21snmpd21:48:063
582416993028,2cyclictest833-21snmpd20:58:433
582416993028,2cyclictest833-21snmpd19:14:373
582416993028,2cyclictest733389-21apt-get00:25:013
58241699300,30cyclictest0-21swapper/323:10:503
58241699300,30cyclictest0-21swapper/321:14:423
58241699300,30cyclictest0-21swapper/300:35:203
58241699300,1cyclictest0-21swapper/300:06:283
582415993029,1cyclictest833-21snmpd21:47:162
582415993028,2cyclictest833-21snmpd22:48:022
582415993028,2cyclictest833-21snmpd22:21:072
582415993028,2cyclictest833-21snmpd21:56:162
58241599300,30cyclictest0-21swapper/221:17:052
58241599300,30cyclictest0-21swapper/220:10:342
58241599300,30cyclictest0-21swapper/219:29:392
58241599300,29cyclictest0-21swapper/223:40:002
58241599300,29cyclictest0-21swapper/223:05:412
58241599300,29cyclictest0-21swapper/222:10:062
582414993029,1cyclictest833-21snmpd21:36:051
582414993029,1cyclictest833-21snmpd21:27:081
582414993029,1cyclictest833-21snmpd20:13:571
582414993029,1cyclictest833-21snmpd00:35:561
582414993028,1cyclictest833-21snmpd21:47:421
582414993026,3cyclictest0-21swapper/123:18:331
58241499300,30cyclictest0-21swapper/122:04:331
58241499300,29cyclictest0-21swapper/119:43:241
58241499300,1cyclictest0-21swapper/123:20:571
58241499300,1cyclictest0-21swapper/122:25:021
58241499300,1cyclictest0-21swapper/121:50:581
582413993029,1cyclictest833-21snmpd22:48:530
582413993028,2cyclictest833-21snmpd23:43:560
582413993028,2cyclictest833-21snmpd21:21:440
58241399300,30cyclictest0-21swapper/023:30:060
58241399300,30cyclictest0-21swapper/022:21:170
58241399300,30cyclictest0-21swapper/020:02:010
58241399300,30cyclictest0-21swapper/000:38:020
58241399300,1cyclictest0-21swapper/020:16:160
582420992926,3cyclictest0-21swapper/722:56:057
58242099290,28cyclictest0-21swapper/720:33:377
58242099290,28cyclictest0-21swapper/719:26:117
582419992928,1cyclictest833-21snmpd22:47:386
582419992928,1cyclictest833-21snmpd21:44:216
582419992928,1cyclictest833-21snmpd00:19:416
58241999290,29cyclictest0-21swapper/620:06:016
58241899290,29cyclictest0-21swapper/521:10:195
582417992928,1cyclictest833-21snmpd23:52:344
582417992927,2cyclictest643634-21cat21:15:164
582417992927,1cyclictest0-21swapper/421:46:064
582417992926,2cyclictest833-21snmpd00:30:364
58241799290,28cyclictest0-21swapper/420:12:184
582416992928,1cyclictest833-21snmpd21:07:473
582416992928,1cyclictest833-21snmpd19:15:443
582416992928,1cyclictest833-21snmpd00:13:343
582416992926,2cyclictest833-21snmpd23:46:343
58241699290,28cyclictest0-21swapper/323:17:133
582415992928,1cyclictest833-21snmpd22:52:082
582415992928,1cyclictest833-21snmpd20:56:382
58241599290,29cyclictest0-21swapper/219:40:542
58241599290,29cyclictest0-21swapper/200:11:432
582414992928,1cyclictest833-21snmpd22:57:321
582414992928,1cyclictest833-21snmpd21:18:511
582414992928,1cyclictest833-21snmpd00:07:291
582414992927,1cyclictest833-21snmpd19:33:181
582414992927,1cyclictest833-21snmpd19:33:171
58241499290,28cyclictest0-21swapper/100:02:431
582413992928,1cyclictest833-21snmpd23:37:420
582413992928,1cyclictest833-21snmpd19:20:460
582413992927,2cyclictest833-21snmpd23:50:290
582413992927,2cyclictest833-21snmpd00:18:320
58241399290,29cyclictest0-21swapper/020:06:570
58241399290,29cyclictest0-21swapper/000:23:320
58241399290,28cyclictest0-21swapper/022:40:520
582420992827,1cyclictest833-21snmpd21:21:027
582420992826,1cyclictest833-21snmpd19:30:097
582420992826,1cyclictest833-21snmpd19:30:087
582420992826,1cyclictest0-21swapper/723:56:107
582420992826,1cyclictest0-21swapper/720:52:537
582420992826,1cyclictest0-21swapper/719:40:127
582420992825,2cyclictest644037-21ntpq21:15:257
582420992823,1cyclictest0-21swapper/721:34:177
58242099280,28cyclictest0-21swapper/722:26:437
58242099280,28cyclictest0-21swapper/722:19:017
582419992827,1cyclictest833-21snmpd23:36:426
582419992827,1cyclictest833-21snmpd20:34:196
582419992827,1cyclictest833-21snmpd19:25:066
582419992826,2cyclictest833-21snmpd23:24:546
582419992826,2cyclictest660254-21cat21:50:146
582417992826,1cyclictest0-21swapper/423:43:224
582417992825,2cyclictest833-21snmpd19:49:564
58241799280,27cyclictest0-21swapper/421:52:164
582416992826,2cyclictest833-21snmpd22:45:203
582416992826,2cyclictest833-21snmpd20:30:223
582416992826,2cyclictest833-21snmpd19:53:093
582416992826,2cyclictest664982-21cat22:00:143
582416992825,3cyclictest0-21swapper/322:57:143
582416992824,3cyclictest0-21swapper/321:58:153
582415992827,1cyclictest833-21snmpd22:37:522
582415992827,1cyclictest833-21snmpd00:09:042
58241599280,28cyclictest0-21swapper/200:25:442
582414992827,1cyclictest833-21snmpd22:42:131
582414992827,1cyclictest833-21snmpd20:37:251
582414992825,2cyclictest833-21snmpd19:16:101
582413992827,1cyclictest833-21snmpd23:16:370
582413992827,1cyclictest833-21snmpd20:36:080
582413992826,2cyclictest833-21snmpd21:48:450
582413992826,2cyclictest833-21snmpd21:00:260
582413992826,2cyclictest833-21snmpd19:15:380
582413992826,2cyclictest596720-21apt-get19:40:010
582413992824,3cyclictest0-21swapper/019:50:450
58241399280,28cyclictest0-21swapper/022:10:130
58241399280,28cyclictest0-21swapper/019:58:390
582420992725,1cyclictest833-21snmpd20:00:037
582420992724,2cyclictest653178-21cat21:35:167
582419992726,1cyclictest833-21snmpd20:22:366
582419992726,1cyclictest0-21swapper/620:45:116
582419992725,1cyclictest0-21swapper/619:41:446
58241999270,27cyclictest0-21swapper/619:19:476
582417992726,1cyclictest833-21snmpd19:58:394
582417992724,2cyclictest833-21snmpd22:51:204
582417992724,2cyclictest833-21snmpd20:48:014
582417992724,2cyclictest833-21snmpd00:22:204
582417992724,2cyclictest632299-21ntpq20:50:254
582416992725,1cyclictest0-21swapper/319:21:523
58241699270,27cyclictest0-21swapper/300:01:413
582415992726,1cyclictest833-21snmpd20:46:202
582415992726,1cyclictest833-21snmpd20:23:192
582415992726,1cyclictest833-21snmpd19:14:082
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional