You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-02 - 04:47

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #2

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack8slot2s.osadl.org (updated Wed Jul 01, 2026 12:43:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3528269997868,5cyclictest86-21hwrng12:16:383
3528269997768,5cyclictest86-21hwrng11:09:033
3528269997768,5cyclictest86-21hwrng10:32:113
3528269997667,5cyclictest86-21hwrng09:57:223
3528269997567,5cyclictest86-21hwrng08:44:403
3528269997564,6cyclictest86-21hwrng07:10:283
3528269997466,5cyclictest86-21hwrng11:21:203
3528269997465,6cyclictest86-21hwrng07:55:313
3528269997263,6cyclictest86-21hwrng08:11:543
3528269997263,6cyclictest86-21hwrng08:11:543
3528269997162,6cyclictest86-21hwrng08:18:033
3528269997162,5cyclictest86-21hwrng12:29:573
352826699701,22cyclictest3676470-21ntpq12:15:360
3528269996860,5cyclictest86-21hwrng09:00:023
352826699681,12cyclictest3627709-21ssh10:53:470
352826699681,12cyclictest3627709-21ssh10:53:470
352826699661,23cyclictest3591530-21ssh09:51:110
352826699661,16cyclictest3667424-21cat12:00:290
3528269996557,5cyclictest86-21hwrng11:48:593
3528269996557,5cyclictest86-21hwrng07:23:463
3528269996557,5cyclictest86-21hwrng07:23:463
3528269996456,5cyclictest86-21hwrng11:35:413
3528269996456,5cyclictest86-21hwrng09:07:123
3528269996455,6cyclictest86-21hwrng07:19:413
3528269996455,6cyclictest86-21hwrng07:19:413
3528266996416,43cyclictest3612633-21kworker/u16:9+rpciod12:05:040
352826699641,22cyclictest3578479-21ssh09:30:310
352826699641,21cyclictest3621389-21ssh10:42:340
352826699641,18cyclictest3688541-21ssh12:35:490
352826699641,18cyclictest3611158-21ssh10:25:240
352826699641,16cyclictest3681405-21apt-get12:25:110
352826699641,14cyclictest3644003-21/usr/sbin/munin11:20:470
3528269996355,5cyclictest86-21hwrng11:18:163
3528266996315,33cyclictest3655540-21ssh11:40:270
352826699631,20cyclictest3600467-21ssh10:06:260
352826699631,20cyclictest3600467-21ssh10:06:260
352826699631,18cyclictest3608025-21rm10:20:460
352826699631,14cyclictest3637210-21aten_r8power_cu11:10:080
352826699630,20cyclictest3634193-21ssh11:05:080
3528269996254,5cyclictest86-21hwrng09:11:183
3528269996254,5cyclictest86-21hwrng09:11:183
3528266996216,43cyclictest3662653-21ssh11:52:010
3528266996216,43cyclictest3662653-21ssh11:52:010
352826699621,22cyclictest3576696-21ssh09:26:000
352826699621,22cyclictest3559882-21modprobe08:49:550
352826699621,21cyclictest3685983-21ssh12:31:180
3528269996154,4cyclictest86-21hwrng08:27:163
3528269996153,5cyclictest86-21hwrng11:42:513
352826699611,9cyclictest3573607-21cat09:21:110
3528266996117,39cyclictest3556541-21sendmail-msp08:40:180
3528266996116,38cyclictest3616442-21/usr/sbin/munin10:35:190
352826699611,55cyclictest3567124-21ssh09:10:280
352826699611,55cyclictest3567124-21ssh09:10:280
352826699611,49cyclictest3673425-21ntpq12:10:260
352826699611,20cyclictest3665451-21ssh11:56:250
352826699611,19cyclictest3597425-21ssh10:01:130
352826699611,19cyclictest3571553-21ssh09:18:310
3528269996052,5cyclictest86-21hwrng12:09:283
3528269996051,5cyclictest86-21hwrng12:21:453
3528269996051,5cyclictest86-21hwrng10:55:443
3528269996051,5cyclictest86-21hwrng10:55:443
352826699601,22cyclictest3554349-21ntpq08:30:260
352826699601,17cyclictest3615171-21ssh10:31:180
352826699601,17cyclictest3538278-21perl07:40:210
352826699601,14cyclictest3588487-21modprobe09:45:550
3528269995952,4cyclictest86-21hwrng12:13:343
3528266995920,35cyclictest3529218-21ntpq07:10:270
352826699591,9cyclictest3552785-21ntp_kernel_err08:25:270
3528266995918,37cyclictest3623166-21ntpq10:45:280
352826699591,55cyclictest3534249-21/usr/sbin/munin07:25:450
352826699591,54cyclictest3532408-21ntpq07:20:380
352826699591,54cyclictest3532408-21ntpq07:20:380
3528266995915,42cyclictest3646266-21df11:25:120
352826699591,53cyclictest3628581-21ssh10:55:140
352826699591,53cyclictest3628581-21ssh10:55:140
352826699591,4cyclictest3632404-21/usr/sbin/munin11:01:050
352826699591,22cyclictest3559663-21modprobe08:47:590
352826699591,21cyclictest3648899-21apt-get11:30:000
352826699591,20cyclictest3550214-21sshd-session08:18:550
352826699591,19cyclictest3660397-21ssh11:49:250
352826699591,19cyclictest3540807-21sshd-auth07:47:550
352826699591,16cyclictest3550709-21/usr/sbin/munin08:20:170
352826699591,16cyclictest3550709-21/usr/sbin/munin08:20:170
352826699591,11cyclictest3544896-21nfs_client08:00:300
3528269995850,5cyclictest86-21hwrng09:26:393
3528269995849,6cyclictest86-21hwrng11:03:563
3528269995848,6cyclictest86-21hwrng09:54:183
352826699581,53cyclictest3543525-21/usr/sbin/munin07:55:410
352826699581,19cyclictest3594445-21ssh09:56:010
352826699581,16cyclictest3546369-21memory08:05:210
352826699581,13cyclictest3603394-21ssh10:11:200
352826699581,11cyclictest3582646-21/usr/sbin/munin09:36:110
352826699581,11cyclictest3582646-21/usr/sbin/munin09:36:110
3528269995749,5cyclictest86-21hwrng12:28:553
3528269995749,5cyclictest86-21hwrng08:36:293
3528269995749,5cyclictest86-21hwrng08:36:293
3528269995748,5cyclictest86-21hwrng09:49:113
3528269995747,6cyclictest86-21hwrng08:03:433
352826699575,48cyclictest3678281-21sendmail-msp12:20:510
3528266995717,36cyclictest3537082-21ntpq07:35:280
352826699571,53cyclictest0-21swapper/009:00:240
352826699571,4cyclictest3584199-21ssh09:40:200
352826699571,21cyclictest3530763-21ntpq07:15:240
352826699571,21cyclictest3530763-21ntpq07:15:240
352826699571,17cyclictest3562271-21modprobe08:55:340
352826699571,17cyclictest3562271-21modprobe08:55:340
352826699571,16cyclictest3654178-21ssh11:38:180
3528269995649,4cyclictest86-21hwrng10:41:243
3528269995648,5cyclictest86-21hwrng11:56:093
3528269995646,5cyclictest86-21hwrng09:17:263
3528266995619,34cyclictest3534806-21/usr/sbin/munin07:30:080
352826699561,49cyclictest3640703-21irqstats11:15:200
3528266995612,41cyclictest3604663-21ssh10:14:500
352826699561,21cyclictest3555179-21http08:35:080
352826699561,21cyclictest3555179-21http08:35:080
352826699561,20cyclictest3547313-21apt-get08:10:000
352826699561,20cyclictest3547313-21apt-get08:10:000
352826699561,19cyclictest3565382-21ntpq09:05:260
3528269995548,5cyclictest86-21hwrng10:13:453
3528269995547,5cyclictest86-21hwrng08:49:473
3528269995545,6cyclictest86-21hwrng10:27:043
352826699551,12cyclictest3541842-21ntpq07:50:320
352826699551,12cyclictest3541842-21ntpq07:50:320
3528269995444,6cyclictest86-21hwrng08:08:503
3528269995345,5cyclictest86-21hwrng11:12:073
3528269995143,5cyclictest86-21hwrng08:21:073
3528269995143,5cyclictest86-21hwrng08:21:073
3528269995141,7cyclictest86-21hwrng08:46:433
3528269995040,7cyclictest86-21hwrng08:54:553
3528269995040,7cyclictest86-21hwrng08:54:553
3528267994841,3cyclictest0-21swapper/107:34:011
3528269994739,5cyclictest86-21hwrng10:16:503
3528269994739,5cyclictest86-21hwrng10:01:283
3528268994640,3cyclictest0-21swapper/207:42:122
3528268994640,3cyclictest0-21swapper/207:37:052
3528269994538,4cyclictest86-21hwrng12:36:063
3528269994535,6cyclictest86-21hwrng10:53:423
3528269994535,6cyclictest86-21hwrng10:53:423
352826699451,13cyclictest3528343-21sed07:09:460
3528269994434,7cyclictest86-21hwrng11:34:393
3528269994428,12cyclictest0-21swapper/307:35:123
3528269994419,11cyclictest3598787-21kworker/u16:33+xprtiod10:20:103
352826999434,28cyclictest3598730-21ssh10:04:533
352826999434,28cyclictest3598730-21ssh10:04:533
3528269994334,5cyclictest86-21hwrng08:34:263
3528269994224,12cyclictest0-21swapper/311:25:383
3528269994127,10cyclictest0-21swapper/307:30:273
3528268994135,3cyclictest0-21swapper/211:12:182
3528268994135,3cyclictest0-21swapper/210:21:572
3528269994028,9cyclictest0-21swapper/309:41:123
3528269994027,9cyclictest0-21swapper/310:45:403
3528269994024,10cyclictest0-21swapper/307:50:393
3528269994024,10cyclictest0-21swapper/307:50:393
3528269994018,17cyclictest511ktimers/309:20:273
3528269993928,8cyclictest0-21swapper/309:30:503
3528269993926,9cyclictest0-21swapper/307:40:193
3528269993925,10cyclictest0-21swapper/307:25:123
3528269993924,10cyclictest0-21swapper/310:35:373
3528269993923,11cyclictest0-21swapper/311:59:523
3528269993916,18cyclictest3661075-21diskstats11:50:143
3528269993916,18cyclictest3661075-21diskstats11:50:143
3528269993915,19cyclictest3581074-21ssh09:35:073
3528269993915,19cyclictest3581074-21ssh09:35:073
3528267993932,4cyclictest0-21swapper/110:40:371
3528269993822,9cyclictest0-21swapper/307:45:143
3528267993831,4cyclictest0-21swapper/110:10:061
3528268993632,1cyclictest0-21swapper/207:34:012
3528267993528,4cyclictest0-21swapper/111:29:471
3528267993428,3cyclictest0-21swapper/111:40:211
3528267993427,4cyclictest0-21swapper/112:00:421
3528267993427,4cyclictest0-21swapper/110:15:331
3528267993426,4cyclictest0-21swapper/111:00:241
3528267993424,6cyclictest0-21swapper/110:00:001
3528268993327,3cyclictest0-21swapper/211:42:502
3528268993327,3cyclictest0-21swapper/211:15:322
3528268993327,3cyclictest0-21swapper/211:05:352
3528268993327,3cyclictest0-21swapper/210:47:482
3528268993327,3cyclictest0-21swapper/207:45:172
3528267993326,3cyclictest0-21swapper/111:20:001
3528267993325,5cyclictest0-21swapper/110:35:251
3528267993325,5cyclictest0-21swapper/110:05:161
3528267993325,5cyclictest0-21swapper/110:05:161
3528267993323,5cyclictest0-21swapper/107:40:001
3528268993226,3cyclictest0-21swapper/208:59:592
3528267993225,4cyclictest0-21swapper/109:36:011
3528267993225,4cyclictest0-21swapper/109:36:011
3528267993225,4cyclictest0-21swapper/109:10:301
3528267993225,4cyclictest0-21swapper/109:10:301
3528267993223,6cyclictest0-21swapper/110:50:311
3528267993223,6cyclictest0-21swapper/110:50:311
3528267993222,6cyclictest0-21swapper/110:21:221
3528268993125,3cyclictest0-21swapper/212:00:352
3528268993124,4cyclictest0-21swapper/207:55:422
3528268993122,5cyclictest0-21swapper/209:41:052
3528267993125,3cyclictest0-21swapper/112:06:271
3528267993125,3cyclictest0-21swapper/109:44:451
3528267993125,3cyclictest0-21swapper/108:55:211
3528267993125,3cyclictest0-21swapper/108:55:211
3528267993124,4cyclictest0-21swapper/112:25:071
3528267993124,4cyclictest0-21swapper/112:20:081
3528267993124,3cyclictest0-21swapper/112:35:471
3528267993123,4cyclictest0-21swapper/108:20:011
3528267993123,4cyclictest0-21swapper/108:20:011
3528267993121,6cyclictest0-21swapper/111:55:231
3528267993121,5cyclictest0-21swapper/110:45:101
3528267993120,7cyclictest0-21swapper/109:30:191
3528267993120,7cyclictest0-21swapper/108:40:191
3528268993024,3cyclictest0-21swapper/210:40:372
3528268993024,3cyclictest0-21swapper/209:30:422
3528268993024,3cyclictest0-21swapper/207:25:312
3528268993022,4cyclictest0-21swapper/212:34:372
3528267993024,3cyclictest0-21swapper/109:54:561
3528267993024,3cyclictest0-21swapper/109:00:071
3528267993023,4cyclictest0-21swapper/112:15:351
3528267993023,4cyclictest0-21swapper/107:35:111
3528267993022,6cyclictest0-21swapper/111:30:281
3528267993022,5cyclictest0-21swapper/108:50:151
3528267993022,4cyclictest0-21swapper/109:20:521
3528267993022,4cyclictest0-21swapper/107:59:591
3528267993021,5cyclictest0-21swapper/107:19:591
3528267993021,5cyclictest0-21swapper/107:19:591
3528267993020,6cyclictest0-21swapper/108:44:561
3528267993019,7cyclictest0-21swapper/112:30:261
3528269992920,7cyclictest0-21swapper/307:09:463
3528268992923,3cyclictest0-21swapper/212:36:262
3528268992923,3cyclictest0-21swapper/212:24:042
3528268992923,3cyclictest0-21swapper/212:10:052
3528268992923,3cyclictest0-21swapper/211:25:242
3528268992923,3cyclictest0-21swapper/210:25:362
3528268992923,3cyclictest0-21swapper/210:13:232
3528268992923,3cyclictest0-21swapper/210:05:172
3528268992923,3cyclictest0-21swapper/210:05:172
3528268992923,3cyclictest0-21swapper/210:02:262
3528268992923,3cyclictest0-21swapper/209:10:282
3528268992923,3cyclictest0-21swapper/209:10:282
3528268992922,4cyclictest0-21swapper/211:21:512
3528268992922,4cyclictest0-21swapper/209:55:382
3528268992922,4cyclictest0-21swapper/208:20:002
3528268992922,4cyclictest0-21swapper/208:20:002
3528268992922,3cyclictest0-21swapper/211:49:592
3528268992922,3cyclictest0-21swapper/211:49:592
3528268992921,4cyclictest0-21swapper/209:50:392
3528267992922,4cyclictest0-21swapper/112:10:111
3528267992922,4cyclictest0-21swapper/110:55:191
3528267992922,4cyclictest0-21swapper/110:55:191
3528267992922,4cyclictest0-21swapper/109:25:321
3528267992922,3cyclictest0-21swapper/108:10:281
3528267992922,3cyclictest0-21swapper/108:10:281
3528267992921,5cyclictest0-21swapper/111:35:011
3528267992921,4cyclictest0-21swapper/109:45:521
3528267992920,5cyclictest0-21swapper/111:50:161
3528267992920,5cyclictest0-21swapper/111:50:161
3528267992920,5cyclictest0-21swapper/109:15:341
3528268992822,3cyclictest0-21swapper/211:37:282
3528268992822,3cyclictest0-21swapper/210:57:422
3528268992822,3cyclictest0-21swapper/210:57:422
3528268992822,3cyclictest0-21swapper/210:38:112
3528268992822,3cyclictest0-21swapper/210:30:392
3528268992822,3cyclictest0-21swapper/209:36:102
3528268992822,3cyclictest0-21swapper/209:36:102
3528268992822,3cyclictest0-21swapper/207:14:452
3528268992821,4cyclictest0-21swapper/212:24:492
3528268992821,4cyclictest0-21swapper/208:45:352
3528268992821,4cyclictest0-21swapper/208:15:082
3528268992820,4cyclictest0-21swapper/210:15:342
3528268992820,4cyclictest0-21swapper/209:15:372
3528267992822,3cyclictest0-21swapper/111:45:311
3528267992822,3cyclictest0-21swapper/111:05:081
3528267992822,3cyclictest0-21swapper/108:30:101
3528267992822,3cyclictest0-21swapper/108:15:131
3528267992822,3cyclictest0-21swapper/107:51:251
3528267992822,3cyclictest0-21swapper/107:51:251
3528267992822,3cyclictest0-21swapper/107:15:431
3528267992822,3cyclictest0-21swapper/107:15:431
3528267992821,4cyclictest0-21swapper/111:10:061
3528267992821,4cyclictest0-21swapper/107:45:141
3528267992820,4cyclictest0-21swapper/110:30:301
3528267992819,5cyclictest0-21swapper/110:24:581
3528268992722,3cyclictest0-21swapper/212:05:072
3528268992721,3cyclictest0-21swapper/212:15:232
3528268992721,3cyclictest0-21swapper/211:45:422
3528268992721,3cyclictest0-21swapper/211:00:352
3528268992721,3cyclictest0-21swapper/209:25:422
3528268992721,3cyclictest0-21swapper/209:20:352
3528268992721,3cyclictest0-21swapper/208:55:162
3528268992721,3cyclictest0-21swapper/208:55:162
3528268992721,3cyclictest0-21swapper/208:10:362
3528268992721,3cyclictest0-21swapper/208:10:362
3528268992721,3cyclictest0-21swapper/208:04:572
3528268992720,4cyclictest0-21swapper/209:47:182
3528268992720,4cyclictest0-21swapper/208:25:452
3528268992720,4cyclictest0-21swapper/208:00:112
3528268992720,4cyclictest0-21swapper/207:20:252
3528268992720,4cyclictest0-21swapper/207:20:252
3528268992720,4cyclictest0-21swapper/207:15:412
3528268992720,4cyclictest0-21swapper/207:15:412
3528268992719,4cyclictest0-21swapper/208:54:442
3528267992720,4cyclictest0-21swapper/109:50:001
3528267992719,5cyclictest0-21swapper/111:14:561
3528267992718,5cyclictest0-21swapper/109:05:081
3528268992620,4cyclictest0-21swapper/211:29:542
3528268992620,3cyclictest0-21swapper/210:49:562
3528268992620,3cyclictest0-21swapper/210:49:562
3528268992620,3cyclictest0-21swapper/209:05:312
3528268992620,3cyclictest0-21swapper/208:40:222
3528268992620,3cyclictest0-21swapper/208:35:332
3528268992620,3cyclictest0-21swapper/208:35:332
3528268992620,3cyclictest0-21swapper/208:30:182
3528268992619,4cyclictest0-21swapper/211:55:072
3528267992620,3cyclictest0-21swapper/108:35:361
3528267992620,3cyclictest0-21swapper/108:35:361
3528267992620,3cyclictest0-21swapper/107:55:281
3528267992620,3cyclictest0-21swapper/107:25:241
3528267992620,3cyclictest0-21swapper/107:09:461
3528267992619,4cyclictest0-21swapper/107:09:571
3528267992617,5cyclictest0-21swapper/108:05:251
3528267992520,3cyclictest0-21swapper/108:25:341
3528268992418,3cyclictest0-21swapper/207:09:462
3528268992417,4cyclictest0-21swapper/207:49:562
3528268992417,4cyclictest0-21swapper/207:49:562
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional