You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-31 - 18:19

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot7s.osadl.org (updated Fri Jul 31, 2026 12:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
90431121340,3sleep33056-21PK-Backend07:30:183
95892021250,2sleep30-21swapper/310:05:193
92859321130,2sleep10-21swapper/108:40:131
90299321020,2sleep10-21swapper/107:25:231
139099950,53rtkit-daemon0-21swapper/307:06:563
89464226945,16sleep00-21swapper/007:05:170
89596226539,20sleep20-21swapper/207:08:312
89604126140,14sleep10-21swapper/107:09:311
9672242450,3sleep00-21swapper/010:30:160
9101142430,2chrt0-21swapper/107:45:241
139099390,3rtkit-daemon0-21swapper/309:57:573
139099370,3rtkit-daemon0-21swapper/309:20:533
139099370,3rtkit-daemon0-21swapper/309:20:533
139099370,3rtkit-daemon0-21swapper/309:19:003
139099360,3rtkit-daemon0-21swapper/309:39:533
139099360,3rtkit-daemon0-21swapper/308:13:413
9341672350,3sleep20-21swapper/208:55:132
139099350,3rtkit-daemon3056-21PK-Backend11:08:123
139099350,3rtkit-daemon0-21swapper/307:43:333
9099662290,4sleep00-21swapper/007:45:220
896252992913,14cyclictest987896-21cron11:30:002
896252992611,13cyclictest961355-21cron10:14:592
896252992514,7cyclictest997093-21cron11:55:002
89625399240,22cyclictest1004327-21cpu12:15:123
89625399240,22cyclictest1004327-21cpu12:15:123
89624499240,5cyclictest1095-21runrttasks10:39:010
896252992321,1cyclictest0-21swapper/212:03:182
896252992314,6cyclictest927565-21python308:35:222
139099230,15rtkit-daemon0-21swapper/209:35:192
896253992217,4cyclictest2085813-21snapd08:16:133
896253992215,5cyclictest977592-21mktemp11:00:023
896253992215,5cyclictest899855-21cron07:17:003
896252992220,1cyclictest0-21swapper/212:17:042
896252992220,1cyclictest0-21swapper/212:17:042
896252992220,1cyclictest0-21swapper/209:43:332
896252992220,1cyclictest0-21swapper/208:11:542
896252992219,2cyclictest0-21swapper/211:58:382
896252992219,2cyclictest0-21swapper/210:59:172
896252992219,2cyclictest0-21swapper/208:00:042
896252992213,7cyclictest1008627-21memory12:25:172
896247992214,6cyclictest1010372-21memory12:30:171
896247992213,7cyclictest967576-21ntp_states10:30:191
89624799220,21cyclictest0-21swapper/109:05:221
89624799220,20cyclictest3056-21PK-Backend10:01:471
89624799220,20cyclictest3056-21PK-Backend08:14:261
896244992219,2cyclictest919236-21turbostat08:14:590
139099220,15rtkit-daemon3056-21PK-Backend08:50:053
139099220,14rtkit-daemon0-21swapper/208:07:102
9117002210,8sleep126-21ksoftirqd/107:50:251
896253992114,5cyclictest945042-21ntp_states09:25:183
896253992113,6cyclictest883-21dbus-daemon12:40:003
896253992113,6cyclictest436-20systemd-journal10:50:003
89625399210,20cyclictest3056-21PK-Backend11:26:593
89625399210,19cyclictest3056-21PK-Backend11:20:373
89625399210,19cyclictest3056-21PK-Backend11:20:373
89625399210,19cyclictest3056-21PK-Backend10:26:563
89625399210,19cyclictest3056-21PK-Backend08:45:443
89625399210,19cyclictest3056-21PK-Backend08:04:493
896252992119,1cyclictest0-21swapper/211:49:192
896252992119,1cyclictest0-21swapper/211:42:442
896252992119,1cyclictest0-21swapper/211:23:442
896252992119,1cyclictest0-21swapper/211:23:442
896252992119,1cyclictest0-21swapper/211:17:572
896252992119,1cyclictest0-21swapper/211:02:012
896252992119,1cyclictest0-21swapper/210:22:482
896252992119,1cyclictest0-21swapper/210:22:472
896252992119,1cyclictest0-21swapper/209:58:072
896252992119,1cyclictest0-21swapper/209:47:452
896252992119,1cyclictest0-21swapper/207:40:452
896252992119,1cyclictest0-21swapper/207:17:262
896252992118,2cyclictest1095-21runrttasks12:32:582
896252992113,6cyclictest989626-21cron11:35:002
896252992111,8cyclictest1005774-21apt-get12:20:032
89625299210,20cyclictest0-21swapper/211:36:082
89625299210,20cyclictest0-21swapper/210:48:362
89625299210,20cyclictest0-21swapper/210:34:022
89625299210,20cyclictest0-21swapper/210:15:372
89625299210,20cyclictest0-21swapper/209:20:072
89625299210,20cyclictest0-21swapper/209:20:072
89625299210,20cyclictest0-21swapper/209:10:142
89625299210,20cyclictest0-21swapper/208:23:022
89625299210,1cyclictest0-21swapper/210:06:112
89624799210,20cyclictest3056-21PK-Backend12:12:191
89624799210,20cyclictest0-21swapper/111:12:571
89624799210,20cyclictest0-21swapper/108:47:521
89624799210,1cyclictest3056-21PK-Backend11:58:471
89624799210,19cyclictest3056-21PK-Backend12:02:041
89624799210,19cyclictest3056-21PK-Backend07:42:071
89624499213,16cyclictest10027102chrt12:10:110
89624499211,6cyclictest13-21ksoftirqd/011:35:000
89624499210,1cyclictest0-21swapper/011:14:080
89624499210,1cyclictest0-21swapper/010:15:340
139099210,14rtkit-daemon0-21swapper/209:31:402
139099210,14rtkit-daemon0-21swapper/208:15:542
9711832200,5chrt0-21swapper/010:40:210
9428812200,15chrt0-21swapper/009:20:140
9428812200,15chrt0-21swapper/009:20:130
896253992018,1cyclictest0-21swapper/312:31:283
896253992018,1cyclictest0-21swapper/312:01:413
896253992018,1cyclictest0-21swapper/310:35:293
896253992012,6cyclictest436-20systemd-journal10:05:003
89625399201,17cyclictest995102-21apt-get11:50:033
89625399200,1cyclictest3056-21PK-Backend10:34:063
89625399200,1cyclictest3056-21PK-Backend07:45:283
89625399200,1cyclictest0-21swapper/311:58:563
89625399200,19cyclictest3056-21PK-Backend11:11:453
89625399200,19cyclictest3056-21PK-Backend10:41:173
89625399200,19cyclictest3056-21PK-Backend09:07:203
89625399200,19cyclictest3056-21PK-Backend08:44:223
89625399200,19cyclictest0-21swapper/308:20:503
89625399200,19cyclictest0-21swapper/307:55:023
89625399200,19cyclictest0-21swapper/307:21:013
89625299202,8cyclictest436-20systemd-journal10:45:002
896252992018,1cyclictest0-21swapper/211:14:042
896252992018,1cyclictest0-21swapper/210:00:362
896252992018,1cyclictest0-21swapper/209:51:252
896252992018,1cyclictest0-21swapper/207:50:172
89625299200,19cyclictest0-21swapper/212:06:372
89625299200,19cyclictest0-21swapper/210:53:152
89625299200,19cyclictest0-21swapper/210:29:222
89624799204,2cyclictest141rcu_preempt09:00:001
896247992018,1cyclictest0-21swapper/110:29:321
896247992018,1cyclictest0-21swapper/109:42:391
896247992018,1cyclictest0-21swapper/108:29:531
896247992017,2cyclictest3056-21PK-Backend12:36:061
896247992017,2cyclictest3056-21PK-Backend09:49:081
896247992011,7cyclictest969649-21users10:35:241
89624799200,1cyclictest3056-21PK-Backend11:39:131
89624799200,19cyclictest3056-21PK-Backend09:58:421
89624799200,19cyclictest0-21swapper/110:22:211
89624799200,19cyclictest0-21swapper/110:22:211
89624799200,18cyclictest3056-21PK-Backend10:08:281
89624799200,18cyclictest3056-21PK-Backend09:24:481
89624799200,18cyclictest3056-21PK-Backend09:24:481
89624499203,3cyclictest13-21ksoftirqd/009:45:160
896244992018,1cyclictest0-21swapper/011:08:550
896244992018,1cyclictest0-21swapper/008:51:060
896244992018,1cyclictest0-21swapper/008:01:450
896244992017,2cyclictest3056-21PK-Backend08:15:090
896244992013,5cyclictest903968-21grep07:30:140
896244992013,5cyclictest436-20systemd-journal11:19:590
89624499200,3cyclictest961379-21turbostat10:15:000
89624499200,1cyclictest0-21swapper/012:28:030
89624499200,1cyclictest0-21swapper/011:43:560
89624499200,1cyclictest0-21swapper/010:29:060
89624499200,1cyclictest0-21swapper/008:09:070
89624499200,19cyclictest0-21swapper/012:39:050
89624499200,19cyclictest0-21swapper/012:22:150
89624499200,19cyclictest0-21swapper/011:52:270
89624499200,19cyclictest0-21swapper/011:47:130
89624499200,19cyclictest0-21swapper/011:29:370
89624499200,19cyclictest0-21swapper/010:48:530
89624499200,19cyclictest0-21swapper/010:20:000
89624499200,19cyclictest0-21swapper/010:20:000
89624499200,19cyclictest0-21swapper/009:30:390
89624499200,19cyclictest0-21swapper/009:25:320
89624499200,19cyclictest0-21swapper/009:06:050
89624499200,19cyclictest0-21swapper/008:26:320
89624499200,19cyclictest0-21swapper/007:26:090
139099200,14rtkit-daemon3056-21PK-Backend10:22:503
139099200,14rtkit-daemon3056-21PK-Backend10:22:503
139099200,14rtkit-daemon3056-21PK-Backend08:29:153
139099200,14rtkit-daemon0-21swapper/209:29:402
139099200,14rtkit-daemon0-21swapper/209:17:152
139099200,14rtkit-daemon0-21swapper/207:21:402
139099200,13rtkit-daemon3056-21PK-Backend07:29:533
896253991917,1cyclictest3056-21PK-Backend10:19:483
896253991917,1cyclictest3056-21PK-Backend09:11:333
896253991917,1cyclictest0-21swapper/311:38:013
896253991917,1cyclictest0-21swapper/311:30:523
896253991917,1cyclictest0-21swapper/310:59:073
896253991917,1cyclictest0-21swapper/310:51:103
896253991917,1cyclictest0-21swapper/310:12:163
896253991917,1cyclictest0-21swapper/309:51:553
89625399190,1cyclictest3056-21PK-Backend11:47:073
89625399190,1cyclictest0-21swapper/308:57:003
89625399190,1cyclictest0-21swapper/307:14:263
89625399190,18cyclictest3056-21PK-Backend08:35:303
89625399190,18cyclictest0-21swapper/312:26:143
89625399190,18cyclictest0-21swapper/309:44:043
896252991917,1cyclictest0-21swapper/210:36:462
896252991915,2cyclictest34-21ksoftirqd/208:40:192
896252991913,4cyclictest907086-21cron07:40:012
89625299190,1cyclictest0-21swapper/211:08:022
89625299190,1cyclictest0-21swapper/208:53:172
89625299190,18cyclictest0-21swapper/212:13:462
896247991917,1cyclictest3056-21PK-Backend11:33:251
896247991917,1cyclictest3056-21PK-Backend10:53:441
896247991917,1cyclictest3056-21PK-Backend09:54:291
896247991917,1cyclictest0-21swapper/111:42:311
896247991917,1cyclictest0-21swapper/108:33:111
896247991916,2cyclictest3056-21PK-Backend12:07:521
896247991916,2cyclictest3056-21PK-Backend07:56:131
896247991912,5cyclictest977968-21cat11:00:151
896247991912,5cyclictest916880-21rt-features08:05:231
896247991911,7cyclictest979927-21if_enp2s011:05:161
896247991911,6cyclictest996387-21ntp_states11:50:191
89624799190,1cyclictest3056-21PK-Backend12:22:331
89624799190,1cyclictest3056-21PK-Backend12:16:111
89624799190,1cyclictest3056-21PK-Backend12:16:101
89624799190,1cyclictest3056-21PK-Backend07:14:291
89624799190,1cyclictest0-21swapper/110:15:591
89624799190,1cyclictest0-21swapper/108:54:271
89624799190,1cyclictest0-21swapper/108:38:111
89624799190,1cyclictest0-21swapper/108:24:061
89624799190,18cyclictest0-21swapper/111:27:371
896244991917,1cyclictest0-21swapper/011:02:530
896244991917,1cyclictest0-21swapper/008:40:370
896244991917,1cyclictest0-21swapper/007:15:470
896244991917,1cyclictest0-21swapper/007:14:590
89624499190,1cyclictest0-21swapper/008:58:290
89624499190,1cyclictest0-21swapper/008:36:450
89624499190,18cyclictest0-21swapper/012:16:280
89624499190,18cyclictest0-21swapper/012:16:270
89624499190,18cyclictest0-21swapper/011:23:480
89624499190,18cyclictest0-21swapper/011:23:480
89624499190,18cyclictest0-21swapper/010:01:550
89624499190,18cyclictest0-21swapper/008:22:050
896253991816,1cyclictest3056-21PK-Backend08:33:013
896253991816,1cyclictest0-21swapper/308:09:003
896253991813,3cyclictest1003151-21memory12:10:163
896253991812,5cyclictest42-21ksoftirqd/309:00:143
896253991812,5cyclictest1001804-21cat12:05:223
89625399180,6cyclictest952288-21cat09:45:233
896252991816,1cyclictest0-21swapper/212:35:292
896252991813,4cyclictest34-21ksoftirqd/209:00:132
896252991813,3cyclictest905327-21idleruntime-cro07:35:002
896247991816,1cyclictest3056-21PK-Backend10:55:071
896247991816,1cyclictest0-21swapper/110:13:281
896247991812,4cyclictest994213-21load11:45:171
896247991811,5cyclictest985175-21irqstats11:20:171
896247991811,5cyclictest985175-21irqstats11:20:171
896247991811,5cyclictest983516-21sed11:15:171
89624799180,1cyclictest0-21swapper/110:41:541
89624499189,7cyclictest939464-21df09:10:130
896244991816,1cyclictest0-21swapper/012:31:210
896244991816,1cyclictest0-21swapper/012:02:210
896244991816,1cyclictest0-21swapper/010:58:130
896244991816,1cyclictest0-21swapper/010:53:330
896244991816,1cyclictest0-21swapper/009:19:380
896244991812,5cyclictest931186-21ls08:45:230
89624499180,7cyclictest907107-21turbostat07:40:000
89624499180,1cyclictest0-21swapper/009:50:260
89624499180,1cyclictest0-21swapper/008:32:190
89624499180,1cyclictest0-21swapper/007:55:260
89624499180,1cyclictest0-21swapper/007:42:370
9838062170,3chrt3056-21PK-Backend11:15:213
89625399179,6cyclictest42-21ksoftirqd/309:30:143
89625399171,14cyclictest1006704-21hddtemp_smartct12:20:143
896253991710,5cyclictest42-21ksoftirqd/307:35:123
89625299178,8cyclictest938370-21timerwakeupswit09:05:232
896252991715,1cyclictest0-21swapper/208:48:372
896252991715,1cyclictest0-21swapper/208:31:012
89624799179,6cyclictest904325-21irqstats07:30:171
896247991715,1cyclictest3056-21PK-Backend09:02:381
896247991715,1cyclictest3056-21PK-Backend08:18:311
896247991714,2cyclictest3056-21PK-Backend10:48:301
896247991712,3cyclictest1009512-21sh12:30:001
896247991711,4cyclictest941265-21if_enp2s009:15:151
896247991710,5cyclictest939459-21cat09:10:131
896247991710,5cyclictest901830-21cron07:25:001
896244991715,1cyclictest0-21swapper/011:59:040
896244991715,1cyclictest0-21swapper/011:36:120
896253991614,1cyclictest3056-21PK-Backend11:41:193
896252991614,1cyclictest0-21swapper/208:29:382
89624499169,5cyclictest911769-21cat07:50:250
896244991614,1cyclictest0-21swapper/012:08:090
896244991612,3cyclictest901041-21needreboot07:20:180
896244991610,5cyclictest948815-21grep09:35:230
896244991610,5cyclictest2317-21gsd-power09:44:570
89625399150,3cyclictest912281-21cron07:55:003
896252991511,2cyclictest34-21ksoftirqd/208:00:002
896252991511,2cyclictest34-21ksoftirqd/207:45:292
896252991511,2cyclictest34-21ksoftirqd/207:25:222
896252991511,2cyclictest34-21ksoftirqd/207:10:232
89624799159,5cyclictest914350-21cpuspeed08:00:111
896247991510,4cyclictest3056-21PK-Backend07:19:521
896244991510,3cyclictest954822-21tr09:55:120
89624799149,3cyclictest949237-21latency_hist09:40:011
896247991410,3cyclictest3056-21PK-Backend09:31:251
89624499148,5cyclictest958453-21expr10:05:130
896244991412,1cyclictest0-21swapper/009:00:380
89624799133,2cyclictest141rcu_preempt09:30:001
89624799127,3cyclictest9063392sleep107:35:211
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional