You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-23 - 11:33

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot7s.osadl.org (updated Sat May 23, 2026 00:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
344463222400,8sleep10-21swapper/119:05:131
352948321260,2sleep13056-21PK-Backend22:30:131
345687421180,3sleep20-21swapper/219:37:082
139099870,74rtkit-daemon0-21swapper/319:07:053
344440626738,22sleep00-21swapper/019:05:090
344583426642,17sleep20-21swapper/219:09:252
35090232580,2sleep1883-21dbus-daemon21:45:351
34769622490,2sleep30-21swapper/320:35:103
35386212430,2sleep20-21swapper/222:55:122
35386212430,2sleep20-21swapper/222:55:122
35344152410,3sleep13056-21PK-Backend22:45:001
3446057993120,10cyclictest42-21ksoftirqd/321:46:253
3446053993025,4cyclictest34-21ksoftirqd/221:45:432
35267932280,5sleep10-21swapper/122:20:221
35025272280,3sleep03056-21PK-Backend21:44:280
3446057992814,12cyclictest42-21ksoftirqd/323:31:463
3446057992722,3cyclictest913-21gdbus22:24:283
3446053992722,4cyclictest34-21ksoftirqd/221:44:262
3446047992712,12cyclictest883-21dbus-daemon21:46:240
3446057992614,9cyclictest883-21dbus-daemon21:44:253
344605799252,20cyclictest0-21swapper/322:35:113
3446047992516,7cyclictest883-21dbus-daemon22:24:170
139099250,4rtkit-daemon1389-21rtkit-daemon23:36:261
344605799240,23cyclictest3453906-21apt19:30:113
344605799240,23cyclictest0-21swapper/300:05:013
3446053992417,5cyclictest436-20systemd-journal22:35:002
3446053992417,5cyclictest3476672-21sshd20:35:072
3446049992420,3cyclictest26-21ksoftirqd/121:45:001
139099240,4rtkit-daemon1389-21rtkit-daemon23:43:280
34684502230,3sleep03056-21PK-Backend20:10:170
344605799237,14cyclictest42-21ksoftirqd/323:15:003
344605799230,21cyclictest3535022-21df22:45:123
344605799230,11cyclictest35388152if_enp2s022:55:153
344605799230,11cyclictest35388152if_enp2s022:55:153
3446049992320,2cyclictest3056-21PK-Backend22:28:561
3446049992320,2cyclictest3056-21PK-Backend19:51:201
344604999230,21cyclictest0-21swapper/120:16:281
3446047992315,6cyclictest1-21systemd22:15:000
139099230,4rtkit-daemon1389-21rtkit-daemon23:37:410
34921872220,4sleep2331rcuc/221:20:002
344605799225,15cyclictest3474733-21unin-run20:30:003
3446057992220,1cyclictest3056-21PK-Backend22:09:303
3446057992220,1cyclictest0-21swapper/320:17:503
3446057992220,1cyclictest0-21swapper/320:08:163
3446057992218,3cyclictest3525496-21cron22:20:013
3446057992217,4cyclictest42-21ksoftirqd/300:15:003
3446057992215,6cyclictest3552909-21seq23:35:113
3446057992213,6cyclictest3530832-21cron22:35:003
3446057992212,9cyclictest978-21snmpd00:16:193
3446057992210,8cyclictest883-21dbus-daemon23:21:453
344605799220,3cyclictest3452906-21ntp_states19:25:183
344605399220,21cyclictest0-21swapper/200:27:222
3446049992220,1cyclictest0-21swapper/123:45:081
3446049992220,1cyclictest0-21swapper/120:20:261
3446049992220,1cyclictest0-21swapper/100:31:111
3446047992213,7cyclictest3483385-21apt20:55:000
3446057992119,1cyclictest3056-21PK-Backend21:06:503
3446057992119,1cyclictest0-21swapper/322:13:293
3446057992119,1cyclictest0-21swapper/321:33:063
3446057992119,1cyclictest0-21swapper/320:12:153
3446057992119,1cyclictest0-21swapper/319:59:453
3446057992119,1cyclictest0-21swapper/319:41:473
3446057992119,1cyclictest0-21swapper/300:00:223
3446057992118,2cyclictest3056-21PK-Backend23:46:573
3446057992113,6cyclictest1-21systemd23:20:003
344605799210,20cyclictest3056-21PK-Backend23:43:053
344605799210,20cyclictest0-21swapper/319:23:553
344605799210,19cyclictest3056-21PK-Backend00:27:333
3446053992119,1cyclictest0-21swapper/223:59:442
3446053992116,4cyclictest34-21ksoftirqd/222:37:252
3446053992114,6cyclictest883-21dbus-daemon00:10:002
3446053992114,5cyclictest3472648-21sshd20:21:072
3446053992113,6cyclictest3489710-21python321:10:202
3446053992112,7cyclictest913-21gdbus23:21:562
344605399210,20cyclictest1095-21runrttasks19:47:522
344605399210,20cyclictest0-21swapper/219:22:102
344605399210,1cyclictest0-21swapper/221:09:582
3446049992119,1cyclictest3056-21PK-Backend21:36:241
3446049992119,1cyclictest3056-21PK-Backend20:33:441
3446049992119,1cyclictest3056-21PK-Backend00:15:221
3446049992119,1cyclictest0-21swapper/123:50:011
3446049992119,1cyclictest0-21swapper/120:42:571
3446049992119,1cyclictest0-21swapper/119:18:151
3446049992119,1cyclictest0-21swapper/119:18:141
3446049992119,1cyclictest0-21swapper/100:37:401
3446049992119,1cyclictest0-21swapper/100:26:311
344604999210,20cyclictest3056-21PK-Backend19:42:271
344604999210,20cyclictest0-21swapper/122:02:541
344604999210,20cyclictest0-21swapper/122:02:541
344604999210,19cyclictest3056-21PK-Backend22:17:001
344604999210,19cyclictest3056-21PK-Backend19:57:141
344604999210,19cyclictest3056-21PK-Backend19:21:321
3446047992119,1cyclictest0-21swapper/022:30:210
3446047992118,2cyclictest3056-21PK-Backend21:08:210
3446047992118,2cyclictest3056-21PK-Backend20:25:440
3446047992112,7cyclictest3517504-21hddtemp_smartct21:55:150
344604799210,20cyclictest0-21swapper/022:51:160
344604799210,20cyclictest0-21swapper/022:51:160
139099210,4rtkit-daemon1389-21rtkit-daemon21:50:251
3446057992018,1cyclictest3056-21PK-Backend00:35:513
3446057992018,1cyclictest0-21swapper/323:27:173
3446057992018,1cyclictest0-21swapper/319:52:143
3446057992018,1cyclictest0-21swapper/319:48:293
3446057992018,1cyclictest0-21swapper/319:36:403
3446057992018,1cyclictest0-21swapper/319:19:163
3446057992018,1cyclictest0-21swapper/319:19:163
3446057992017,2cyclictest3056-21PK-Backend00:30:233
3446057992012,6cyclictest3528312-21ntp_states22:25:183
344605799200,7cyclictest35409742sensors_temp23:00:193
344605799200,1cyclictest3056-21PK-Backend21:52:403
344605799200,19cyclictest3056-21PK-Backend21:58:023
344605799200,19cyclictest0-21swapper/323:59:213
344605799200,19cyclictest0-21swapper/323:06:143
344605799200,19cyclictest0-21swapper/321:36:523
344605799200,19cyclictest0-21swapper/321:20:433
344605799200,19cyclictest0-21swapper/320:51:363
344605399209,8cyclictest3483093-21spatcher20:51:372
3446053992018,1cyclictest0-21swapper/222:17:102
3446053992018,1cyclictest0-21swapper/221:52:432
3446053992018,1cyclictest0-21swapper/221:21:202
3446053992018,1cyclictest0-21swapper/220:40:252
3446053992018,1cyclictest0-21swapper/200:34:532
3446053992017,2cyclictest0-21swapper/223:45:182
3446053992015,3cyclictest3553987-21cron23:40:002
3446053992013,5cyclictest3497342-21date21:35:012
344605399200,19cyclictest0-21swapper/223:33:282
344605399200,19cyclictest0-21swapper/223:29:502
344605399200,19cyclictest0-21swapper/223:18:072
344605399200,19cyclictest0-21swapper/223:05:092
344605399200,19cyclictest0-21swapper/222:21:572
344605399200,19cyclictest0-21swapper/222:02:502
344605399200,19cyclictest0-21swapper/222:02:502
344605399200,19cyclictest0-21swapper/221:29:592
344605399200,19cyclictest0-21swapper/221:01:122
344605399200,19cyclictest0-21swapper/220:49:022
344605399200,19cyclictest0-21swapper/220:12:252
344605399200,19cyclictest0-21swapper/220:09:152
344605399200,19cyclictest0-21swapper/219:54:342
344605399200,19cyclictest0-21swapper/200:21:412
344605399200,19cyclictest0-21swapper/200:00:462
3446049992018,1cyclictest3056-21PK-Backend23:21:151
3446049992018,1cyclictest3056-21PK-Backend23:03:031
3446049992018,1cyclictest3056-21PK-Backend20:07:081
3446049992018,1cyclictest0-21swapper/121:31:171
3446049992018,1cyclictest0-21swapper/121:02:441
3446049992018,1cyclictest0-21swapper/100:23:411
3446049992018,1cyclictest0-21swapper/100:06:031
3446049992017,2cyclictest3056-21PK-Backend23:13:581
3446049992017,2cyclictest3056-21PK-Backend00:10:431
3446049992012,6cyclictest3493791-21cron21:25:001
3446049992012,6cyclictest3481638-21latency_hist20:50:001
344604999200,1cyclictest3056-21PK-Backend22:14:361
344604999200,19cyclictest3056-21PK-Backend20:38:381
344604999200,19cyclictest3056-21PK-Backend20:13:161
344604999200,19cyclictest0-21swapper/123:41:161
344604999200,19cyclictest0-21swapper/121:07:241
344604999200,19cyclictest0-21swapper/120:51:361
344604999200,18cyclictest3056-21PK-Backend23:17:361
344604999200,18cyclictest3056-21PK-Backend23:08:311
3446047992018,1cyclictest3056-21PK-Backend19:18:230
3446047992018,1cyclictest3056-21PK-Backend19:18:230
3446047992018,1cyclictest0-21swapper/023:57:340
3446047992018,1cyclictest0-21swapper/023:29:080
3446047992018,1cyclictest0-21swapper/023:22:530
3446047992018,1cyclictest0-21swapper/022:04:050
3446047992018,1cyclictest0-21swapper/022:04:050
3446047992018,1cyclictest0-21swapper/021:50:120
3446047992018,1cyclictest0-21swapper/021:11:050
3446047992018,1cyclictest0-21swapper/021:02:200
3446047992018,1cyclictest0-21swapper/020:46:040
3446047992018,1cyclictest0-21swapper/020:40:230
3446047992018,1cyclictest0-21swapper/020:00:350
3446047992018,1cyclictest0-21swapper/019:49:190
3446047992018,1cyclictest0-21swapper/019:41:150
3446047992018,1cyclictest0-21swapper/019:12:360
3446047992016,3cyclictest3552023-21turbostat23:35:000
3446047992016,2cyclictest3522037-21idleruntime-cro22:10:000
344604799200,1cyclictest3056-21PK-Backend00:00:240
344604799200,19cyclictest0-21swapper/023:49:500
344604799200,19cyclictest0-21swapper/022:57:380
344604799200,19cyclictest0-21swapper/022:57:380
344604799200,19cyclictest0-21swapper/021:38:570
344604799200,19cyclictest0-21swapper/021:16:330
344604799200,19cyclictest0-21swapper/020:57:400
344604799200,19cyclictest0-21swapper/019:33:580
344604799200,19cyclictest0-21swapper/000:36:410
344605799198,7cyclictest42-21ksoftirqd/322:50:123
344605799198,7cyclictest42-21ksoftirqd/322:50:123
344605799197,9cyclictest1-21systemd21:16:383
3446057991917,1cyclictest3056-21PK-Backend22:03:213
3446057991917,1cyclictest3056-21PK-Backend22:03:213
3446057991917,1cyclictest3056-21PK-Backend20:45:073
3446057991917,1cyclictest3056-21PK-Backend20:42:573
3446057991917,1cyclictest3056-21PK-Backend00:21:043
3446057991917,1cyclictest0-21swapper/321:25:503
3446057991913,5cyclictest3484178-21sed20:55:153
3446057991912,5cyclictest3476450-21basename20:35:013
3446057991911,6cyclictest3464867-21cat20:00:173
3446057991910,7cyclictest883-21dbus-daemon23:55:003
344605799190,1cyclictest0-21swapper/321:14:143
344605799190,18cyclictest3056-21PK-Backend19:14:023
3446053991917,1cyclictest0-21swapper/223:42:142
3446053991917,1cyclictest0-21swapper/219:56:102
3446053991917,1cyclictest0-21swapper/219:44:542
3446053991915,3cyclictest978-21snmpd19:18:222
3446053991915,3cyclictest978-21snmpd19:18:222
3446053991915,3cyclictest3446411-21tr19:10:132
3446053991912,5cyclictest436-20systemd-journal22:54:552
3446053991912,5cyclictest436-20systemd-journal22:54:552
3446053991912,5cyclictest3565252-21load00:10:172
3446053991912,5cyclictest3533273-21expr22:40:122
3446053991911,6cyclictest3473235-21apt20:25:112
344605399190,1cyclictest0-21swapper/222:05:142
344605399190,18cyclictest0-21swapper/220:18:002
3446049991917,1cyclictest3056-21PK-Backend21:26:581
3446049991916,2cyclictest3056-21PK-Backend19:48:231
3446049991916,2cyclictest0-21swapper/122:05:181
344604999190,1cyclictest3056-21PK-Backend23:57:311
344604999190,1cyclictest3056-21PK-Backend23:28:181
344604999190,1cyclictest3056-21PK-Backend22:59:251
344604999190,1cyclictest3056-21PK-Backend22:59:251
344604999190,1cyclictest3056-21PK-Backend22:54:381
344604999190,1cyclictest3056-21PK-Backend22:54:381
344604999190,1cyclictest3056-21PK-Backend22:49:041
344604999190,1cyclictest3056-21PK-Backend20:58:051
344604999190,1cyclictest3056-21PK-Backend20:00:591
344604999190,18cyclictest3056-21PK-Backend23:30:071
344604999190,18cyclictest0-21swapper/119:12:261
3446047991917,1cyclictest3056-21PK-Backend20:15:150
3446047991917,1cyclictest0-21swapper/022:45:420
3446047991917,1cyclictest0-21swapper/000:33:500
3446047991917,1cyclictest0-21swapper/000:23:430
3446047991914,3cyclictest3531268-21cpuspeed_turbos22:35:120
3446047991913,4cyclictest3451909-21idleruntime-cro19:25:000
3446047991913,4cyclictest2156-21gnome-shell20:37:090
3446047991912,5cyclictest3541017-21cat23:00:200
3446047991911,3cyclictest13-21ksoftirqd/019:28:090
344604799190,1cyclictest3056-21PK-Backend00:05:040
344604799190,1cyclictest0-21swapper/019:52:170
344604799190,18cyclictest0-21swapper/023:53:420
344604799190,18cyclictest0-21swapper/023:13:470
344604799190,18cyclictest0-21swapper/023:06:300
344604799190,18cyclictest0-21swapper/019:56:030
3446057991816,1cyclictest3056-21PK-Backend21:00:163
3446057991813,3cyclictest3532905-21find22:40:103
3446053991816,1cyclictest0-21swapper/223:02:192
3446053991816,1cyclictest0-21swapper/221:55:542
3446053991816,1cyclictest0-21swapper/220:59:512
3446053991816,1cyclictest0-21swapper/219:34:402
3446053991816,1cyclictest0-21swapper/219:26:152
3446053991813,4cyclictest3535073-21idleruntime22:45:152
3446053991811,6cyclictest3474972-21apt20:30:112
3446053991811,5cyclictest3523223-21ls22:10:202
3446053991811,5cyclictest3464378-21cat20:00:112
344605399180,1cyclictest0-21swapper/223:13:272
3446049991816,1cyclictest3056-21PK-Backend21:14:481
3446049991816,1cyclictest0-21swapper/100:01:231
3446049991815,2cyclictest3056-21PK-Backend19:38:081
3446049991812,4cyclictest3452870-21awk19:25:171
344604799189,7cyclictest13-21ksoftirqd/000:10:110
3446047991816,1cyclictest3056-21PK-Backend21:25:110
3446047991816,1cyclictest0-21swapper/023:16:380
3446047991816,1cyclictest0-21swapper/000:26:340
3446047991814,3cyclictest3567320-21needreboot00:15:170
344604799180,1cyclictest0-21swapper/020:07:290
344605799170,15cyclictest3472245-21ntp_states20:20:163
344605399179,6cyclictest436-20systemd-journal21:40:002
3446053991715,1cyclictest0-21swapper/200:35:542
3446053991712,4cyclictest3529249-21sed22:30:012
3446053991711,5cyclictest3567076-21smartctl00:15:152
344604999173,13cyclictest3490566-21sort21:15:111
3446049991715,1cyclictest3056-21PK-Backend19:32:271
3446049991715,1cyclictest0-21swapper/122:37:071
3446049991715,1cyclictest0-21swapper/121:57:331
344604799178,7cyclictest13-21ksoftirqd/022:40:170
3446047991713,3cyclictest3472959-21dump-pmu-power20:25:000
3446047991712,4cyclictest3455808-21tr19:35:100
3446047991711,4cyclictest3528017-21awk22:25:140
3446053991612,3cyclictest3558278-21taskset23:50:182
3446047991614,1cyclictest0-21swapper/020:34:420
3446047991611,3cyclictest3493369-21grep21:20:230
344604799157,6cyclictest3524298-21expr22:15:120
344604999148,4cyclictest2156-21gnome-shell20:25:091
3446047991412,1cyclictest0-21swapper/021:33:500
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional