You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-23 - 14:35

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackcslot7s.osadl.org (updated Sun Aug 23, 2026 00:44:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
100379521370,3sleep2917620-21cyclictest23:15:012
96770921360,2sleep10-21swapper/121:30:171
91675529743,21sleep30-21swapper/319:05:243
91598027243,20sleep20-21swapper/219:05:072
91737426942,18sleep00-21swapper/019:08:550
91744226343,13sleep10-21swapper/119:09:481
9268222490,4sleep1251rcuc/119:35:011
9759802430,3sleep13056-21PK-Backend21:55:111
9197002410,3sleep30-21swapper/319:15:023
9452612370,3sleep20-21swapper/220:25:192
9847322340,2sleep00-21swapper/022:20:010
9348862280,4chrt3056-21PK-Backend19:55:171
91762799281,9cyclictest970568-21chrt21:40:110
91763699251,15cyclictest984682-21sh22:20:013
917632992512,10cyclictest883-21dbus-daemon20:33:562
91762799252,8cyclictest1009234-21apt23:30:120
917627992511,5cyclictest13-21ksoftirqd/023:25:110
91762799250,24cyclictest0-21swapper/000:31:420
91763299249,11cyclictest886-21NetworkManager22:48:482
917632992415,6cyclictest28650irq/123-ahci[0019:50:212
91763699232,18cyclictest974892-21python321:50:213
91763699230,22cyclictest0-21swapper/300:13:353
917632992316,4cyclictest2174-21JS10:27:482
917632992316,4cyclictest2174-21JS10:27:482
917632992315,6cyclictest1026059-21sshd00:16:562
917632992311,9cyclictest883-21dbus-daemon23:40:002
917627992316,1cyclictest0-21swapper/021:02:420
917632992220,1cyclictest0-21swapper/222:21:392
917632992220,1cyclictest0-21swapper/220:38:042
917632992219,2cyclictest0-21swapper/221:50:022
917632992211,9cyclictest34-21ksoftirqd/220:20:002
91763299220,3cyclictest940088-21ntp_states20:10:192
917630992214,6cyclictest972349-21cpuspeed21:45:121
91763099220,20cyclictest3056-21PK-Backend22:42:581
917627992220,1cyclictest0-21swapper/020:10:020
917627992220,1cyclictest0-21swapper/019:26:430
917627992210,10cyclictest932651-21kernelversion19:50:170
91762799220,11cyclictest1030045-21cron00:30:000
917636992119,1cyclictest0-21swapper/300:08:573
917636992112,7cyclictest1-21systemd21:08:463
91763699210,20cyclictest3056-21PK-Backend22:25:213
91763299217,11cyclictest886-21NetworkManager21:08:472
917632992119,1cyclictest0-21swapper/223:25:552
917632992119,1cyclictest0-21swapper/222:40:452
917632992119,1cyclictest0-21swapper/222:12:202
917632992119,1cyclictest0-21swapper/221:59:292
917632992119,1cyclictest0-21swapper/221:41:522
917632992119,1cyclictest0-21swapper/221:35:162
917632992119,1cyclictest0-21swapper/221:35:162
917632992119,1cyclictest0-21swapper/220:06:412
917632992119,1cyclictest0-21swapper/220:03:022
917632992119,1cyclictest0-21swapper/219:45:582
917632992119,1cyclictest0-21swapper/219:19:282
917632992119,1cyclictest0-21swapper/200:13:132
917632992115,4cyclictest34-21ksoftirqd/221:35:002
917632992114,5cyclictest957092-21seq21:00:172
91763299210,20cyclictest3056-21PK-Backend00:04:412
91763299210,20cyclictest0-21swapper/223:58:592
91763299210,20cyclictest0-21swapper/223:53:192
91763299210,20cyclictest0-21swapper/220:44:472
91763299210,20cyclictest0-21swapper/200:39:092
91763299210,19cyclictest3056-21PK-Backend23:15:132
917630992118,2cyclictest3056-21PK-Backend23:01:511
917630992118,2cyclictest3056-21PK-Backend00:16:541
91763099210,20cyclictest3056-21PK-Backend00:31:261
91763099210,20cyclictest3056-21PK-Backend00:27:491
91763099210,1cyclictest3056-21PK-Backend23:33:411
91763099210,19cyclictest3056-21PK-Backend23:55:381
91763099210,19cyclictest3056-21PK-Backend00:37:421
91763099210,19cyclictest3056-21PK-Backend00:03:551
917627992119,1cyclictest0-21swapper/022:09:390
917627992119,1cyclictest0-21swapper/021:34:180
917627992119,1cyclictest0-21swapper/021:28:100
917627992119,1cyclictest0-21swapper/020:46:190
917627992119,1cyclictest0-21swapper/019:23:120
917627992119,1cyclictest0-21swapper/000:19:250
91762799211,19cyclictest0-21swapper/022:20:220
91762799211,17cyclictest436-20systemd-journal00:00:010
91762799210,19cyclictest0-21swapper/023:40:460
917636992016,3cyclictest0-21swapper/321:55:203
917636992014,5cyclictest925377-21expr19:30:133
917636992014,4cyclictest2156-21gnome-shell20:55:093
917636992013,5cyclictest945247-21ntp_kernel_err20:25:193
917636992013,5cyclictest1018373-21irqstats23:55:153
917636992012,6cyclictest999967-21runrttasks23:00:553
917636992012,6cyclictest923897-21ls19:25:163
917636992012,6cyclictest1012484-21sed23:40:013
91763699201,17cyclictest967842-21ntp_states21:30:203
91763699200,1cyclictest3056-21PK-Backend23:29:083
91763699200,1cyclictest0-21swapper/322:45:013
91763699200,1cyclictest0-21swapper/322:00:273
91763699200,1cyclictest0-21swapper/319:20:133
91763699200,19cyclictest3056-21PK-Backend22:13:513
91763699200,19cyclictest3056-21PK-Backend22:09:193
91763699200,19cyclictest0-21swapper/323:13:413
91763699200,19cyclictest0-21swapper/322:37:503
91763699200,19cyclictest0-21swapper/320:36:183
91763699200,19cyclictest0-21swapper/320:03:053
91763699200,19cyclictest0-21swapper/300:34:523
91763299208,10cyclictest991647-21unin-run22:40:002
91763299204,15cyclictest1095-21runrttasks00:23:192
917632992018,1cyclictest0-21swapper/222:19:152
917632992018,1cyclictest0-21swapper/222:03:142
917632992018,1cyclictest0-21swapper/221:19:212
917632992018,1cyclictest0-21swapper/220:53:452
917632992018,1cyclictest0-21swapper/220:46:492
917632992014,4cyclictest34-21ksoftirqd/221:25:122
917632992012,6cyclictest934515-21df_inode19:55:122
917632992010,7cyclictest996716-21gdbus22:53:482
91763299200,19cyclictest0-21swapper/223:49:412
91763299200,19cyclictest0-21swapper/223:22:162
91763299200,19cyclictest0-21swapper/222:07:002
91763299200,19cyclictest0-21swapper/219:44:582
91763299200,19cyclictest0-21swapper/200:30:032
917630992018,1cyclictest3056-21PK-Backend23:38:541
917630992018,1cyclictest3056-21PK-Backend21:53:301
917630992018,1cyclictest3056-21PK-Backend20:01:571
917630992018,1cyclictest0-21swapper/122:15:001
917630992018,1cyclictest0-21swapper/121:20:321
917630992011,3cyclictest26-21ksoftirqd/122:25:121
91763099200,1cyclictest3056-21PK-Backend23:52:481
91763099200,1cyclictest3056-21PK-Backend21:09:021
91763099200,19cyclictest3056-21PK-Backend23:41:311
91763099200,19cyclictest3056-21PK-Backend20:51:451
91763099200,19cyclictest3056-21PK-Backend19:40:071
91763099200,19cyclictest3056-21PK-Backend00:24:111
91763099200,19cyclictest3056-21PK-Backend00:06:461
91763099200,19cyclictest0-21swapper/121:10:381
91763099200,19cyclictest0-21swapper/120:49:431
91763099200,18cyclictest3056-21PK-Backend20:08:121
917627992018,1cyclictest0-21swapper/023:14:500
917627992018,1cyclictest0-21swapper/022:47:530
917627992018,1cyclictest0-21swapper/022:28:530
917627992018,1cyclictest0-21swapper/020:57:350
917627992018,1cyclictest0-21swapper/019:49:140
917627992018,1cyclictest0-21swapper/019:15:210
917627992018,1cyclictest0-21swapper/000:00:400
917627992016,2cyclictest9601392sleep021:10:110
917627992012,6cyclictest982711-21basename22:15:010
917627992012,6cyclictest918-21rs:main0
91762799200,1cyclictest0-21swapper/021:48:520
91762799200,19cyclictest0-21swapper/021:16:540
91762799200,19cyclictest0-21swapper/020:43:290
91762799200,19cyclictest0-21swapper/019:10:480
91763699192,15cyclictest0-21swapper/321:20:193
917636991917,1cyclictest3056-21PK-Backend21:41:263
917636991917,1cyclictest0-21swapper/321:16:113
917636991917,1cyclictest0-21swapper/320:40:093
917636991917,1cyclictest0-21swapper/320:17:053
917636991917,1cyclictest0-21swapper/319:51:433
917636991917,1cyclictest0-21swapper/300:27:363
917636991914,3cyclictest978-21snmpd23:40:533
917636991912,6cyclictest947155-21awk20:30:213
917636991912,5cyclictest42-21ksoftirqd/322:50:123
91763699191,16cyclictest943678-21python320:20:213
917636991911,6cyclictest1001320-21awk23:05:213
91763699190,7cyclictest960640-21irqstats21:10:163
91763699190,6cyclictest933618-21apt-get19:55:033
91763699190,1cyclictest0-21swapper/323:34:223
91763699190,1cyclictest0-21swapper/322:41:503
91763699190,1cyclictest0-21swapper/319:42:443
91763699190,18cyclictest3056-21PK-Backend22:23:453
91763699190,18cyclictest0-21swapper/323:54:433
91763699190,18cyclictest0-21swapper/320:51:463
91763699190,18cyclictest0-21swapper/319:48:523
91763699190,18cyclictest0-21swapper/300:24:453
91763299194,9cyclictest925228-21apt19:30:122
917632991917,1cyclictest0-21swapper/221:46:032
917632991917,1cyclictest0-21swapper/221:21:442
917632991917,1cyclictest0-21swapper/220:55:352
917632991917,1cyclictest0-21swapper/219:21:592
917632991917,1cyclictest0-21swapper/219:14:432
917632991913,5cyclictest34-21ksoftirqd/219:25:122
917632991912,5cyclictest1013747-21cat23:40:232
91763299190,1cyclictest3056-21PK-Backend23:05:262
91763299190,18cyclictest0-21swapper/200:05:432
917630991917,1cyclictest3056-21PK-Backend20:59:091
917630991917,1cyclictest0-21swapper/123:21:241
917630991917,1cyclictest0-21swapper/123:05:501
917630991917,1cyclictest0-21swapper/122:07:291
917630991912,6cyclictest928432-21turbostat.cron19:40:001
917630991910,3cyclictest26-21ksoftirqd/122:40:001
91763099190,1cyclictest3056-21PK-Backend22:01:341
91763099190,1cyclictest3056-21PK-Backend21:15:591
91763099190,1cyclictest3056-21PK-Backend21:02:531
91763099190,1cyclictest3056-21PK-Backend20:35:301
91763099190,1cyclictest3056-21PK-Backend20:24:351
91763099190,1cyclictest3056-21PK-Backend19:48:451
91763099190,18cyclictest3056-21PK-Backend22:57:521
91763099190,18cyclictest3056-21PK-Backend22:46:081
91763099190,18cyclictest3056-21PK-Backend21:26:401
91763099190,18cyclictest3056-21PK-Backend20:43:001
91763099190,18cyclictest0-21swapper/123:16:581
91763099190,18cyclictest0-21swapper/122:15:481
917627991917,1cyclictest0-21swapper/021:59:260
917627991917,1cyclictest0-21swapper/020:38:000
917627991917,1cyclictest0-21swapper/020:03:000
917627991917,1cyclictest0-21swapper/019:40:010
917627991917,1cyclictest0-21swapper/019:36:150
917627991917,1cyclictest0-21swapper/000:36:070
917627991916,2cyclictest0-21swapper/022:53:140
917627991912,5cyclictest946767-21cut20:30:160
91762799190,1cyclictest3056-21PK-Backend23:35:450
91762799190,1cyclictest3056-21PK-Backend22:30:280
91762799190,1cyclictest3056-21PK-Backend22:30:280
91762799190,1cyclictest0-21swapper/023:19:010
91762799190,1cyclictest0-21swapper/021:08:360
91762799190,1cyclictest0-21swapper/019:56:310
91762799190,18cyclictest0-21swapper/023:47:200
91762799190,18cyclictest0-21swapper/020:20:440
91762799190,18cyclictest0-21swapper/019:32:310
91762799190,18cyclictest0-21swapper/000:21:150
91763699182,15cyclictest938376-21open_inodes20:05:213
917636991811,5cyclictest1025343-21kernelversion00:15:163
917636991810,6cyclictest1033131-21awk00:35:243
91763699180,4cyclictest969200-21df_inode21:35:143
91763699180,4cyclictest969200-21df_inode21:35:143
91763699180,2cyclictest141rcu_preempt19:14:593
91763699180,1cyclictest0-21swapper/322:34:403
91763699180,1cyclictest0-21swapper/322:34:393
917632991816,1cyclictest0-21swapper/223:00:402
917632991816,1cyclictest0-21swapper/222:25:382
917632991816,1cyclictest0-21swapper/220:22:282
91763299181,14cyclictest998584-21perf23:00:002
91763299181,12cyclictest960166-21apt21:10:132
91763299180,1cyclictest0-21swapper/200:29:002
917630991816,1cyclictest3056-21PK-Backend20:28:131
917630991816,1cyclictest3056-21PK-Backend19:51:361
917630991816,1cyclictest0-21swapper/123:28:271
917630991816,1cyclictest0-21swapper/122:31:151
917630991816,1cyclictest0-21swapper/122:31:151
917630991816,1cyclictest0-21swapper/119:12:151
917630991815,2cyclictest3056-21PK-Backend23:46:461
91762799189,7cyclictest436-20systemd-journal21:25:010
917627991816,1cyclictest0-21swapper/023:20:030
917627991811,5cyclictest997508-21smartctl22:55:150
917627991811,5cyclictest992269-21entropy22:40:180
91762799180,1cyclictest0-21swapper/020:54:370
91762799180,1cyclictest0-21swapper/000:13:090
917636991715,1cyclictest3056-21PK-Backend23:17:533
917636991714,2cyclictest3056-21PK-Backend23:23:063
91763699171,3cyclictest952072-21memory20:45:193
917636991712,4cyclictest965738-21diskstats21:25:133
917636991712,3cyclictest1020053-21hddtemp_smartct00:00:173
917636991711,4cyclictest998694-21sed23:00:003
91763699170,16cyclictest957762-21users21:00:243
917632991715,1cyclictest0-21swapper/223:32:092
917630991715,1cyclictest3056-21PK-Backend19:15:471
917630991714,2cyclictest3056-21PK-Backend23:10:351
917630991711,5cyclictest985614-21head22:20:181
917630991710,5cyclictest970929-21df21:40:131
91763099170,5cyclictest141rcu_preempt00:15:011
91762799179,6cyclictest1016889-21awk23:50:190
91762799178,8cyclictest999284-21cat23:00:160
91762799176,10cyclictest970300-21munin-plugin-st21:40:000
91762799176,10cyclictest970300-21munin-plugin-st21:39:590
917627991715,1cyclictest0-21swapper/020:28:210
917627991715,1cyclictest0-21swapper/020:16:180
917627991715,1cyclictest0-21swapper/000:06:550
917636991614,1cyclictest0-21swapper/323:48:273
917636991614,1cyclictest0-21swapper/320:11:233
917636991612,3cyclictest42-21ksoftirqd/321:50:003
91763699160,14cyclictest927354-21hddtemp_smartct19:35:163
917632991614,1cyclictest0-21swapper/219:39:442
917630991614,1cyclictest3056-21PK-Backend20:17:321
917630991614,1cyclictest3056-21PK-Backend20:11:031
917630991611,3cyclictest924964-21idleruntime-cro19:30:001
917630991610,5cyclictest969848-21ls21:35:241
917630991610,5cyclictest969848-21ls21:35:231
917627991614,1cyclictest0-21swapper/022:03:460
917627991612,3cyclictest1-21systemd21:52:350
917627991611,3cyclictest2156-21gnome-shell23:07:090
917630991513,1cyclictest3056-21PK-Backend20:31:501
91762799159,5cyclictest938341-21awk20:05:190
917630991412,1cyclictest3056-21PK-Backend22:50:071
91763099130,5cyclictest141rcu_preempt19:22:051
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional