You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-20 - 09:34

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot3s.osadl.org (updated Mon Apr 20, 2026 00:45:29)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1148643999484,7cyclictest1148651-21latency_hist19:10:010
1148643999120,41cyclictest1168191-21ssh21:40:530
1148643998523,57cyclictest1186228-21ssh22:23:230
114864799831,54cyclictest1216752-21ssh23:34:571
1148647998218,35cyclictest1224598-21rm23:52:571
114864799802,42cyclictest1172308-21ssh21:50:311
114864799802,42cyclictest1149139-21systemd-run19:20:011
114864799802,42cyclictest1149139-21systemd-run19:20:011
1148643998022,37cyclictest1241114-21ssh00:31:170
114864399801,61cyclictest1192564-21ssh22:38:060
114864799792,43cyclictest1175930-21ssh21:59:311
1148643997810,58cyclictest16850irq/134-800000023:16:280
114864799772,39cyclictest1235314-21sh00:18:041
114864799772,39cyclictest1235314-21sh00:18:041
114864799771,44cyclictest1179507-21sh22:07:331
1148643997729,33cyclictest1159587-21ssh21:20:520
1148643997717,51cyclictest16850irq/134-800000000:06:390
1148643997717,51cyclictest16850irq/134-800000000:06:390
114864399771,2cyclictest0-21swapper/019:15:020
114864399771,2cyclictest0-21swapper/019:15:020
114864799761,44cyclictest1201422-21sh22:58:541
114864399766,55cyclictest1227472-40mandb00:00:050
1148643997630,41cyclictest1216150-21ssh23:33:200
1148647997511,36cyclictest1192356-21sh22:37:261
1148643997514,39cyclictest16850irq/134-800000023:00:200
114864399741,55cyclictest1173647-21ssh21:54:040
1148643997410,7cyclictest16850irq/134-800000020:21:590
114864399731,14cyclictest1179688-21ssh22:08:110
114864799722,64cyclictest1207120-21sshd23:12:031
114864799722,39cyclictest364-21snmpd23:27:111
1148643997229,26cyclictest1194024-21ssh22:41:100
1148643997219,48cyclictest16850irq/134-800000022:15:230
114864799712,36cyclictest1187352-21ssh22:25:401
114864799711,54cyclictest0-21swapper/119:30:021
1148643997119,48cyclictest16850irq/134-800000022:29:120
1148643997118,48cyclictest16850irq/134-800000023:13:050
1148647997024,41cyclictest1166863-21rm21:38:071
114864799701,65cyclictest1229275-21ssh00:03:571
114864399708,57cyclictest16850irq/134-800000000:18:200
114864399708,57cyclictest16850irq/134-800000000:18:190
1148643997029,23cyclictest1170993-21ssh21:47:440
114864399702,10cyclictest1223251-21unin-run23:50:010
1148643997016,49cyclictest16850irq/134-800000022:51:200
1148643997016,49cyclictest16850irq/134-800000022:51:200
1148643997014,51cyclictest16850irq/134-800000021:59:260
1148647996928,36cyclictest1178296-21latency_hist22:05:031
114864799691,64cyclictest1171657-21ssh21:49:311
114864799691,37cyclictest1197936-21ssh22:50:131
114864799691,37cyclictest1197936-21ssh22:50:131
1148643996929,23cyclictest1233037-21ssh00:12:430
1148643996925,39cyclictest1197811-21latency_hist22:50:020
1148643996923,28cyclictest1242817-21ssh00:35:040
1148647996825,38cyclictest23-21ksoftirqd/123:24:011
114864399683,6cyclictest1227485-21cron00:00:000
114864399683,6cyclictest1227485-21cron00:00:000
1148643996815,35cyclictest16850irq/134-800000021:17:060
114864799672,4cyclictest131rcu_preempt21:25:031
114864799671,63cyclictest1221805-21ssh23:46:161
114864799671,62cyclictest1237005-21ssh00:21:461
114864799671,62cyclictest1226137-21ssh23:56:291
114864799671,62cyclictest1226137-21ssh23:56:281
114864799671,61cyclictest1230280-21ssh00:05:591
114864799671,61cyclictest1230280-21ssh00:05:591
114864799671,39cyclictest1155674-21ssh21:11:531
114864799671,39cyclictest1155674-21ssh21:11:531
1148647996616,45cyclictest1180107-1kworker/u9:122:13:591
114864799661,61cyclictest1189670-21ssh22:31:061
114864799661,61cyclictest1189670-21ssh22:31:061
114864799661,61cyclictest1182933-21ssh22:15:311
114864799661,61cyclictest1169136-21ssh21:43:241
114864799661,61cyclictest1154782-21sshd21:05:031
114864399668,6cyclictest16850irq/134-800000021:34:290
1148643996625,12cyclictest1218335-21ssh23:38:300
114864399661,61cyclictest0-21swapper/000:25:440
114864399661,61cyclictest0-21swapper/000:25:430
114864799652,59cyclictest1233588-21ssh00:14:081
114864799651,60cyclictest1204377-21ssh23:05:221
114864799651,60cyclictest1164718-21ssh21:33:061
114864799651,60cyclictest1160836-21ssh21:24:021
1148643996532,29cyclictest16950irq/224-800000023:10:010
1148643996529,32cyclictest1180826-21ssh22:10:310
114864799642,58cyclictest1202374-21ssh23:00:451
114864799641,59cyclictest1243837-21ssh00:37:491
114864799641,59cyclictest1241912-21ssh00:33:201
114864799641,59cyclictest1238681-21ssh00:25:291
114864799641,59cyclictest1238681-21ssh00:25:291
114864799641,59cyclictest1208960-21ssh23:16:141
114864799641,59cyclictest1196532-21ssh22:47:161
114864799641,59cyclictest1194024-21ssh22:41:101
114864799641,59cyclictest1186354-21ssh22:23:411
114864799641,59cyclictest1158533-21ssh21:18:501
114864799641,56cyclictest0-21swapper/121:00:021
1148643996423,35cyclictest3467602-21systemd-journal22:05:010
1148643996419,41cyclictest1211019-21ssh23:21:060
114864799631,58cyclictest1219442-21ssh23:40:411
114864799631,58cyclictest1217225-21ssh23:35:321
114864399631,58cyclictest0-21swapper/000:23:380
1148657996235,19cyclictest275-21dbus-daemon23:59:593
1148657996235,19cyclictest275-21dbus-daemon23:59:593
1148643996225,33cyclictest1202054-21date23:00:020
114864399622,17cyclictest1189637-21ssh22:31:020
114864399622,17cyclictest1189637-21ssh22:31:010
1148643996211,15cyclictest1166175-21ssh21:36:220
1148647996128,30cyclictest1153765-21sshd20:49:031
114864799611,55cyclictest48-21kcompactd021:00:181
1148643996132,25cyclictest12-21ksoftirqd/021:10:230
1148643996132,25cyclictest12-21ksoftirqd/021:10:230
1148643996121,36cyclictest1213407-21rm23:26:390
114864799601,55cyclictest3467602-21systemd-journal20:01:081
114864799601,54cyclictest48-21kcompactd020:28:081
114864799601,54cyclictest48-21kcompactd020:12:361
114864399601,54cyclictest1154867-21latency_hist21:10:010
1148653995940,15cyclictest3467602-21systemd-journal19:30:002
1148647995926,30cyclictest23-21ksoftirqd/119:40:031
114864799592,52cyclictest364-21snmpd19:45:141
114864799591,54cyclictest48-21kcompactd019:43:111
114864799591,53cyclictest48-21kcompactd020:05:561
114864399591,2cyclictest0-21swapper/023:40:460
1148657995852,3cyclictest371ksoftirqd/322:50:013
1148653995840,13cyclictest1-21systemd23:50:012
114864799582,51cyclictest364-21snmpd19:13:131
114864799581,52cyclictest48-21kcompactd020:23:411
114864799581,51cyclictest48-21kcompactd019:53:111
114864399582,51cyclictest0-21swapper/023:52:330
114864799571,52cyclictest48-21kcompactd020:50:191
114864799571,52cyclictest48-21kcompactd020:30:541
114864799571,51cyclictest48-21kcompactd019:24:531
1148647995712,40cyclictest275-21dbus-daemon20:20:001
114864799562,49cyclictest1148742-21date19:10:021
114864799561,50cyclictest48-21kcompactd020:35:541
114864399562,8cyclictest1150984-21grep19:55:010
1148643995623,28cyclictest1161703-21sh21:25:430
114864399562,17cyclictest1-21systemd20:55:010
1148657995534,16cyclictest1-21systemd23:25:013
1148653995546,6cyclictest1208325-21kworker/2:023:40:022
1148653995546,5cyclictest1208325-21kworker/2:000:00:332
114864399552,16cyclictest1153281-21modprobe20:40:000
114864399552,12cyclictest1152723-21sshd20:27:030
1148643995514,37cyclictest1150143-21latency_hist19:40:030
114864399551,15cyclictest1150431-21/usr/sbin/munin19:45:010
114864399551,14cyclictest1149850-21sshd19:30:020
1148647995422,28cyclictest1153545-21systemd-run20:45:011
1148647995422,28cyclictest1153545-21systemd-run20:45:011
114864799541,49cyclictest1149992-21cat19:35:021
1148647995410,39cyclictest0-21swapper/119:55:271
1148647995410,39cyclictest0-21swapper/119:55:271
114864399547,4cyclictest0-21swapper/019:15:010
1148643995413,36cyclictest1151177-21cron20:00:000
1148643995413,36cyclictest1151177-21cron20:00:000
1148657995334,14cyclictest275-21dbus-daemon21:35:013
1148657995334,14cyclictest1-21systemd00:25:003
1148653995344,7cyclictest30-21ksoftirqd/222:20:012
1148653995344,5cyclictest1208325-21kworker/2:023:43:222
114864399532,14cyclictest364-21snmpd19:29:080
1148643995312,36cyclictest284-21systemd-logind20:35:010
1148657995131,13cyclictest1-21systemd20:45:013
1148657995131,13cyclictest1-21systemd20:45:013
1148653995143,5cyclictest1154866-21kworker/2:121:52:092
1148653995142,5cyclictest1208325-21kworker/2:023:50:132
1148653995134,13cyclictest3467602-21systemd-journal00:22:032
1148653995133,12cyclictest275-21dbus-daemon00:20:012
1148653995133,12cyclictest275-21dbus-daemon00:20:012
114864399511,5cyclictest0-21swapper/020:01:280
1148657995034,12cyclictest1154067-21date20:55:013
1148657995032,14cyclictest3467602-21systemd-journal20:45:033
1148657995030,15cyclictest1-21systemd21:00:013
1148653995042,5cyclictest1163376-21kworker/2:322:37:042
1148653995042,5cyclictest1163376-21kworker/2:321:40:312
1148653995041,6cyclictest1163376-21kworker/2:323:14:492
1148653995041,5cyclictest1151467-21kworker/2:221:22:082
1148643995021,25cyclictest12-21ksoftirqd/019:23:030
114864399502,11cyclictest364-21snmpd21:04:400
1148643995015,29cyclictest309-21in:imuxsock21:00:010
114864399501,44cyclictest0-21swapper/020:41:030
114864399501,44cyclictest0-21swapper/020:41:030
114864399501,16cyclictest1151794-21sed20:10:020
1148653994941,6cyclictest1151467-21kworker/2:221:20:022
1148653994941,5cyclictest1163376-21kworker/2:323:25:492
1148653994941,5cyclictest1163376-21kworker/2:322:58:312
1148653994940,5cyclictest1163376-21kworker/2:322:22:342
1148653994938,7cyclictest1163376-21kworker/2:323:10:012
1148653994931,14cyclictest1-21systemd22:45:012
114864399491,11cyclictest1150644-21sshd19:46:540
1148657994832,11cyclictest1167242-21sshd21:39:033
1148657994821,19cyclictest275-21dbus-daemon20:00:013
1148657994821,19cyclictest275-21dbus-daemon20:00:013
1148653994842,3cyclictest1223254-21kworker/2:100:06:362
1148653994842,3cyclictest1223254-21kworker/2:100:06:362
1148653994841,4cyclictest1223254-21kworker/2:100:34:032
1148653994840,5cyclictest1163376-21kworker/2:322:34:462
1148653994840,5cyclictest1163376-21kworker/2:322:34:462
1148653994840,5cyclictest1154866-21kworker/2:122:06:262
1148653994840,5cyclictest1154866-21kworker/2:121:59:272
114865399482,4cyclictest131rcu_preempt22:12:382
1148643994820,24cyclictest0-21swapper/020:20:000
1148657994729,14cyclictest275-21dbus-daemon23:40:013
1148657994728,14cyclictest275-21dbus-daemon20:40:013
1148657994728,12cyclictest1173995-21modprobe21:55:003
1148653994739,5cyclictest1208325-21kworker/2:023:59:442
1148653994739,5cyclictest1208325-21kworker/2:023:59:442
1148653994739,5cyclictest1163376-21kworker/2:322:00:412
1148653994739,5cyclictest1151467-21kworker/2:221:11:112
1148653994739,5cyclictest1151467-21kworker/2:221:11:112
114864399471,17cyclictest1153846-21wc20:50:010
1148657994631,11cyclictest3467602-21systemd-journal23:15:003
1148653994637,6cyclictest1163376-21kworker/2:323:17:272
1148653994635,7cyclictest1163376-21kworker/2:322:54:162
1148653994635,7cyclictest1163376-21kworker/2:322:54:152
1148653994634,8cyclictest1197699-21cat22:50:012
114865799457,4cyclictest131rcu_preempt00:38:113
1148657994533,7cyclictest274-21cron21:25:003
1148657994531,8cyclictest309-21in:imuxsock22:45:013
1148657994521,18cyclictest275-21dbus-daemon22:25:013
1148653994537,5cyclictest1163376-21kworker/2:321:34:502
1148653994537,5cyclictest1148045-21kworker/2:019:31:212
1148653994533,8cyclictest0-21swapper/219:10:002
1148657994436,6cyclictest37-21ksoftirqd/300:08:203
1148657994436,6cyclictest37-21ksoftirqd/300:08:203
1148657994426,12cyclictest0-21swapper/323:45:003
1148653994431,10cyclictest30-21ksoftirqd/223:20:092
1148653994426,12cyclictest309-21in:imuxsock21:45:032
114864399441,10cyclictest1152132-21cat20:15:020
114865799438,4cyclictest1154822-21diskmemload22:35:313
1148657994327,12cyclictest37-21ksoftirqd/321:44:423
1148657994326,13cyclictest3467602-21systemd-journal00:30:003
1148657994326,13cyclictest3467602-21systemd-journal00:30:003
1148657994317,5cyclictest37-21ksoftirqd/322:12:363
1148653994334,6cyclictest1223254-21kworker/2:100:14:082
1148653994327,12cyclictest275-21dbus-daemon20:50:002
1148653994318,16cyclictest275-21dbus-daemon19:20:012
1148653994318,16cyclictest275-21dbus-daemon19:20:012
1148657994229,9cyclictest37-21ksoftirqd/323:48:033
1148657994227,11cyclictest1-21systemd00:20:013
1148657994227,11cyclictest1-21systemd00:20:013
1148657994226,12cyclictest1152102-21sed20:15:013
114865799421,4cyclictest0-21swapper/300:03:573
1148653994236,3cyclictest1151467-21kworker/2:221:25:302
1148653994234,5cyclictest1163376-21kworker/2:321:36:522
1148653994233,6cyclictest1151467-21kworker/2:221:01:172
1148653994231,7cyclictest30-21ksoftirqd/222:29:112
1148653994228,11cyclictest30-21ksoftirqd/200:25:072
1148653994228,11cyclictest30-21ksoftirqd/200:25:072
1148653994227,11cyclictest3467602-21systemd-journal20:44:022
1148653994227,11cyclictest3467602-21systemd-journal20:44:022
1148653994226,12cyclictest30-21ksoftirqd/220:40:012
1148657994127,11cyclictest1223879-21sshd23:51:033
114865799411,6cyclictest131rcu_preempt22:18:033
1148653994128,9cyclictest30-21ksoftirqd/219:45:022
1148653994126,11cyclictest1244705-21cron00:40:002
1148653994124,12cyclictest1-21systemd19:25:002
1148653994119,15cyclictest275-21dbus-daemon20:55:012
114865799407,6cyclictest131rcu_preempt00:12:563
114865799405,16cyclictest1216977-21ssh23:35:033
1148657994026,11cyclictest37-21ksoftirqd/322:04:543
1148657994025,11cyclictest309-21in:imuxsock19:40:003
1148657994021,13cyclictest37-21ksoftirqd/320:25:013
1148653994035,3cyclictest1163376-21kworker/2:323:00:502
1148653994032,5cyclictest1208325-21kworker/2:023:34:472
1148653994028,6cyclictest1154822-21diskmemload21:10:002
1148653994027,9cyclictest309-21in:imuxsock20:17:012
1148657993931,5cyclictest1201126-21sh22:58:003
1148657993929,7cyclictest1187860-21sshd22:27:033
1148657993925,7cyclictest37-21ksoftirqd/320:35:013
1148657993922,12cyclictest37-21ksoftirqd/323:05:013
1148657993922,12cyclictest3467602-21systemd-journal21:20:003
1148657993919,16cyclictest275-21dbus-daemon23:30:013
1148653993932,4cyclictest1148045-21kworker/2:019:35:382
1148653993926,8cyclictest30-21ksoftirqd/219:55:012
1148653993926,10cyclictest30-21ksoftirqd/220:00:012
1148653993926,10cyclictest30-21ksoftirqd/220:00:012
1148653993926,10cyclictest1152024-21sed20:15:022
1148653993921,14cyclictest275-21dbus-daemon20:10:012
1148657993826,10cyclictest37-21ksoftirqd/321:29:113
114865799382,5cyclictest131rcu_preempt22:08:033
1148657993825,10cyclictest37-21ksoftirqd/321:45:103
1148657993823,12cyclictest1149478-21wc19:25:013
1148657993823,11cyclictest37-21ksoftirqd/321:14:583
1148657993823,11cyclictest37-21ksoftirqd/321:14:583
1148657993823,11cyclictest37-21ksoftirqd/300:31:343
114865799381,5cyclictest131rcu_preempt22:53:203
114865799381,5cyclictest131rcu_preempt22:53:203
1148653993825,10cyclictest1153171-21sed20:35:032
114865399381,34cyclictest210-21jbd2/mmcblk1p2-20:05:012
1148657993728,6cyclictest1205014-21ssh23:07:043
1148657993724,10cyclictest37-21ksoftirqd/321:10:003
1148657993724,10cyclictest37-21ksoftirqd/319:15:003
1148657993723,11cyclictest37-21ksoftirqd/323:17:573
1148653993730,5cyclictest30-21ksoftirqd/219:45:022
1148657993627,7cyclictest37-21ksoftirqd/321:56:183
1148657993625,9cyclictest37-21ksoftirqd/322:33:273
1148657993625,9cyclictest37-21ksoftirqd/322:33:273
1148657993620,10cyclictest37-21ksoftirqd/320:20:003
114865399362,3cyclictest131rcu_preempt19:15:022
1148657993526,5cyclictest1151443-21cron20:05:003
1148657993522,11cyclictest37-21ksoftirqd/319:20:023
1148657993522,11cyclictest37-21ksoftirqd/319:20:023
1148653993525,8cyclictest30-21ksoftirqd/220:25:012
1148653993523,9cyclictest30-21ksoftirqd/220:30:012
114865799345,4cyclictest131rcu_preempt21:05:013
1148657993422,8cyclictest1149899-21systemd-run19:35:013
114865799341,6cyclictest131rcu_preempt19:45:023
1148657993319,10cyclictest275-21dbus-daemon20:10:013
1148653993321,8cyclictest1154276-21cron21:00:002
1148657993223,7cyclictest37-21ksoftirqd/319:50:033
114865799307,5cyclictest131rcu_preempt19:53:483
1148657993016,11cyclictest1152760-21sh20:30:003
114865799283,20cyclictest1-21systemd19:30:013
114865799263,18cyclictest1148729-21latency_hist19:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional