You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-11 - 20:38

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Mon May 11, 2026 12:43:06)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1052717997765,6cyclictest0-21swapper/110:20:501
1052718996335,24cyclictest1195907-21sh11:25:572
1052718996147,10cyclictest1171851-21wc10:55:482
105271799534,45cyclictest1116689-21ssh09:45:521
1052717994939,4cyclictest0-21swapper/111:15:531
1052718994838,6cyclictest1151049-21latency_hist10:30:022
1052716994822,5cyclictest1056615-21ntpq07:20:530
1052718994737,6cyclictest1217429-21latency_hist11:55:012
1052718994730,11cyclictest420-21avahi-daemon11:15:532
1052716994740,5cyclictest1170746-21systemd-run10:55:010
105271899462,33cyclictest1109024-21ssh09:35:562
1052717994637,6cyclictest1214591-21latency11:50:461
1052717994637,5cyclictest1100213-21systemd09:25:021
1052718994536,6cyclictest1060217-21systemd-run07:35:012
1052718994536,6cyclictest1060217-21systemd-run07:35:012
105271899451,38cyclictest1152277-21ssh10:30:522
105271899451,38cyclictest1152277-21ssh10:30:522
1052716994538,4cyclictest421-21dbus-daemon11:20:010
1052716994532,10cyclictest1107615-21munin-run09:35:010
1052718994435,5cyclictest1-21systemd08:50:012
1052718994434,6cyclictest1178655-21systemd-run11:05:022
1052717994438,3cyclictest0-21swapper/108:20:011
1052717994435,4cyclictest0-21swapper/111:41:021
1052718994330,9cyclictest1133137-21unixbench_singl10:06:042
1052717994335,4cyclictest0-21swapper/112:01:031
1052717994334,6cyclictest1148514-21proc_pri10:25:581
1052717994332,6cyclictest1182585-21cut11:10:011
1052717994332,6cyclictest1182585-21cut11:10:011
1052718994236,3cyclictest0-21swapper/207:15:012
1052718994233,5cyclictest1073784-21systemd-run08:20:012
1052718994231,7cyclictest242551-21cups-browsed09:23:452
105271899415,26cyclictest1246153-21ssh12:30:512
1052717994133,5cyclictest1252831-21ssh12:40:011
1052717994131,6cyclictest1056-21mta-sts-daemon10:30:571
1052717994131,6cyclictest1056-21mta-sts-daemon10:30:571
1052716994135,3cyclictest0-21swapper/012:40:010
105271699413,34cyclictest1191763-21ssh11:20:500
1052718994032,5cyclictest1113275-21timerwakeupswit09:41:012
1052718994031,4cyclictest0-21swapper/209:45:532
1052716994034,4cyclictest1055-21mta-sts-daemon09:58:080
1052716994030,7cyclictest1135198-21sh10:10:010
1052718993929,6cyclictest1213591-21systemd-run11:50:012
1052718993927,9cyclictest1127854-21/usr/sbin/munin10:00:472
1052718993926,10cyclictest1250113-21ntp_kernel_pll_12:35:532
105271799394,28cyclictest1218858-21ssh11:56:041
1052717993931,5cyclictest1051-21mta-sts-daemon12:17:401
1052717993918,13cyclictest1136425-21ntpq10:10:531
1052716993924,12cyclictest1233668-21aten2.4-expect12:15:400
1052718993828,5cyclictest0-21swapper/209:00:012
1052718993828,5cyclictest0-21swapper/207:40:542
1052718993826,9cyclictest1054-21mta-sts-daemon10:49:282
1052718993823,11cyclictest1180364-21timerandwakeup11:06:042
1052718993823,11cyclictest1180364-21timerandwakeup11:06:042
1052717993830,5cyclictest1055572-21unixbench_multi07:16:011
1052717993830,4cyclictest0-21swapper/110:55:531
1052717993830,4cyclictest0-21swapper/110:50:571
1052716993830,5cyclictest242549-21cupsd11:03:130
1052716993823,9cyclictest1059564-21ntpq07:30:490
1052716993823,9cyclictest1059564-21ntpq07:30:490
1052716993815,11cyclictest421-21dbus-daemon12:10:500
1052716993815,11cyclictest421-21dbus-daemon12:10:500
1052718993730,3cyclictest0-21swapper/211:10:512
1052718993729,5cyclictest1236984-21sendmail12:20:002
1052718993727,6cyclictest421-21dbus-daemon12:05:022
105271899372,28cyclictest1230379-21ssh12:10:502
105271899372,28cyclictest1230379-21ssh12:10:502
105271899371,23cyclictest1156298-21ssh10:35:552
1052717993730,4cyclictest0-21swapper/110:00:001
1052717993729,5cyclictest1238138-21missed_timers12:20:481
1052717993728,6cyclictest1101879-21timerwakeupswit09:26:071
1052717993727,6cyclictest1231046-21unixbench_singl12:11:041
1052717993727,6cyclictest1231046-21unixbench_singl12:11:041
1052717993726,8cyclictest1203910-21timerwakeupswit11:36:031
1052717993725,4cyclictest0-21swapper/107:25:521
1052716993731,4cyclictest1081326-21latency_hist08:45:020
1052716993726,7cyclictest0-21swapper/012:20:560
1052718993628,5cyclictest1057732-21fschecks_count07:25:432
1052718993624,8cyclictest421-21dbus-daemon09:50:222
105271899361,28cyclictest1199785-21ssh11:31:042
1052717993628,5cyclictest1111543-21sh09:40:011
105271799362,28cyclictest1112836-21ssh09:40:511
105271699366,13cyclictest1183843-21ntpq11:10:510
105271699364,26cyclictest1088745-21diskmemload11:50:550
105271699364,12cyclictest1091235-21ssh09:12:050
1052716993629,4cyclictest1211641-21unixbench_multi11:46:070
1052716993622,9cyclictest1086712-21ntpq09:00:560
1052716993622,11cyclictest1241817-21fschecks_time12:25:440
1052716993620,14cyclictest1078757-21fschecks_count08:35:430
1052716993611,6cyclictest1161307-21rm10:41:590
1052718993529,3cyclictest1190610-21kworker/u8:3-xprtiod11:40:002
1052718993527,6cyclictest0-21swapper/212:00:012
1052718993527,5cyclictest1089745-21if_wlan009:10:462
1052718993527,3cyclictest0-21swapper/209:26:082
1052718993525,7cyclictest1069784-21fschecks_count08:05:442
1052717993529,3cyclictest0-21swapper/109:11:051
1052717993528,4cyclictest0-21swapper/110:45:001
1052717993527,5cyclictest1192009-21sendmail_mailqu11:20:581
1052717993525,4cyclictest0-21swapper/111:31:081
1052717993520,3cyclictest0-21swapper/109:30:571
105271699359,4cyclictest0-21swapper/009:20:540
1052716993524,8cyclictest1063202-21cron07:45:000
1052716993523,9cyclictest1065238-21fschecks_time07:50:440
105271699352,28cyclictest1128563-21sh10:00:550
1052716993516,15cyclictest151ktimers/009:40:540
1052716993511,5cyclictest14-21ksoftirqd/011:27:170
1052716993510,6cyclictest14-21ksoftirqd/009:39:010
105271899344,13cyclictest1207205-21ssh11:40:532
1052718993427,3cyclictest0-21swapper/210:00:002
1052718993426,5cyclictest1075276-21sh08:25:012
105271899342,23cyclictest1242227-21ssh12:25:522
1052718993420,8cyclictest421-21dbus-daemon09:30:542
1052717993428,3cyclictest0-21swapper/110:06:001
1052717993426,5cyclictest1088680-21unixbench_singl09:06:021
1052717993425,6cyclictest1056-21mta-sts-daemon12:08:441
105271699349,7cyclictest1227732-21sh12:07:140
1052716993427,5cyclictest1116997-21mailstats09:46:010
1052716993425,7cyclictest261-21systemd-journal12:05:020
1052716993422,5cyclictest261-21systemd-journal11:35:000
1052716993418,6cyclictest1208883-21ssh11:43:110
1052716993416,12cyclictest1073211-21ntpq08:15:530
1052718993325,5cyclictest421-21dbus-daemon10:20:012
1052718993324,5cyclictest439-21systemd-logind07:50:012
1052718993324,5cyclictest261-21systemd-journal09:20:012
1052718993322,8cyclictest1067745-21cut08:00:022
1052717993326,4cyclictest1139675-21aten_r2power_cu10:15:401
1052717993324,6cyclictest624-21lldpd09:00:021
1052717993324,6cyclictest1176245-21mailstats11:01:041
1052717993317,6cyclictest171rcu_preempt11:10:451
105271699339,7cyclictest14-21ksoftirqd/008:55:490
1052716993325,5cyclictest1121335-21/usr/sbin/munin09:51:050
1052716993324,6cyclictest421-21dbus-daemon11:07:490
1052716993324,6cyclictest421-21dbus-daemon11:07:490
1052716993322,8cyclictest1156283-21ssh10:35:540
1052716993319,12cyclictest1142226-21ssh10:18:240
1052716993310,9cyclictest1076113-21ntpq08:25:490
105271899323,20cyclictest1168054-21ssh10:50:522
1052718993225,3cyclictest0-21swapper/210:25:022
1052718993222,5cyclictest0-21swapper/212:20:462
105271899321,26cyclictest1160106-21ssh10:40:482
105271899321,25cyclictest1136686-21ssh10:11:002
1052717993226,3cyclictest0-21swapper/107:40:001
1052717993225,3cyclictest0-21swapper/110:00:591
1052717993224,6cyclictest1-21systemd08:20:491
1052717993224,5cyclictest1067763-21sendmail08:00:011
1052717993224,3cyclictest0-21swapper/111:25:561
1052717993224,3cyclictest0-21swapper/109:00:541
1052717993223,6cyclictest242551-21cups-browsed11:45:501
1052717993221,3cyclictest171rcu_preempt10:35:561
1052717993218,4cyclictest171rcu_preempt07:10:511
105271699329,4cyclictest1246305-21ntp_states12:30:570
105271699328,7cyclictest1150242-21sh10:28:350
1052716993226,4cyclictest1164389-21sh10:46:000
1052716993226,3cyclictest0-21swapper/011:55:560
1052716993226,2cyclictest0-21swapper/010:55:540
1052716993219,8cyclictest1064070-21ntpq07:45:490
1052716993215,15cyclictest1095958-21ssh09:18:520
1052718993125,3cyclictest0-21swapper/207:25:012
1052718993123,5cyclictest1072245-21idleruntime-cro08:15:012
1052718993123,4cyclictest1055696-21sh07:20:012
1052718993121,6cyclictest242551-21cups-browsed09:05:432
1052718993116,11cyclictest421-21dbus-daemon12:05:522
105271799312,9cyclictest28-21ksoftirqd/110:45:531
1052717993125,3cyclictest0-21swapper/109:50:561
1052717993123,4cyclictest0-21swapper/108:30:011
1052717993121,3cyclictest171rcu_preempt07:20:511
1052717993120,8cyclictest1080599-21ntp_kernel_err08:40:531
1052717993115,5cyclictest1060396-21latency_hist07:35:021
1052717993115,5cyclictest1060396-21latency_hist07:35:021
1052717993115,3cyclictest171rcu_preempt08:45:511
1052716993125,4cyclictest1058724-21systemd-run07:30:010
1052716993122,6cyclictest242551-21cups-browsed10:30:490
1052716993122,6cyclictest242551-21cups-browsed10:30:490
1052716993119,7cyclictest1067100-21ntpq07:55:510
1052716993118,9cyclictest1074627-21ntpq08:20:490
1052716993118,8cyclictest1083697-21ntpq08:50:530
1052716993117,11cyclictest1136967-21timerwakeupswit10:11:050
1052716993116,11cyclictest1144343-21ntpq10:20:510
1052718993022,5cyclictest1087146-21unixbench_multi09:01:032
1052717993021,6cyclictest420-21avahi-daemon08:00:571
1052717993017,3cyclictest171rcu_preempt08:30:561
1052717993016,3cyclictest171rcu_preempt07:50:451
1052717993015,3cyclictest171rcu_preempt12:25:201
105271699306,7cyclictest1068520-21sed08:00:460
1052716993025,3cyclictest151ktimers/007:35:490
1052716993018,8cyclictest1053662-21ntpq07:10:540
1052716993010,5cyclictest14-21ksoftirqd/011:35:520
1052718992923,3cyclictest0-21swapper/211:25:012
1052718992920,6cyclictest1083556-21needreboot08:50:472
1052717992921,5cyclictest1064709-21cut07:50:011
1052717992919,3cyclictest171rcu_preempt08:35:511
1052717992916,3cyclictest171rcu_preempt09:18:451
1052716992916,8cyclictest1070107-21ntpq08:05:490
1052716992913,12cyclictest421-21dbus-daemon09:25:570
1052718992821,3cyclictest0-21swapper/208:30:012
1052717992820,3cyclictest171rcu_preempt12:30:461
1052717992816,3cyclictest171rcu_preempt08:50:551
1052717992816,2cyclictest0-21swapper/108:10:521
105271699286,6cyclictest1071681-21ntpq08:10:530
1052716992817,5cyclictest1077650-21ntpq08:30:520
1052716992815,8cyclictest1082170-21ntpq08:45:530
105271799277,10cyclictest171rcu_preempt07:40:511
105271699271,21cyclictest1055251-21ps07:15:570
1052718992617,5cyclictest1060720-21fschecks_count07:35:422
1052717992620,4cyclictest57-21kcompactd008:05:561
105271699269,4cyclictest14-21ksoftirqd/009:10:020
1052718992418,3cyclictest0-21swapper/208:40:012
105271799239,2cyclictest171rcu_preempt07:10:011
105271899224,14cyclictest261-21systemd-journal08:30:562
105271899224,12cyclictest428-21mta-sts-daemon08:00:502
105271899224,11cyclictest242551-21cups-browsed08:40:562
1052718992114,4cyclictest1054-21mta-sts-daemon07:50:042
1052718992014,3cyclictest427-21polkitd07:10:012
1052716992011,6cyclictest1052728-21munin-run07:10:010
105271999173,9cyclictest0-21swapper/309:30:543
105271999173,9cyclictest0-21swapper/309:15:493
105271999172,9cyclictest0-21swapper/309:40:513
105271999172,8cyclictest0-21swapper/312:30:553
105271999172,8cyclictest0-21swapper/312:05:573
105271999172,10cyclictest0-21swapper/311:15:533
105271999171,9cyclictest0-21swapper/310:30:533
105271999171,9cyclictest0-21swapper/310:30:533
105271999163,6cyclictest0-21swapper/311:10:503
105271999162,8cyclictest0-21swapper/311:55:553
105271999162,8cyclictest0-21swapper/311:50:513
105271999162,8cyclictest0-21swapper/310:45:473
105271999162,8cyclictest0-21swapper/309:50:573
105271999162,8cyclictest0-21swapper/309:25:563
105271999161,5cyclictest0-21swapper/309:05:493
105271999152,9cyclictest0-21swapper/310:25:513
105271999152,8cyclictest0-21swapper/311:45:543
105271999152,7cyclictest0-21swapper/311:20:523
105271999151,9cyclictest0-21swapper/312:10:413
105271999151,9cyclictest0-21swapper/312:10:413
105271999151,9cyclictest0-21swapper/310:50:533
105271999151,9cyclictest0-21swapper/310:40:433
105271999151,8cyclictest0-21swapper/311:35:513
105271999151,8cyclictest0-21swapper/309:45:543
105271999151,7cyclictest0-21swapper/307:58:503
105271999151,6cyclictest0-21swapper/307:35:473
105271999151,6cyclictest0-21swapper/307:20:553
105271999151,10cyclictest0-21swapper/309:35:513
105271999150,8cyclictest0-21swapper/309:20:523
105271999144,6cyclictest0-21swapper/310:00:003
105271999143,6cyclictest0-21swapper/312:35:483
105271999143,6cyclictest0-21swapper/311:25:493
105271999142,8cyclictest0-21swapper/312:20:433
105271999142,8cyclictest0-21swapper/312:20:003
105271999142,8cyclictest0-21swapper/310:35:503
105271999142,6cyclictest0-21swapper/308:30:563
105271999142,5cyclictest0-21swapper/308:45:513
105271999141,8cyclictest0-21swapper/311:30:583
105271999141,8cyclictest0-21swapper/311:05:473
105271999141,8cyclictest0-21swapper/311:05:473
105271999141,8cyclictest0-21swapper/310:55:533
105271999141,7cyclictest0-21swapper/311:00:393
105271999141,7cyclictest0-21swapper/308:40:563
105271999141,7cyclictest0-21swapper/308:00:503
105271999141,7cyclictest0-21swapper/307:30:553
105271999141,7cyclictest0-21swapper/307:30:553
105271999141,7cyclictest0-21swapper/307:25:483
105271999141,6cyclictest0-21swapper/307:40:533
105271999133,6cyclictest0-21swapper/312:25:523
105271999132,5cyclictest0-21swapper/309:10:513
105271999131,8cyclictest0-21swapper/310:10:423
105271999131,7cyclictest0-21swapper/311:40:523
105271999131,7cyclictest0-21swapper/307:45:513
105271999131,6cyclictest0-21swapper/310:05:423
105271999131,6cyclictest0-21swapper/308:55:523
105271999131,6cyclictest0-21swapper/308:20:523
105271999131,6cyclictest0-21swapper/308:05:513
105271999122,6cyclictest0-21swapper/312:00:433
105271999122,6cyclictest0-21swapper/310:20:403
105271999122,6cyclictest0-21swapper/310:15:203
105271999122,5cyclictest0-21swapper/308:10:523
105271999121,8cyclictest0-21swapper/310:00:423
105271999121,6cyclictest0-21swapper/309:00:543
105271999121,6cyclictest0-21swapper/308:15:483
105271999121,6cyclictest0-21swapper/307:50:503
105271999121,6cyclictest0-21swapper/307:15:493
105271999121,5cyclictest0-21swapper/308:35:433
105271999121,5cyclictest0-21swapper/307:10:443
105271999111,6cyclictest0-21swapper/308:50:483
105271999111,6cyclictest0-21swapper/308:25:493
10527199991,4cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional