You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-26 - 00:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Tue Nov 25, 2025 12:39:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1007326994637,6cyclictest186163-21cups-browsed10:19:210
1007328994539,3cyclictest0-21swapper/212:35:012
1007328994537,5cyclictest1025332-21systemd-run08:10:012
1007328994537,5cyclictest1025332-21systemd-run08:10:012
1007327994436,5cyclictest1040332-21systemd-run09:00:011
1007326994331,5cyclictest1123444-21munin-run11:10:010
1007326994326,6cyclictest421-21avahi-daemon10:05:020
1007328994229,9cyclictest266-21systemd-journal10:21:212
100732799424,32cyclictest1020206-21sshd07:54:121
1007327994234,4cyclictest0-21swapper/111:40:011
1007327994131,6cyclictest1043337-21systemd-run09:10:011
1007326994127,11cyclictest1076299-21ssh10:00:030
1007328994032,5cyclictest1089545-21sendmail10:20:012
1007327994032,5cyclictest1095854-21proc_pri10:29:201
1007327994031,5cyclictest1059846-21systemd-run09:35:011
1007326994033,4cyclictest1106924-21ssh10:45:010
1007326994028,10cyclictest1015336-21fschecks_count07:39:070
1007328993932,4cyclictest1113657-21latency_hist10:55:012
1007328993932,4cyclictest1010310-21munin-plugin-st07:20:012
1007328993931,5cyclictest1126938-21cron11:15:012
1007328993931,3cyclictest0-21swapper/210:59:162
1007327993931,5cyclictest1088533-21needreboot10:19:141
1007327993931,3cyclictest0-21swapper/108:00:011
1007327993832,3cyclictest1086029-21systemd-run10:15:011
1007327993829,6cyclictest186163-21cups-browsed09:39:141
1007327993828,7cyclictest1050180-21sendmail09:20:011
1007327993826,9cyclictest1161177-21sh12:05:011
100732799382,28cyclictest1072048-21ssh09:54:161
1007326993831,5cyclictest1150516-21wc11:49:370
1007326993831,5cyclictest1150516-21wc11:49:370
1007326993831,5cyclictest1022340-21systemd-run08:00:010
1007328993731,3cyclictest0-21swapper/211:34:242
1007328993730,4cyclictest1040340-21kworker/u8:12-rpciod09:00:012
1007328993729,5cyclictest1172324-21latency_hist12:20:022
1007328993729,5cyclictest1059941-21latency_hist09:35:022
1007328993728,6cyclictest422-21dbus-daemon09:40:012
1007328993728,6cyclictest186163-21cups-browsed11:55:172
1007327993730,3cyclictest0-21swapper/112:40:011
1007326993731,4cyclictest1082428-21tail10:09:270
1007326993728,6cyclictest453-21systemd-logind12:30:020
1007326993727,7cyclictest1029822-21munin-run08:25:000
1007328993628,5cyclictest955-21mta-sts-daemon12:14:232
1007328993628,5cyclictest453-21systemd-logind11:50:012
1007328993628,5cyclictest453-21systemd-logind11:50:012
1007328993628,5cyclictest1065636-21sshd09:44:202
1007328993628,5cyclictest1023825-21munin-plugin-st08:05:012
1007328993627,6cyclictest186163-21cups-browsed10:29:062
1007327993629,4cyclictest1038806-21munin-plugin-st08:55:011
1007327993629,4cyclictest0-21swapper/111:24:211
1007327993627,5cyclictest1130611-21latency_hist11:20:021
1007327993624,8cyclictest1164096-21switchtime12:09:231
1007326993631,2cyclictest0-21swapper/011:40:020
1007326993629,5cyclictest1086035-21systemd-run10:15:020
1007326993629,4cyclictest1133298-21timerandwakeup11:24:270
1007326993629,4cyclictest1119080-21sort11:04:160
1007326993628,5cyclictest1010352-21systemd-run07:20:020
1007328993527,5cyclictest1082713-21cron10:10:012
1007328993527,5cyclictest1056034-21timerwakeupswit09:29:262
1007327993527,5cyclictest1069737-21latency_hist09:50:031
1007327993526,6cyclictest1065928-21timerwakeupswit09:44:251
1007326993528,5cyclictest453-21systemd-logind09:10:020
1007326993528,5cyclictest421-21avahi-daemon10:37:020
1007326993523,9cyclictest1175590-21grep12:24:290
1007328993428,3cyclictest0-21swapper/209:49:162
1007328993426,5cyclictest422-21dbus-daemon10:05:022
1007328993426,5cyclictest1132382-21aten_r2power_vo11:24:062
1007328993422,9cyclictest422-21dbus-daemon12:06:572
1007327993427,4cyclictest1027350-21fschecks_time08:19:071
1007327993426,5cyclictest1092679-21unixbench_multi10:24:251
1007327993425,6cyclictest1109015-21fschecks_count10:49:071
1007327993425,5cyclictest1-21systemd09:30:021
100732799341,24cyclictest421-21avahi-daemon07:24:121
100732699345,7cyclictest266-21systemd-journal07:53:200
1007326993427,4cyclictest1146565-21sh11:44:100
1007326993427,4cyclictest1032821-21systemd-run08:35:020
1007326993427,4cyclictest1023891-21latency_hist08:05:020
1007326993426,6cyclictest186163-21cups-browsed07:49:070
1007326993426,5cyclictest422-21dbus-daemon11:16:170
1007326993425,7cyclictest1-21systemd09:25:010
1007326993425,6cyclictest1163615-21missed_timers12:09:090
1007328993327,3cyclictest0-21swapper/212:05:012
1007328993327,3cyclictest0-21swapper/211:44:152
1007328993326,4cyclictest1076137-21cron10:00:012
1007328993323,7cyclictest1071809-21latency09:54:112
1007328993323,7cyclictest1029147-21needreboot08:24:132
1007327993327,2cyclictest0-21swapper/111:15:021
1007327993326,4cyclictest955-21mta-sts-daemon12:24:201
1007327993326,3cyclictest0-21swapper/110:54:141
1007327993324,6cyclictest422-21dbus-daemon10:39:031
100732799331,23cyclictest1182141-21ssh12:34:141
1007326993327,3cyclictest957-21mta-sts-daemon12:33:300
1007328993226,3cyclictest0-21swapper/212:39:142
1007328993226,3cyclictest0-21swapper/212:24:212
1007328993226,3cyclictest0-21swapper/211:19:292
1007328993226,3cyclictest0-21swapper/209:19:272
1007328993225,4cyclictest1093170-21kworker/u8:9-rpciod11:10:012
1007328993224,5cyclictest186163-21cups-browsed08:13:112
1007328993224,5cyclictest1011739-21unixbench_multi07:24:242
1007327993225,4cyclictest1100049-21munin-plugin-st10:35:011
1007327993224,5cyclictest1079382-21systemd-run10:05:021
1007327993224,5cyclictest1017445-21systemctl07:44:231
1007327993224,5cyclictest1017445-21systemctl07:44:231
1007327993223,6cyclictest1120112-21cron11:05:011
1007326993227,3cyclictest959-21mta-sts-daemon11:33:420
1007326993226,4cyclictest1096603-21systemd-run10:30:010
1007326993226,4cyclictest1007325-21cyclictest09:29:200
1007326993225,5cyclictest186163-21cups-browsed09:41:260
1007326993225,4cyclictest1033352-21fschecks_time08:39:080
1007326993224,5cyclictest422-21dbus-daemon10:54:230
1007328993125,3cyclictest0-21swapper/209:14:132
1007328993124,4cyclictest1105354-21aten2.4-expect10:44:042
1007328993124,3cyclictest0-21swapper/210:39:232
1007328993123,5cyclictest1017823-21grep07:45:012
1007328993123,5cyclictest1017823-21grep07:45:012
1007328993122,6cyclictest1100036-21cron10:35:012
1007327993123,5cyclictest1167149-21fschecks_count12:14:081
1007327993123,5cyclictest1024232-21aten_r2power_vo08:09:051
1007327993123,5cyclictest1024232-21aten_r2power_vo08:09:051
1007327993122,5cyclictest1016357-21latency_hist07:40:021
100732799311,25cyclictest1075269-21ssh09:59:151
1007326993125,3cyclictest1137202-21kworker/u8:11-xprtiod12:04:240
1007326993124,3cyclictest0-21swapper/012:20:010
1007326993123,6cyclictest1047129-21cron09:15:010
1007326993123,5cyclictest453-21systemd-logind12:15:010
1007326993123,5cyclictest186163-21cups-browsed09:36:070
1007328993023,4cyclictest0-21swapper/208:35:012
1007328993020,7cyclictest1120111-21cron11:05:012
1007327993025,2cyclictest0-21swapper/112:30:011
1007327993023,4cyclictest959-21mta-sts-daemon11:44:011
1007327993023,4cyclictest1013332-21systemd-run07:30:011
1007327993022,5cyclictest1157487-21unixbench_singl11:59:291
1007327993022,4cyclictest0-21swapper/111:54:231
1007327993021,6cyclictest1034866-21fschecks_time08:44:091
1007327993021,5cyclictest0-21swapper/112:19:151
1007326993025,3cyclictest151ktimers/009:19:150
1007326993025,3cyclictest1060059-21kworker/u8:2-xprtiod09:54:260
1007326993024,3cyclictest0-21swapper/011:29:200
1007326993023,4cyclictest1073851-21kworker/u8:0+xprtiod10:35:010
1007326993023,4cyclictest1041617-21timerwakeupswit09:04:310
1007326993022,5cyclictest1125294-21/usr/sbin/munin11:14:060
1007326993021,6cyclictest0-21swapper/008:20:000
1007328992923,3cyclictest0-21swapper/212:30:012
1007328992923,3cyclictest0-21swapper/211:40:012
1007328992922,3cyclictest0-21swapper/209:25:012
1007328992921,5cyclictest1154024-21unixbench_multi11:54:322
1007328992921,5cyclictest1014805-21latency_hist07:35:012
1007328992920,6cyclictest1-21systemd07:40:012
1007327992922,4cyclictest1150657-21tail11:49:371
1007327992922,4cyclictest1150657-21tail11:49:371
1007326992925,2cyclictest0-21swapper/012:40:020
1007326992924,2cyclictest0-21swapper/008:29:070
1007326992923,4cyclictest1154283-21/usr/sbin/munin11:55:020
1007326992923,4cyclictest1008800-21cron07:15:010
1007326992922,5cyclictest1004662-21kworker/u8:7+nfsiod07:24:020
1007326992921,6cyclictest1012989-21switchtime07:29:240
1007328992823,2cyclictest0-21swapper/208:20:002
1007328992820,5cyclictest186161-21cupsd08:49:222
1007328992820,5cyclictest1034302-21munin-run08:40:012
1007328992819,6cyclictest421-21avahi-daemon10:45:172
1007327992823,2cyclictest0-21swapper/108:40:011
1007327992823,2cyclictest0-21swapper/108:05:011
1007327992822,3cyclictest1043332-21kworker/u8:3-xprtiod09:14:271
1007327992822,3cyclictest0-21swapper/108:35:021
100732799282,20cyclictest1139759-21ssh11:34:131
1007327992821,3cyclictest0-21swapper/109:04:261
1007327992820,5cyclictest1037201-21unixbench_multi08:49:251
1007326992822,4cyclictest1069226-21unixbench-2d09:49:260
1007326992822,3cyclictest1093024-21cron10:25:010
1007326992819,7cyclictest1116440-21timerandwakeup10:59:260
1007326992819,6cyclictest151ktimers/007:44:160
1007326992819,6cyclictest151ktimers/007:44:160
1007326992817,9cyclictest1155312-21sh11:57:050
1007328992721,3cyclictest0-21swapper/207:55:012
1007328992719,6cyclictest266-21systemd-journal07:29:202
1007328992713,10cyclictest422-21dbus-daemon08:27:182
1007327992722,2cyclictest0-21swapper/108:30:011
1007327992720,4cyclictest1028870-21fschecks_time08:24:091
1007327992720,4cyclictest0-21swapper/107:15:011
1007327992718,5cyclictest1116938-21idleruntime-cro11:00:011
1007326992718,6cyclictest0-21swapper/009:34:250
1007326992711,13cyclictest1026311-21ld08:14:200
1007328992618,5cyclictest1007331-21systemd-run07:10:012
1007327992620,3cyclictest0-21swapper/107:35:011
1007327992619,3cyclictest0-21swapper/110:44:071
1007327992618,5cyclictest1026792-21cron08:15:001
1007326992621,3cyclictest0-21swapper/010:46:250
1007328992518,4cyclictest959-21mta-sts-daemon11:26:562
1007328992518,4cyclictest956-21mta-sts-daemon07:49:012
1007328992517,5cyclictest1035830-21systemd-run08:45:012
1007328992517,5cyclictest1007852-21fschecks_count07:14:062
1007328992516,6cyclictest1084579-21ssh10:14:042
1007327992519,3cyclictest958533-21kworker/u8:6-xprtiod07:49:251
1007327992519,3cyclictest955-21mta-sts-daemon11:29:271
1007327992519,3cyclictest0-21swapper/111:09:131
1007327992519,3cyclictest0-21swapper/109:25:011
1007327992517,5cyclictest0-21swapper/107:10:021
1007328992416,5cyclictest1021303-21/usr/sbin/munin07:59:062
1007327992418,3cyclictest955-21mta-sts-daemon10:05:151
1007327992417,4cyclictest1010300-21cron07:20:011
100732699242,16cyclictest1014275-21ntpq07:34:170
1007326992419,3cyclictest0-21swapper/008:10:020
1007326992419,3cyclictest0-21swapper/008:10:020
1007326992418,3cyclictest0-21swapper/008:44:210
1007326992417,4cyclictest436-21gpm08:59:030
1007326992415,7cyclictest1036478-21kernelversion08:49:090
1007328992317,3cyclictest0-21swapper/209:04:262
1007328992316,4cyclictest1013331-21kworker/u8:14-xprtiod09:10:032
1007326992318,3cyclictest1027919-21kworker/u8:0-events_unbound08:54:030
1007328992214,5cyclictest1-21systemd08:51:452
1007326992218,2cyclictest0-21swapper/007:10:010
100732999204,7cyclictest0-21swapper/309:54:193
100732999203,10cyclictest0-21swapper/311:04:213
100732999192,9cyclictest0-21swapper/309:44:123
100732999192,10cyclictest0-21swapper/312:24:193
100732999192,10cyclictest0-21swapper/311:34:173
100732999183,9cyclictest0-21swapper/311:19:203
100732999183,9cyclictest0-21swapper/311:09:193
100732999183,8cyclictest0-21swapper/310:54:193
100732999183,10cyclictest0-21swapper/310:19:213
100732999182,9cyclictest0-21swapper/311:44:213
100732999181,9cyclictest0-21swapper/312:19:133
100732999181,9cyclictest0-21swapper/310:49:133
100732999174,7cyclictest0-21swapper/309:34:213
100732999173,8cyclictest0-21swapper/312:09:203
100732999173,8cyclictest0-21swapper/309:39:173
100732999172,9cyclictest0-21swapper/311:29:063
100732999172,9cyclictest0-21swapper/310:59:153
100732999172,10cyclictest0-21swapper/311:24:133
100732999171,9cyclictest0-21swapper/311:59:223
100732999171,10cyclictest0-21swapper/309:29:163
100732999162,8cyclictest0-21swapper/310:39:143
100732999162,8cyclictest0-21swapper/309:49:133
100732999162,7cyclictest0-21swapper/308:19:173
100732999161,7cyclictest0-21swapper/307:20:013
100732999161,6cyclictest0-21swapper/308:54:143
100732999161,10cyclictest0-21swapper/309:10:013
100732999156,6cyclictest0-21swapper/311:49:033
100732999156,6cyclictest0-21swapper/311:49:033
100732999152,8cyclictest0-21swapper/312:34:133
100732999152,8cyclictest0-21swapper/310:44:043
100732999152,8cyclictest0-21swapper/310:09:173
100732999152,8cyclictest0-21swapper/309:14:033
100732999152,7cyclictest0-21swapper/310:04:033
100732999151,9cyclictest0-21swapper/312:14:143
100732999151,9cyclictest0-21swapper/311:54:143
100732999151,9cyclictest0-21swapper/309:19:133
100732999151,7cyclictest0-21swapper/309:24:163
100732999151,10cyclictest0-21swapper/310:34:153
100732999144,6cyclictest0-21swapper/311:39:123
100732999143,7cyclictest0-21swapper/312:39:153
100732999141,9cyclictest0-21swapper/309:59:093
100732999141,8cyclictest0-21swapper/312:04:183
100732999141,8cyclictest0-21swapper/311:14:063
100732999141,7cyclictest0-21swapper/308:49:203
100732999141,7cyclictest0-21swapper/308:04:153
100732999141,7cyclictest0-21swapper/307:14:143
100732999141,6cyclictest0-21swapper/308:44:163
100732999138,3cyclictest0-21swapper/310:30:023
100732999132,7cyclictest0-21swapper/310:24:103
100732999131,7cyclictest0-21swapper/310:14:153
100732999131,7cyclictest0-21swapper/308:29:133
100732999131,7cyclictest0-21swapper/308:14:133
100732999131,7cyclictest0-21swapper/307:54:113
100732999131,6cyclictest0-21swapper/308:39:193
100732999131,6cyclictest0-21swapper/308:24:143
100732999125,4cyclictest0-21swapper/308:59:253
100732999122,7cyclictest0-21swapper/308:09:153
100732999122,7cyclictest0-21swapper/308:09:153
100732999122,6cyclictest0-21swapper/309:04:193
100732999121,7cyclictest0-21swapper/312:30:013
100732999121,7cyclictest0-21swapper/307:39:253
100732999121,6cyclictest0-21swapper/308:34:123
100732999121,6cyclictest0-21swapper/307:59:133
100732999121,6cyclictest0-21swapper/307:49:113
100732999116,3cyclictest0-21swapper/307:30:023
100732999111,6cyclictest0-21swapper/307:24:083
100732999106,3cyclictest0-21swapper/307:34:253
100732999101,6cyclictest0-21swapper/307:44:133
100732999101,6cyclictest0-21swapper/307:44:133
100732999101,6cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional