You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-10 - 03:33

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Tue Mar 10, 2026 00:44:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
4038973994834,10cyclictest391ktimers/322:20:123
4038960994740,4cyclictest4044631-21munin-plugin-st19:25:010
4038968994536,6cyclictest4058055-21grep20:00:252
4038968994536,6cyclictest4058055-21grep20:00:252
4038960994435,6cyclictest4084490-21sendmail21:20:000
4038968994328,13cyclictest4121968-21kworker/u8:0+events_unbound23:45:132
4038965994330,8cyclictest4144103-21grep00:10:251
4038965994236,4cyclictest4128943-21kworker/u8:3+events_unbound23:32:581
4038968994130,7cyclictest4104729-21grep22:15:262
4038965994134,5cyclictest4042587-21kworker/u8:3+events_unbound19:37:091
4038965994132,6cyclictest4093009-21apt-get21:45:001
4038965994132,5cyclictest4113685-21sh22:45:011
4038973994024,11cyclictest391ktimers/321:40:113
4038968994030,6cyclictest4086185-21sh21:25:002
4038965994028,8cyclictest4135432-21grep23:45:241
4038965994027,5cyclictest4121968-21kworker/u8:0+events_unbound23:58:011
4038965994026,10cyclictest231ktimers/123:05:121
4038965993933,4cyclictest4058204-21kworker/u8:1+events_unbound20:02:141
4038965993933,4cyclictest4058204-21kworker/u8:1+events_unbound20:02:141
4038965993932,5cyclictest4105395-21kworker/u8:2+events_unbound22:32:521
4038960993931,5cyclictest4153101-21cron00:39:590
4038965993826,7cyclictest0-21swapper/122:10:261
4038965993826,7cyclictest0-21swapper/120:35:011
4038960993830,4cyclictest0-21swapper/020:50:000
4038960993827,7cyclictest4094468-21sed21:45:290
4038965993725,9cyclictest4056320-21grep19:55:261
4038965993725,8cyclictest4108146-21grep22:25:251
4038960993730,3cyclictest0-21swapper/021:25:010
4038973993626,7cyclictest4038951-21cyclictest00:15:013
4038973993624,9cyclictest438-21cron00:10:013
4038968993627,4cyclictest0-21swapper/219:30:162
4038965993628,4cyclictest0-21swapper/100:25:241
4038965993628,4cyclictest0-21swapper/100:25:241
4038965993627,4cyclictest0-21swapper/100:20:001
4038965993625,7cyclictest4126847-21grep23:20:251
403896599361,10cyclictest24-21ksoftirqd/123:40:121
4038973993527,4cyclictest0-21swapper/322:05:163
4038973993525,7cyclictest4128572-21grep23:25:243
4038973993525,6cyclictest4094915-21cron21:50:003
4038973993524,8cyclictest391ktimers/319:15:123
4038968993525,7cyclictest4133748-21grep23:40:252
4038965993528,5cyclictest4121968-21kworker/u8:0+events_unbound23:37:571
4038965993527,4cyclictest0-21swapper/100:20:241
4038965993527,4cyclictest0-21swapper/100:20:241
4038960993528,3cyclictest4108570-21kthreadd22:30:010
4038973993426,4cyclictest0-21swapper/300:35:143
4038973993423,7cyclictest0-21swapper/320:05:253
4038973993423,7cyclictest0-21swapper/320:05:253
4038968993424,7cyclictest4054586-21grep19:50:272
4038968993424,7cyclictest4054586-21grep19:50:272
4038968993424,6cyclictest0-21swapper/219:45:172
4038968993424,6cyclictest0-21swapper/219:45:162
4038965993426,5cyclictest4077428-21cron21:00:011
4038965993426,5cyclictest4042896-21cron19:20:011
4038965993425,5cyclictest4125610-21kthreadd23:20:001
4038965993425,5cyclictest0-21swapper/119:32:071
4038965993424,7cyclictest4051229-21grep19:40:251
4038965993423,7cyclictest4066542-21grep20:25:271
4038965993422,8cyclictest4071632-21grep20:40:251
4038960993424,6cyclictest0-21swapper/021:40:240
4038973993325,5cyclictest4105395-21kworker/u8:2+events_unbound22:32:503
4038973993325,5cyclictest0-21swapper/319:40:013
4038973993323,7cyclictest0-21swapper/322:15:253
4038968993325,5cyclictest0-21swapper/200:00:002
4038968993321,8cyclictest4099627-21grep22:00:252
4038965993321,8cyclictest4044140-21unixbench_multi19:20:241
4038965993312,12cyclictest24-21ksoftirqd/100:05:251
4038960993325,4cyclictest0-21swapper/021:52:310
4038960993325,4cyclictest0-21swapper/019:45:260
4038960993325,4cyclictest0-21swapper/019:45:260
4038968993226,3cyclictest4142887-21kthreadd00:10:002
4038968993225,3cyclictest0-21swapper/221:45:292
4038965993224,4cyclictest0-21swapper/122:35:161
4038965993221,8cyclictest4090011-21fschecks_time21:35:171
4038965993218,9cyclictest4118314-21grep22:55:251
4038960993225,4cyclictest4114922-21unixbench_multi22:45:270
4038960993225,3cyclictest0-21swapper/019:45:000
4038960993225,3cyclictest0-21swapper/019:40:010
4038960993224,4cyclictest0-21swapper/021:10:260
4038973993124,4cyclictest4058057-21unixbench_singl20:00:243
4038973993124,4cyclictest4058057-21unixbench_singl20:00:243
4038973993124,4cyclictest0-21swapper/321:10:013
4038973993123,4cyclictest0-21swapper/322:30:013
4038973993122,4cyclictest0-21swapper/321:25:013
4038973993120,7cyclictest4066534-21grep20:25:273
4038968993125,3cyclictest0-21swapper/220:20:002
4038968993121,6cyclictest0-21swapper/223:25:242
403896599319,12cyclictest1-21systemd20:07:131
403896599319,12cyclictest1-21systemd20:07:131
4038965993121,6cyclictest4052898-21grep19:45:261
4038965993121,6cyclictest4052898-21grep19:45:261
4038960993124,3cyclictest0-21swapper/020:35:270
4038960993121,7cyclictest4123451-21grep23:10:260
4038960993119,7cyclictest0-21swapper/023:35:230
4038973993023,4cyclictest0-21swapper/319:25:003
4038973993019,7cyclictest0-21swapper/319:50:273
4038973993019,7cyclictest0-21swapper/319:50:273
4038968993022,5cyclictest0-21swapper/219:40:012
4038968993021,6cyclictest4068290-21unixbench_singl20:30:242
4038968993020,7cyclictest4109866-21grep22:30:262
403896599307,13cyclictest24-21ksoftirqd/123:00:171
403896599304,4cyclictest131rcu_preempt23:10:141
4038965993024,4cyclictest4042587-21kworker/u8:3+events_unbound19:27:091
4038965993022,4cyclictest0-21swapper/121:00:131
4038965993020,6cyclictest4096619-21sh21:55:011
4038965993019,6cyclictest4085741-21tail21:20:241
4038960993022,5cyclictest0-21swapper/020:40:260
4038960993022,4cyclictest4118784-21sh23:00:010
4038960993022,4cyclictest0-21swapper/022:02:320
4038960993018,7cyclictest0-21swapper/019:15:250
4038973992922,5cyclictest4070273-21kworker/u8:3+events_unbound21:37:283
4038973992921,4cyclictest0-21swapper/321:10:273
4038973992921,4cyclictest0-21swapper/300:30:003
4038973992921,4cyclictest0-21swapper/300:30:003
4038968992921,4cyclictest4044400-21kworker/u8:2-ext4-rsv-conversion20:25:012
4038968992919,7cyclictest4149132-21timerandwakeup00:25:232
4038968992919,7cyclictest4149132-21timerandwakeup00:25:232
4038965992923,4cyclictest4070273-21kworker/u8:3+events_unbound21:57:321
4038965992920,5cyclictest4128546-21grep23:25:241
4038965992919,5cyclictest0-21swapper/122:15:251
4038965992919,5cyclictest0-21swapper/121:25:251
4038965992918,5cyclictest131rcu_preempt20:10:181
4038965992910,6cyclictest24-21ksoftirqd/100:30:271
4038965992910,6cyclictest24-21ksoftirqd/100:30:261
4038965992910,11cyclictest0-21swapper/122:47:091
4038960992922,3cyclictest0-21swapper/020:19:590
4038960992922,3cyclictest0-21swapper/019:50:270
4038960992922,3cyclictest0-21swapper/019:50:270
4038973992822,3cyclictest0-21swapper/321:00:233
4038973992822,3cyclictest0-21swapper/300:30:243
4038973992822,3cyclictest0-21swapper/300:30:243
4038973992819,6cyclictest0-21swapper/323:00:013
4038973992819,5cyclictest4040174-21grep19:10:283
4038968992820,4cyclictest0-21swapper/222:45:012
4038968992820,4cyclictest0-21swapper/220:50:262
4038968992816,9cyclictest0-21swapper/221:00:002
403896599287,11cyclictest0-21swapper/121:18:211
403896599286,13cyclictest24-21ksoftirqd/121:05:261
4038965992822,4cyclictest4084278-21kworker/u8:0+events_unbound21:32:001
4038965992821,5cyclictest4044400-21kworker/u8:2+events_unbound20:23:081
4038965992811,10cyclictest131rcu_preempt19:10:171
4038960992821,3cyclictest0-21swapper/022:15:250
4038960992820,6cyclictest4098038-21kworker/u8:0+events_unbound21:56:420
4038960992817,8cyclictest121ktimers/000:25:110
4038960992817,8cyclictest121ktimers/000:25:110
4038960992817,6cyclictest0-21swapper/023:35:000
4038960992816,8cyclictest204-21dbus-daemon00:08:020
4038973992719,5cyclictest4089587-21sh21:35:013
4038973992719,5cyclictest0-21swapper/323:45:003
4038973992719,5cyclictest0-21swapper/320:15:293
4038973992719,4cyclictest0-21swapper/320:50:173
4038973992717,7cyclictest4072128-21idleruntime-cro20:45:013
403896899277,4cyclictest4042011-21open_files19:15:232
4038968992721,3cyclictest0-21swapper/219:10:232
4038968992720,4cyclictest0-21swapper/220:35:272
4038968992716,5cyclictest4132123-21kworker/u8:1+events_unbound00:20:072
4038968992716,5cyclictest4132123-21kworker/u8:1+events_unbound00:20:072
403896599277,11cyclictest24-21ksoftirqd/123:54:591
4038965992719,4cyclictest0-21swapper/120:50:271
403896599271,12cyclictest0-21swapper/119:50:141
403896599271,12cyclictest0-21swapper/119:50:141
4038965992710,10cyclictest0-21swapper/120:18:071
4038960992721,3cyclictest13550irq/42-30be0000.ethernet19:55:250
4038960992719,4cyclictest0-21swapper/021:07:230
4038960992718,6cyclictest4147544-21grep00:20:240
4038960992718,6cyclictest4147544-21grep00:20:230
4038960992718,6cyclictest4124290-21tune2fs23:15:150
4038973992619,4cyclictest0-21swapper/319:25:163
4038973992619,3cyclictest0-21swapper/300:00:143
4038973992618,4cyclictest0-21swapper/323:20:263
4038973992618,4cyclictest0-21swapper/320:20:253
4038968992620,4cyclictest4105395-21kworker/u8:2+events_unbound23:52:592
4038968992619,4cyclictest4095369-21fschecks_time21:50:162
4038968992619,4cyclictest0-21swapper/221:35:262
4038968992619,4cyclictest0-21swapper/220:45:022
4038968992619,3cyclictest0-21swapper/200:15:162
4038968992618,5cyclictest0-21swapper/221:45:002
4038968992618,4cyclictest0-21swapper/222:55:262
403896599269,10cyclictest24-21ksoftirqd/122:20:231
403896599269,10cyclictest0-21swapper/120:36:121
4038965992616,7cyclictest4099590-21grep22:00:241
403896099269,3cyclictest131rcu_preempt22:10:110
4038960992618,4cyclictest0-21swapper/022:55:010
4038960992618,4cyclictest0-21swapper/021:35:160
4038960992616,6cyclictest0-21swapper/023:50:010
4038960992615,8cyclictest4127327-21auditctl23:25:000
4038960992615,6cyclictest0-21swapper/022:30:260
4038960992614,9cyclictest121ktimers/000:00:110
4038973992518,4cyclictest4137761-21cron23:55:003
4038973992517,5cyclictest4103445-21auditctl22:15:003
4038973992517,4cyclictest0-21swapper/323:05:013
403897399251,21cyclictest4067226-21apt-get20:30:123
403896899256,5cyclictest131rcu_preempt20:50:012
4038968992518,3cyclictest0-21swapper/219:40:252
4038968992516,6cyclictest0-21swapper/220:25:262
4038968992515,7cyclictest1-21systemd23:07:542
4038965992516,4cyclictest0-21swapper/100:00:151
403896099255,5cyclictest131rcu_preempt23:25:110
403896099253,4cyclictest4111066-21ntp_states22:35:220
403896099252,4cyclictest4061412-21sed20:10:250
4038960992519,3cyclictest4024663-21kworker/u8:1-ext4-rsv-conversion19:30:010
4038960992518,4cyclictest4120037-21grep23:00:250
4038960992518,4cyclictest13550irq/42-30be0000.ethernet20:55:010
4038960992518,3cyclictest0-21swapper/019:30:160
4038960992515,6cyclictest4121745-21sed23:05:260
403896099251,20cyclictest0-21swapper/020:28:500
4038973992418,4cyclictest4076732-21switchtime20:55:243
4038973992417,3cyclictest0-21swapper/323:17:553
4038973992416,5cyclictest4052425-21ntpq19:45:213
4038973992416,5cyclictest4052425-21ntpq19:45:213
4038973992416,4cyclictest0-21swapper/323:30:243
4038973992414,6cyclictest0-21swapper/322:00:253
4038973992413,8cyclictest4056257-21sed19:55:263
4038968992418,3cyclictest0-21swapper/222:05:252
4038968992418,3cyclictest0-21swapper/221:10:262
4038968992414,6cyclictest0-21swapper/220:05:252
4038968992414,6cyclictest0-21swapper/220:05:242
403896599247,6cyclictest24-21ksoftirqd/121:10:211
4038965992418,4cyclictest4141008-21kworker/u8:3+events_unbound00:35:531
4038965992417,5cyclictest4105395-21kworker/u8:2+events_unbound22:52:251
4038965992417,3cyclictest0-21swapper/122:05:231
4038965992415,7cyclictest4089266-21kworker/u8:2+events_unbound21:45:241
403896099242,4cyclictest0-21swapper/000:10:160
4038960992417,3cyclictest0-21swapper/023:57:030
4038960992417,3cyclictest0-21swapper/022:09:250
4038960992417,3cyclictest0-21swapper/020:32:070
4038960992416,5cyclictest4077325-21taskset20:58:540
4038960992416,5cyclictest121ktimers/023:40:230
4038960992415,5cyclictest0-21swapper/021:00:050
4038960992413,7cyclictest0-21swapper/020:05:000
4038960992413,7cyclictest0-21swapper/020:05:000
403896099241,19cyclictest0-21swapper/023:53:390
403896099241,19cyclictest0-21swapper/020:23:320
4038973992317,3cyclictest0-21swapper/323:50:013
4038973992317,3cyclictest0-21swapper/323:35:093
4038973992317,3cyclictest0-21swapper/321:55:253
4038973992316,5cyclictest4111601-21kworker/u8:0+events_unbound22:53:243
4038973992316,5cyclictest391ktimers/320:10:173
4038973992315,5cyclictest4132123-21kworker/u8:1+events_unbound00:23:053
4038973992315,5cyclictest4132123-21kworker/u8:1+events_unbound00:23:043
4038973992315,5cyclictest0-21swapper/321:50:233
4038968992317,3cyclictest0-21swapper/223:15:182
4038968992316,4cyclictest4126873-21grep23:20:262
4038965992317,4cyclictest4058204-21kworker/u8:1+events_unbound20:47:381
4038960992316,5cyclictest4141008-21kworker/u8:3+events_unbound00:15:160
4038960992316,3cyclictest0-21swapper/021:28:520
403896099230,2cyclictest0-21swapper/022:40:100
4038973992215,5cyclictest391ktimers/323:10:263
4038973992211,9cyclictest4120873-21fschecks_count23:05:153
4038973992211,8cyclictest4145765-21wc00:15:283
4038968992216,4cyclictest0-21swapper/200:10:252
4038968992215,5cyclictest0-21swapper/222:49:232
4038968992215,3cyclictest0-21swapper/223:30:252
4038968992213,5cyclictest0-21swapper/220:10:262
4038960992215,3cyclictest0-21swapper/020:07:130
4038960992215,3cyclictest0-21swapper/020:07:130
403896099221,4cyclictest131rcu_preempt22:20:120
4038960992214,5cyclictest0-21swapper/000:30:230
4038960992214,5cyclictest0-21swapper/000:30:230
403897399212,15cyclictest4074033-21grep20:50:003
4038973992116,3cyclictest0-21swapper/322:45:183
4038973992116,3cyclictest0-21swapper/321:25:183
4038973992115,3cyclictest0-21swapper/322:40:213
4038973992115,3cyclictest0-21swapper/321:15:163
4038973992114,5cyclictest4042587-21kworker/u8:3+events_unbound19:42:093
403896899215,3cyclictest131rcu_preempt21:00:232
4038968992115,4cyclictest4132123-21kworker/u8:1+events_unbound00:33:292
4038968992115,4cyclictest4132123-21kworker/u8:1+events_unbound00:33:292
4038968992115,3cyclictest0-21swapper/223:15:002
4038968992115,3cyclictest0-21swapper/222:20:222
4038968992115,3cyclictest0-21swapper/219:20:252
4038968992113,5cyclictest0-21swapper/222:35:222
4038968992112,6cyclictest4087487-21grep21:25:252
403896099210,19cyclictest0-21swapper/021:30:530
4038973992014,3cyclictest0-21swapper/322:35:173
4038973992014,3cyclictest0-21swapper/319:30:113
4038973992011,6cyclictest0-21swapper/300:00:003
4038968992014,3cyclictest0-21swapper/221:15:252
4038968992012,4cyclictest0-21swapper/222:30:012
4038968992010,7cyclictest4055499-21cut19:55:172
403896899197,3cyclictest0-21swapper/200:35:092
4038968991913,4cyclictest438-21cron23:05:012
4038968991913,3cyclictest4097052-21fschecks_time21:55:152
4038968991913,3cyclictest0-21swapper/222:50:242
4038968991911,5cyclictest4132424-21sh23:39:592
4038973991812,3cyclictest4070396-21latency_hist20:40:013
403896899188,7cyclictest4079960-21cut21:05:202
4038968991813,3cyclictest4045061-21/usr/sbin/munin19:25:172
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional