You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-04 - 01:05

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Wed Jun 03, 2026 12:44:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
863485994936,9cyclictest121ktimers/010:05:140
863501994840,6cyclictest975626-21kworker/u8:1+events_unbound12:35:173
863501994840,6cyclictest975626-21kworker/u8:1+events_unbound12:35:173
863501994837,5cyclictest953325-21kworker/u8:0+events_unbound11:40:083
863496994735,9cyclictest438-21cron09:10:002
863485994431,9cyclictest121ktimers/011:30:110
863501994337,4cyclictest953325-21kworker/u8:0+events_unbound11:30:043
863501994337,4cyclictest948000-21kworker/u8:2+events_unbound11:15:033
863501994337,4cyclictest948000-21kworker/u8:2+events_unbound11:15:033
863501994335,5cyclictest972325-21apt12:25:003
863501994235,5cyclictest902979-21kworker/u8:0+events_unbound09:19:453
863485994236,3cyclictest934577-21cron10:35:010
863501994034,4cyclictest910277-21kworker/u8:1+events_unbound09:24:473
863501994032,4cyclictest893439-21munin-plugin-st08:35:013
863501994029,8cyclictest391ktimers/307:40:143
86350199399,4cyclictest9267082wc10:10:233
863501993932,4cyclictest943110-21cron11:00:003
863501993928,8cyclictest391ktimers/312:00:133
863496993930,5cyclictest0-21swapper/210:19:532
863491993931,5cyclictest867626-21latency_hist07:20:021
863485993932,4cyclictest865411-21latency_hist07:15:010
863485993929,7cyclictest121ktimers/009:00:120
863501993832,4cyclictest877841-21kworker/u8:0+events_unbound08:09:333
863501993829,4cyclictest0-21swapper/311:50:153
863501993828,6cyclictest882574-21unixbench_singl08:00:263
863501993819,5cyclictest131rcu_preempt12:10:223
863501993813,7cyclictest131rcu_preempt08:35:133
863501993813,7cyclictest131rcu_preempt08:35:133
863491993831,4cyclictest888097-21apt08:20:021
863491993829,5cyclictest0-21swapper/108:45:181
863485993830,4cyclictest0-21swapper/012:25:010
863485993828,6cyclictest0-21swapper/012:05:240
863501993730,5cyclictest898773-21kworker/u8:0+events_unbound08:54:403
863501993728,5cyclictest912212-21munin-plugin-st09:30:003
863496993710,6cyclictest32-21ksoftirqd/211:40:242
863485993726,6cyclictest0-21swapper/009:15:000
863485993725,7cyclictest0-21swapper/012:00:240
863501993629,4cyclictest865414-21sh07:15:013
863501993627,4cyclictest0-21swapper/308:20:173
863501993624,5cyclictest131rcu_preempt11:20:153
863496993628,4cyclictest0-21swapper/209:35:252
863496993628,4cyclictest0-21swapper/209:35:252
863496993627,6cyclictest0-21swapper/210:30:252
863485993628,4cyclictest956984-21sendmail11:40:000
863485993625,6cyclictest0-21swapper/007:55:270
863485993624,9cyclictest121ktimers/010:10:120
863501993529,4cyclictest939534-21kworker/u8:0+events_unbound10:49:583
863501993524,5cyclictest131rcu_preempt08:10:233
863501993522,5cyclictest929093-21kworker/u8:1+events_unbound11:13:113
863501993516,5cyclictest131rcu_preempt12:00:023
863496993528,4cyclictest0-21swapper/210:35:242
863496993527,4cyclictest874481-21seq07:40:012
863496993524,8cyclictest865591-21latency_hist07:15:022
863491993528,4cyclictest0-21swapper/108:20:281
863491993527,4cyclictest0-21swapper/110:40:001
863485993527,4cyclictest0-21swapper/008:30:010
863485993527,4cyclictest0-21swapper/008:24:350
863485993526,5cyclictest0-21swapper/010:40:010
863485993525,6cyclictest0-21swapper/008:10:010
863485993525,5cyclictest0-21swapper/009:55:000
863485993524,8cyclictest913432-21grep09:30:250
863485993524,7cyclictest875756-21grep07:40:260
863485993522,7cyclictest0-21swapper/010:05:000
863501993428,4cyclictest900721-21kworker/u8:1+events_unbound08:59:413
863501993426,6cyclictest929093-21kworker/u8:1+events_unbound10:41:413
863501993423,7cyclictest0-21swapper/311:35:243
863501993416,11cyclictest131rcu_preempt08:40:183
863501993415,11cyclictest131rcu_preempt12:30:163
863501993414,12cyclictest131rcu_preempt07:50:243
863485993423,6cyclictest0-21swapper/011:55:260
863501993318,3cyclictest131rcu_preempt07:35:263
863501993316,5cyclictest131rcu_preempt10:00:253
863501993313,12cyclictest131rcu_preempt09:50:193
863501993311,14cyclictest40-21ksoftirqd/309:30:183
86349699337,6cyclictest32-21ksoftirqd/208:55:202
863496993311,13cyclictest32-21ksoftirqd/207:29:222
863496993310,4cyclictest32-21ksoftirqd/210:25:262
863491993326,4cyclictest0-21swapper/109:00:001
863491993323,6cyclictest871036-21cron07:30:011
863491993320,9cyclictest864834-21grep07:10:261
863485993321,7cyclictest0-21swapper/011:15:240
863485993321,7cyclictest0-21swapper/011:15:240
86350199329,4cyclictest131rcu_preempt08:00:003
863501993222,7cyclictest0-21swapper/307:15:043
863501993220,5cyclictest131rcu_preempt10:05:263
863501993216,5cyclictest131rcu_preempt08:25:023
863501993214,2cyclictest0-21swapper/310:38:223
863501993214,10cyclictest963555-21kworker/u8:0-events_freezable_power_12:06:513
863501993214,10cyclictest131rcu_preempt12:15:233
86349699324,9cyclictest927598-21sed10:15:002
863496993224,4cyclictest0-21swapper/209:20:002
86349699322,11cyclictest972893-21interrupts12:25:182
863496993215,4cyclictest0-21swapper/210:20:162
863496993210,5cyclictest32-21ksoftirqd/208:05:192
863491993226,4cyclictest932846-21latency_hist10:30:021
863491993224,4cyclictest0-21swapper/107:35:001
863491993223,4cyclictest0-21swapper/110:25:011
863491993221,7cyclictest942677-21grep10:55:251
863485993223,6cyclictest0-21swapper/011:15:000
863485993222,6cyclictest0-21swapper/009:15:280
863485993219,10cyclictest121ktimers/007:15:130
86350199318,13cyclictest40-21ksoftirqd/310:30:183
86350199318,11cyclictest40-21ksoftirqd/310:25:263
86350199317,13cyclictest40-21ksoftirqd/311:00:183
863501993124,4cyclictest930972-21auditctl10:25:003
863501993123,6cyclictest863347-21kworker/u8:1+events_unbound07:26:423
863501993122,4cyclictest0-21swapper/311:25:183
863501993114,5cyclictest131rcu_preempt09:35:233
863501993114,5cyclictest131rcu_preempt09:35:233
863501993114,5cyclictest131rcu_preempt08:45:263
863501993111,6cyclictest0-21swapper/311:45:233
86349699314,9cyclictest940663-21mailstats10:50:222
863496993122,6cyclictest872306-21grep07:30:262
863496993110,5cyclictest32-21ksoftirqd/211:15:242
863496993110,5cyclictest32-21ksoftirqd/211:15:232
863491993119,7cyclictest0-21swapper/110:30:251
863485993124,4cyclictest919034-21munin-plugin-st09:50:000
863485993124,3cyclictest0-21swapper/008:00:250
863501993012,11cyclictest0-21swapper/307:24:293
863501993011,11cyclictest40-21ksoftirqd/309:40:173
863501993011,11cyclictest40-21ksoftirqd/309:40:163
863501993010,12cyclictest40-21ksoftirqd/309:05:163
863501993010,11cyclictest40-21ksoftirqd/310:15:183
86349699307,5cyclictest32-21ksoftirqd/210:45:012
863496993023,3cyclictest0-21swapper/210:00:002
863496993022,5cyclictest944590-21unixbench_multi11:00:252
863496993020,6cyclictest0-21swapper/209:00:262
863496993010,6cyclictest32-21ksoftirqd/209:25:162
863491993023,4cyclictest0-21swapper/108:50:271
863491993022,5cyclictest970606-21munin-plugin-st12:20:011
863491993022,4cyclictest0-21swapper/107:50:171
863491993019,7cyclictest0-21swapper/108:40:271
863485993023,3cyclictest0-21swapper/010:55:240
863485993021,5cyclictest0-21swapper/010:15:260
863485993021,4cyclictest0-21swapper/008:34:360
863485993020,6cyclictest0-21swapper/008:40:260
863501992916,8cyclictest391ktimers/309:49:483
863501992913,6cyclictest131rcu_preempt08:15:123
863501992913,5cyclictest131rcu_preempt10:55:013
863501992912,3cyclictest131rcu_preempt11:07:143
863501992912,11cyclictest40-21ksoftirqd/312:30:003
86349699299,5cyclictest32-21ksoftirqd/208:50:162
86349699299,11cyclictest32-21ksoftirqd/209:10:112
86349699297,7cyclictest0-21swapper/208:45:002
863496992923,3cyclictest0-21swapper/211:20:242
863496992922,4cyclictest0-21swapper/211:50:242
863496992921,4cyclictest0-21swapper/212:40:012
863496992921,4cyclictest0-21swapper/212:40:012
863496992919,7cyclictest311ktimers/211:10:132
863496992910,4cyclictest32-21ksoftirqd/209:30:122
863491992922,4cyclictest0-21swapper/107:40:171
863485992921,5cyclictest895126-21cron08:40:000
863485992921,5cyclictest895126-21cron08:40:000
863485992921,5cyclictest0-21swapper/011:30:000
863485992921,4cyclictest0-21swapper/009:55:250
863485992920,6cyclictest0-21swapper/007:55:010
863485992920,5cyclictest0-21swapper/011:45:240
863485992919,6cyclictest0-21swapper/012:35:150
863485992919,6cyclictest0-21swapper/012:35:150
863485992919,6cyclictest0-21swapper/010:45:150
863501992822,4cyclictest870796-21kworker/u8:0+events_unbound07:34:273
863501992818,6cyclictest0-21swapper/310:00:003
86349699288,6cyclictest0-21swapper/212:10:202
86349699286,5cyclictest301rcuc/207:55:152
86349699285,6cyclictest878200-21cstates07:50:142
863496992819,4cyclictest0-21swapper/212:00:002
863496992817,9cyclictest438-21cron08:30:002
863496992817,4cyclictest131rcu_preempt08:33:122
863496992814,11cyclictest886624-21/usr/sbin/munin08:15:262
863491992820,4cyclictest0-21swapper/109:24:441
863491992819,6cyclictest0-21swapper/110:00:271
863485992822,3cyclictest0-21swapper/009:30:000
863485992821,3cyclictest0-21swapper/010:50:240
863485992820,6cyclictest915607-21sendmail09:40:000
863485992820,6cyclictest915607-21sendmail09:40:000
863485992820,5cyclictest0-21swapper/007:25:010
863485992818,6cyclictest0-21swapper/010:25:260
863485992818,6cyclictest0-21swapper/008:55:250
86350199277,4cyclictest0-21swapper/307:45:183
86350199277,4cyclictest0-21swapper/307:45:183
86350199277,12cyclictest40-21ksoftirqd/309:10:153
86350199271,9cyclictest902321-21df_inode09:00:153
86349699279,5cyclictest32-21ksoftirqd/210:55:202
86349699274,8cyclictest922677-21/usr/sbin/munin10:00:212
863496992720,4cyclictest0-21swapper/212:05:252
863496992720,4cyclictest0-21swapper/211:25:172
863496992719,5cyclictest0-21swapper/208:10:262
863496992718,3cyclictest131rcu_preempt09:23:382
863496992718,3cyclictest131rcu_preempt07:24:242
863496992716,7cyclictest874696-21munin-node07:40:132
863496992716,7cyclictest0-21swapper/212:30:252
863491992717,8cyclictest231ktimers/107:35:131
863485992717,6cyclictest0-21swapper/009:25:010
86349699267,5cyclictest0-21swapper/210:09:252
86349699267,5cyclictest0-21swapper/207:45:122
86349699267,5cyclictest0-21swapper/207:45:122
863496992614,9cyclictest897082-21munin-node08:45:122
863496992614,6cyclictest131rcu_preempt08:20:552
863496992613,10cyclictest959369-21/usr/sbin/munin11:45:192
863491992620,3cyclictest0-21swapper/108:35:121
863491992620,3cyclictest0-21swapper/108:35:121
863491992618,5cyclictest0-21swapper/110:40:201
863491992618,4cyclictest0-21swapper/111:45:161
863491992618,4cyclictest0-21swapper/111:20:011
863491992618,4cyclictest0-21swapper/111:20:001
863491992618,4cyclictest0-21swapper/109:04:401
863491992617,6cyclictest913355-21sort09:30:251
863485992620,3cyclictest0-21swapper/008:10:250
863485992618,5cyclictest0-21swapper/007:30:170
863485992617,5cyclictest0-21swapper/010:40:240
86348599261,6cyclictest916145-21if_eth009:40:180
86348599261,6cyclictest916145-21if_eth009:40:180
86349699259,9cyclictest131rcu_preempt11:09:482
863496992519,4cyclictest969132-21apt-get12:15:112
863496992519,3cyclictest0-21swapper/212:05:002
863496992516,6cyclictest0-21swapper/207:15:242
863496992513,9cyclictest938363-21/usr/sbin/munin10:45:152
863496992511,11cyclictest956098-21/usr/sbin/munin11:35:222
863491992518,4cyclictest0-21swapper/110:10:251
863491992517,5cyclictest0-21swapper/107:20:261
863491992515,7cyclictest1-21systemd11:10:011
863491992513,8cyclictest1-21systemd11:05:001
863485992519,4cyclictest873192-21fschecks_time07:35:170
863485992519,3cyclictest905381-21kthreadd09:10:000
863485992517,5cyclictest0-21swapper/008:15:260
863485992517,5cyclictest0-21swapper/007:25:180
86348599251,5cyclictest898787-21apt-get08:50:140
86348599251,2cyclictest972558-21apt-get12:25:130
863496992417,3cyclictest0-21swapper/212:20:142
863496992411,7cyclictest131rcu_preempt08:01:232
863491992418,3cyclictest0-21swapper/111:50:231
863491992418,3cyclictest0-21swapper/109:15:241
863491992418,3cyclictest0-21swapper/109:10:211
863491992418,3cyclictest0-21swapper/107:55:261
863491992417,5cyclictest908486-21kworker/u8:2+events_unbound09:54:171
863491992416,4cyclictest0-21swapper/110:05:161
863491992414,7cyclictest974021-21sh12:30:001
863491992414,6cyclictest0-21swapper/110:20:001
863491992414,6cyclictest0-21swapper/109:55:261
863491992412,8cyclictest1-21systemd08:34:361
863491992410,11cyclictest231ktimers/108:25:121
863485992417,3cyclictest0-21swapper/011:20:240
86349699233,9cyclictest32-21ksoftirqd/209:46:532
863496992313,7cyclictest954469-21/usr/sbin/munin11:30:222
863491992317,3cyclictest0-21swapper/112:00:001
863491992317,3cyclictest0-21swapper/111:25:191
863491992317,3cyclictest0-21swapper/108:10:231
863491992316,4cyclictest0-21swapper/111:35:241
863491992316,3cyclictest0-21swapper/109:45:001
863491992316,3cyclictest0-21swapper/109:45:001
863491992314,6cyclictest877086-21grep07:45:251
863491992314,6cyclictest877086-21grep07:45:251
863491992312,7cyclictest883850-21grep08:05:231
863491992312,7cyclictest0-21swapper/111:40:251
863485992317,3cyclictest0-21swapper/012:15:160
863485992316,3cyclictest0-21swapper/010:25:000
86348599231,5cyclictest944657-21taskset11:00:320
86348599231,19cyclictest975150-21sed12:30:250
86348599230,19cyclictest0-21swapper/008:46:420
86348599230,19cyclictest0-21swapper/007:48:540
86348599230,19cyclictest0-21swapper/007:48:540
863491992216,3cyclictest939710-21idleruntime-cro10:50:001
863491992216,3cyclictest0-21swapper/112:05:001
863491992215,5cyclictest231ktimers/109:50:001
863491992214,6cyclictest231ktimers/111:20:221
863491992211,8cyclictest882251-21run-parts08:00:241
863485992217,3cyclictest13550irq/42-30be0000.ethernet11:50:100
86348599221,19cyclictest0-21swapper/011:05:040
86349199213,4cyclictest131rcu_preempt12:25:001
863491992115,3cyclictest0-21swapper/109:30:001
863491992114,4cyclictest0-21swapper/112:30:151
863491992113,4cyclictest0-21swapper/112:05:231
86349199211,12cyclictest0-21swapper/112:13:351
863485992116,3cyclictest13550irq/42-30be0000.ethernet12:10:220
863485992115,3cyclictest957970-21sensors_temp11:40:230
86349199202,14cyclictest940624-21find10:50:231
863491992010,7cyclictest976170-21grep12:35:151
863491992010,7cyclictest976170-21grep12:35:151
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional