You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-24 - 18:36

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Sun May 24, 2026 12:44:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3603382995339,10cyclictest231ktimers/107:40:141
3603382995339,10cyclictest231ktimers/107:40:141
3603378994832,12cyclictest121ktimers/008:25:150
3603387994637,7cyclictest311ktimers/207:55:132
3603387994516,24cyclictest0-21swapper/212:30:002
3603382994538,4cyclictest3605187-21munin-node07:15:021
3603387994436,4cyclictest3693443-21munin-plugin-st11:29:592
3603387994433,8cyclictest311ktimers/207:15:102
360338799441,11cyclictest3673450-21/usr/sbin/munin10:30:202
3603382994438,4cyclictest3694993-21kworker/u8:0+events_unbound11:35:281
3603391994331,8cyclictest3604545-21unixbench_multi07:10:243
3603391994331,7cyclictest3689602-21grep11:15:263
360338799432,10cyclictest3626109-21users08:10:262
3603387994315,24cyclictest3605174-21apt-config07:15:022
3603391994231,7cyclictest3713501-21unixbench_singl12:25:273
3603391994229,9cyclictest3641863-21sendmail09:00:013
3603391994229,10cyclictest391ktimers/310:35:133
3603391994229,10cyclictest391ktimers/310:35:123
360338799421,10cyclictest3682086-21/usr/sbin/munin10:55:212
3603382994230,8cyclictest3693425-21cron11:30:001
3603387994127,10cyclictest311ktimers/210:20:122
3603387994114,22cyclictest3711789-21grep12:20:242
3603387994112,25cyclictest0-21swapper/212:35:242
360338799411,10cyclictest3645823-21/usr/sbin/munin09:10:142
3603382994132,5cyclictest3655724-21sendmail09:40:001
3603378994134,4cyclictest3707078-21audit_send_reply12:09:590
360338799405,9cyclictest3628733-21if_err_eth108:20:172
3603387994033,4cyclictest3635025-21cat08:40:002
3603387994033,4cyclictest3635025-21cat08:39:592
360338799403,10cyclictest3666157-21sshd10:10:072
360338799402,9cyclictest3616295-21/usr/sbin/munin07:45:172
360338799402,9cyclictest3616295-21/usr/sbin/munin07:45:162
360338799399,27cyclictest0-21swapper/210:00:012
360338799398,6cyclictest3630887-21cat08:25:252
3603387993932,4cyclictest3696416-21unixbench_singl11:35:242
360338799392,6cyclictest3664227-21cron10:05:012
360338799391,9cyclictest3687884-21head11:10:262
360338799391,9cyclictest3659475-21/usr/sbin/munin09:50:142
3603387993913,23cyclictest0-21swapper/211:45:262
3603387993911,5cyclictest3641885-21http09:00:002
360338799391,11cyclictest3684195-21cut11:00:252
360338799391,11cyclictest3644580-21ntp_states09:05:222
360338799391,11cyclictest3643790-21idleruntime-cro09:05:002
360338799391,11cyclictest3632424-21ntp_states08:30:192
360338799391,11cyclictest3613327-21meminfo07:35:192
3603382993933,4cyclictest3682994-21sendmail11:00:011
3603382993929,5cyclictest0-21swapper/110:45:161
3603391993827,8cyclictest3608798-21grep07:20:253
360338799383,10cyclictest36094762sleep207:25:122
360338799382,9cyclictest3637072-21cstates08:45:142
360338799382,7cyclictest3639726-21head08:50:262
360338799382,12cyclictest3650154-21grep09:20:262
360338799381,11cyclictest3671759-21wc10:25:202
360338799381,10cyclictest3704115-21cut12:00:152
3603382993822,5cyclictest131rcu_preempt09:15:151
3603391993728,5cyclictest3655706-21munin-plugin-st09:40:003
360338799379,2cyclictest0-21swapper/210:35:252
360338799379,2cyclictest0-21swapper/210:35:242
3603387993711,4cyclictest311ktimers/211:59:032
360338799371,11cyclictest3680045-21fschecks_time10:50:162
360338799371,10cyclictest438-21cron12:10:002
360338799371,10cyclictest3708789-21runrttasks12:15:002
360338799371,10cyclictest3635623-21uname08:40:182
360338799371,10cyclictest3618425-21cut07:50:182
3603382993726,8cyclictest438-21cron12:40:001
3603378993727,6cyclictest3707489-21grep12:10:140
3603391993626,6cyclictest0-21swapper/308:40:003
3603391993626,6cyclictest0-21swapper/308:40:003
360338799369,2cyclictest0-21swapper/211:50:202
360338799367,8cyclictest3667991-21diskstats10:15:132
360338799366,6cyclictest3654939-21run-parts09:35:232
360338799362,8cyclictest204-21dbus-daemon10:45:152
360338799362,7cyclictest3648472-21head09:15:262
3603387993611,3cyclictest0-21swapper/210:05:182
360338799361,11cyclictest3676530-21df_inode10:40:152
3603387993610,5cyclictest3656859-21cat09:40:242
360338299362,13cyclictest37006422grep11:50:161
3603378993626,7cyclictest3605131-21latency_hist07:15:010
3603378993624,7cyclictest0-21swapper/012:20:250
360338799358,5cyclictest3608651-21timerandwakeup07:20:242
360338799353,9cyclictest3714788-21meminfo12:30:182
360338799351,8cyclictest3614758-21fschecks_count07:40:162
360338799351,8cyclictest3614758-21fschecks_count07:40:152
360338799351,7cyclictest3691309-21unixbench_singl11:20:252
360338799351,7cyclictest3691309-21unixbench_singl11:20:242
360338799351,7cyclictest3624337-21tail08:05:242
3603387993511,3cyclictest0-21swapper/211:05:252
360338799351,12cyclictest3654135-21sed09:35:012
3603382993526,4cyclictest0-21swapper/111:50:011
3603382993524,7cyclictest3703201-21grep11:55:261
3603378993526,6cyclictest0-21swapper/008:05:010
3603378993526,4cyclictest0-21swapper/011:40:280
3603378993525,6cyclictest0-21swapper/007:50:000
3603378993525,6cyclictest0-21swapper/007:50:000
3603391993427,4cyclictest3682976-21sh11:00:003
3603391993427,4cyclictest3646744-21head09:10:253
3603391993426,4cyclictest0-21swapper/309:50:003
3603391993425,5cyclictest3700256-21idleruntime-cro11:50:003
3603391993424,6cyclictest3673995-21grep10:30:243
360338799349,3cyclictest3690010-21sh11:20:002
360338799342,6cyclictest3651894-21grep09:25:262
360338799342,6cyclictest3651894-21grep09:25:252
3603387993416,15cyclictest3693912-21idleruntime11:30:162
3603387993413,18cyclictest3621626-21/usr/sbin/munin08:00:252
3603387993410,3cyclictest0-21swapper/209:45:132
3603382993427,4cyclictest3614351-21munin-plugin-st07:40:011
3603382993426,4cyclictest0-21swapper/109:30:141
3603382993426,4cyclictest0-21swapper/107:55:181
3603391993326,3cyclictest0-21swapper/311:10:153
3603391993324,5cyclictest0-21swapper/310:00:153
3603391993322,7cyclictest0-21swapper/311:00:283
3603391993321,9cyclictest3708786-21cut12:14:593
3603391993320,8cyclictest3672332-21grep10:25:253
360338799339,5cyclictest311ktimers/207:30:122
360338799339,3cyclictest3697376-21if_eth011:40:162
3603382993318,4cyclictest131rcu_preempt08:50:171
3603378993326,4cyclictest0-21swapper/011:55:010
3603378993325,4cyclictest0-21swapper/009:50:240
3603378993324,5cyclictest0-21swapper/011:20:250
3603378993324,5cyclictest0-21swapper/011:20:240
3603391993224,4cyclictest3693437-21kthreadd11:30:003
360338299324,9cyclictest24-21ksoftirqd/108:30:011
3603378993225,4cyclictest0-21swapper/008:30:230
3603378993224,4cyclictest0-21swapper/009:00:010
3603378993223,5cyclictest3672302-21grep10:25:250
3603378993222,6cyclictest0-21swapper/007:35:250
3603391993124,4cyclictest0-21swapper/312:30:243
3603391993123,5cyclictest391ktimers/310:40:123
3603391993123,4cyclictest0-21swapper/307:35:013
3603391993122,5cyclictest0-21swapper/309:15:153
3603391993122,5cyclictest0-21swapper/309:05:013
360338299316,6cyclictest24-21ksoftirqd/108:45:161
3603382993125,3cyclictest0-21swapper/107:15:041
3603382993123,4cyclictest0-21swapper/107:45:161
3603382993123,4cyclictest0-21swapper/107:45:151
3603382993121,4cyclictest131rcu_preempt08:06:311
3603382993119,7cyclictest3710483-21cat12:20:001
3603382993115,9cyclictest0-21swapper/108:14:091
3603382993112,3cyclictest131rcu_preempt08:59:421
3603382993111,5cyclictest131rcu_preempt07:50:021
3603382993110,7cyclictest24-21ksoftirqd/112:29:591
3603382993110,5cyclictest131rcu_preempt10:00:191
360337899318,4cyclictest36533842cat09:30:240
3603378993125,3cyclictest0-21swapper/010:50:150
3603378993124,4cyclictest0-21swapper/011:45:240
3603378993123,4cyclictest0-21swapper/011:40:010
3603378993122,5cyclictest3625216-21fschecks_time08:10:160
3603391993024,3cyclictest0-21swapper/307:45:273
3603391993024,3cyclictest0-21swapper/307:45:273
3603391993022,4cyclictest0-21swapper/312:00:283
360338799308,4cyclictest3627006-21if_err_eth008:15:182
360338299306,14cyclictest24-21ksoftirqd/111:45:011
360338299305,7cyclictest24-21ksoftirqd/108:35:191
360338299305,7cyclictest24-21ksoftirqd/108:35:181
360338299305,4cyclictest221rcuc/108:41:591
360338299304,5cyclictest24-21ksoftirqd/111:10:211
3603382993022,4cyclictest0-21swapper/107:25:251
3603382993019,4cyclictest131rcu_preempt09:29:021
3603382993019,4cyclictest131rcu_preempt09:29:021
3603382993018,4cyclictest131rcu_preempt09:00:041
3603382993018,3cyclictest131rcu_preempt11:30:191
3603382993016,3cyclictest131rcu_preempt12:06:471
3603382993013,9cyclictest131rcu_preempt11:18:211
3603382993013,3cyclictest131rcu_preempt10:25:151
3603382993012,3cyclictest131rcu_preempt07:24:171
3603382993010,4cyclictest0-21swapper/108:33:271
3603378993022,4cyclictest0-21swapper/011:05:000
3603378993020,6cyclictest0-21swapper/010:40:250
360337899301,7cyclictest3655783-21latency_hist09:40:000
3603391992922,4cyclictest0-21swapper/310:45:273
3603391992918,7cyclictest3680803-21grep10:50:253
3603391992918,7cyclictest3650146-21grep09:20:253
360338299299,5cyclictest0-21swapper/109:05:141
360338299298,4cyclictest0-21swapper/107:33:481
360338299294,6cyclictest24-21ksoftirqd/110:40:231
360338299293,6cyclictest24-21ksoftirqd/111:05:191
360338299292,8cyclictest24-21ksoftirqd/110:20:011
3603382992924,3cyclictest3658109-21missed_timers09:45:191
3603382992919,4cyclictest131rcu_preempt11:22:121
3603382992919,4cyclictest131rcu_preempt11:22:121
3603382992919,4cyclictest131rcu_preempt10:54:561
3603382992918,6cyclictest0-21swapper/108:04:381
3603382992914,5cyclictest131rcu_preempt10:23:211
3603382992912,5cyclictest131rcu_preempt10:15:011
3603382992910,5cyclictest131rcu_preempt08:15:141
3603378992923,3cyclictest0-21swapper/010:20:010
3603378992919,6cyclictest0-21swapper/011:05:270
3603378992919,6cyclictest0-21swapper/008:05:250
3603378992918,3cyclictest36282242tr08:20:010
3603391992822,3cyclictest3610950-21kthreadd07:30:013
3603391992821,4cyclictest0-21swapper/312:35:243
3603391992820,4cyclictest0-21swapper/311:50:253
3603391992818,7cyclictest3710885-21grep12:20:153
3603391992818,6cyclictest0-21swapper/312:10:003
360338299286,8cyclictest24-21ksoftirqd/110:35:201
360338299286,8cyclictest24-21ksoftirqd/110:35:201
360338299285,6cyclictest24-21ksoftirqd/108:20:261
3603382992819,5cyclictest231ktimers/109:20:171
360338299281,8cyclictest24-21ksoftirqd/110:30:531
3603382992815,4cyclictest0-21swapper/111:00:211
3603378992820,5cyclictest3677625-21kworker/u8:2+events_unbound10:55:170
3603378992819,5cyclictest0-21swapper/012:00:280
3603378992818,6cyclictest3713498-21grep12:25:270
3603378992818,6cyclictest0-21swapper/010:05:240
3603378992818,6cyclictest0-21swapper/007:35:010
3603378992817,7cyclictest0-21swapper/009:30:000
3603378992817,7cyclictest0-21swapper/009:30:000
3603391992719,4cyclictest0-21swapper/309:40:243
3603391992719,4cyclictest0-21swapper/307:15:153
360338299279,4cyclictest131rcu_preempt12:20:151
360338299275,6cyclictest24-21ksoftirqd/109:15:011
3603382992721,4cyclictest3707466-21fschecks_count12:10:151
360339199266,4cyclictest36354412cut08:40:163
3603391992618,4cyclictest0-21swapper/312:15:253
3603391992617,6cyclictest3645496-21ssh09:10:013
3603391992614,9cyclictest3631170-21tail08:25:263
3603382992617,4cyclictest131rcu_preempt10:09:321
360338299261,6cyclictest24-21ksoftirqd/112:00:231
3603382992616,3cyclictest131rcu_preempt09:40:141
360338299261,16cyclictest0-21swapper/112:30:171
3603378992619,4cyclictest13850irq/36-mmc109:45:000
3603378992617,6cyclictest3634551-21unixbench_multi08:35:250
3603378992617,6cyclictest3634551-21unixbench_multi08:35:250
3603378992617,6cyclictest121ktimers/007:55:160
3603378992617,5cyclictest0-21swapper/011:58:440
3603378992616,6cyclictest0-21swapper/008:50:260
3603378992616,6cyclictest0-21swapper/008:45:150
360337899261,22cyclictest3618942-21run-parts07:50:240
3603391992517,5cyclictest3669330-21cron10:20:013
3603391992517,4cyclictest0-21swapper/311:40:243
3603391992512,4cyclictest131rcu_preempt08:05:123
3603382992515,4cyclictest131rcu_preempt09:56:581
3603378992521,2cyclictest13550irq/42-30be0000.ethernet10:30:140
3603378992519,3cyclictest0-21swapper/011:15:230
3603378992518,3cyclictest0-21swapper/010:39:140
3603378992518,3cyclictest0-21swapper/010:39:140
3603378992517,5cyclictest0-21swapper/009:59:190
3603378992517,4cyclictest0-21swapper/012:20:000
3603378992517,3cyclictest0-21swapper/009:00:140
3603378992515,6cyclictest0-21swapper/010:00:240
3603391992418,3cyclictest0-21swapper/309:25:243
3603391992418,3cyclictest0-21swapper/309:25:243
3603391992417,3cyclictest0-21swapper/307:40:143
3603391992417,3cyclictest0-21swapper/307:40:133
3603391992416,5cyclictest0-21swapper/308:30:233
3603391992415,5cyclictest0-21swapper/309:30:253
360339199241,3cyclictest36282242tr08:20:013
360337899242,19cyclictest3717548-21basename12:39:590
3603378992417,3cyclictest0-21swapper/010:48:130
3603378992415,6cyclictest0-21swapper/011:35:000
3603378992415,6cyclictest0-21swapper/009:20:000
3603378992415,5cyclictest0-21swapper/011:10:260
3603378992412,8cyclictest3629457-21grep08:20:250
360337899241,20cyclictest3645814-21df09:10:130
360337899241,19cyclictest0-21swapper/009:20:350
360337899241,19cyclictest0-21swapper/008:43:190
360337899241,19cyclictest0-21swapper/007:43:480
360337899241,19cyclictest0-21swapper/007:43:470
360337899240,20cyclictest0-21swapper/007:22:050
3603391992317,4cyclictest3612524-21kworker/u8:0+events_unbound07:59:383
3603391992316,3cyclictest0-21swapper/308:50:013
3603391992314,6cyclictest0-21swapper/312:00:013
3603391992314,6cyclictest0-21swapper/307:40:013
3603391992312,8cyclictest204-21dbus-daemon11:05:213
3603378992315,5cyclictest121ktimers/012:30:130
360337899231,3cyclictest0-21swapper/010:14:410
360337899231,20cyclictest0-21swapper/007:28:410
360337899231,18cyclictest0-21swapper/009:08:160
360337899231,18cyclictest0-21swapper/007:17:540
360339199229,8cyclictest204-21dbus-daemon11:35:283
3603391992216,3cyclictest0-21swapper/311:30:203
3603391992216,3cyclictest0-21swapper/308:10:183
3603378992216,2cyclictest0-21swapper/009:48:110
3603378992215,3cyclictest0-21swapper/010:20:150
3603391992115,3cyclictest0-21swapper/307:55:013
3603391992114,4cyclictest0-21swapper/310:05:163
3603391992111,7cyclictest3629997-21date08:25:013
360337899211,16cyclictest0-21swapper/011:25:120
360339199201,13cyclictest3622690-21head08:00:263
3603391992010,6cyclictest0-21swapper/310:15:003
360339199195,3cyclictest6250watchdogd09:55:153
360339199192,12cyclictest3640144-21cron08:55:003
3603391991914,3cyclictest3659351-21/usr/sbin/munin09:50:233
3603391991912,5cyclictest3660640-21kworker/u8:2+events_unbound10:20:133
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional