You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-11 - 17:54

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Mon May 11, 2026 12:44:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2513981995036,10cyclictest311ktimers/209:25:132
2513977994936,10cyclictest231ktimers/112:10:121
2513981994841,4cyclictest2538787-21munin-plugin-st08:20:002
2513986994637,6cyclictest2572846-21grep09:55:263
2513981994632,10cyclictest311ktimers/208:40:132
2513974994637,5cyclictest2538779-21apt-get08:20:000
2513981994540,3cyclictest2533333-21kworker/u8:2+events_unbound08:10:152
2513986994430,10cyclictest391ktimers/307:30:143
2513981994431,10cyclictest311ktimers/210:05:132
2513977994434,7cyclictest0-21swapper/108:00:001
2513974994437,4cyclictest2515795-21cron07:15:000
2513977994329,10cyclictest231ktimers/109:25:121
2513986994232,7cyclictest2530045-21idleruntime-cro07:55:013
2513981994228,11cyclictest311ktimers/210:40:122
2513974994234,4cyclictest2614480-21idleruntime-cro12:00:010
2513981994133,5cyclictest2588435-21kworker/u8:1+events_unbound10:45:452
2513981994130,8cyclictest311ktimers/211:35:122
2513981994029,7cyclictest2617481-21grep12:05:272
2513977994031,5cyclictest2526196-21unixbench_multi07:40:251
2513974994033,4cyclictest2580148-21munin-plugin-st10:20:010
2513974994033,4cyclictest2580148-21munin-plugin-st10:20:000
2513974994027,10cyclictest438-21cron11:15:010
2513986993930,5cyclictest208-21systemd-logind11:15:563
2513981993928,7cyclictest0-21swapper/212:11:122
2513977993930,4cyclictest0-21swapper/108:50:241
2513977993927,6cyclictest131rcu_preempt09:52:581
2513974993930,6cyclictest2601911-21unixbench_singl11:20:250
2513974993927,8cyclictest2589934-21grep10:45:250
2513974993921,14cyclictest11-21ksoftirqd/010:35:130
2513986993827,8cyclictest0-21swapper/307:20:003
2513981993830,5cyclictest0-21swapper/207:45:012
2513974993829,6cyclictest2563512-21fschecks_time09:30:150
2513974993827,7cyclictest0-21swapper/009:25:240
2513981993729,5cyclictest2513964-21cyclictest10:30:432
2513977993727,6cyclictest0-21swapper/108:55:251
2513977993727,5cyclictest0-21swapper/109:45:161
2513977993715,10cyclictest131rcu_preempt09:05:531
2513974993730,4cyclictest2616189-21idleruntime-cro12:05:010
2513974993726,7cyclictest0-21swapper/010:40:250
2513986993626,7cyclictest2538803-21sendmail08:20:003
2513986993626,6cyclictest0-21swapper/307:25:253
2513981993628,4cyclictest0-21swapper/211:10:262
2513981993627,6cyclictest2614929-21fschecks_time12:00:162
2513977993628,4cyclictest0-21swapper/111:20:261
2513977993625,7cyclictest0-21swapper/110:30:261
2513977993618,5cyclictest131rcu_preempt08:45:261
2513977993614,3cyclictest131rcu_preempt10:55:191
2513986993526,4cyclictest0-21swapper/310:25:433
2513981993524,8cyclictest2566504-21cut09:40:012
2513977993528,4cyclictest0-21swapper/110:00:001
2513977993527,4cyclictest0-21swapper/111:30:011
2513977993527,4cyclictest0-21swapper/111:05:011
2513977993523,9cyclictest2624304-21grep12:25:251
2513974993527,4cyclictest0-21swapper/009:05:310
2513986993425,5cyclictest0-21swapper/309:15:003
2513986993423,7cyclictest2590391-21munin-plugin-st10:50:013
2513977993423,4cyclictest131rcu_preempt08:17:411
2513977993423,4cyclictest131rcu_preempt07:46:531
2513977993423,3cyclictest131rcu_preempt09:40:191
2513977993420,4cyclictest131rcu_preempt12:33:351
2513977993416,10cyclictest131rcu_preempt08:33:561
2513977993414,5cyclictest131rcu_preempt07:15:171
2513974993427,4cyclictest2625079-21fschecks_count12:30:170
2513977993324,5cyclictest0-21swapper/108:40:001
2513977993316,5cyclictest131rcu_preempt08:10:271
2513977993314,9cyclictest131rcu_preempt10:35:491
2513977993314,11cyclictest131rcu_preempt10:05:181
2513974993327,3cyclictest0-21swapper/008:00:020
2513974993317,13cyclictest11-21ksoftirqd/010:00:130
2513981993225,3cyclictest0-21swapper/212:20:252
2513981993224,5cyclictest1-21systemd12:29:392
2513981993219,9cyclictest311ktimers/209:10:142
251397799325,9cyclictest24-21ksoftirqd/108:25:181
251397799325,5cyclictest24-21ksoftirqd/111:05:241
251397799322,19cyclictest24-21ksoftirqd/110:45:211
2513977993220,9cyclictest231ktimers/107:10:141
2513977993214,4cyclictest131rcu_preempt10:45:011
2513977993213,10cyclictest131rcu_preempt09:30:171
2513974993225,4cyclictest2569487-21unixbench_singl09:45:240
2513974993225,3cyclictest0-21swapper/011:05:260
2513974993224,5cyclictest2559455-21cron09:20:010
2513974993224,4cyclictest2523224-21cron07:35:010
2513974993224,4cyclictest0-21swapper/009:15:000
2513974993222,6cyclictest0-21swapper/009:20:260
2513974993221,7cyclictest0-21swapper/010:55:170
2513986993124,4cyclictest2603611-21unixbench_singl11:25:253
2513986993124,4cyclictest2561394-21apt-key09:25:013
2513986993122,6cyclictest2531776-21kthreadd08:00:013
2513986993122,6cyclictest0-21swapper/310:20:003
2513986993122,6cyclictest0-21swapper/310:20:003
2513986993121,7cyclictest0-21swapper/312:35:013
2513986993119,9cyclictest438-21cron11:35:013
2513981993124,4cyclictest0-21swapper/209:55:272
2513981993121,6cyclictest0-21swapper/211:45:272
2513981993119,8cyclictest2628326-21cut12:40:012
2513977993121,7cyclictest231ktimers/110:20:131
2513977993120,8cyclictest231ktimers/109:25:011
2513977993117,4cyclictest131rcu_preempt11:49:341
2513977993117,4cyclictest131rcu_preempt09:36:561
2513977993116,5cyclictest131rcu_preempt11:15:211
2513977993114,10cyclictest131rcu_preempt08:07:291
2513977993111,5cyclictest131rcu_preempt11:14:501
2513974993124,4cyclictest2600625-21sendmail11:20:000
2513974993121,6cyclictest0-21swapper/008:05:260
2513986993023,5cyclictest2515816-21munin-node07:15:013
2513986993023,3cyclictest0-21swapper/309:30:253
2513986993021,6cyclictest2627868-21unixbench_multi12:35:263
2513981993023,4cyclictest0-21swapper/207:15:252
2513981993020,7cyclictest311ktimers/209:45:122
251398199301,9cyclictest25458952cat08:40:022
251397799309,5cyclictest131rcu_preempt12:05:211
251397799307,6cyclictest24-21ksoftirqd/112:20:171
2513977993021,6cyclictest231ktimers/107:30:201
2513977993021,5cyclictest0-21swapper/107:20:271
2513977993019,4cyclictest131rcu_preempt09:10:221
2513977993018,8cyclictest231ktimers/110:05:001
2513977993016,6cyclictest2605755-21kworker/u8:3+events_unbound12:03:181
2513977993016,4cyclictest131rcu_preempt11:35:181
2513977993014,5cyclictest131rcu_preempt07:26:281
2513977993012,9cyclictest131rcu_preempt09:15:211
2513977993012,10cyclictest131rcu_preempt10:15:161
2513977993012,10cyclictest131rcu_preempt10:15:161
2513977993010,4cyclictest131rcu_preempt09:00:151
2513974993020,6cyclictest0-21swapper/012:15:250
2513974993020,6cyclictest0-21swapper/012:15:250
2513974993020,6cyclictest0-21swapper/011:35:270
2513974993018,8cyclictest0-21swapper/008:50:010
2513974993018,7cyclictest0-21swapper/008:35:240
2513981992921,5cyclictest2578018-21head10:10:262
2513981992921,5cyclictest2578018-21head10:10:262
2513981992920,5cyclictest0-21swapper/207:55:002
251397799293,5cyclictest24-21ksoftirqd/110:15:011
251397799293,5cyclictest24-21ksoftirqd/110:15:011
2513977992919,7cyclictest231ktimers/110:25:201
2513977992914,9cyclictest131rcu_preempt11:34:281
2513977992913,9cyclictest131rcu_preempt11:55:151
2513977992912,9cyclictest131rcu_preempt12:15:131
2513977992912,9cyclictest131rcu_preempt12:15:131
2513977992911,5cyclictest131rcu_preempt10:50:151
2513977992911,11cyclictest131rcu_preempt11:40:211
2513977992910,5cyclictest131rcu_preempt08:22:041
2513986992821,4cyclictest0-21swapper/312:25:263
2513986992821,4cyclictest0-21swapper/311:35:273
2513986992821,4cyclictest0-21swapper/307:35:263
2513986992819,6cyclictest2614546-21cat12:00:003
2513981992821,4cyclictest2603748-21kworker/u8:1+events_unbound11:30:252
2513981992821,4cyclictest2556413-21kworker/u8:0+events_unbound09:15:352
2513981992821,4cyclictest0-21swapper/207:30:252
2513981992821,3cyclictest0-21swapper/211:25:162
2513981992820,4cyclictest0-21swapper/209:00:322
251397799289,11cyclictest24-21ksoftirqd/108:00:131
2513977992817,4cyclictest131rcu_preempt11:51:221
2513977992817,4cyclictest131rcu_preempt08:40:221
2513977992814,4cyclictest131rcu_preempt12:37:251
2513977992812,4cyclictest131rcu_preempt07:50:141
2513974992822,4cyclictest0-21swapper/011:25:120
2513974992820,4cyclictest0-21swapper/010:05:400
2513974992819,6cyclictest0-21swapper/009:40:000
2513974992818,6cyclictest0-21swapper/009:55:170
2513974992818,6cyclictest0-21swapper/007:35:250
2513974992817,8cyclictest2622592-21grep12:20:260
2513986992721,4cyclictest145-21jbd2/mmcblk1p2-808:45:223
2513986992720,4cyclictest0-21swapper/312:05:263
2513986992720,4cyclictest0-21swapper/310:10:273
2513986992720,4cyclictest0-21swapper/310:10:263
2513986992720,4cyclictest0-21swapper/308:25:263
2513981992723,2cyclictest2540435-21kworker/u8:2+events_unbound08:55:262
2513981992720,4cyclictest0-21swapper/208:20:152
2513981992719,4cyclictest0-21swapper/209:50:262
251398199271,3cyclictest131rcu_preempt08:30:132
2513977992711,5cyclictest131rcu_preempt07:35:161
2513974992720,3cyclictest0-21swapper/007:40:170
2513974992718,6cyclictest0-21swapper/012:10:240
2513974992716,6cyclictest0-21swapper/010:25:260
2513986992620,3cyclictest0-21swapper/307:45:253
2513986992619,5cyclictest178-21systemd-udevd10:54:393
2513986992619,3cyclictest0-21swapper/311:40:173
2513986992615,8cyclictest2559582-21date09:20:003
2513981992619,4cyclictest0-21swapper/210:05:012
2513981992618,5cyclictest2554746-21fschecks_count09:05:172
2513981992618,4cyclictest0-21swapper/208:00:002
2513974992620,4cyclictest2516812-21fschecks_count07:15:150
2513974992619,3cyclictest0-21swapper/012:05:270
2513974992618,5cyclictest0-21swapper/009:00:250
2513974992618,5cyclictest0-21swapper/007:25:230
2513974992617,5cyclictest0-21swapper/008:10:550
2513974992616,6cyclictest0-21swapper/008:55:010
2513986992519,3cyclictest0-21swapper/309:05:163
2513986992518,4cyclictest0-21swapper/311:00:243
2513986992517,6cyclictest391ktimers/310:20:133
2513986992517,4cyclictest0-21swapper/308:35:253
2513986992515,7cyclictest2616185-21idleruntime-cro12:05:013
251398199252,4cyclictest131rcu_preempt10:25:142
2513981992520,2cyclictest0-21swapper/208:05:272
2513981992518,4cyclictest2549626-21fschecks_count08:50:142
2513981992514,8cyclictest2519835-21ls07:25:002
251398199250,5cyclictest131rcu_preempt11:05:132
2513974992518,4cyclictest0-21swapper/010:20:250
2513974992518,3cyclictest0-21swapper/011:45:150
2513974992518,3cyclictest0-21swapper/008:59:260
2513974992515,7cyclictest0-21swapper/007:20:260
2513986992418,4cyclictest2539677-21latency08:20:183
2513986992417,5cyclictest164-21systemd-journal08:06:403
2513986992416,4cyclictest0-21swapper/308:40:163
2513986992415,6cyclictest391ktimers/310:40:243
2513974992420,2cyclictest13550irq/42-30be0000.ethernet12:35:020
2513974992418,3cyclictest0-21swapper/008:30:010
2513974992416,6cyclictest121ktimers/011:30:060
2513974992415,5cyclictest0-21swapper/012:25:260
251397499241,19cyclictest0-21swapper/011:40:340
251397499241,19cyclictest0-21swapper/008:31:090
251397499241,19cyclictest0-21swapper/007:53:570
2513986992318,3cyclictest0-21swapper/307:45:003
2513986992317,3cyclictest0-21swapper/312:20:153
2513986992317,3cyclictest0-21swapper/310:55:123
2513986992317,3cyclictest0-21swapper/309:45:383
2513986992316,5cyclictest164-21systemd-journal10:32:393
2513986992316,4cyclictest0-21swapper/312:10:243
2513986992315,4cyclictest0-21swapper/311:10:013
2513986992314,6cyclictest0-21swapper/311:45:263
2513981992316,5cyclictest2585978-21missed_timers10:35:192
2513981992316,4cyclictest2609355-21cron11:45:012
2513981992316,4cyclictest2593828-21latency_hist11:00:012
2513981992316,4cyclictest0-21swapper/209:30:252
2513981992316,3cyclictest0-21swapper/207:45:232
2513981992311,2cyclictest131rcu_preempt11:00:592
251397499232,15cyclictest2539245-21sshd08:20:130
2513974992317,2cyclictest0-21swapper/009:40:120
2513974992316,3cyclictest0-21swapper/008:00:190
2513974992313,6cyclictest0-21swapper/008:45:000
2513986992217,3cyclictest0-21swapper/308:05:023
2513986992216,3cyclictest0-21swapper/310:00:193
2513986992216,3cyclictest0-21swapper/308:50:193
2513986992216,3cyclictest0-21swapper/308:35:023
2513986992214,5cyclictest0-21swapper/310:40:013
2513986992214,4cyclictest0-21swapper/312:15:153
2513986992214,4cyclictest0-21swapper/312:15:153
251398699221,11cyclictest0-21swapper/307:20:263
251398199227,5cyclictest2519451-21kworker/u8:0+events_unbound07:38:472
2513981992216,3cyclictest0-21swapper/212:16:132
2513981992216,3cyclictest0-21swapper/212:16:122
2513981992216,3cyclictest0-21swapper/209:40:382
2513981992216,3cyclictest0-21swapper/208:45:182
2513981992215,4cyclictest438-21cron11:20:012
2513981992215,4cyclictest2602324-21cron11:25:012
2513981992215,4cyclictest2542001-21grep08:25:252
2513981992215,4cyclictest0-21swapper/209:20:232
2513981992214,6cyclictest0-21swapper/207:10:192
2513981992213,6cyclictest0-21swapper/211:55:222
2513974992217,3cyclictest0-21swapper/011:02:020
2513974992216,3cyclictest0-21swapper/010:52:170
2513974992213,6cyclictest2526284-1kworker/0:0H+mmc_complete07:50:000
251397499221,19cyclictest0-21swapper/011:52:570
2513986992115,4cyclictest2597708-21if_err_eth011:10:183
2513986992115,3cyclictest2568239-21latency_hist09:45:003
2513986992114,4cyclictest0-21swapper/309:50:183
2513986992112,6cyclictest0-21swapper/308:55:173
2513986992110,7cyclictest204-21dbus-daemon10:05:403
2513981992115,4cyclictest145-21jbd2/mmcblk1p2-810:20:232
2513981992115,3cyclictest0-21swapper/212:35:012
2513981992113,5cyclictest0-21swapper/211:50:242
2513974992114,3cyclictest0-21swapper/010:31:270
2513986992013,5cyclictest178-21systemd-udevd09:04:413
2513986992012,5cyclictest391ktimers/309:35:123
2513986992012,5cyclictest0-21swapper/311:20:233
2513986992012,4cyclictest0-21swapper/308:10:263
2513981992013,5cyclictest311ktimers/207:25:132
2513974992011,6cyclictest2577257-21/usr/sbin/munin10:10:180
2513974992011,6cyclictest2577257-21/usr/sbin/munin10:10:170
2513986991912,5cyclictest391ktimers/311:50:113
251398199181,3cyclictest131rcu_preempt10:15:162
251398199181,3cyclictest131rcu_preempt10:15:152
2513986991711,4cyclictest391ktimers/309:25:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional