You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-04 - 21:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Thu Jun 04, 2026 12:44:46)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3496613994927,18cyclictest3559419-21cron10:10:010
3496623994739,6cyclictest3600765-21kworker/u8:1+events_unbound12:11:003
3496613994722,21cyclictest3589250-21tune2fs11:35:140
349661399471,30cyclictest3575413-21date10:55:010
3496613994618,24cyclictest0-21swapper/011:30:270
3496618994533,9cyclictest231ktimers/108:55:111
3496618994533,8cyclictest3549186-21sendmail09:40:001
3496618994533,8cyclictest3549186-21sendmail09:40:001
349661399451,42cyclictest0-21swapper/009:20:130
349661399451,2cyclictest0-21swapper/011:05:120
3496618994433,6cyclictest0-21swapper/110:15:421
349661399441,4cyclictest0-21swapper/007:15:130
349661399441,40cyclictest3542163-21idleruntime-cro09:20:010
349661399441,29cyclictest3530577-21/usr/sbin/munin08:45:200
3496623994329,4cyclictest3571524-21kworker/u8:2+events_unbound10:50:503
3496622994334,5cyclictest3512733-21munin-plugin-st07:55:012
3496613994330,10cyclictest121ktimers/008:40:110
3496613994330,10cyclictest121ktimers/008:40:110
349661399431,37cyclictest3567191-21/usr/sbin/munin10:30:160
349661399431,37cyclictest3514676-21apt-get08:00:130
349661399431,36cyclictest3526602-21munin-node08:35:120
3496623994235,4cyclictest0-21swapper/309:10:013
349661399429,28cyclictest3533962-21/usr/sbin/munin08:55:160
349661399421,4cyclictest0-21swapper/011:00:110
349661399421,36cyclictest3538763-21/usr/sbin/munin09:10:110
349661399421,36cyclictest3502527-21/usr/sbin/munin07:25:120
349661399421,2cyclictest0-21swapper/012:15:250
349661399421,27cyclictest3526548-21date08:35:010
349661399420,3cyclictest0-21swapper/007:35:110
3496618994127,10cyclictest3541773-21sshd09:15:341
349661399412,34cyclictest3584080-21df11:20:130
349661399412,25cyclictest3605132-21/usr/sbin/munin12:20:200
349661399411,37cyclictest3601861-21/usr/sbin/munin12:10:240
349661399411,37cyclictest3594936-21/usr/sbin/munin11:50:200
349661399411,37cyclictest3581319-21/usr/sbin/munin11:10:230
349661399411,37cyclictest3521805-21/usr/sbin/munin08:20:180
349661399411,35cyclictest3518077-21apt-get08:10:130
349661399410,4cyclictest0-21swapper/009:35:130
349661399410,4cyclictest0-21swapper/009:35:130
349661399410,11cyclictest3565203-21apt-get10:25:110
349661399410,11cyclictest3565203-21apt-get10:25:110
3496623994034,4cyclictest3605924-21kworker/u8:0+events_unbound12:31:043
3496623994034,4cyclictest3515917-21kworker/u8:2+events_unbound08:05:183
3496623994032,5cyclictest3507399-21munin-plugin-st07:40:003
3496618994029,8cyclictest231ktimers/108:45:121
349661399402,34cyclictest3569651-21grep10:35:250
349661399402,33cyclictest3561567-21/usr/sbin/munin10:15:110
349661399401,37cyclictest3535757-21/usr/sbin/munin09:00:170
349661399401,36cyclictest3600093-21/usr/sbin/munin12:05:220
349661399401,36cyclictest3497519-21/usr/sbin/munin07:10:240
349661399401,34cyclictest3606456-21df12:25:120
349661399401,34cyclictest3573727-21/usr/sbin/munin10:50:110
349661399401,34cyclictest3563472-21/usr/sbin/munin10:20:140
349661399401,34cyclictest3519778-21apt-get08:15:110
349661399401,33cyclictest3546248-21/usr/sbin/munin09:30:160
349661399401,33cyclictest3546248-21/usr/sbin/munin09:30:160
3496613994012,25cyclictest3556767-21cat10:00:200
349661399400,2cyclictest0-21swapper/007:30:120
349661399400,11cyclictest3592495-21apt-get11:45:110
3496623993932,5cyclictest3538392-21kworker/u8:0+events_unbound09:15:363
3496623993916,12cyclictest0-21swapper/310:02:483
3496622993928,9cyclictest311ktimers/210:50:122
3496622993928,7cyclictest3533420-21cut08:55:012
349662299392,4cyclictest131rcu_preempt08:55:102
3496622993924,11cyclictest311ktimers/209:15:102
349662299391,15cyclictest0-21swapper/208:45:112
3496618993933,4cyclictest3573259-21kworker/u8:1+events_unbound10:55:481
3496618993926,9cyclictest438-21cron08:20:001
349661399391,35cyclictest3549543-21/usr/sbin/munin09:40:140
349661399391,35cyclictest3532021-21/usr/sbin/munin08:50:130
349661399391,35cyclictest3512549-21cron07:53:010
349661399391,33cyclictest3598036-21/usr/sbin/munin12:00:160
349661399391,33cyclictest3596094-21taskset11:55:030
349661399391,33cyclictest3585678-21/usr/sbin/munin11:25:120
349661399391,33cyclictest3572028-21/usr/sbin/munin10:45:110
349661399391,33cyclictest3551134-21/usr/sbin/munin09:45:110
349661399391,33cyclictest3512952-21/usr/sbin/munin07:55:110
349661399391,25cyclictest3609715-21sed12:35:010
349661399390,2cyclictest0-21swapper/010:45:010
3496623993832,4cyclictest3531362-21kworker/u8:0+events_unbound08:55:303
3496623993825,5cyclictest131rcu_preempt07:55:173
3496623993813,10cyclictest131rcu_preempt07:20:063
349661399381,34cyclictest3537631-21ntp_states09:05:210
349661399381,34cyclictest3507987-21irqstats07:40:190
349661399381,33cyclictest3554696-21fschecks_count09:55:160
349661399381,32cyclictest3523204-21apt-get08:25:110
349661399380,4cyclictest0-21swapper/011:15:100
349661399380,4cyclictest0-21swapper/009:50:130
349661399380,2cyclictest0-21swapper/009:25:120
349661399380,2cyclictest0-21swapper/008:05:120
3496623993730,4cyclictest3611229-21cron12:40:003
3496623993721,9cyclictest131rcu_preempt11:45:003
3496618993728,4cyclictest0-21swapper/110:30:251
3496618993726,7cyclictest3581544-21grep11:10:241
349661399371,2cyclictest0-21swapper/012:38:290
349661399370,2cyclictest0-21swapper/007:45:120
349661399370,2cyclictest0-21swapper/007:20:110
3496623993629,5cyclictest3559358-21kworker/u8:2+events_unbound10:15:433
3496623993625,7cyclictest0-21swapper/311:00:013
3496622993628,5cyclictest3519965-21fschecks_time08:15:152
3496622993625,7cyclictest3547016-21grep09:30:242
3496622993625,7cyclictest3547016-21grep09:30:242
349661399362,31cyclictest3560204-21irqstats10:10:170
3496623993528,4cyclictest3498280-21sh07:15:013
3496623993524,7cyclictest3573040-21grep10:45:253
3496623993522,5cyclictest131rcu_preempt08:10:153
3496623993516,11cyclictest131rcu_preempt09:40:253
3496622993529,4cyclictest3588467-21kworker/u8:0+events_unbound12:14:422
3496622993529,4cyclictest3571524-21kworker/u8:2+events_unbound11:00:422
3496622993527,4cyclictest0-21swapper/208:25:262
3496618993527,4cyclictest0-21swapper/107:19:581
349661399351,31cyclictest3590914-21diskstats11:40:160
3496623993425,4cyclictest0-21swapper/308:45:253
3496623993421,5cyclictest131rcu_preempt09:55:173
3496623993416,4cyclictest131rcu_preempt12:00:203
3496623993416,11cyclictest131rcu_preempt11:50:233
3496623993414,11cyclictest131rcu_preempt08:50:243
3496623993414,10cyclictest131rcu_preempt07:45:553
349662399341,18cyclictest0-21swapper/310:30:113
3496623993411,11cyclictest40-21ksoftirqd/309:30:223
3496623993411,11cyclictest40-21ksoftirqd/309:30:223
3496622993427,4cyclictest1-21systemd07:55:142
3496622993426,4cyclictest0-21swapper/210:35:002
3496622993425,5cyclictest0-21swapper/211:25:002
3496622993423,7cyclictest3609531-21idleruntime-cro12:35:002
3496618993425,5cyclictest0-21swapper/107:15:011
3496618993425,4cyclictest0-21swapper/109:05:151
3496618993422,8cyclictest3508688-21grep07:40:261
349661399341,30cyclictest3496664-21latency_hist07:10:010
3496623993325,6cyclictest3503752-21kworker/u8:1+events_unbound07:54:423
3496623993323,5cyclictest0-21swapper/311:05:253
3496623993320,5cyclictest3503752-21kworker/u8:1+events_unbound07:44:403
3496623993320,4cyclictest131rcu_preempt10:12:003
3496623993320,10cyclictest3528081-21sendmail08:40:013
3496623993315,4cyclictest131rcu_preempt09:22:193
3496623993315,3cyclictest0-21swapper/308:26:313
3496623993315,10cyclictest131rcu_preempt09:14:393
3496623993313,12cyclictest131rcu_preempt11:20:233
3496623993312,9cyclictest131rcu_preempt11:45:583
3496623993312,5cyclictest131rcu_preempt11:00:183
3496622993324,6cyclictest0-21swapper/210:15:232
3496622993323,6cyclictest0-21swapper/209:40:002
3496622993323,6cyclictest0-21swapper/209:40:002
3496618993326,4cyclictest0-21swapper/112:40:001
3496618993326,4cyclictest0-21swapper/110:05:251
3496618993323,5cyclictest0-21swapper/110:30:001
3496618993323,5cyclictest0-21swapper/110:30:001
349662399328,14cyclictest3603453-21/usr/sbin/munin12:15:213
3496623993223,4cyclictest0-21swapper/310:25:333
3496623993223,4cyclictest0-21swapper/310:25:333
3496623993221,7cyclictest3569592-21grep10:35:253
3496623993215,4cyclictest131rcu_preempt11:25:293
3496623993214,5cyclictest131rcu_preempt08:15:223
3496623993213,11cyclictest40-21ksoftirqd/308:00:253
3496623993211,13cyclictest381rcuc/310:05:243
3496622993222,6cyclictest3508669-21grep07:40:262
3496618993224,4cyclictest0-21swapper/112:15:001
3496618993223,4cyclictest0-21swapper/108:35:161
3496623993123,6cyclictest3580001-21kworker/u8:2+events_unbound11:18:413
3496623993119,5cyclictest131rcu_preempt10:23:383
3496623993118,5cyclictest131rcu_preempt11:10:203
3496623993113,4cyclictest131rcu_preempt09:51:253
3496623993113,4cyclictest131rcu_preempt09:28:343
3496623993113,11cyclictest131rcu_preempt08:40:153
3496623993113,11cyclictest131rcu_preempt08:40:153
3496623993113,10cyclictest131rcu_preempt09:45:413
3496623993112,11cyclictest131rcu_preempt11:55:163
3496623993111,6cyclictest131rcu_preempt07:15:203
3496623993111,4cyclictest131rcu_preempt08:31:213
3496623993110,4cyclictest131rcu_preempt08:23:413
3496623993110,10cyclictest40-21ksoftirqd/311:35:143
3496623993110,10cyclictest40-21ksoftirqd/310:45:013
3496622993124,4cyclictest3507403-21sh07:40:002
3496622993124,4cyclictest0-21swapper/211:50:002
3496622993124,3cyclictest0-21swapper/211:40:002
3496622993121,5cyclictest0-21swapper/212:01:002
3496618993121,7cyclictest231ktimers/107:50:121
3496623993022,5cyclictest381rcuc/307:30:013
3496623993016,4cyclictest131rcu_preempt09:38:183
3496623993016,4cyclictest131rcu_preempt09:38:183
3496623993013,5cyclictest131rcu_preempt12:20:223
3496623993012,5cyclictest131rcu_preempt12:25:143
3496623993010,9cyclictest131rcu_preempt07:33:113
349662299302,3cyclictest0-21swapper/208:10:132
3496618993022,4cyclictest0-21swapper/112:30:131
3496618993021,5cyclictest0-21swapper/111:30:531
3496618993021,5cyclictest0-21swapper/110:40:001
3496618993020,6cyclictest0-21swapper/111:05:251
3496623992920,6cyclictest3599743-21fschecks_time12:05:163
3496622992923,4cyclictest3497911-21kworker/u8:2+events_unbound07:14:592
3496622992923,3cyclictest0-21swapper/209:55:262
3496622992920,6cyclictest3600576-21unixbench_singl12:05:262
3496622992918,8cyclictest3502295-21auditctl07:25:012
3496622992917,6cyclictest3602536-21kworker/u8:2+events_unbound12:20:182
3496622992917,6cyclictest0-21swapper/209:10:262
3496618992921,4cyclictest0-21swapper/107:35:231
3496618992919,6cyclictest3580001-21kworker/u8:2+events_unbound11:20:521
3496623992821,5cyclictest3585395-21kworker/u8:3+events_unbound11:30:553
3496623992810,5cyclictest131rcu_preempt09:02:523
3496622992822,4cyclictest3555841-21kworker/u8:0+events_unbound10:00:172
3496622992821,3cyclictest0-21swapper/208:35:222
3496622992821,3cyclictest0-21swapper/207:15:152
3496622992819,7cyclictest3538533-21munin-plugin-st09:10:012
3496618992815,9cyclictest3517387-21grep08:05:261
3496622992720,5cyclictest3500235-21kworker/u8:0+events_unbound07:30:002
3496622992719,6cyclictest3559358-21kworker/u8:2+events_unbound10:20:402
3496622992719,5cyclictest3545467-21kworker/u8:1+events_unbound09:29:262
3496622992717,6cyclictest0-21swapper/209:40:252
3496622992716,7cyclictest0-21swapper/210:55:252
3496618992720,5cyclictest3554045-21kworker/u8:1+events_unbound10:00:421
3496618992718,7cyclictest3560394-21tr10:10:201
3496622992620,4cyclictest3593732-21kworker/u8:2+events_unbound11:50:592
3496622992620,3cyclictest0-21swapper/207:45:292
3496622992619,5cyclictest3569789-21kworker/u8:0+events_unbound10:40:482
3496622992618,5cyclictest0-21swapper/211:25:232
3496622992617,7cyclictest3578255-21kworker/u8:0+events_unbound11:09:412
3496622992616,7cyclictest3529326-21tail08:40:242
3496622992616,7cyclictest3529326-21tail08:40:232
3496622992616,6cyclictest0-21swapper/211:15:242
349662299261,13cyclictest0-21swapper/209:25:012
3496618992619,4cyclictest0-21swapper/111:50:281
3496618992618,5cyclictest0-21swapper/110:50:161
3496618992618,4cyclictest0-21swapper/111:45:151
3496622992519,4cyclictest3588467-21kworker/u8:0+events_unbound12:17:022
3496622992518,3cyclictest0-21swapper/210:10:012
3496622992515,6cyclictest0-21swapper/211:55:252
3496618992516,7cyclictest231ktimers/108:50:151
3496618992515,7cyclictest0-21swapper/112:00:001
3496622992418,3cyclictest0-21swapper/211:40:212
3496622992417,5cyclictest3564424-21kworker/u8:1+events_unbound10:27:222
3496622992417,5cyclictest3564424-21kworker/u8:1+events_unbound10:27:222
3496622992417,4cyclictest0-21swapper/211:10:252
3496622992417,3cyclictest0-21swapper/210:10:152
3496622992413,4cyclictest3573259-21kworker/u8:1+events_unbound10:47:402
349661899247,14cyclictest231ktimers/108:10:171
349661899242,2cyclictest131rcu_preempt12:25:101
3496618992418,4cyclictest3536454-21kworker/u8:2+events_unbound09:10:331
3496618992417,3cyclictest0-21swapper/112:00:231
349662299235,4cyclictest131rcu_preempt08:00:192
3496622992316,5cyclictest3545467-21kworker/u8:1+events_unbound09:45:152
3496622992315,5cyclictest3522059-21ntpq08:20:212
3496622992310,6cyclictest32-21ksoftirqd/207:30:232
3496618992317,3cyclictest0-21swapper/110:20:171
3496618992316,3cyclictest0-21swapper/109:50:171
3496618992316,3cyclictest0-21swapper/108:24:591
3496618992315,5cyclictest3592255-21cron11:44:591
3496618992315,5cyclictest3549598-21uniq09:40:161
349662299226,9cyclictest32-21ksoftirqd/208:30:212
3496622992216,3cyclictest0-21swapper/212:35:182
3496622992215,5cyclictest311ktimers/209:50:202
3496622992215,4cyclictest0-21swapper/211:30:272
3496622992214,5cyclictest0-21swapper/212:25:192
3496622992212,6cyclictest3517369-21grep08:05:262
3496618992216,3cyclictest0-21swapper/112:15:161
3496618992216,3cyclictest0-21swapper/111:35:231
3496618992216,3cyclictest0-21swapper/110:45:211
3496618992216,3cyclictest0-21swapper/108:25:141
3496618992216,3cyclictest0-21swapper/107:20:161
3496618992215,4cyclictest0-21swapper/111:00:141
3496618992215,4cyclictest0-21swapper/109:55:161
3496618992215,4cyclictest0-21swapper/107:25:221
349661899220,4cyclictest0-21swapper/109:46:081
3496618992115,3cyclictest0-21swapper/107:30:271
3496618992114,5cyclictest231ktimers/111:15:171
3496618992114,4cyclictest438-21cron09:35:001
3496618992114,4cyclictest438-21cron09:35:001
3496618992112,5cyclictest3529786-21cron08:45:001
3496618992112,5cyclictest3529786-21cron08:45:001
349661899204,5cyclictest3509721-21fschecks_count07:45:161
3496618992013,5cyclictest231ktimers/108:00:141
3496618992013,4cyclictest3535563-21fschecks_time09:00:141
3496618992012,5cyclictest0-21swapper/107:55:251
3496618992011,5cyclictest3586681-21unixbench_multi11:25:231
3496618991915,2cyclictest0-21swapper/108:34:381
3496618991913,3cyclictest0-21swapper/109:20:171
3496618991810,5cyclictest0-21swapper/109:25:161
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional