You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-07 - 16:47

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Sun Dec 07, 2025 12:44:47)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2791734995622,18cyclictest0-21swapper/308:15:273
2791734995622,18cyclictest0-21swapper/308:15:263
279173499541,45cyclictest599-21sshd09:05:143
2791723995236,5cyclictest2807719-21kworker/u8:1+events_unbound07:55:010
2791732994835,10cyclictest215-21dbus-daemon09:00:132
2791728994734,9cyclictest2823659-21sshd08:40:131
2791723994736,9cyclictest121ktimers/009:10:130
2791723994732,12cyclictest121ktimers/010:25:170
279173499461,27cyclictest2883982-21/usr/sbin/munin11:35:163
2791723994637,5cyclictest2874413-21kworker/u8:3+events_unbound11:45:490
2791728994535,8cyclictest231ktimers/110:15:131
2791728994535,8cyclictest231ktimers/110:15:131
279173499441,38cyclictest2863435-21/usr/sbin/munin10:35:193
279173499441,38cyclictest2846493-21/usr/sbin/munin09:45:223
279173499441,38cyclictest2811495-21munin-node08:05:113
2791723994434,6cyclictest2809118-21grep07:55:270
279172399442,9cyclictest11-21ksoftirqd/009:40:110
2791734994336,4cyclictest2830245-21sendmail09:00:003
2791734994318,22cyclictest0-21swapper/310:50:333
279173499431,39cyclictest2840072-21/usr/sbin/munin09:25:253
279173499431,37cyclictest2834088-21/usr/sbin/munin09:10:133
279173499431,37cyclictest2802969-21munin-node07:40:113
279173499422,38cyclictest2807521-21sshd07:51:143
279173499421,38cyclictest2885994-21/usr/sbin/munin11:40:163
279173499421,36cyclictest2887671-21/usr/sbin/munin11:45:173
279173499421,36cyclictest2864926-21/usr/sbin/munin10:40:143
279173499421,36cyclictest2844902-21ntp_states09:40:203
2791732994235,4cyclictest2833859-21munin-plugin-st09:10:002
2791732994235,4cyclictest2809554-21cron08:00:002
2791728994230,9cyclictest231ktimers/108:25:161
279172399422,8cyclictest11-21ksoftirqd/009:45:140
2791723994212,5cyclictest131rcu_preempt12:05:130
279173499412,34cyclictest2799545-21munin-node07:30:123
279173499412,32cyclictest2878672-21apt-get11:20:133
279173499411,37cyclictest53-21kcompactd008:50:503
279173499411,37cyclictest2875362-21/usr/sbin/munin11:10:153
279173499411,37cyclictest2866816-21/usr/sbin/munin10:45:183
279173499411,37cyclictest2825806-21/usr/sbin/munin08:45:193
279173499411,35cyclictest2899473-21diskstats12:20:153
279173499411,35cyclictest2871943-21/usr/sbin/munin11:00:173
279173499411,35cyclictest2847738-21munin-node09:50:123
279173499411,35cyclictest2835789-21/usr/sbin/munin09:15:123
279173499411,35cyclictest2820140-21/usr/sbin/munin08:30:143
279173499411,34cyclictest2892638-21/usr/sbin/munin12:00:153
279173499410,35cyclictest0-21swapper/310:10:113
2791732994134,4cyclictest2830230-21sendmail09:00:002
2791732994133,4cyclictest2807852-21idleruntime-cro07:55:002
2791728994132,5cyclictest2844092-21audit_send_reply09:40:001
2791723994133,6cyclictest151rcuc/012:35:120
2791723994130,9cyclictest121ktimers/008:20:170
2791723994130,9cyclictest121ktimers/008:20:160
279173499401,36cyclictest53-21kcompactd010:02:233
279173499401,36cyclictest2892204-21sshd11:59:113
279173499401,36cyclictest2858444-21/usr/sbin/munin10:20:223
279173499401,36cyclictest2849717-21/usr/sbin/munin09:55:183
279173499401,36cyclictest2810277-21/usr/sbin/munin08:00:213
279173499401,36cyclictest2808238-21/usr/sbin/munin07:55:173
279173499401,36cyclictest2801596-21/usr/sbin/munin07:35:203
279173499401,36cyclictest2792583-21/usr/sbin/munin07:10:233
279173499401,35cyclictest2818442-21/usr/sbin/munin08:25:183
279173499401,34cyclictest2889227-21/usr/sbin/munin11:50:173
279173499401,34cyclictest2852976-21/usr/sbin/munin10:05:183
279173499401,34cyclictest2852976-21/usr/sbin/munin10:05:183
279173499401,33cyclictest2895929-21apt-get12:10:113
279173499400,32cyclictest0-21swapper/312:05:123
2791728994030,6cyclictest2869265-21grep10:50:321
279172399402,8cyclictest11-21ksoftirqd/007:10:130
279173499392,34cyclictest2824428-21sensors_temp08:40:433
2791734993917,18cyclictest0-21swapper/310:25:283
279173499391,35cyclictest2905753-21cron12:37:593
279173499391,35cyclictest2904151-21sshd12:34:113
279173499391,35cyclictest2882520-21/usr/sbin/munin11:30:173
279173499391,35cyclictest2881036-21/usr/sbin/munin11:25:223
279173499391,35cyclictest2877469-21/usr/sbin/munin11:15:223
279173499391,35cyclictest2862684-21cron10:33:003
279173499391,35cyclictest2843297-21/usr/sbin/munin09:35:243
279173499391,35cyclictest2842130-21cron09:32:003
279173499391,35cyclictest2838249-21/usr/sbin/munin09:20:263
279173499391,35cyclictest2831383-21/usr/sbin/munin09:00:233
279173499391,35cyclictest2822630-21/usr/sbin/munin08:35:393
279173499391,35cyclictest2817824-21cron08:22:013
279173499391,35cyclictest2817824-21cron08:22:003
279173499391,35cyclictest2797009-21/usr/sbin/munin07:20:273
279173499391,35cyclictest2795605-21sshd07:19:133
279173499391,34cyclictest2798383-21/usr/sbin/munin07:25:203
279173499391,33cyclictest2901186-21/usr/sbin/munin12:25:153
2791728993931,4cyclictest2833842-21cron09:10:001
2791723993920,4cyclictest2883761-21grep11:34:590
279172399391,8cyclictest11-21ksoftirqd/009:50:130
279172399391,8cyclictest11-21ksoftirqd/009:05:130
279173499381,34cyclictest2898085-21/usr/sbin/munin12:15:213
279173499381,34cyclictest2874645-21sshd11:05:393
279173499381,34cyclictest2814321-21cron08:11:003
279173499381,34cyclictest2805883-21cron07:47:003
279172399388,5cyclictest131rcu_preempt11:10:140
2791723993827,7cyclictest0-21swapper/009:30:280
2791723993811,4cyclictest131rcu_preempt11:25:130
2791732993728,6cyclictest2900818-21sh12:25:012
2791732993727,7cyclictest2876291-21grep11:10:402
2791728993728,5cyclictest2900396-21unixbench_singl12:20:251
279172399373,10cyclictest11-21ksoftirqd/011:50:140
279173499361,29cyclictest2869920-21apt-get10:55:143
2791732993628,4cyclictest0-21swapper/210:15:252
2791732993628,4cyclictest0-21swapper/210:15:242
2791732993626,6cyclictest0-21swapper/209:20:292
2791728993628,4cyclictest0-21swapper/111:15:261
279172399366,4cyclictest131rcu_preempt11:40:120
2791723993425,4cyclictest0-21swapper/008:10:000
2791723993424,6cyclictest0-21swapper/007:25:260
2791732993326,4cyclictest0-21swapper/209:50:242
2791732993323,6cyclictest0-21swapper/207:25:002
2791732993322,8cyclictest2847510-21idleruntime-cro09:50:012
2791728993325,4cyclictest0-21swapper/108:35:421
2791723993323,6cyclictest0-21swapper/011:25:010
2791723993322,8cyclictest0-21swapper/010:19:590
2791723993322,8cyclictest0-21swapper/010:19:590
2791723993320,10cyclictest121ktimers/007:30:130
2791723993317,5cyclictest2802424-21kworker/u8:1+events_unbound07:45:200
2791728993224,4cyclictest0-21swapper/109:50:001
2791723993219,10cyclictest151rcuc/008:55:120
2791732993124,4cyclictest0-21swapper/209:40:232
2791732993124,4cyclictest0-21swapper/207:40:012
2791732993123,4cyclictest2859447-21cron10:24:592
279173299312,25cyclictest2818073-21cron08:25:012
279173299312,25cyclictest2818073-21cron08:25:002
2791732993121,5cyclictest2878449-21sendmail-msp11:20:002
2791728993124,4cyclictest0-21swapper/110:05:281
2791728993124,4cyclictest0-21swapper/110:05:281
2791728993123,4cyclictest2821686-21apt-key08:35:011
2791728993123,4cyclictest0-21swapper/109:00:261
2791728993121,6cyclictest2893598-21grep12:00:281
279172399318,13cyclictest131rcu_preempt10:45:000
279172399312,7cyclictest11-21ksoftirqd/011:55:120
2791723993123,4cyclictest0-21swapper/011:05:260
2791723993122,3cyclictest0-21swapper/007:20:200
2791723993116,6cyclictest2823774-21kworker/u8:2+events_unbound08:40:570
2791732993023,4cyclictest0-21swapper/210:30:252
2791732993020,7cyclictest2803967-21grep07:40:262
279172899305,5cyclictest131rcu_preempt08:55:131
2791728993023,5cyclictest2867709-21kworker/u8:1+events_unbound11:10:421
2791728993022,4cyclictest0-21swapper/107:40:161
2791723993023,5cyclictest2784518-21kworker/u8:3+events_unbound07:15:430
2791723993015,5cyclictest2867709-21kworker/u8:1+events_unbound10:56:510
2791732992916,9cyclictest311ktimers/209:55:132
2791728992923,3cyclictest0-21swapper/111:55:141
2791728992922,4cyclictest2851088-21latency_hist10:00:011
2791728992921,5cyclictest2802311-21grep07:35:261
2791728992920,6cyclictest2887182-21idleruntime-cro11:45:011
2791723992923,4cyclictest2807719-21kworker/u8:1+events_unbound09:00:420
2791723992922,5cyclictest2867709-21kworker/u8:1+events_unbound10:50:260
2791723992922,4cyclictest0-21swapper/012:30:280
2791723992921,5cyclictest121ktimers/009:15:110
2791732992819,6cyclictest53-21kcompactd010:50:262
2791728992823,3cyclictest2898850-21sh12:17:001
2791728992822,4cyclictest2865981-21kworker/u8:0+events_unbound10:45:361
2791728992822,4cyclictest2801100-21latency_hist07:35:011
2791728992820,6cyclictest2808710-21wc07:55:231
2791723992823,3cyclictest0-21swapper/010:10:120
2791723992821,5cyclictest2897496-21kworker/u8:1+events_unbound12:16:510
2791723992821,4cyclictest28541362sleep010:07:450
2791723992821,4cyclictest28541362sleep010:07:450
2791732992720,3cyclictest0-21swapper/210:40:152
2791732992719,4cyclictest2837266-21sh09:20:012
2791732992719,4cyclictest0-21swapper/211:20:162
2791728992720,5cyclictest2838906-21kworker/u8:0+events_unbound09:50:231
2791728992719,4cyclictest0-21swapper/110:25:281
2791728992713,11cyclictest2791721-21cyclictest09:10:121
2791723992720,5cyclictest2804163-21kworker/u8:0+events_unbound08:04:250
2791723992719,6cyclictest2807719-21kworker/u8:1+events_unbound08:30:180
2791723992719,5cyclictest2895641-21kworker/u8:2+events_unbound12:10:170
2791723992719,5cyclictest121ktimers/008:25:220
2791723992716,7cyclictest2861619-21tune2fs10:30:150
2791723992713,4cyclictest2900654-21runrttasks12:23:010
279172399271,14cyclictest0-21swapper/008:54:110
2791732992619,4cyclictest2873102-21apt-get11:05:012
2791732992619,4cyclictest0-21swapper/209:10:262
2791732992618,5cyclictest0-21swapper/211:25:282
2791732992618,5cyclictest0-21swapper/207:20:012
2791732992618,4cyclictest0-21swapper/210:55:282
2791732992618,4cyclictest0-21swapper/209:30:182
2791732992617,5cyclictest311ktimers/208:15:162
2791732992617,5cyclictest311ktimers/208:15:162
2791728992620,3cyclictest0-21swapper/107:10:251
2791728992619,5cyclictest2811448-21latency_hist08:05:011
2791728992619,4cyclictest0-21swapper/110:30:241
2791728992619,3cyclictest0-21swapper/109:20:271
2791728992618,4cyclictest0-21swapper/110:55:271
2791728992616,7cyclictest0-21swapper/111:25:001
2791728992614,8cyclictest0-21swapper/111:00:201
279172399269,10cyclictest131rcu_preempt11:15:250
2791723992619,5cyclictest2797056-21kworker/u8:2+events_unbound07:40:210
2791723992619,4cyclictest382-21ntpd08:10:210
2791723992617,5cyclictest2849606-21grep09:55:170
2791723992616,6cyclictest0-21swapper/008:20:010
2791723992616,6cyclictest0-21swapper/008:20:000
2791723992615,7cyclictest0-21swapper/012:00:220
279172399261,13cyclictest0-21swapper/011:38:550
279172399261,13cyclictest0-21swapper/007:37:510
279172399261,11cyclictest0-21swapper/010:49:180
2791732992518,4cyclictest0-21swapper/208:45:262
2791732992518,3cyclictest0-21swapper/208:10:182
2791732992517,3cyclictest0-21swapper/212:35:152
2791732992516,7cyclictest311ktimers/207:25:042
2791732992516,6cyclictest2860703-21unixbench_multi10:25:282
2791732992515,7cyclictest2898204-21ntp_states12:15:222
2791732992515,7cyclictest2828522-21ls08:55:012
2791728992519,3cyclictest0-21swapper/107:20:021
2791728992518,5cyclictest2838906-21kworker/u8:0+events_unbound09:30:211
2791728992518,4cyclictest2826275-21timerwakeupswit08:45:241
2791728992517,4cyclictest0-21swapper/110:35:331
2791728992516,6cyclictest0-21swapper/107:45:261
2791728992514,7cyclictest215-21dbus-daemon11:35:451
279172399259,4cyclictest131rcu_preempt09:20:180
279172399258,9cyclictest11-21ksoftirqd/012:25:220
2791723992517,4cyclictest0-21swapper/009:25:210
279172399251,13cyclictest0-21swapper/010:22:550
279172399251,11cyclictest0-21swapper/008:38:290
2791723992510,3cyclictest0-21swapper/011:05:000
2791732992418,3cyclictest0-21swapper/208:40:202
2791732992417,3cyclictest0-21swapper/210:50:002
2791732992417,3cyclictest0-21swapper/208:10:012
2791732992416,4cyclictest0-21swapper/211:55:162
2791732992415,6cyclictest2807719-21kworker/u8:1+events_unbound08:35:082
2791732992414,7cyclictest311ktimers/210:05:152
2791732992414,7cyclictest311ktimers/210:05:152
2791732992411,11cyclictest2791721-21cyclictest08:25:162
2791728992417,5cyclictest231ktimers/108:15:221
2791728992417,5cyclictest231ktimers/108:15:211
2791728992417,3cyclictest0-21swapper/107:20:181
2791728992415,6cyclictest2904642-21fschecks_time12:35:161
2791728992415,4cyclictest0-21swapper/107:25:261
2791723992418,4cyclictest2848948-21kworker/u8:1+events_unbound10:02:130
2791723992417,5cyclictest2807719-21kworker/u8:1+events_unbound08:46:370
2791723992417,3cyclictest0-21swapper/009:40:010
279172399241,12cyclictest0-21swapper/010:38:410
2791732992317,3cyclictest0-21swapper/209:25:182
2791732992317,3cyclictest0-21swapper/208:00:172
2791732992316,4cyclictest2852633-21cron10:05:002
2791732992315,5cyclictest0-21swapper/210:40:012
2791728992317,3cyclictest0-21swapper/110:00:241
2791728992317,3cyclictest0-21swapper/109:15:151
2791728992316,5cyclictest2867709-21kworker/u8:1+events_unbound11:05:411
2791732992216,3cyclictest0-21swapper/211:55:022
2791732992216,3cyclictest0-21swapper/207:45:212
2791732992215,4cyclictest311ktimers/212:10:252
2791732992213,6cyclictest0-21swapper/212:30:012
2791732992211,8cyclictest2842733-21df_inode09:35:152
2791732992211,7cyclictest2888884-21munin-plugin-st11:50:002
2791728992216,3cyclictest0-21swapper/110:20:221
2791728992212,6cyclictest2889305-21cut11:50:181
2791732992114,5cyclictest311ktimers/212:30:122
2791732992114,5cyclictest0-21swapper/212:10:002
2791732992114,4cyclictest0-21swapper/211:05:262
2791732992113,4cyclictest0-21swapper/208:35:002
2791728992115,3cyclictest0-21swapper/111:25:121
2791728992113,5cyclictest231ktimers/108:05:141
2791728992112,7cyclictest2854796-21perl10:10:151
279172899211,17cyclictest2813206-21taskset08:10:141
2791732992014,3cyclictest0-21swapper/211:40:112
2791728992015,3cyclictest2804163-21kworker/u8:0-events_freezable_power_07:50:221
2791728992014,4cyclictest0-21swapper/108:20:161
2791728992014,4cyclictest0-21swapper/108:20:161
2791728992014,3cyclictest0-21swapper/112:30:171
2791728992014,3cyclictest0-21swapper/112:05:171
2791728992013,5cyclictest231ktimers/109:40:171
2791728992013,4cyclictest231ktimers/112:15:001
2791728992013,4cyclictest0-21swapper/109:25:251
2791728992010,7cyclictest2882916-21wc11:30:241
279173299199,7cyclictest2882785-21cat11:30:222
2791728991913,3cyclictest0-21swapper/108:50:141
279172899191,13cyclictest2902515-21cron12:30:001
2791728991910,6cyclictest2865073-21/usr/sbin/munin10:40:171
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional