You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-05 - 00:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Thu Dec 04, 2025 12:39:39)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2299825994738,6cyclictest2368661-21ssh10:00:012
2299824994738,6cyclictest2343375-21latency_hist09:20:031
2299823994640,4cyclictest2395160-21munin-run10:40:010
2299824994434,6cyclictest422-21dbus-daemon10:20:021
2299823994437,4cyclictest2326801-21sendmail08:40:010
2299823994330,9cyclictest2370592-21gltestperf10:04:120
2299824994234,5cyclictest2355661-21munin-run09:40:001
2299824994234,5cyclictest2355661-21munin-run09:40:001
2299824994232,6cyclictest2478952-21systemd-run12:40:011
2299825994132,6cyclictest1484156-21cups-browsed10:14:152
2299824994134,4cyclictest2443439-21latency_hist11:50:021
2299824994133,5cyclictest422-21dbus-daemon11:10:011
2299823994133,5cyclictest2348861-21ssh09:29:220
2299825994031,6cyclictest421-21avahi-daemon09:24:102
2299825994031,6cyclictest421-21avahi-daemon09:24:102
2299823994031,6cyclictest1484156-21cups-browsed11:19:370
2299823994028,10cyclictest2299822-21cyclictest07:50:010
2299825993832,3cyclictest0-21swapper/211:00:022
2299825993830,5cyclictest2422538-21cron11:20:012
2299825993829,6cyclictest421-21avahi-daemon09:11:492
2299825993829,6cyclictest1484156-21cups-browsed12:13:302
2299825993828,7cyclictest2436355-21cron11:40:012
2299825993827,8cyclictest2381597-21munin-plugin-st10:20:012
2299824993830,5cyclictest2358905-21cron09:45:001
2299825993729,5cyclictest2467647-21unixbench_singl12:24:322
2299825993728,6cyclictest2395163-21sendmail10:40:012
2299825993727,7cyclictest422-21dbus-daemon12:25:162
2299824993729,5cyclictest2450315-21cron12:00:011
2299824993729,5cyclictest2346023-21timerandwakeup09:24:321
2299824993729,5cyclictest2346023-21timerandwakeup09:24:321
2299824993729,5cyclictest1-21systemd08:15:011
2299824993729,5cyclictest1-21systemd08:15:011
2299824993729,4cyclictest2409001-21ssh11:00:011
2299824993728,6cyclictest1484156-21cups-browsed11:26:571
2299823993730,5cyclictest1-21systemd12:20:000
2299823993730,5cyclictest1-21systemd12:20:000
2299823993729,6cyclictest421-21avahi-daemon11:09:220
2299823993729,5cyclictest2478912-21munin-plugin-st12:40:010
2299825993628,5cyclictest2424618-21telnet11:24:132
2299825993628,5cyclictest1484156-21cups-browsed10:48:402
2299825993627,6cyclictest486-21gmain12:33:392
2299824993627,6cyclictest2424758-21fschecks_count11:24:151
2299824993626,7cyclictest2364847-21ntp_offset09:54:231
2299823993627,6cyclictest1484156-21cups-browsed12:14:140
2299825993529,3cyclictest0-21swapper/211:35:012
2299825993527,5cyclictest959-21mta-sts-daemon11:44:202
2299825993527,5cyclictest1484156-21cups-browsed07:28:272
2299825993526,6cyclictest1484156-21cups-browsed12:02:392
2299824993527,5cyclictest2460422-21unixbench_singl12:14:331
2299824993527,5cyclictest2395160-21munin-run10:40:011
2299824993527,5cyclictest2385014-21idleruntime-cro10:25:011
2299824993527,5cyclictest2333971-21munin-run09:05:011
2299823993529,4cyclictest2388327-21systemd-run10:30:020
2299823993527,5cyclictest2468068-21cat12:25:020
2299825993428,3cyclictest0-21swapper/209:44:322
2299825993426,5cyclictest2429160-21unixbench_multi11:29:352
2299825993425,6cyclictest2362256-21systemd-run09:50:012
229982499344,28cyclictest2335806-21diskmemload10:34:111
2299824993430,2cyclictest0-21swapper/111:15:011
2299824993428,4cyclictest0-21swapper/109:35:001
2299824993428,4cyclictest0-21swapper/109:35:001
2299824993426,5cyclictest957-21mta-sts-daemon10:54:541
2299824993426,5cyclictest2310262-21unixbench_singl07:44:331
2299824993426,5cyclictest2304861-21fschecks_time07:29:131
2299824993425,6cyclictest422-21dbus-daemon12:10:021
2299824993425,6cyclictest1484156-21cups-browsed08:39:211
2299824993424,7cyclictest2368646-21sendmail10:00:011
2299824993424,6cyclictest421-21avahi-daemon09:10:101
2299823993427,4cyclictest2374409-21wc10:09:290
2299823993426,5cyclictest1484156-21cups-browsed12:30:470
2299823993426,5cyclictest1484156-21cups-browsed11:48:290
2299823993425,6cyclictest1484156-21cups-browsed09:59:420
2299825993327,3cyclictest0-21swapper/211:50:022
2299825993324,6cyclictest1484156-21cups-browsed08:29:262
2299824993329,2cyclictest0-21swapper/111:19:161
2299824993328,2cyclictest0-21swapper/107:15:021
2299824993327,3cyclictest0-21swapper/112:19:271
2299824993327,3cyclictest0-21swapper/112:19:271
2299824993322,8cyclictest2401486-21mailstats10:49:261
2299824993322,8cyclictest2386903-21/usr/sbin/munin10:29:151
2299823993327,4cyclictest2333770-21sshd09:04:220
2299823993326,4cyclictest2425985-21ssh11:25:010
2299823993326,4cyclictest2342418-21sh09:19:260
2299823993325,5cyclictest453-21systemd-logind11:45:020
2299823993325,5cyclictest421-21avahi-daemon09:47:250
2299823993325,5cyclictest2380130-21aten_r2power_fr10:19:100
2299823993325,5cyclictest2355656-21cron09:40:000
2299823993325,5cyclictest2355656-21cron09:40:000
2299823993325,5cyclictest2335806-21diskmemload11:00:020
2299823993325,5cyclictest1-21systemd07:40:010
2299823993324,6cyclictest1484156-21cups-browsed08:00:190
2299823993320,3cyclictest0-21swapper/009:24:120
2299823993320,3cyclictest0-21swapper/009:24:120
2299825993224,5cyclictest2320863-21latency_hist08:20:022
2299825993224,5cyclictest2310861-21fschecks_time07:49:102
2299825993224,5cyclictest1484156-21cups-browsed12:00:022
2299825993223,7cyclictest2335806-21diskmemload09:19:132
2299825993223,6cyclictest1484156-21cups-browsed10:00:362
2299825993222,7cyclictest698-21cron07:40:012
2299824993227,2cyclictest0-21swapper/111:45:011
2299823993225,5cyclictest959-21mta-sts-daemon11:25:490
2299823993225,4cyclictest2324696-21kworker/u8:0-xprtiod08:55:020
2299823993224,5cyclictest1484153-21cupsd09:12:010
2299823993223,6cyclictest2418736-21timerandwakeup11:14:310
2299823993222,3cyclictest2325071-21timerandwakeup08:34:320
2299823993221,4cyclictest2352053-21mailstats09:34:290
2299823993221,4cyclictest2352053-21mailstats09:34:290
2299825993124,4cyclictest0-21swapper/210:55:012
2299825993123,5cyclictest2457211-21/usr/sbin/munin12:10:022
2299825993123,5cyclictest2331290-21cron08:55:012
2299825993123,5cyclictest2317746-21unixbench_singl08:09:312
2299824993126,2cyclictest0-21swapper/108:54:221
2299824993125,4cyclictest2299822-21cyclictest10:04:061
2299824993125,2cyclictest0-21swapper/111:35:021
2299823993125,4cyclictest2391764-21ssh10:35:020
2299823993124,5cyclictest1484156-21cups-browsed11:52:410
2299823993123,5cyclictest2397071-21/usr/sbin/munin10:44:110
2299823993123,5cyclictest1484156-21cups-browsed10:51:140
229982599307,6cyclictest1484156-21cups-browsed09:29:132
2299825993022,5cyclictest2384686-21unixbench-2d10:24:342
2299825993022,5cyclictest2328348-21latency_hist08:45:022
2299825993022,5cyclictest2316321-21munin-plugin-st08:05:012
2299825993021,6cyclictest2335833-21unin-run09:10:022
2299825993021,5cyclictest2319336-21latency_hist08:15:022
2299825993021,5cyclictest2319336-21latency_hist08:15:022
2299825993020,7cyclictest2397742-21sh10:44:202
2299824993024,3cyclictest2304336-21kworker/u8:1+xprtiod07:45:251
2299824993023,4cyclictest959-21mta-sts-daemon10:10:141
2299824993023,4cyclictest2334482-21unixbench_singl09:05:041
2299824993022,5cyclictest1484156-21cups-browsed12:24:541
2299824993020,7cyclictest956-21mta-sts-daemon09:29:051
2299824993020,6cyclictest2307324-21systemd-run07:35:011
2299823993023,5cyclictest2452194-21/usr/sbin/munin12:04:080
2299823993023,5cyclictest1484156-21cups-browsed10:20:340
2299823993023,5cyclictest1484156-21cups-browsed08:28:090
2299823993023,4cyclictest2320840-21kworker/u8:13-xprtiod08:25:010
2299823993023,4cyclictest2320840-21kworker/u8:13-xprtiod08:25:010
2299823993023,4cyclictest1484156-21cups-browsed07:20:120
2299823993022,5cyclictest2401319-21sshd10:49:220
2299823993021,5cyclictest0-21swapper/012:00:010
2299825992923,3cyclictest0-21swapper/212:20:012
2299825992923,3cyclictest0-21swapper/212:20:012
2299825992922,4cyclictest2388190-21unixbench_multi10:29:322
2299825992922,4cyclictest2326810-21systemctl08:40:012
2299825992922,3cyclictest0-21swapper/210:34:252
2299825992921,5cyclictest266-21systemd-journal09:05:012
2299825992921,5cyclictest2418351-21ntp_kernel_pll_11:14:202
2299825992921,5cyclictest2314817-21sendmail08:00:012
2299824992924,2cyclictest0-21swapper/108:45:011
2299824992924,2cyclictest0-21swapper/107:40:011
2299824992923,4cyclictest957-21mta-sts-daemon11:03:261
2299824992923,3cyclictest0-21swapper/111:54:221
2299824992923,3cyclictest0-21swapper/110:44:281
2299824992922,4cyclictest957-21mta-sts-daemon08:59:281
2299824992922,4cyclictest433-21polkitd12:02:061
2299824992921,5cyclictest2471336-21unixbench_singl12:29:341
2299823992924,2cyclictest0-21swapper/007:43:230
2299823992923,4cyclictest2320809-21sendmail08:20:010
2299823992923,3cyclictest2457006-21grep12:09:340
2299823992922,5cyclictest1484156-21cups-browsed10:11:350
2299823992921,6cyclictest2327680-21ntp_kernel_err08:44:190
2299823992921,5cyclictest1484156-21cups-browsed09:53:290
2299823992920,6cyclictest0-21swapper/011:40:020
2299823992917,9cyclictest2432436-21ssh11:34:320
2299823992916,10cyclictest959-21mta-sts-daemon09:44:150
2299825992823,3cyclictest0-21swapper/208:35:002
2299825992822,3cyclictest0-21swapper/212:40:012
2299825992821,4cyclictest2301635-21aten_r2power_en07:19:102
2299824992822,3cyclictest0-21swapper/112:34:201
2299824992821,4cyclictest2303373-21fschecks_time07:24:131
2299824992821,4cyclictest2299844-21latency_hist07:10:021
2299824992820,5cyclictest2434920-21aten_r2power_vo11:39:101
2299824992820,5cyclictest2320802-21idleruntime-cro08:20:011
2299824992818,6cyclictest1484156-21cups-browsed08:09:291
2299824992813,10cyclictest422-21dbus-daemon10:09:341
2299823992821,5cyclictest1-21systemd07:16:180
2299825992721,3cyclictest0-21swapper/211:05:012
2299825992721,3cyclictest0-21swapper/208:24:232
2299825992721,3cyclictest0-21swapper/208:24:232
2299825992720,3cyclictest0-21swapper/209:39:272
2299825992720,3cyclictest0-21swapper/209:39:272
2299825992720,3cyclictest0-21swapper/207:14:252
2299825992719,5cyclictest2352615-21systemd-run09:35:012
2299825992719,5cyclictest2352615-21systemd-run09:35:012
2299825992719,5cyclictest1-21systemd07:25:022
2299825992718,6cyclictest2365564-21sh09:55:012
2299825992712,10cyclictest2335806-21diskmemload11:06:312
2299824992721,3cyclictest2307444-21kworker/u8:12-nfsiod08:30:021
2299823992720,4cyclictest2314712-21sed07:59:290
2299823992719,6cyclictest2318457-21kernelversion08:14:140
2299823992719,6cyclictest2318457-21kernelversion08:14:140
2299823992714,11cyclictest2470494-21latency12:29:170
2299825992620,3cyclictest0-21swapper/207:34:202
2299825992616,7cyclictest2309737-21ntp_kernel_pll_07:44:232
2299824992620,4cyclictest2299822-21cyclictest08:24:201
2299824992620,4cyclictest2299822-21cyclictest08:24:201
2299824992620,3cyclictest0-21swapper/108:49:211
2299824992618,5cyclictest2314744-21head07:59:301
2299824992618,3cyclictest0-21swapper/109:47:401
2299823992621,3cyclictest2305705-21tail07:29:300
2299823992621,2cyclictest0-21swapper/009:10:010
2299823992620,4cyclictest2328857-21fschecks_time08:49:120
229982599258,4cyclictest2335806-21diskmemload10:08:182
2299825992519,3cyclictest0-21swapper/207:54:332
2299825992518,4cyclictest2331836-21fschecks_count08:59:242
2299825992517,5cyclictest0-21swapper/211:54:192
229982499256,10cyclictest957-21mta-sts-daemon07:54:181
2299823992519,4cyclictest2331777-21cpuspeed08:59:220
2299823992510,11cyclictest422-21dbus-daemon11:00:530
2299824992416,5cyclictest2324357-21fschecks_time08:34:121
2299823992418,4cyclictest1-21systemd07:31:450
2299823992412,3cyclictest171rcu_preempt08:09:080
2299825992317,3cyclictest0-21swapper/208:49:152
2299823992317,3cyclictest2300496-21latency07:14:150
2299823992313,7cyclictest1484156-21cups-browsed07:54:270
2299824992215,4cyclictest2315088-21aten_r2power_cu08:04:071
229982699215,10cyclictest0-21swapper/312:09:213
229982699213,9cyclictest0-21swapper/309:44:233
229982699213,11cyclictest0-21swapper/312:19:263
229982699213,11cyclictest0-21swapper/312:19:263
229982699213,11cyclictest0-21swapper/310:04:203
229982699212,9cyclictest0-21swapper/310:49:183
2299824992116,2cyclictest0-21swapper/107:19:231
229982699204,9cyclictest0-21swapper/309:29:303
229982699204,8cyclictest0-21swapper/311:54:173
229982699204,10cyclictest0-21swapper/307:45:243
229982699202,9cyclictest0-21swapper/312:14:213
229982699202,9cyclictest0-21swapper/310:39:223
229982699202,12cyclictest0-21swapper/311:34:233
229982699202,10cyclictest0-21swapper/309:14:223
229982699201,9cyclictest0-21swapper/310:29:143
2299825992011,6cyclictest453-21systemd-logind07:10:022
229982699194,8cyclictest0-21swapper/310:54:213
229982699193,9cyclictest0-21swapper/312:34:203
229982699193,9cyclictest0-21swapper/309:54:193
229982699193,11cyclictest0-21swapper/310:24:243
229982699193,10cyclictest0-21swapper/311:44:243
229982699192,9cyclictest0-21swapper/312:39:213
229982699192,8cyclictest0-21swapper/311:49:133
229982699192,10cyclictest0-21swapper/312:29:293
229982699191,10cyclictest0-21swapper/311:59:173
229982699183,9cyclictest0-21swapper/312:24:093
229982699183,9cyclictest0-21swapper/311:29:293
229982699183,9cyclictest0-21swapper/310:19:193
229982699183,9cyclictest0-21swapper/309:19:213
229982699183,8cyclictest0-21swapper/309:24:183
229982699183,8cyclictest0-21swapper/309:24:183
229982699183,7cyclictest0-21swapper/307:39:213
229982699183,10cyclictest0-21swapper/311:09:193
229982699183,10cyclictest0-21swapper/310:09:223
229982699181,9cyclictest0-21swapper/311:19:133
229982699181,10cyclictest0-21swapper/310:14:203
229982699173,9cyclictest0-21swapper/310:44:243
229982699173,8cyclictest0-21swapper/311:39:233
229982699172,9cyclictest0-21swapper/311:24:283
229982699172,9cyclictest0-21swapper/308:04:203
229982699172,8cyclictest0-21swapper/310:59:213
229982699172,8cyclictest0-21swapper/308:49:193
229982699171,9cyclictest0-21swapper/309:34:193
229982699171,9cyclictest0-21swapper/309:34:193
229982699171,8cyclictest0-21swapper/307:24:203
229982699171,11cyclictest0-21swapper/309:39:203
229982699171,11cyclictest0-21swapper/309:39:203
229982699171,10cyclictest0-21swapper/312:04:223
229982699171,10cyclictest0-21swapper/309:49:193
229982399174,10cyclictest151ktimers/007:10:020
229982699163,9cyclictest0-21swapper/311:04:193
229982699163,8cyclictest0-21swapper/309:59:243
229982699163,7cyclictest0-21swapper/308:54:233
229982699163,7cyclictest0-21swapper/308:19:193
229982699162,8cyclictest0-21swapper/309:09:263
229982699162,8cyclictest0-21swapper/309:04:223
229982699162,6cyclictest0-21swapper/307:54:183
229982699162,10cyclictest0-21swapper/310:34:293
229982699161,9cyclictest0-21swapper/311:10:153
229982699161,7cyclictest0-21swapper/308:24:183
229982699161,7cyclictest0-21swapper/308:24:183
229982699152,7cyclictest0-21swapper/308:34:183
229982699151,9cyclictest0-21swapper/307:19:183
229982699151,8cyclictest0-21swapper/308:14:193
229982699151,8cyclictest0-21swapper/308:14:193
229982699151,8cyclictest0-21swapper/307:59:183
229982699142,8cyclictest0-21swapper/307:45:013
229982699141,9cyclictest0-21swapper/309:00:013
229982699141,8cyclictest0-21swapper/308:39:193
229982699141,8cyclictest0-21swapper/308:09:213
229982699141,8cyclictest0-21swapper/307:30:013
229982699131,7cyclictest0-21swapper/308:44:193
229982699131,6cyclictest0-21swapper/307:34:173
229982699131,6cyclictest0-21swapper/307:14:223
229982699127,3cyclictest0-21swapper/307:10:023
229982699121,7cyclictest0-21swapper/308:29:113
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional