You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-10 - 01:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Wed Jun 10, 2026 00:43:34)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2597572997258,9cyclictest2741392-21kworker/u8:7-xprtiod00:08:321
2597572997258,9cyclictest2741392-21kworker/u8:7-xprtiod00:08:321
2597571995940,15cyclictest2747605-40mandb00:08:300
2597571995940,15cyclictest2747605-40mandb00:08:300
2597571995728,17cyclictest151ktimers/022:55:260
2597572995648,4cyclictest0-21swapper/121:55:251
259757199551,42cyclictest151ktimers/023:25:220
2597572995242,7cyclictest2621622-21systemd-run20:30:011
2597572995143,5cyclictest2629108-21systemd-run20:55:021
2597571995129,13cyclictest12650irq/32-eth000:15:250
2597572995032,15cyclictest1-21systemd00:00:021
2597572994932,13cyclictest2703634-21systemctl23:00:011
2597572994840,5cyclictest2759229-21grep00:25:351
259757199471,37cyclictest151ktimers/022:10:250
259757299453,6cyclictest2610580-21ntpq19:50:281
2597572994528,14cyclictest2636798-21cron21:15:011
259757199454,32cyclictest2676067-21ssh22:15:230
259757399444,32cyclictest2698318-21ssh22:50:242
2597573994436,5cyclictest2620136-21systemd-run20:25:012
2597572994436,5cyclictest2726183-21aten_r2power_cu23:35:131
259757299443,10cyclictest2622509-21ntpq20:30:261
259757299443,10cyclictest2622509-21ntpq20:30:261
259757299441,12cyclictest2606026-21ntpq19:35:271
2597573994335,5cyclictest2767209-21sendmail00:40:012
259757399431,36cyclictest2634614-21ssh21:10:232
259757299438,5cyclictest271ktimers/122:30:271
2597571994327,11cyclictest12650irq/32-eth021:30:380
2597573994232,8cyclictest0-21swapper/223:15:282
259757299423,6cyclictest2647588-21ntpq21:30:391
2597572994233,5cyclictest2757692-21systemd-run00:25:011
259757299422,6cyclictest2613569-21ntpq20:00:281
259757299422,6cyclictest2612075-21ntpq19:55:281
259757299421,35cyclictest2650599-21diskmemload21:35:281
259757299421,35cyclictest2650599-21diskmemload21:35:281
259757299421,11cyclictest2623948-21ntpq20:35:231
259757299421,11cyclictest2623948-21ntpq20:35:231
259757299421,11cyclictest2619486-21ntpq20:20:231
259757199421,32cyclictest151ktimers/019:45:280
259757199421,32cyclictest151ktimers/019:45:280
2597573994133,5cyclictest2748129-21cron00:10:002
2597573994133,5cyclictest2748129-21cron00:10:002
259757299417,3cyclictest0-21swapper/121:00:231
259757299414,11cyclictest2644228-21ntpq21:25:231
259757299413,8cyclictest2615087-21ntpq20:05:271
259757299412,31cyclictest2704619-21ssh23:00:221
259757299412,31cyclictest2704619-21ssh23:00:221
259757299412,16cyclictest2676068-21ntpq22:15:231
2597572994119,18cyclictest0-21swapper/100:30:221
259757299411,6cyclictest2599920-21ntpq19:15:221
259757299411,6cyclictest2599920-21ntpq19:15:221
259757299411,11cyclictest2742817-21ntpq00:00:251
259757299411,11cyclictest2742817-21ntpq00:00:251
259757299411,11cyclictest2714293-21ntpq23:15:311
2597571994133,4cyclictest2641298-21mailstats21:20:310
2597571994132,7cyclictest623-21sshd20:35:290
2597571994132,7cyclictest623-21sshd20:35:290
2597571994114,19cyclictest12650irq/32-eth021:40:240
259757399403,30cyclictest2647501-21ssh21:30:352
259757399402,30cyclictest2666586-21ssh22:00:252
259757299404,7cyclictest2653904-21ntpq21:40:281
2597572994034,3cyclictest0-21swapper/122:10:301
2597572994032,5cyclictest2767225-21ssh00:40:011
259757299403,11cyclictest1000-21mta-sts-daemon23:40:221
259757299402,6cyclictest2598471-21ntpq19:10:231
259757299402,6cyclictest2598471-21ntpq19:10:231
2597572994025,12cyclictest0-21swapper/119:25:011
259757299402,14cyclictest2657022-21ssh21:45:251
259757299401,9cyclictest2616550-21ntp_states20:10:261
2597572994017,20cyclictest2608116-21grep19:45:011
259757299401,10cyclictest2625489-21ntpq20:40:231
259757299401,10cyclictest2625489-21ntpq20:40:231
2597571994019,15cyclictest12650irq/32-eth000:10:260
2597571994019,15cyclictest12650irq/32-eth000:10:260
259757399397,18cyclictest1003-21mta-sts-daemon23:05:252
2597573993930,5cyclictest2733324-21sh23:45:282
2597573993930,3cyclictest0-21swapper/223:35:242
259757299392,6cyclictest2633055-21ntpq21:05:271
259757299391,9cyclictest2736494-21ntpq23:50:281
2597572993917,17cyclictest271ktimers/119:45:221
2597572993917,17cyclictest271ktimers/119:45:221
259757299391,12cyclictest2671846-21ssh22:09:561
2597571993923,9cyclictest694-21cron20:00:000
259757399384,8cyclictest171rcu_preempt20:50:292
259757399383,30cyclictest2761904-21ssh00:30:252
2597573993831,4cyclictest2757667-21cron00:25:012
2597573993831,4cyclictest2675088-21systemd-run22:15:012
2597573993831,4cyclictest1002-21mta-sts-daemon21:15:292
259757399382,30cyclictest2711042-21ssh23:10:282
259757299387,3cyclictest2734442-21ssh23:47:171
259757299385,5cyclictest0-21swapper/120:55:201
2597572993829,5cyclictest2717041-21if_eth023:20:181
2597572993827,9cyclictest2638310-21timerwakeupswit21:15:371
259757299381,9cyclictest2666570-21ntpq22:00:251
259757299381,9cyclictest2602916-21ntpq19:25:201
259757299381,8cyclictest2627064-21ntpq20:45:271
259757299381,13cyclictest2660269-21sh21:50:281
259757299381,10cyclictest2720478-21ntpq23:25:221
2597571993832,4cyclictest2597583-21systemd-run19:10:010
2597573993730,4cyclictest2659162-21idleruntime-cro21:50:002
2597573993729,5cyclictest2605626-21fschecks_time19:35:182
259757399372,27cyclictest2682562-21ssh22:25:292
2597572993720,14cyclictest2710744-21kernelversion23:10:221
259757299371,13cyclictest2752339-21ntpq00:15:261
259757299371,11cyclictest2750998-21ssh00:14:071
259757299371,11cyclictest2750998-21ssh00:14:071
259757299371,11cyclictest2723240-21ssh23:30:151
259757299371,10cyclictest2696187-21ssh22:46:511
259757299371,10cyclictest2691912-21sh22:40:261
259757299371,10cyclictest2641104-21ssh21:20:251
259757299370,10cyclictest2682426-21ntpq22:25:231
2597571993729,4cyclictest0-21swapper/023:10:270
2597571993726,8cyclictest2659403-21kworker/0:0+events_power_efficient21:55:270
2597573993628,5cyclictest1001-21mta-sts-daemon22:55:262
259757299361,11cyclictest2618008-21ntpq20:15:261
259757299361,10cyclictest2597532-21munin-run19:10:011
2597571993631,3cyclictest0-21swapper/023:30:290
259757199361,29cyclictest2707804-21ssh23:05:220
259757199361,29cyclictest2644267-21ssh21:25:240
2597573993528,4cyclictest1001-21mta-sts-daemon20:15:262
259757399350,31cyclictest2739716-21ssh23:55:312
259757299359,6cyclictest2678791-21/usr/sbin/munin22:20:151
259757299351,7cyclictest2707921-21ssh23:05:271
259757299351,11cyclictest2698297-21ntpq22:50:241
259757299350,11cyclictest2688747-21ntpq22:35:211
2597573993430,2cyclictest0-21swapper/200:10:272
2597573993430,2cyclictest0-21swapper/200:10:272
2597573993427,4cyclictest1002-21mta-sts-daemon20:30:372
2597573993427,4cyclictest1002-21mta-sts-daemon20:30:372
2597573993427,3cyclictest0-21swapper/220:30:012
2597573993425,6cyclictest2665552-21systemd-run22:00:012
259757299341,9cyclictest2604089-21/usr/sbin/munin19:30:171
259757199348,20cyclictest151ktimers/020:55:240
2597571993426,4cyclictest0-21swapper/022:45:290
2597571993424,7cyclictest2606652-21latency_hist19:40:020
2597571993424,4cyclictest2640025-21munin-plugin-st21:20:010
259757199342,29cyclictest2730047-21ssh23:40:240
259757199341,27cyclictest2633598-21diskmemload22:50:210
259757199341,22cyclictest1003-21mta-sts-daemon20:15:270
259757399333,23cyclictest2660280-21ssh21:50:272
2597573993326,4cyclictest2717917-21tail23:20:352
259757399332,23cyclictest2704817-21ssh23:00:292
259757399332,23cyclictest2704817-21ssh23:00:292
2597571993326,5cyclictest2615608-21cut20:10:010
2597571993326,5cyclictest0-21swapper/000:00:020
2597571993324,4cyclictest0-21swapper/023:20:300
2597571993323,8cyclictest2678880-21fschecks_time22:20:170
2597571993318,10cyclictest151ktimers/022:35:250
2597571993314,13cyclictest12650irq/32-eth022:40:370
2597571993312,9cyclictest12650irq/32-eth023:45:240
2597573993226,3cyclictest0-21swapper/222:40:012
2597573993226,3cyclictest0-21swapper/221:25:012
2597573993225,4cyclictest2743409-21unixbench_singl00:00:362
2597573993225,4cyclictest2743409-21unixbench_singl00:00:362
2597573993225,4cyclictest2675827-21latency22:15:182
2597573993224,5cyclictest1000-21mta-sts-daemon19:40:282
2597573993224,4cyclictest0-21swapper/223:40:222
2597573993224,4cyclictest0-21swapper/222:40:262
2597571993222,6cyclictest12650irq/32-eth019:25:270
2597571993220,9cyclictest2742915-21sh00:00:290
2597571993220,9cyclictest2742915-21sh00:00:290
2597573993124,4cyclictest694-21cron22:25:012
2597573993124,4cyclictest2612165-21sendmail_mailst19:55:292
2597573993122,6cyclictest2633598-21diskmemload23:30:342
259757399312,25cyclictest2644364-21sshd21:25:282
259757399312,22cyclictest2653914-21sshd21:40:282
259757399311,24cyclictest2720610-21ssh23:25:262
2597571993124,5cyclictest0-21swapper/000:30:020
2597571993124,4cyclictest2652797-21munin-run21:40:010
2597571993124,4cyclictest2652797-21munin-run21:40:010
2597571993118,4cyclictest2620105-21cron20:25:010
259757199311,25cyclictest2765119-21ssh00:35:290
2597573993023,4cyclictest2600547-21cron19:20:002
2597573993023,4cyclictest2600547-21cron19:20:002
2597573993023,3cyclictest0-21swapper/221:05:012
259757399301,22cyclictest2669730-21sh22:05:252
2597571993026,2cyclictest0-21swapper/020:30:010
2597571993021,7cyclictest485-21in:imuxsock23:20:010
2597571993018,10cyclictest2687782-21sh22:35:010
2597573992922,4cyclictest2630575-21cron21:00:012
2597573992922,4cyclictest1003-21mta-sts-daemon22:30:132
2597573992920,5cyclictest2760871-21systemd-run00:30:012
259757199298,13cyclictest151ktimers/019:15:270
259757199298,13cyclictest151ktimers/019:15:270
2597571992923,4cyclictest2611088-21cron19:55:000
2597571992923,4cyclictest2598069-21fschecks_count19:10:140
2597571992923,4cyclictest2598069-21fschecks_count19:10:140
2597571992922,5cyclictest2671885-21munin-run22:10:010
2597571992922,4cyclictest2706832-21munin-plugin-st23:05:010
2597571992922,4cyclictest2706832-21munin-plugin-st23:05:010
2597571992921,5cyclictest2642299-21kworker/u8:1+xprtiod21:45:300
2597573992821,4cyclictest2601030-21cpuspeed19:20:152
2597573992820,5cyclictest2752958-21unixbench_singl00:15:402
2597571992823,2cyclictest0-21swapper/019:45:010
2597571992815,4cyclictest2684617-21grep22:30:010
2597571992812,10cyclictest151ktimers/022:00:220
259757199281,20cyclictest2726815-21ssh23:35:220
2597571992811,12cyclictest12650irq/32-eth021:10:250
259757399274,18cyclictest2633598-21diskmemload22:45:272
2597573992720,4cyclictest1000-21mta-sts-daemon19:45:242
2597573992720,4cyclictest1000-21mta-sts-daemon19:45:242
2597573992718,7cyclictest2597532-21/usr/sbin/munin19:10:022
2597573992718,6cyclictest2627529-21unixbench_singl20:45:342
259757399267,8cyclictest171rcu_preempt19:32:462
2597573992619,4cyclictest439-21systemd-logind20:15:022
2597573992619,4cyclictest2614652-21gltestperf20:05:162
259757199262,20cyclictest2660153-21ssh21:50:220
2597571992621,3cyclictest2762069-21/usr/sbin/munin00:30:300
2597571992617,7cyclictest2627573-21sshd20:47:140
2597571992617,5cyclictest12750irq/33-eth019:30:280
2597571992614,8cyclictest2625581-21ntpq20:40:280
2597571992614,8cyclictest2625581-21ntpq20:40:280
259757399254,11cyclictest1001-21mta-sts-daemon19:25:242
259757399253,17cyclictest2650738-21ssh21:35:332
259757399253,17cyclictest2650738-21ssh21:35:332
2597571992517,5cyclictest0-21swapper/000:25:010
259757399241,18cyclictest2736218-21memory23:50:202
259757199248,12cyclictest151ktimers/019:20:270
259757199242,14cyclictest151ktimers/020:00:280
2597573992317,3cyclictest627-21lldpd19:14:002
2597573992317,3cyclictest627-21lldpd19:14:002
2597573992316,4cyclictest2632633-21fschecks_time21:05:172
2597573992316,4cyclictest0-21swapper/220:40:212
2597573992316,4cyclictest0-21swapper/220:40:212
2597573992314,6cyclictest265-21systemd-journal19:54:282
2597571992318,3cyclictest151ktimers/021:00:230
2597571992317,3cyclictest151ktimers/020:30:290
2597571992317,3cyclictest151ktimers/020:30:290
2597573992216,4cyclictest2623353-21aten_r2power_cu20:35:132
2597573992216,4cyclictest2623353-21aten_r2power_cu20:35:132
2597573992216,3cyclictest1000-21mta-sts-daemon20:02:052
259757199226,11cyclictest1001-21mta-sts-daemon20:10:220
259757199222,16cyclictest2736444-21ssh23:50:260
2597571992216,3cyclictest2599072-21kworker/u8:3-xprtiod20:55:010
259757499212,8cyclictest0-21swapper/322:40:293
2597571992116,2cyclictest0-21swapper/021:10:010
259757499193,8cyclictest0-21swapper/323:45:283
259757499192,7cyclictest0-21swapper/320:45:273
259757499183,8cyclictest0-21swapper/300:08:313
259757499183,8cyclictest0-21swapper/300:08:313
259757499183,7cyclictest0-21swapper/323:40:253
259757499182,8cyclictest0-21swapper/319:20:233
259757499173,8cyclictest0-21swapper/322:20:313
259757499173,7cyclictest0-21swapper/322:10:273
259757499173,6cyclictest0-21swapper/322:30:233
259757499173,6cyclictest0-21swapper/300:25:243
259757499172,8cyclictest0-21swapper/321:15:253
259757499172,7cyclictest0-21swapper/320:50:223
259757499172,6cyclictest0-21swapper/319:10:203
259757499172,6cyclictest0-21swapper/319:10:203
259757499171,8cyclictest0-21swapper/323:30:213
259757499164,4cyclictest0-21swapper/320:15:293
259757499163,7cyclictest0-21swapper/322:50:193
259757499163,7cyclictest0-21swapper/300:00:263
259757499163,7cyclictest0-21swapper/300:00:263
259757499163,6cyclictest0-21swapper/321:40:233
259757499163,6cyclictest0-21swapper/319:15:253
259757499163,6cyclictest0-21swapper/319:15:253
259757499162,8cyclictest0-21swapper/321:30:143
259757499162,7cyclictest0-21swapper/322:35:283
259757499162,6cyclictest0-21swapper/322:05:253
259757499161,8cyclictest0-21swapper/321:25:223
259757499161,7cyclictest0-21swapper/319:40:293
259757499161,6cyclictest0-21swapper/322:00:023
259757499161,6cyclictest0-21swapper/319:35:233
259757499154,4cyclictest0-21swapper/321:00:233
259757499153,6cyclictest0-21swapper/300:35:253
259757499153,5cyclictest0-21swapper/323:25:223
259757499153,4cyclictest0-21swapper/320:05:213
259757499152,8cyclictest0-21swapper/321:45:283
259757499152,8cyclictest0-21swapper/321:35:313
259757499152,8cyclictest0-21swapper/321:35:313
259757499152,8cyclictest0-21swapper/300:20:283
259757499152,7cyclictest0-21swapper/323:15:253
259757499152,7cyclictest0-21swapper/323:00:263
259757499152,7cyclictest0-21swapper/323:00:263
259757499152,7cyclictest0-21swapper/320:00:243
259757499151,9cyclictest0-21swapper/323:50:303
259757499151,8cyclictest0-21swapper/322:20:013
259757499151,8cyclictest0-21swapper/320:35:303
259757499151,8cyclictest0-21swapper/320:35:303
259757499151,8cyclictest0-21swapper/320:20:253
259757499151,7cyclictest0-21swapper/322:00:283
259757499151,6cyclictest0-21swapper/320:55:263
259757499143,7cyclictest0-21swapper/323:20:263
259757499143,7cyclictest0-21swapper/321:50:283
259757499143,6cyclictest0-21swapper/321:05:233
259757499142,7cyclictest0-21swapper/300:30:223
259757499141,8cyclictest0-21swapper/323:55:153
259757499141,7cyclictest0-21swapper/323:10:263
259757499141,7cyclictest0-21swapper/322:45:283
259757499141,7cyclictest0-21swapper/321:20:293
259757499134,7cyclictest0-21swapper/323:35:233
259757499131,7cyclictest0-21swapper/319:25:233
259757499131,7cyclictest0-21swapper/300:15:243
259757499131,6cyclictest0-21swapper/319:30:223
259757499125,5cyclictest0-21swapper/321:10:273
259757499124,6cyclictest0-21swapper/323:05:223
259757499123,5cyclictest0-21swapper/322:25:223
259757499122,6cyclictest0-21swapper/322:55:263
259757499122,5cyclictest0-21swapper/319:55:163
259757499113,6cyclictest0-21swapper/319:50:213
259757499113,5cyclictest0-21swapper/320:10:253
259757499111,6cyclictest0-21swapper/320:25:243
259757499111,6cyclictest0-21swapper/300:10:143
259757499111,6cyclictest0-21swapper/300:10:143
259757499101,7cyclictest0-21swapper/320:40:233
259757499101,7cyclictest0-21swapper/320:40:233
259757499101,6cyclictest0-21swapper/319:45:163
259757499101,6cyclictest0-21swapper/319:45:163
25975749991,4cyclictest0-21swapper/320:35:023
25975749991,4cyclictest0-21swapper/320:35:023
25975749991,4cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional