You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-31 - 20:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Fri Jul 31, 2026 12:43:07)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3012786995144,3cyclictest0-21swapper/112:30:511
3012787994916,8cyclictest3148130-21wc11:51:002
3012785994836,8cyclictest12650irq/32-eth009:30:520
3012787994738,6cyclictest421-21dbus-daemon07:35:022
3012786994739,5cyclictest3042780-21systemd-run08:50:011
3012787994634,7cyclictest420-21avahi-daemon11:24:262
301278699462,38cyclictest3144666-21ssh11:45:511
3012785994638,5cyclictest2243543-21cups-browsed11:25:540
3012785994525,15cyclictest151ktimers/011:55:530
3012786994434,6cyclictest1000-21mta-sts-daemon11:32:321
3012786994433,7cyclictest421-21dbus-daemon09:37:191
3012786994433,7cyclictest420-21avahi-daemon10:51:031
3012787994332,7cyclictest421-21dbus-daemon09:13:502
3012787994331,8cyclictest2243543-21cups-browsed09:36:012
3012787994317,8cyclictest3018778-21munin-run07:30:012
3012787994317,7cyclictest3024195-21ntpq07:45:512
3012786994335,3cyclictest0-21swapper/109:35:011
301278599432,34cyclictest3162902-21ssh12:15:490
3012787994232,6cyclictest2243543-21cups-browsed08:35:422
3012787994230,7cyclictest1-21systemd12:16:342
3012787994219,14cyclictest3150719-21ssh11:55:512
3012787994216,7cyclictest3135506-21ntpq11:30:512
3012787994213,9cyclictest3048227-21ntpq09:05:532
3012786994233,5cyclictest3026256-21cron07:55:011
3012787994133,5cyclictest3045748-21munin-run09:00:012
3012787994131,7cyclictest420-21avahi-daemon11:12:202
3012787994131,7cyclictest420-21avahi-daemon11:12:202
3012787994131,6cyclictest421-21dbus-daemon11:16:542
3012787994131,6cyclictest3112921-21cron10:55:012
3012787994128,8cyclictest3031610-21ntpq08:10:512
3012787994117,7cyclictest3026145-21sed07:51:032
3012787994116,8cyclictest3016755-21ld07:20:552
3012787994029,7cyclictest2243543-21cups-browsed10:24:492
3012787994026,8cyclictest3028737-21ntpq08:00:542
3012787994026,10cyclictest3046135-21/usr/sbin/munin09:00:402
3012787994020,6cyclictest0-21swapper/210:25:442
3012787994014,9cyclictest3078736-21sh09:58:012
3012787994014,9cyclictest3078736-21sh09:58:012
3012787994012,10cyclictest3055187-21ssh09:20:082
3012786994032,5cyclictest3105332-21timerandwakeup10:41:031
3012786994032,4cyclictest0-21swapper/112:00:491
3012786994029,4cyclictest0-21swapper/111:15:491
3012785994028,8cyclictest3119753-21sshd11:05:410
3012785994025,12cyclictest3067887-21entropy09:40:410
3012787993929,6cyclictest3014758-21df_inode07:15:402
3012787993929,6cyclictest3014758-21df_inode07:15:402
3012787993926,8cyclictest3083602-21ntpq10:05:502
3012787993926,8cyclictest3030174-21ntpq08:05:522
3012787993926,8cyclictest3021167-21ntpq07:35:502
3012787993918,7cyclictest3059192-21ntpq09:25:532
3012787993917,9cyclictest3128241-21kworker/u8:11+rpciod11:27:432
3012787993915,8cyclictest3175108-21ntpq12:35:522
3012787993914,10cyclictest3101792-21netstat10:35:492
3012787993913,9cyclictest3013899-21sensors_fan07:10:592
3012787993913,9cyclictest3013899-21sensors_fan07:10:592
3012787993910,12cyclictest3167175-21sh12:22:512
3012786993929,7cyclictest3089473-21latency10:15:441
3012785993923,8cyclictest12650irq/32-eth010:25:550
3012785993917,18cyclictest0-21swapper/010:15:530
3012787993829,5cyclictest3088632-21latency_hist10:15:022
3012787993829,5cyclictest3088632-21latency_hist10:15:022
3012787993828,4cyclictest3043718-21ntpq08:50:532
3012787993826,7cyclictest3037691-21ntpq08:30:542
3012787993825,8cyclictest3159867-21ntpq12:10:492
3012787993825,8cyclictest3068366-21ntpq09:40:512
3012787993825,8cyclictest3053011-21ntpq09:15:502
3012787993825,10cyclictest3107330-21aten_r2power_en10:45:392
3012787993813,9cyclictest3141034-21aten_r2power_vo11:40:432
3012787993812,10cyclictest3155434-21ssh12:04:172
3012786993833,2cyclictest0-21swapper/112:00:011
3012786993830,5cyclictest3040298-21fschecks_time08:40:421
3012786993825,7cyclictest271ktimers/110:05:511
3012785993827,9cyclictest3143482-21grep11:45:010
3012787993728,3cyclictest3144641-21ntpq11:45:502
3012787993727,7cyclictest3035780-21/usr/sbin/munin08:25:422
3012787993722,11cyclictest3022693-21ntpq07:40:532
3012787993716,6cyclictest3048758-21diskmemload10:16:182
3012787993716,5cyclictest3027113-21ntpq07:55:482
3012787993714,8cyclictest3116593-21basename11:00:412
3012787993712,8cyclictest3034624-21ntpq08:20:492
3012787993712,8cyclictest3034624-21ntpq08:20:492
3012786993731,3cyclictest0-21swapper/112:25:571
3012786993730,4cyclictest1000-21mta-sts-daemon08:05:531
3012786993726,8cyclictest3028584-21needreboot08:00:471
301278699372,26cyclictest3141544-21ssh11:40:511
3012785993730,5cyclictest3116478-21aten_r2power_en11:00:400
3012787993627,4cyclictest3080610-21ntpq10:00:542
3012787993627,4cyclictest3080610-21ntpq10:00:542
3012787993626,5cyclictest3073807-21aten_r2power_fr09:50:392
3012787993625,7cyclictest3168977-21ntpq12:25:512
3012787993625,7cyclictest3033112-21ntpq08:15:492
3012787993625,6cyclictest3120161-21ntpq11:05:482
3012787993624,8cyclictest3138494-21ntpq11:35:492
3012787993624,8cyclictest3071388-21ntpq09:45:502
3012787993615,4cyclictest3048758-21diskmemload10:42:252
3012787993613,9cyclictest3040632-21ntpq08:40:482
3012787993611,5cyclictest3098854-21ntpq10:30:532
301278699366,18cyclictest428-21mta-sts-daemon09:05:531
3012786993630,3cyclictest0-21swapper/111:05:011
3012786993629,3cyclictest0-21swapper/109:45:551
3012786993628,5cyclictest3116193-21latency_hist11:00:031
3012785993630,4cyclictest3115989-21sendmail11:00:010
3012785993629,4cyclictest3137372-21systemd-run11:35:010
3012785993627,4cyclictest0-21swapper/009:15:470
3012785993620,10cyclictest151ktimers/009:05:510
3012787993524,7cyclictest3171931-21/usr/sbin/munin12:30:472
3012787993523,9cyclictest3041932-21/usr/sbin/munin08:45:452
3012787993523,8cyclictest3156816-21ntpq12:05:502
3012787993515,13cyclictest3114025-21ssh10:55:482
3012786993529,3cyclictest0-21swapper/107:20:011
3012786993529,3cyclictest0-21swapper/107:20:011
3012786993527,5cyclictest3067684-21aten_r2power_fr09:40:381
3012786993524,7cyclictest420-21avahi-daemon09:19:201
301278699352,29cyclictest3123215-21ssh11:10:491
301278699352,29cyclictest3123215-21ssh11:10:491
3012785993526,6cyclictest3035772-21sshd08:25:410
3012785993512,19cyclictest3077519-21ssh09:55:520
3012785993512,19cyclictest3077519-21ssh09:55:520
301278699343,24cyclictest3132478-21ssh11:25:531
3012786993427,4cyclictest0-21swapper/108:15:011
3012786993426,5cyclictest3156432-21uniq12:05:431
3012786993426,5cyclictest1000-21mta-sts-daemon12:15:481
3012786993425,4cyclictest0-21swapper/110:35:581
3012786993423,8cyclictest3073755-21sh09:50:391
301278599343,26cyclictest3153715-21ssh12:00:480
3012785993424,7cyclictest3165917-21ntp_kernel_err12:20:470
3012787993317,10cyclictest3061298-21ssh09:30:122
3012786993326,3cyclictest0-21swapper/109:00:011
3012786993325,4cyclictest0-21swapper/112:35:411
3012786993324,6cyclictest420-21avahi-daemon08:15:571
3012786993322,7cyclictest420-21avahi-daemon10:14:221
3012786993322,7cyclictest420-21avahi-daemon10:14:221
3012786993321,9cyclictest3048758-21diskmemload12:15:021
301278699331,25cyclictest3098902-21sh10:30:541
301278599333,6cyclictest171rcu_preempt09:00:510
3012785993326,4cyclictest3123415-21proc_pri11:10:570
3012785993326,4cyclictest3123415-21proc_pri11:10:570
3012785993325,5cyclictest2243543-21cups-browsed12:12:410
301278599332,25cyclictest2243543-21cups-browsed11:35:480
3012786993226,3cyclictest0-21swapper/109:10:491
3012786993224,5cyclictest3131248-21cron11:25:001
3012786993224,5cyclictest3017797-21fschecks_count07:25:421
3012786993220,7cyclictest3138275-21latency11:35:441
3012786993210,17cyclictest421-21dbus-daemon11:50:511
3012785993225,3cyclictest0-21swapper/011:20:010
3012785993225,3cyclictest0-21swapper/010:10:530
3012785993225,3cyclictest0-21swapper/010:10:530
3012785993224,5cyclictest0-21swapper/009:10:390
3012785993219,10cyclictest0-21swapper/011:55:010
3012786993124,4cyclictest3017170-21unixbench_multi07:21:021
3012786993123,5cyclictest3021607-21unixbench-2d07:36:001
3012786993122,5cyclictest0-21swapper/112:20:381
301278699312,23cyclictest3120357-21grep11:05:561
3012786993121,7cyclictest3057988-21latency_hist09:25:021
3012786993120,5cyclictest0-21swapper/110:00:531
3012786993120,5cyclictest0-21swapper/110:00:531
3012786993118,9cyclictest2243543-21cups-browsed10:45:541
3012785993125,4cyclictest3098244-21aten_r2power_po10:30:400
3012785993124,4cyclictest3014801-21fschecks_time07:15:420
3012785993124,4cyclictest3014801-21fschecks_time07:15:420
3012785993124,4cyclictest0-21swapper/009:30:020
3012785993123,5cyclictest3021761-21sh07:40:010
3012785993119,9cyclictest12650irq/32-eth009:45:520
3012785993118,10cyclictest3067263-21grep09:40:020
3012785993118,10cyclictest0-21swapper/008:20:010
301278699303,21cyclictest3077497-21ssh09:55:511
301278699303,21cyclictest3077497-21ssh09:55:511
3012786993023,4cyclictest3020268-21idleruntime-cro07:35:011
3012786993023,3cyclictest0-21swapper/110:20:541
3012786993022,6cyclictest271ktimers/108:35:501
3012786993022,5cyclictest3095250-21sshd10:25:411
3012786993022,5cyclictest3043856-21systemctl08:50:571
301278599303,17cyclictest12650irq/32-eth008:05:520
3012785993024,4cyclictest3042656-21tail08:46:010
3012785993024,3cyclictest0-21swapper/010:50:410
3012785993024,3cyclictest0-21swapper/009:21:060
3012785993023,5cyclictest3145179-21sed11:46:000
3012785993023,4cyclictest0-21swapper/008:40:010
3012785993022,4cyclictest0-21swapper/010:21:010
3012785993020,7cyclictest3104846-21needreboot10:40:460
3012785993018,9cyclictest0-21swapper/012:05:480
301278599301,23cyclictest3129313-21ssh11:20:480
3012786992921,5cyclictest694-21cron07:45:011
3012786992921,5cyclictest3036086-21uname08:25:461
3012786992921,5cyclictest3027758-21grep08:00:011
3012786992920,6cyclictest420-21avahi-daemon09:00:491
3012785992924,3cyclictest3107343-21aten_r2power_en10:45:390
3012785992924,2cyclictest0-21swapper/012:35:440
3012785992923,4cyclictest0-21swapper/008:56:010
3012785992922,3cyclictest0-21swapper/007:30:560
3012785992919,7cyclictest3083420-21missed_timers10:05:460
301278699281,19cyclictest3059240-21ssh09:25:561
3012785992816,8cyclictest265-21systemd-journal12:34:410
3012786992719,5cyclictest3013293-21fschecks_count07:10:431
3012786992719,5cyclictest3013293-21fschecks_count07:10:431
3012785992721,4cyclictest3037291-21fschecks_time08:30:430
3012785992721,3cyclictest3074954-21unixbench_multi09:51:020
3012785992721,3cyclictest1001-21mta-sts-daemon07:50:490
3012785992719,6cyclictest3024954-21latency_hist07:50:030
3012786992618,5cyclictest567-21gdbus07:10:011
301278599265,15cyclictest428-21mta-sts-daemon07:25:530
301278599262,19cyclictest665-21snmpd10:00:520
301278599262,19cyclictest665-21snmpd10:00:520
3012785992619,4cyclictest0-21swapper/007:45:010
3012785992618,5cyclictest420-21avahi-daemon10:35:240
3012785992616,7cyclictest1002-21mta-sts-daemon07:21:030
3012785992616,3cyclictest0-21swapper/008:41:010
3012787992512,9cyclictest3012874-21sed07:10:022
3012786992518,4cyclictest3037175-21cpu08:30:411
3012785992519,4cyclictest3013295-21fschecks_count07:10:430
3012785992519,4cyclictest3013295-21fschecks_count07:10:430
3012785992518,4cyclictest3012790-21systemd-run07:10:010
3012786992416,5cyclictest3035226-21unixbench_singl08:21:031
3012786992416,5cyclictest3035226-21unixbench_singl08:21:031
301278599242,4cyclictest171rcu_preempt08:50:440
301278599242,15cyclictest665-21snmpd08:10:580
3012785992420,2cyclictest0-21swapper/008:05:010
3012785992413,8cyclictest3168409-21aten2.4-expect12:25:410
3012785992316,4cyclictest0-21swapper/008:25:000
3012785992316,4cyclictest0-21swapper/008:25:000
3012785992313,8cyclictest151ktimers/007:55:510
301278699212,7cyclictest3024122-21ntpq07:45:481
301278899162,8cyclictest0-21swapper/312:25:533
301278899162,8cyclictest0-21swapper/309:10:513
301278899162,7cyclictest0-21swapper/310:15:493
301278899162,6cyclictest0-21swapper/309:21:063
301278899161,7cyclictest0-21swapper/307:40:513
301278899152,8cyclictest0-21swapper/310:10:413
301278899152,8cyclictest0-21swapper/310:10:413
301278899152,7cyclictest0-21swapper/308:50:493
301278899151,8cyclictest0-21swapper/311:50:553
301278899151,7cyclictest0-21swapper/312:30:503
301278899151,7cyclictest0-21swapper/311:45:473
301278899151,7cyclictest0-21swapper/311:35:483
301278899151,7cyclictest0-21swapper/310:00:523
301278899151,7cyclictest0-21swapper/310:00:523
301278899151,7cyclictest0-21swapper/309:55:523
301278899151,7cyclictest0-21swapper/309:55:523
301278899151,6cyclictest0-21swapper/309:15:473
301278899151,6cyclictest0-21swapper/308:25:533
301278899151,6cyclictest0-21swapper/307:15:513
301278899151,6cyclictest0-21swapper/307:15:513
301278899150,6cyclictest0-21swapper/308:15:523
301278899145,6cyclictest0-21swapper/310:20:553
301278899143,5cyclictest0-21swapper/309:45:483
301278899142,7cyclictest0-21swapper/311:55:493
301278899142,6cyclictest0-21swapper/310:45:573
301278899141,8cyclictest0-21swapper/312:00:493
301278899141,7cyclictest0-21swapper/312:35:413
301278899141,7cyclictest0-21swapper/311:25:473
301278899141,7cyclictest0-21swapper/311:15:563
301278899141,7cyclictest0-21swapper/310:35:503
301278899141,7cyclictest0-21swapper/309:30:493
301278899141,7cyclictest0-21swapper/307:35:483
301278899141,6cyclictest0-21swapper/312:15:493
301278899141,6cyclictest0-21swapper/308:00:513
301278899141,6cyclictest0-21swapper/307:45:513
301278899133,5cyclictest0-21swapper/312:20:493
301278899132,7cyclictest0-21swapper/310:30:523
301278899132,7cyclictest0-21swapper/310:05:533
301278899131,7cyclictest0-21swapper/311:10:483
301278899131,7cyclictest0-21swapper/311:10:483
301278899131,7cyclictest0-21swapper/311:00:563
301278899131,7cyclictest0-21swapper/309:40:513
301278899131,7cyclictest0-21swapper/309:35:493
301278899131,7cyclictest0-21swapper/309:00:563
301278899131,6cyclictest0-21swapper/308:55:513
301278899131,6cyclictest0-21swapper/308:45:513
301278899131,6cyclictest0-21swapper/308:35:573
301278899131,6cyclictest0-21swapper/307:50:543
301278899131,6cyclictest0-21swapper/307:30:523
301278899122,6cyclictest0-21swapper/311:05:443
301278899122,6cyclictest0-21swapper/310:55:493
301278899121,7cyclictest0-21swapper/311:40:523
301278899121,7cyclictest0-21swapper/310:53:413
301278899121,7cyclictest0-21swapper/310:40:593
301278899121,6cyclictest0-21swapper/311:30:383
301278899121,6cyclictest0-21swapper/309:05:423
301278899121,6cyclictest0-21swapper/308:40:493
301278899121,6cyclictest0-21swapper/307:55:483
301278899112,6cyclictest0-21swapper/312:05:493
301278899112,6cyclictest0-21swapper/309:50:443
301278899112,5cyclictest0-21swapper/312:10:383
301278899112,5cyclictest0-21swapper/311:20:453
301278899112,5cyclictest0-21swapper/307:15:003
301278899112,5cyclictest0-21swapper/307:15:003
301278899111,6cyclictest0-21swapper/310:25:383
301278899111,6cyclictest0-21swapper/309:25:443
301278899111,6cyclictest0-21swapper/308:30:563
301278899111,5cyclictest0-21swapper/308:20:433
301278899111,5cyclictest0-21swapper/308:20:433
301278899101,5cyclictest0-21swapper/308:05:443
30127889992,4cyclictest0-21swapper/307:20:453
30127889991,5cyclictest0-21swapper/307:25:423
30127889982,5cyclictest0-21swapper/308:10:453
30127889981,5cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional