You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-26 - 00:33

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Sat Jul 25, 2026 12:43:11)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
216373994941,5cyclictest235928-21systemd-run08:15:011
216374994637,6cyclictest421-21dbus-daemon09:45:012
216373994538,4cyclictest306902-21awk10:40:001
216372994438,4cyclictest223932-21systemd-run07:35:020
216374994334,5cyclictest216394-21latency_hist07:10:012
216373994233,5cyclictest262380-21kernelversion09:25:421
216373994233,5cyclictest237953-21fschecks_time08:20:401
216373994232,7cyclictest291834-21ssh10:15:021
216374994132,5cyclictest321990-21cron11:05:012
216373994029,7cyclictest421-21dbus-daemon10:06:141
216372994033,4cyclictest359745-21timerwakeupswit12:06:010
216372994033,4cyclictest249439-21systemd-run09:00:020
216372994031,6cyclictest235930-21systemd08:15:020
216374993932,4cyclictest694-21cron11:00:012
216374993930,6cyclictest294818-21cut10:20:012
216374993828,6cyclictest3613316-21cups-browsed11:09:472
216372993831,4cyclictest284466-21unixbench_singl10:01:010
216372993831,4cyclictest252435-21systemd-run09:10:020
216372993830,5cyclictest313050-21latency_hist10:50:020
216372993828,4cyclictest320624-21ssh11:01:010
216374993731,3cyclictest0-21swapper/209:50:012
216374993729,5cyclictest370377-21latency_hist12:25:032
216374993729,5cyclictest302583-21sed10:31:002
216374993729,5cyclictest302583-21sed10:31:002
216374993729,4cyclictest0-21swapper/212:05:572
216374993628,5cyclictest0-21swapper/210:00:012
216374993626,7cyclictest337445-21/usr/sbin/munin11:30:412
216374993626,7cyclictest337445-21/usr/sbin/munin11:30:412
216374993625,7cyclictest3613316-21cups-browsed09:12:162
216373993630,3cyclictest0-21swapper/110:20:011
216373993629,4cyclictest1001-21mta-sts-daemon12:21:271
216373993628,5cyclictest332379-21mailstats11:20:531
216373993628,5cyclictest332379-21mailstats11:20:531
216373993628,5cyclictest331185-21latency_hist11:20:031
216373993628,5cyclictest320616-21unixbench-2d11:01:011
216373993628,5cyclictest249325-21unixbench_singl08:55:581
216373993628,4cyclictest0-21swapper/111:49:521
216373993627,7cyclictest364230-21systemd12:15:021
21637399361,31cyclictest420-21avahi-daemon09:41:171
216372993627,6cyclictest421-21dbus-daemon10:37:590
216373993528,4cyclictest373271-21cron12:30:011
216373993528,4cyclictest256970-21timerandwakeup09:15:591
216373993528,4cyclictest256970-21timerandwakeup09:15:591
216373993526,6cyclictest218380-21fschecks_time07:15:381
216373993526,6cyclictest218380-21fschecks_time07:15:381
216372993530,2cyclictest0-21swapper/010:20:010
216372993529,4cyclictest247920-21systemd-run08:55:010
216372993528,4cyclictest0-21swapper/009:35:470
216372993527,5cyclictest421-21dbus-daemon08:50:010
216372993526,6cyclictest420-21avahi-daemon11:47:020
216374993427,4cyclictest344523-21swap11:40:592
216374993427,3cyclictest0-21swapper/210:10:502
216374993426,5cyclictest1-21systemd07:30:012
216374993425,4cyclictest0-21swapper/209:35:522
216374993421,9cyclictest284092-21mailstats10:00:572
216373993428,3cyclictest0-21swapper/110:30:531
216373993428,3cyclictest0-21swapper/110:30:531
216373993427,4cyclictest341749-21grep11:36:001
216373993424,7cyclictest3613316-21cups-browsed09:13:001
216373993424,7cyclictest337940-21latency11:30:431
216373993424,7cyclictest337940-21latency11:30:431
216372993428,4cyclictest371750-21threads12:25:580
216372993426,6cyclictest307625-21fschecks_count10:40:410
216372993426,5cyclictest276728-21pluginstate09:50:020
216372993425,6cyclictest421-21dbus-daemon09:53:350
216372993421,4cyclictest350797-21unixbench_multi11:51:000
216372993415,15cyclictest421-21dbus-daemon11:36:130
216374993326,4cyclictest258486-21idleruntime-cro09:20:012
216374993326,4cyclictest258486-21idleruntime-cro09:20:012
216374993325,5cyclictest355950-21if_eth012:00:402
216374993324,6cyclictest420-21avahi-daemon11:29:482
216374993324,6cyclictest420-21avahi-daemon11:29:482
216374993324,6cyclictest420-21avahi-daemon07:35:022
216374993323,7cyclictest231116-21timerandwakeup07:55:572
216373993327,3cyclictest1000-21mta-sts-daemon11:12:471
216373993323,7cyclictest244700-21timerwakeupswit08:41:041
216372993326,4cyclictest376411-21latency_hist12:35:020
216372993325,5cyclictest1002-21mta-sts-daemon11:25:510
216372993325,5cyclictest1002-21mta-sts-daemon11:25:510
216372993324,6cyclictest3613316-21cups-browsed11:16:250
21637499327,22cyclictest351ktimers/211:45:472
216374993225,4cyclictest373213-21sshd12:29:522
216374993224,5cyclictest326346-21mailstats11:10:572
216374993224,5cyclictest306918-21sendmail10:40:012
216374993224,5cyclictest235905-21munin-plugin-st08:15:012
216374993223,6cyclictest309916-21cron10:45:002
216374993223,5cyclictest242426-21fschecks_count08:35:402
216373993227,2cyclictest0-21swapper/111:00:011
216373993226,3cyclictest0-21swapper/112:30:591
216373993226,3cyclictest0-21swapper/110:51:021
216373993226,3cyclictest0-21swapper/110:25:481
216373993226,3cyclictest0-21swapper/109:56:021
216373993224,5cyclictest237409-21munin-plugin-st08:20:011
216373993223,6cyclictest420-21avahi-daemon12:38:161
216373993223,6cyclictest3613316-21cups-browsed11:27:361
216373993223,6cyclictest3613316-21cups-browsed11:27:361
216373993222,6cyclictest420-21avahi-daemon11:06:291
216372993227,3cyclictest260203-21unixbench_singl09:20:590
216372993227,3cyclictest260203-21unixbench_singl09:20:590
216372993226,4cyclictest332549-21ssh11:20:580
216372993226,4cyclictest332549-21ssh11:20:580
216372993225,5cyclictest220731-21unixbench-2d07:21:000
216372993225,5cyclictest220731-21unixbench-2d07:21:000
216374993125,3cyclictest0-21swapper/209:25:002
216374993125,3cyclictest0-21swapper/209:25:002
216374993123,5cyclictest265-21systemd-journal09:10:012
216374993123,5cyclictest263210-21tail09:25:592
216374993123,5cyclictest231820-21aten_r2power_vo08:00:372
216374993122,6cyclictest567-21gdbus08:41:022
216374993122,6cyclictest3613316-21cups-browsed09:50:392
216374993121,8cyclictest1001-21mta-sts-daemon12:15:062
216373993125,3cyclictest0-21swapper/110:45:011
216373993124,4cyclictest223842-21grep07:30:571
216373993122,6cyclictest260157-21unixbench_multi09:20:581
216373993122,6cyclictest260157-21unixbench_multi09:20:581
216373993120,8cyclictest353165-21needreboot11:55:451
216372993126,3cyclictest272036-21sendmail_mailtr09:40:550
216372993125,4cyclictest485-21in:imuxsock11:35:000
216372993125,4cyclictest485-21in:imuxsock11:35:000
216372993125,4cyclictest364195-21cron12:15:010
216372993125,3cyclictest0-21swapper/011:00:010
216372993125,2cyclictest0-21swapper/009:30:540
216372993124,4cyclictest3613316-21cups-browsed11:57:200
216372993121,7cyclictest265-21systemd-journal08:40:010
216374993024,3cyclictest0-21swapper/211:20:002
216374993022,5cyclictest240338-21unixbench_singl08:25:582
216374993022,5cyclictest240338-21unixbench_singl08:25:582
216374993022,5cyclictest1003-21mta-sts-daemon10:23:102
216374993021,6cyclictest1002-21mta-sts-daemon12:10:312
216373993024,3cyclictest0-21swapper/109:30:521
216373993023,4cyclictest231397-21munin-plugin-st08:00:011
216373993022,6cyclictest0-21swapper/112:00:391
216373993022,5cyclictest346166-21latency_hist11:45:021
216373993022,5cyclictest268894-21proc_pri09:35:531
216373993022,5cyclictest249800-21aten_r2power_vo09:00:391
216372993019,8cyclictest0-21swapper/012:35:420
216374992923,3cyclictest0-21swapper/212:36:012
216374992922,4cyclictest248038-21kworker/u8:0-xprtiod09:05:012
216374992922,4cyclictest218386-21fschecks_time07:15:382
216374992922,4cyclictest218386-21fschecks_time07:15:382
216374992922,4cyclictest1001-21mta-sts-daemon10:54:542
216374992922,3cyclictest0-21swapper/211:55:012
216374992921,5cyclictest3613316-21cups-browsed08:06:232
216374992921,5cyclictest355317-21latency_hist12:00:022
216374992921,4cyclictest0-21swapper/211:20:492
216374992921,4cyclictest0-21swapper/211:20:492
216374992919,7cyclictest220716-21unixbench-2d07:20:592
216374992919,7cyclictest220716-21unixbench-2d07:20:592
216374992919,6cyclictest310161-21ssh10:45:032
21637399293,12cyclictest252409-21diskmemload12:05:291
216373992922,4cyclictest365524-21sendmail_mailst12:15:531
216373992922,4cyclictest1000-21mta-sts-daemon09:50:471
216373992922,3cyclictest0-21swapper/110:00:481
216373992921,5cyclictest217791-21unixbench_singl07:10:581
216373992921,5cyclictest217791-21unixbench_singl07:10:581
216373992920,6cyclictest220865-21cron07:25:001
216373992920,6cyclictest220865-21cron07:25:001
216373992919,8cyclictest242747-21ntp_kernel_err08:35:461
216373992919,7cyclictest232289-21ntp_kernel_pll_08:00:461
216373992918,8cyclictest229276-21ntp_kernel_pll_07:50:461
216372992924,3cyclictest301579-21sort10:30:410
216372992924,3cyclictest301579-21sort10:30:410
216372992924,2cyclictest0-21swapper/007:15:000
216372992924,2cyclictest0-21swapper/007:15:000
216372992922,4cyclictest252935-21aten_r2power_fr09:10:380
216372992921,5cyclictest289192-21/usr/sbin/munin10:10:420
216374992820,5cyclictest3613316-21cups-browsed08:52:382
216374992819,6cyclictest567-21gdbus07:10:532
216374992819,6cyclictest567-21gdbus07:10:532
216374992819,6cyclictest375689-21ssh12:33:072
216374992810,13cyclictest421-21dbus-daemon08:30:482
216373992823,2cyclictest0-21swapper/110:25:021
216373992823,2cyclictest0-21swapper/109:10:011
216373992822,3cyclictest0-21swapper/110:45:591
216372992823,2cyclictest0-21swapper/011:10:020
216372992822,4cyclictest231404-21systemctl08:00:010
216372992822,4cyclictest0-21swapper/008:25:010
216372992822,3cyclictest0-21swapper/009:20:020
216372992822,3cyclictest0-21swapper/009:20:020
216372992813,12cyclictest0-21swapper/009:25:520
21637299281,19cyclictest365264-21ssh12:15:450
21637599272,7cyclictest0-21swapper/307:30:453
21637599271,7cyclictest0-21swapper/308:15:453
216374992721,3cyclictest0-21swapper/209:30:412
216374992720,3cyclictest0-21swapper/207:40:532
216374992719,6cyclictest238853-21unixbench_singl08:20:592
216374992719,5cyclictest228683-21/usr/sbin/munin07:50:362
216374992718,6cyclictest340462-21/usr/sbin/munin11:35:542
216373992721,3cyclictest0-21swapper/107:45:011
216373992720,4cyclictest246599-21latency_hist08:50:031
216373992720,4cyclictest234483-21latency_hist08:10:021
216373992719,5cyclictest420-21avahi-daemon08:55:011
216373992717,7cyclictest350203-21ntp_kernel_err11:50:471
21637299274,12cyclictest252409-21diskmemload10:22:010
216372992722,2cyclictest0-21swapper/009:05:010
216372992720,5cyclictest355555-21/usr/sbin/munin12:00:540
216372992720,4cyclictest326702-21ssh11:11:020
216372992720,4cyclictest0-21swapper/011:40:370
216372992719,6cyclictest1002-21mta-sts-daemon08:25:480
216372992719,6cyclictest1002-21mta-sts-daemon08:25:480
216372992719,5cyclictest286503-21fschecks_time10:05:420
216372992718,7cyclictest265-21systemd-journal07:53:520
216374992620,3cyclictest0-21swapper/207:40:012
216374992618,5cyclictest287420-21unixbench-2d10:06:002
216374992618,5cyclictest265-21systemd-journal08:45:502
216372992622,2cyclictest0-21swapper/010:50:080
216372992622,2cyclictest0-21swapper/010:00:010
216372992620,4cyclictest221769-21ntp_kernel_pll_07:25:480
216372992619,5cyclictest485-21in:imuxsock08:17:000
216372992619,4cyclictest225345-21unixbench_singl07:35:580
21637599252,7cyclictest0-21swapper/308:35:483
21637599251,7cyclictest0-21swapper/308:55:463
216374992519,4cyclictest216371-21cyclictest09:00:012
216374992519,3cyclictest1001-21mta-sts-daemon07:46:002
216374992518,4cyclictest298557-21fschecks_count10:25:402
216374992516,6cyclictest237337-21unixbench_singl08:15:582
216373992517,5cyclictest241781-21unixbench_multi08:30:581
216373992514,8cyclictest274546-21sed09:45:431
21637299258,4cyclictest252409-21diskmemload10:28:110
216372992519,3cyclictest219071-21timerandwakeup07:15:550
216372992519,3cyclictest219071-21timerandwakeup07:15:550
21637599243,7cyclictest0-21swapper/310:45:503
21637599243,6cyclictest0-21swapper/310:10:493
21637599242,9cyclictest0-21swapper/312:36:023
21637599242,5cyclictest0-21swapper/307:40:023
21637599241,7cyclictest0-21swapper/310:00:023
216373992418,3cyclictest0-21swapper/107:25:401
216372992418,4cyclictest0-21swapper/008:10:010
216372992416,6cyclictest368935-21sed12:21:000
21637599234,4cyclictest0-21swapper/309:05:493
21637599232,8cyclictest0-21swapper/311:30:523
21637599232,8cyclictest0-21swapper/311:30:523
21637599232,7cyclictest0-21swapper/311:20:493
21637599232,7cyclictest0-21swapper/311:20:493
21637599232,7cyclictest0-21swapper/310:15:463
21637599232,5cyclictest0-21swapper/312:15:463
21637599232,5cyclictest0-21swapper/309:10:483
21637599232,5cyclictest0-21swapper/307:25:523
21637599231,7cyclictest0-21swapper/310:25:483
21637599231,6cyclictest0-21swapper/310:00:523
21637399232,16cyclictest239148-21/usr/sbin/munin08:26:001
21637399232,16cyclictest239148-21/usr/sbin/munin08:26:001
216372992319,2cyclictest0-21swapper/007:10:010
216372992316,5cyclictest3613316-21cups-browsed08:33:550
216372992315,6cyclictest228562-21latency_hist07:50:020
21637599222,9cyclictest0-21swapper/311:00:373
21637599222,7cyclictest0-21swapper/312:10:543
21637599222,6cyclictest0-21swapper/311:55:523
21637599222,6cyclictest0-21swapper/310:40:483
21637599222,5cyclictest0-21swapper/309:40:023
21637599221,7cyclictest0-21swapper/311:45:523
21637599221,6cyclictest0-21swapper/312:00:463
21637599221,6cyclictest0-21swapper/309:30:493
21637399229,10cyclictest3613316-21cups-browsed07:45:481
216373992216,3cyclictest0-21swapper/107:40:011
21637299222,15cyclictest244274-21ntpq08:40:480
21637299222,15cyclictest231918-21diskstats08:00:390
21637299221,16cyclictest226303-21ntpq07:40:470
21637599212,7cyclictest0-21swapper/312:30:543
21637599212,7cyclictest0-21swapper/310:35:423
21637599212,7cyclictest0-21swapper/309:45:493
21637599212,6cyclictest0-21swapper/311:00:013
21637599212,5cyclictest0-21swapper/310:30:463
21637599212,5cyclictest0-21swapper/310:30:463
21637599211,8cyclictest0-21swapper/311:15:523
21637599211,7cyclictest0-21swapper/311:25:413
21637599211,7cyclictest0-21swapper/311:25:413
21637599211,7cyclictest0-21swapper/310:20:373
21637599211,6cyclictest0-21swapper/311:35:403
21637599202,6cyclictest0-21swapper/312:25:523
21637599202,6cyclictest0-21swapper/309:25:533
21637599201,7cyclictest0-21swapper/309:15:363
21637599201,7cyclictest0-21swapper/309:15:363
21637599201,6cyclictest0-21swapper/309:50:443
21637599192,6cyclictest0-21swapper/311:45:023
21637599191,7cyclictest0-21swapper/310:50:513
21637599191,7cyclictest0-21swapper/309:00:503
21637599191,6cyclictest0-21swapper/311:50:513
21637599191,5cyclictest0-21swapper/310:05:523
21637599191,5cyclictest0-21swapper/308:20:453
216373991911,5cyclictest216432-21latency_hist07:10:021
21637599184,8cyclictest0-21swapper/309:45:013
21637599184,11cyclictest0-21swapper/311:10:483
21637599182,9cyclictest0-21swapper/311:05:513
21637599182,7cyclictest0-21swapper/307:50:453
21637599171,7cyclictest0-21swapper/308:10:543
21637599163,6cyclictest0-21swapper/308:25:513
21637599163,6cyclictest0-21swapper/308:25:513
21637599162,9cyclictest0-21swapper/309:20:523
21637599162,9cyclictest0-21swapper/309:20:523
21637599161,9cyclictest0-21swapper/312:20:513
21637599161,7cyclictest0-21swapper/307:45:463
21637599152,7cyclictest0-21swapper/308:45:503
21637599152,7cyclictest0-21swapper/307:40:473
21637599142,7cyclictest0-21swapper/307:20:523
21637599142,7cyclictest0-21swapper/307:20:523
21637599142,6cyclictest0-21swapper/308:05:483
21637599141,8cyclictest0-21swapper/312:05:483
21637599141,8cyclictest0-21swapper/308:30:483
21637599141,7cyclictest0-21swapper/308:40:483
21637599121,7cyclictest0-21swapper/308:00:403
21637599111,6cyclictest0-21swapper/308:55:033
21637599103,5cyclictest0-21swapper/307:55:453
21637599101,5cyclictest0-21swapper/307:15:433
21637599101,5cyclictest0-21swapper/307:15:433
2163759991,4cyclictest0-21swapper/307:10:023
2163759981,5cyclictest0-21swapper/307:10:453
2163759981,5cyclictest0-21swapper/307:10:453
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional