You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-27 - 18:37

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Mon Apr 27, 2026 12:43:14)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2957854996336,23cyclictest420-21avahi-daemon12:30:450
2957854995749,4cyclictest0-21swapper/008:15:460
2957854995730,3cyclictest0-21swapper/010:25:010
2957854995728,9cyclictest3002009-21unin-run09:20:020
2957856995544,7cyclictest2957865-21systemd-run07:10:012
2957855995345,5cyclictest3094831-21munin-plugin-st11:15:011
2957855995335,15cyclictest548-21gdbus09:45:021
295785499521,24cyclictest3031454-21ssh09:55:440
2957854994927,6cyclictest3064674-21sshd10:36:200
2957854994737,7cyclictest3047931-21mailstats10:15:520
2957856994637,6cyclictest3015534-21mailstats09:35:572
2957855994638,5cyclictest3115002-21munin-plugin-st11:40:011
2957855994622,21cyclictest0-21swapper/112:40:011
295785499462,37cyclictest3084096-21ssh11:00:490
2957855994536,6cyclictest3119097-21systemd11:45:021
2957855994536,6cyclictest3119097-21systemd11:45:021
2957855994520,21cyclictest421-21dbus-daemon12:00:271
2957854994535,7cyclictest2147018-21cups-browsed09:42:180
2957856994436,5cyclictest3063741-21needreboot10:35:452
2957856994435,4cyclictest0-21swapper/211:05:462
2957856994433,7cyclictest3115034-21systemd-run11:40:012
2957854994436,5cyclictest3006122-21latency_hist09:25:020
2957854994436,5cyclictest3006122-21latency_hist09:25:020
2957854994419,21cyclictest3160650-21ssh12:35:460
2957856994335,5cyclictest2969859-21systemd-run07:50:012
295785599433,6cyclictest3124274-21ssh11:50:421
2957855994335,5cyclictest2971354-21systemd-run07:55:011
2957855994329,8cyclictest3075868-21sh10:50:421
295785599431,6cyclictest2972242-21ntpq07:55:491
2957854994335,5cyclictest3087979-21ntpq11:05:460
2957856994233,6cyclictest3026121-21idleruntime-cro09:50:012
295785699422,30cyclictest3031394-21ssh09:55:422
2957855994234,3cyclictest0-21swapper/111:05:461
295785599422,6cyclictest2975330-21ntpq08:05:471
295785599422,13cyclictest2961790-21ntpq07:20:441
295785599422,13cyclictest2961790-21ntpq07:20:441
295785599421,5cyclictest2976684-21ntpq08:10:411
295785599421,10cyclictest2964700-21ntpq07:30:401
2957854994234,5cyclictest3135220-21systemd-run12:05:010
2957856994134,4cyclictest1051-21mta-sts-daemon11:17:092
2957856994133,5cyclictest3136018-21fschecks_count12:05:362
2957856994131,6cyclictest420-21avahi-daemon10:25:592
295785699412,31cyclictest3047752-21ssh10:15:472
2957855994132,6cyclictest3034219-21sendmail10:00:011
2957855994131,6cyclictest3107925-21kernelversion11:30:391
295785599412,6cyclictest2987248-21ntpq08:45:461
295785599412,6cyclictest2966286-21ntpq07:35:461
295785599412,14cyclictest3047632-21rm10:15:431
295785599412,13cyclictest2969256-21ntpq07:45:431
295785599411,13cyclictest2981228-21ntpq08:25:451
295785599410,33cyclictest3059918-21ssh10:30:471
2957854994133,5cyclictest3070646-21true10:45:010
295785499411,32cyclictest3148553-21ssh12:20:430
295785499411,32cyclictest3148553-21ssh12:20:430
295785699404,28cyclictest3039512-21ssh10:05:432
295785699404,28cyclictest3039512-21ssh10:05:432
2957856994031,4cyclictest0-21swapper/208:50:502
295785599407,30cyclictest3008328-21ssh09:26:431
295785599407,30cyclictest3008328-21ssh09:26:431
295785599403,7cyclictest3063869-21ntpq10:35:501
2957855994035,2cyclictest0-21swapper/109:35:001
2957855994031,6cyclictest1-21systemd09:10:011
295785599402,6cyclictest3051646-21ntpq10:20:401
295785599402,6cyclictest3043603-21ssh10:10:431
295785599402,6cyclictest3043603-21ssh10:10:431
295785599402,6cyclictest2984184-21ntpq08:35:411
295785599402,5cyclictest421-21dbus-daemon11:25:451
295785599402,5cyclictest2979713-21ntpq08:20:421
295785599402,5cyclictest2979713-21ntpq08:20:421
2957855994024,11cyclictest0-21swapper/109:15:011
2957855994017,20cyclictest2978751-21unixbench_singl08:15:551
295785599401,5cyclictest2963320-21ntpq07:25:481
295785599401,4cyclictest2991715-21ntpq09:00:461
295785599401,13cyclictest2990175-21ntpq08:55:431
2957854994036,2cyclictest0-21swapper/007:30:010
2957854994034,4cyclictest12350irq/32-eth007:13:020
2957854994034,3cyclictest3028150-21kworker/u8:1+rpciod09:55:010
2957854994033,4cyclictest620-21sshd08:35:480
2957854994031,6cyclictest3046415-21systemd-run10:15:010
2957854994031,6cyclictest3046415-21systemd-run10:15:010
2957854994020,13cyclictest12350irq/32-eth009:35:520
2957856993931,5cyclictest3155335-21cut12:30:002
2957856993931,4cyclictest1056-21mta-sts-daemon07:35:442
2957856993930,6cyclictest3159445-21latency_hist12:35:022
2957856993930,6cyclictest2147018-21cups-browsed09:25:252
2957856993930,6cyclictest2147018-21cups-browsed09:25:252
2957856993929,6cyclictest420-21avahi-daemon09:40:542
2957856993928,8cyclictest3086797-21systemd-run11:05:012
2957856993928,7cyclictest2147018-21cups-browsed09:52:122
2957856993926,10cyclictest3108216-21ntp_kernel_pll_11:30:462
295785599398,28cyclictest3149657-21ssh12:21:461
295785599398,28cyclictest3149657-21ssh12:21:461
2957855993930,6cyclictest3119707-21aten_r2power_po11:45:341
295785599391,9cyclictest3057139-21ssh10:27:181
295785599391,4cyclictest3015332-21ntpq09:35:501
295785599391,3cyclictest2982726-21ntpq08:30:441
295785599391,3cyclictest2958704-21ntpq07:10:421
295785599391,14cyclictest3039626-21sh10:05:471
295785599391,14cyclictest3039626-21sh10:05:471
295785599391,12cyclictest3027663-21ssh09:50:521
295785599391,10cyclictest3127388-21ssh11:55:071
295785599391,10cyclictest3038323-21systemd-run10:05:011
295785599391,10cyclictest3000136-21ssh09:16:311
2957854993931,5cyclictest2147018-21cups-browsed11:51:170
2957854993915,20cyclictest3035524-21ssh10:00:450
295785699389,22cyclictest3128483-21ssh11:55:482
2957856993830,5cyclictest2983332-21munin-plugin-st08:35:012
2957856993830,4cyclictest0-21swapper/208:15:462
295785699382,27cyclictest3124411-21ssh11:50:472
295785599389,26cyclictest3158933-21ssh12:34:161
295785599386,30cyclictest3083152-21ssh11:00:251
2957855993828,6cyclictest0-21swapper/112:25:311
295785599382,7cyclictest3071810-21ntpq10:45:411
295785599382,4cyclictest2960313-21ntp_states07:15:471
295785599381,4cyclictest3096198-21ntpq11:15:481
295785599381,4cyclictest3079900-21ntpq10:55:431
295785599381,4cyclictest3079900-21ntpq10:55:431
295785599381,4cyclictest2973709-21ntpq08:00:411
295785599381,14cyclictest3145186-21/usr/sbin/munin12:15:551
295785599381,12cyclictest3022543-21ssh09:45:301
295785599381,11cyclictest3142006-21ssh12:12:331
295785599381,11cyclictest3138491-21ssh12:08:341
295785599381,10cyclictest3102085-21ssh11:23:241
295785599381,10cyclictest3069101-21ssh10:42:041
2957854993831,5cyclictest2980458-21latency_hist08:25:020
2957854993831,5cyclictest2980458-21latency_hist08:25:020
2957854993825,5cyclictest753-21ntpd12:05:490
2957856993731,3cyclictest0-21swapper/212:25:002
2957856993731,3cyclictest0-21swapper/212:25:002
2957856993730,4cyclictest1055-21mta-sts-daemon10:43:092
2957856993729,3cyclictest0-21swapper/211:25:012
2957856993728,5cyclictest0-21swapper/212:40:002
295785599379,25cyclictest421-21dbus-daemon08:45:011
295785599372,8cyclictest3003177-21ntpq09:20:431
295785599372,8cyclictest3003177-21ntpq09:20:431
295785599371,5cyclictest2967736-21ntpq07:40:431
295785599371,4cyclictest2988729-21ntpq08:50:461
2957854993730,4cyclictest2962503-21latency_hist07:25:020
2957854993730,4cyclictest2962503-21latency_hist07:25:020
2957854993729,5cyclictest1055-21mta-sts-daemon11:25:400
2957854993728,6cyclictest420-21avahi-daemon11:17:530
2957856993630,3cyclictest0-21swapper/210:50:012
2957856993630,3cyclictest0-21swapper/209:35:002
2957854993630,4cyclictest12350irq/32-eth010:30:430
2957854993629,3cyclictest0-21swapper/012:25:460
2957854993628,3cyclictest0-21swapper/009:00:480
2957854993626,8cyclictest3115039-21ssh11:40:020
2957854993626,7cyclictest3128966-21unixbench_multi11:55:560
2957854993625,8cyclictest3143282-21latency_hist12:15:010
2957854993621,11cyclictest421-21dbus-daemon10:55:520
2957854993621,11cyclictest421-21dbus-daemon10:55:520
2957856993528,3cyclictest0-21swapper/211:25:442
2957856993527,4cyclictest3046423-21pluginstate10:15:012
2957856993527,4cyclictest3046423-21pluginstate10:15:012
2957856993526,6cyclictest2959363-21systemd-run07:15:012
295785499355,19cyclictest3092257-21ssh11:10:510
295785499354,4cyclictest0-21swapper/008:25:460
2957854993530,2cyclictest0-21swapper/010:30:010
2957854993526,6cyclictest439-21systemd-logind08:15:010
2957854993524,8cyclictest3123073-21ssh11:50:000
2957854993521,11cyclictest2971282-21unixbench_singl07:50:540
2957856993428,3cyclictest0-21swapper/210:25:012
2957856993427,3cyclictest0-21swapper/212:10:422
2957856993426,5cyclictest2993852-21systemd-run09:10:012
2957856993426,5cyclictest2986344-21munin-plugin-st08:45:012
2957856993423,5cyclictest0-21swapper/210:55:492
2957856993423,5cyclictest0-21swapper/210:55:492
295785599341,4cyclictest2957866-21munin-run07:10:011
2957854993427,4cyclictest0-21swapper/010:50:550
2957854993426,5cyclictest420-21avahi-daemon09:33:470
2957854993424,7cyclictest12350irq/32-eth010:45:470
2957854993414,13cyclictest3023463-21ssh09:45:500
2957856993324,4cyclictest0-21swapper/210:05:012
2957856993322,7cyclictest421-21dbus-daemon11:43:132
2957856993322,7cyclictest421-21dbus-daemon11:43:132
295785699332,25cyclictest2999355-21ssh09:15:522
295785699332,23cyclictest2147018-21cups-browsed08:10:492
2957856993321,9cyclictest3076328-21timerandwakeup10:50:542
2957854993327,4cyclictest3116444-21proc_pri11:40:500
2957854993327,4cyclictest3116444-21proc_pri11:40:500
2957854993326,5cyclictest439-21systemd-logind08:45:010
2957854993323,6cyclictest1054-21mta-sts-daemon12:19:310
295785499331,24cyclictest3100189-21ssh11:20:460
2957856993226,3cyclictest0-21swapper/208:50:012
2957856993225,4cyclictest3094822-21ssh11:15:012
2957856993225,3cyclictest0-21swapper/212:15:332
2957856993224,3cyclictest0-21swapper/211:45:462
2957856993219,9cyclictest3002954-21kernelversion09:20:392
2957856993219,9cyclictest3002954-21kernelversion09:20:392
295785699321,28cyclictest2966868-21kworker/u8:11+xprtiod08:35:472
295785499323,26cyclictest3007431-21ssh09:25:540
295785499323,26cyclictest3007431-21ssh09:25:540
2957854993225,4cyclictest2994748-21if_eth009:10:380
2957856993124,4cyclictest1051-21mta-sts-daemon07:55:452
2957856993124,3cyclictest0-21swapper/209:00:372
2957856993120,8cyclictest3059725-21ntp_kernel_err10:30:402
2957856993120,7cyclictest0-21swapper/208:00:462
2957856993119,9cyclictest2995625-21timerwakeupswit09:10:562
2957854993124,4cyclictest2982359-21fschecks_count08:30:360
295785699303,22cyclictest659-21snmpd07:25:442
2957854993024,4cyclictest2969784-21unixbench_singl07:45:530
2957854993020,8cyclictest2988671-21ntp_kernel_err08:50:440
2957854993015,7cyclictest0-21swapper/008:55:500
295785699294,16cyclictest428-21mta-sts-daemon07:20:462
295785699294,16cyclictest428-21mta-sts-daemon07:20:462
2957856992920,6cyclictest2971354-21systemd-run07:55:012
295785499292,17cyclictest3039560-21sh10:05:450
295785499292,17cyclictest3039560-21sh10:05:450
2957856992822,3cyclictest1056-21mta-sts-daemon12:00:382
2957856992818,6cyclictest2968061-21threads07:40:542
2957856992817,8cyclictest2981156-21needreboot08:25:422
2957856992812,10cyclictest548-21gdbus08:55:502
295785499282,21cyclictest3108301-21ssh11:30:480
2957854992821,5cyclictest2147018-21cups-browsed07:15:470
295785699273,14cyclictest420-21avahi-daemon07:15:472
2957856992720,3cyclictest0-21swapper/207:30:342
2957856992718,5cyclictest2975832-21cron08:10:012
295785499273,20cyclictest518-21rs:main0
2957854992719,6cyclictest2957858-21sh07:10:010
2957854992718,7cyclictest2975246-21ntp_kernel_pll_08:05:440
2957854992716,8cyclictest0-21swapper/008:00:530
2957854992712,12cyclictest420-21avahi-daemon07:35:350
2957856992618,5cyclictest1051-21mta-sts-daemon08:20:452
2957856992618,5cyclictest1051-21mta-sts-daemon08:20:452
295785499261,13cyclictest2972822-21idleruntime-cro08:00:010
2957854992514,5cyclictest421-21dbus-daemon07:45:020
2957854992418,4cyclictest261-21systemd-journal08:45:060
2957854992413,8cyclictest0-21swapper/007:35:020
295785799193,8cyclictest0-21swapper/309:10:453
295785799182,8cyclictest0-21swapper/309:45:443
295785799172,7cyclictest0-21swapper/311:55:453
295785799172,7cyclictest0-21swapper/309:20:453
295785799172,7cyclictest0-21swapper/309:20:453
295785799163,7cyclictest0-21swapper/307:13:043
295785799162,8cyclictest0-21swapper/310:25:443
295785799162,8cyclictest0-21swapper/310:05:433
295785799162,8cyclictest0-21swapper/310:05:433
295785799162,8cyclictest0-21swapper/309:30:443
295785799162,7cyclictest0-21swapper/311:15:413
295785799162,7cyclictest0-21swapper/309:40:483
295785799161,9cyclictest0-21swapper/312:10:483
295785799161,8cyclictest0-21swapper/310:45:453
295785799161,7cyclictest0-21swapper/307:55:513
295785799153,7cyclictest0-21swapper/310:00:323
295785799152,8cyclictest0-21swapper/311:05:463
295785799152,7cyclictest0-21swapper/309:15:523
295785799151,8cyclictest0-21swapper/312:35:433
295785799151,8cyclictest0-21swapper/311:40:433
295785799151,8cyclictest0-21swapper/311:40:433
295785799151,8cyclictest0-21swapper/311:30:443
295785799151,8cyclictest0-21swapper/311:00:483
295785799151,8cyclictest0-21swapper/310:20:423
295785799151,7cyclictest0-21swapper/310:30:433
295785799145,6cyclictest0-21swapper/309:50:443
295785799143,6cyclictest0-21swapper/311:45:503
295785799143,6cyclictest0-21swapper/311:35:443
295785799143,6cyclictest0-21swapper/310:50:463
295785799143,6cyclictest0-21swapper/309:25:493
295785799143,6cyclictest0-21swapper/309:25:493
295785799142,7cyclictest0-21swapper/312:05:323
295785799142,6cyclictest0-21swapper/307:50:473
295785799141,8cyclictest0-21swapper/312:30:413
295785799141,7cyclictest0-21swapper/308:55:463
295785799141,7cyclictest0-21swapper/307:15:453
295785799141,6cyclictest0-21swapper/308:30:423
295785799141,5cyclictest0-21swapper/307:20:403
295785799141,5cyclictest0-21swapper/307:20:403
295785799133,6cyclictest0-21swapper/311:50:373
295785799133,6cyclictest0-21swapper/311:25:343
295785799133,4cyclictest0-21swapper/308:20:483
295785799133,4cyclictest0-21swapper/308:20:483
295785799132,7cyclictest0-21swapper/312:00:493
295785799132,6cyclictest0-21swapper/311:10:313
295785799132,6cyclictest0-21swapper/308:50:503
295785799132,5cyclictest0-21swapper/308:35:433
295785799131,8cyclictest0-21swapper/310:10:403
295785799131,8cyclictest0-21swapper/310:10:403
295785799131,7cyclictest0-21swapper/312:25:353
295785799131,7cyclictest0-21swapper/312:15:363
295785799131,7cyclictest0-21swapper/311:20:453
295785799131,7cyclictest0-21swapper/310:55:413
295785799131,7cyclictest0-21swapper/310:55:413
295785799131,7cyclictest0-21swapper/310:40:453
295785799131,7cyclictest0-21swapper/310:00:033
295785799131,6cyclictest0-21swapper/308:45:453
295785799122,7cyclictest0-21swapper/308:15:463
295785799122,6cyclictest0-21swapper/310:35:423
295785799122,6cyclictest0-21swapper/308:10:493
295785799122,5cyclictest0-21swapper/309:10:023
295785799121,7cyclictest0-21swapper/310:15:443
295785799121,6cyclictest0-21swapper/309:35:323
295785799121,6cyclictest0-21swapper/309:00:503
295785799121,6cyclictest0-21swapper/308:00:413
295785799111,7cyclictest0-21swapper/312:20:333
295785799111,7cyclictest0-21swapper/312:20:333
295785799111,6cyclictest0-21swapper/307:35:433
295785799111,5cyclictest0-21swapper/307:45:033
295785799102,5cyclictest0-21swapper/307:45:413
295785799101,6cyclictest0-21swapper/308:05:413
295785799101,5cyclictest0-21swapper/308:25:433
295785799101,5cyclictest0-21swapper/307:25:443
295785799101,4cyclictest0-21swapper/308:40:343
29578579994,3cyclictest0-21swapper/307:30:393
29578579982,4cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional