You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-26 - 07:27

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Fri Jun 26, 2026 00:43:26)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3404629997568,3cyclictest0-21swapper/100:35:381
3404628995839,16cyclictest3504088-21tail22:50:450
3404628995839,16cyclictest3504088-21tail22:50:450
3404628995647,6cyclictest0-21swapper/000:00:400
3404628995647,6cyclictest0-21swapper/000:00:400
3404629995244,5cyclictest3536377-21awk23:45:011
3404628994939,6cyclictest1653682-21cups-browsed22:45:330
3404628994939,6cyclictest1653682-21cups-browsed22:45:330
3404628994937,4cyclictest3459267-21munin-run21:40:010
3404629994736,7cyclictest3434631-21systemd-run20:50:011
3404629994736,7cyclictest3434631-21systemd-run20:50:011
3404628994735,5cyclictest3525641-21unixbench_multi23:25:450
3404630994637,5cyclictest0-21swapper/219:20:012
3404629994637,6cyclictest3478285-21aten_r2power_po22:10:211
3404629994637,6cyclictest3409145-21systemd-run19:25:011
340462899466,29cyclictest3491251-21ssh22:30:390
340462899465,3cyclictest171rcu_preempt00:05:360
340462899465,3cyclictest171rcu_preempt00:05:360
3404630994435,5cyclictest3419617-21idleruntime-cro20:00:012
3404629994436,5cyclictest3521011-21systemd-run23:20:011
3404629994435,6cyclictest421-21dbus-daemon00:00:021
3404629994433,8cyclictest421-21dbus-daemon19:35:011
340462899442,33cyclictest3497456-21ssh22:40:350
340462899442,33cyclictest3497456-21ssh22:40:350
3404630994334,6cyclictest3537632-21mailstats23:45:392
3404629994325,10cyclictest0-21swapper/100:15:301
3404628994337,4cyclictest3483991-21sendmail22:20:010
3404630994236,3cyclictest0-21swapper/222:35:022
3404630994234,5cyclictest3570355-21systemd-run00:40:012
3404630994234,5cyclictest3542516-21cron23:55:012
3404630994230,8cyclictest3459304-21systemd-run21:40:012
3404629994236,3cyclictest0-21swapper/123:30:311
3404629994234,5cyclictest3490598-21aten_r2power_fr22:30:231
3404628994234,6cyclictest3447911-21collect221:20:320
3404628994234,6cyclictest3447911-21collect221:20:320
3404630994133,3cyclictest0-21swapper/221:10:222
3404628994131,7cyclictest439-21systemd-logind19:15:020
3404628994129,9cyclictest3521956-21needreboot23:20:340
3404628994123,4cyclictest171rcu_preempt00:20:360
3404630994032,5cyclictest3530185-21sh23:35:012
3404629994033,4cyclictest3419612-21idleruntime-cro20:00:011
3404628994033,5cyclictest57-21kcompactd023:40:350
3404628994031,6cyclictest3440645-21unin-run21:10:020
3404630993930,6cyclictest3510322-21head23:00:472
3404629993931,5cyclictest3440644-21systemd-run21:10:021
3404629993931,4cyclictest0-21swapper/121:55:371
3404629993928,7cyclictest421-21dbus-daemon00:08:281
3404629993928,7cyclictest421-21dbus-daemon00:08:281
3404629993923,9cyclictest0-21swapper/121:10:351
3404628993933,3cyclictest0-21swapper/020:45:010
3404628993930,6cyclictest3480909-21idleruntime-cro22:15:010
340463099385,5cyclictest171rcu_preempt22:00:352
3404630993832,3cyclictest0-21swapper/223:20:012
3404630993832,2cyclictest0-21swapper/223:25:022
3404629993830,5cyclictest421-21dbus-daemon21:05:011
3404629993830,5cyclictest3474718-21cron22:05:011
3404629993830,5cyclictest3446887-21systemd-run21:20:021
3404629993830,5cyclictest3446887-21systemd-run21:20:021
3404629993829,6cyclictest439-21systemd-logind20:45:021
3404628993823,11cyclictest3473061-21xargs22:00:430
3404628993820,5cyclictest171rcu_preempt19:45:320
3404628993818,11cyclictest12650irq/32-eth022:25:360
3404628993814,17cyclictest421-21dbus-daemon23:30:310
3404630993730,4cyclictest3476308-21unixbench-2d22:05:452
3404630993729,5cyclictest3533266-21cron23:40:012
340462999375,9cyclictest171rcu_preempt19:50:361
3404629993728,5cyclictest0-21swapper/122:05:321
3404629993728,4cyclictest0-21swapper/122:30:021
3404629993727,6cyclictest1653682-21cups-browsed23:11:141
3404629993727,6cyclictest1653682-21cups-browsed23:11:141
3404629993724,9cyclictest421-21dbus-daemon19:25:331
3404628993731,3cyclictest0-21swapper/022:40:020
340463099364,25cyclictest3463452-21ssh21:45:342
340463099363,26cyclictest3454202-21ssh21:30:382
3404630993624,5cyclictest3500354-21needreboot22:45:292
3404630993624,5cyclictest3500354-21needreboot22:45:292
340462999363,25cyclictest3506627-21ssh22:55:341
340462999363,25cyclictest3506627-21ssh22:55:341
3404629993629,4cyclictest3456184-21systemd-run21:35:011
3404629993629,4cyclictest0-21swapper/123:55:011
3404629993626,7cyclictest1002-21mta-sts-daemon22:48:481
3404629993626,7cyclictest1002-21mta-sts-daemon22:48:481
3404628993628,5cyclictest3413653-21systemd-run19:40:010
3404630993527,5cyclictest3487204-21latency_hist22:25:022
3404630993527,4cyclictest421-21dbus-daemon00:30:302
3404630993522,5cyclictest1000-21mta-sts-daemon00:10:442
3404630993522,5cyclictest1000-21mta-sts-daemon00:10:442
3404629993528,4cyclictest1001-21mta-sts-daemon22:35:271
3404629993527,5cyclictest3449966-21latency_hist21:25:001
3404629993527,5cyclictest3449966-21latency_hist21:25:001
3404629993527,5cyclictest3406059-21head19:10:421
3404629993527,4cyclictest1000-21mta-sts-daemon22:21:461
3404629993525,7cyclictest3561085-21cut00:25:021
3404629993523,9cyclictest3512593-21latency23:05:281
3404629993523,9cyclictest3512593-21latency23:05:281
3404628993529,4cyclictest3469194-21fschecks_time21:55:240
3404628993523,9cyclictest3541053-21unixbench_multi23:50:420
3404628993523,4cyclictest1002-21mta-sts-daemon21:30:340
3404628993522,4cyclictest171rcu_preempt22:55:330
3404628993522,4cyclictest171rcu_preempt22:55:330
340462899351,30cyclictest0-21swapper/021:50:320
340463099343,24cyclictest3516032-21ssh23:10:392
340463099343,24cyclictest3516032-21ssh23:10:392
3404630993423,8cyclictest439-21systemd-logind21:10:022
340462999343,19cyclictest3451014-21ssh21:25:321
3404629993426,5cyclictest3436115-21munin-plugin-st20:55:001
3404629993423,8cyclictest3466888-21timerandwakeup21:50:431
3404628993411,3cyclictest0-21swapper/020:30:330
3404630993328,2cyclictest0-21swapper/222:40:012
3404630993325,5cyclictest3506335-21ssh22:55:282
3404630993325,5cyclictest3506335-21ssh22:55:282
3404630993325,5cyclictest3437607-21munin-plugin-st21:00:002
3404630993325,5cyclictest3434631-21systemd-run20:50:012
3404630993325,5cyclictest3434631-21systemd-run20:50:012
3404630993324,6cyclictest0-21swapper/200:30:012
3404630993324,4cyclictest0-21swapper/200:20:362
3404630993323,6cyclictest3481430-21aten_r2power_vo22:15:252
340463099332,22cyclictest3478941-21ssh22:10:352
3404629993325,5cyclictest421-21dbus-daemon19:50:011
3404629993324,6cyclictest3440616-21diskmemload23:35:241
340462899334,4cyclictest171rcu_preempt23:00:390
3404628993326,4cyclictest0-21swapper/000:15:370
3404628993324,5cyclictest0-21swapper/000:10:300
3404628993324,5cyclictest0-21swapper/000:10:300
3404628993320,8cyclictest12650irq/32-eth022:20:340
3404628993318,6cyclictest171rcu_preempt00:25:300
340462899331,5cyclictest3565232-21ssh00:30:340
3404630993226,3cyclictest0-21swapper/200:15:432
3404630993225,4cyclictest3453077-21munin-run21:30:002
3404630993225,4cyclictest3404570-21kworker/u8:1-xprtiod19:20:242
3404630993224,5cyclictest3536362-21sh23:45:012
3404630993222,5cyclictest0-21swapper/223:25:342
340462999324,25cyclictest3552904-21ssh00:10:341
340462999324,25cyclictest3552904-21ssh00:10:341
3404629993225,4cyclictest1001-21mta-sts-daemon23:00:151
3404629993224,5cyclictest485-21in:imuxsock21:50:011
3404629993222,6cyclictest3561476-21aten_r2power_en00:25:211
3404629993222,6cyclictest3484170-21latency_hist22:20:031
3404629993221,6cyclictest1002-21mta-sts-daemon20:35:321
340462899325,11cyclictest171rcu_preempt00:35:400
3404628993226,4cyclictest3533282-21systemctl23:40:010
3404628993225,4cyclictest3545608-21munin-run00:00:010
340462899322,23cyclictest3515940-21ssh23:10:350
340462899322,23cyclictest3515940-21ssh23:10:350
3404628993219,8cyclictest0-21swapper/021:15:250
3404628993219,8cyclictest0-21swapper/021:15:250
3404628993217,3cyclictest171rcu_preempt20:45:300
3404628993217,3cyclictest171rcu_preempt20:45:300
3404630993126,2cyclictest0-21swapper/223:05:222
3404630993126,2cyclictest0-21swapper/223:05:222
3404630993125,3cyclictest0-21swapper/219:15:012
3404630993124,3cyclictest0-21swapper/222:50:332
3404630993124,3cyclictest0-21swapper/222:50:332
3404630993123,5cyclictest3449959-21sh21:25:002
3404630993123,5cyclictest3449959-21sh21:25:002
3404630993121,6cyclictest3429994-21unixbench_multi20:30:422
3404630993120,8cyclictest3497670-21switchtime22:40:402
3404630993120,8cyclictest3497670-21switchtime22:40:402
3404629993124,4cyclictest1001-21mta-sts-daemon21:40:081
3404629993123,6cyclictest3565757-21tail00:30:451
3404629993123,5cyclictest1653682-21cups-browsed20:05:441
3404628993124,5cyclictest3430960-21sed20:35:300
3404628993122,7cyclictest3407008-21ntp_kernel_pll_19:15:320
3404628993117,3cyclictest171rcu_preempt19:25:330
340462899311,18cyclictest12650irq/32-eth021:45:350
3404630993025,2cyclictest0-21swapper/220:40:012
3404630993024,3cyclictest0-21swapper/222:00:012
3404630993024,3cyclictest0-21swapper/200:05:322
3404630993024,3cyclictest0-21swapper/200:05:322
3404630993023,4cyclictest3446832-21ssh21:20:012
3404630993023,4cyclictest3446832-21ssh21:20:012
3404630993022,5cyclictest0-21swapper/219:40:012
340463099302,21cyclictest3546797-21ssh00:00:392
340463099302,21cyclictest3546797-21ssh00:00:392
3404630993021,7cyclictest3545669-40invoke-rc.d00:00:022
3404629993023,5cyclictest3522519-21timerwakeupswit23:20:511
3404629993022,4cyclictest0-21swapper/123:45:361
3404629993020,7cyclictest3503307-21latency22:50:281
3404629993020,7cyclictest3503307-21latency22:50:281
3404628993023,5cyclictest420-21avahi-daemon23:05:220
3404628993023,5cyclictest420-21avahi-daemon23:05:220
340462899302,23cyclictest665-21snmpd21:40:270
3404628993021,5cyclictest3418393-21aten_r2power_en19:55:210
3404628993020,3cyclictest3436653-21gltestperf20:55:230
3404630992923,4cyclictest3404627-21cyclictest20:29:242
3404630992922,4cyclictest3422143-21proc_pri20:05:382
3404630992922,4cyclictest3420260-21kernelversion20:00:292
3404630992917,9cyclictest3459750-21aten_r2power_po21:40:202
340462999291,24cyclictest3497386-21sh22:40:321
340462999291,24cyclictest3497386-21sh22:40:321
340462999291,20cyclictest3457337-21sh21:35:381
3404628992923,3cyclictest0-21swapper/021:25:430
3404628992923,3cyclictest0-21swapper/021:10:310
3404628992918,8cyclictest3518818-21missed_timers23:15:320
3404628992916,3cyclictest171rcu_preempt20:05:370
3404628992915,9cyclictest12650irq/32-eth022:05:320
3404628992914,3cyclictest171rcu_preempt23:45:310
3404628992912,5cyclictest0-21swapper/020:00:340
3404628992911,4cyclictest171rcu_preempt20:50:320
3404630992822,3cyclictest0-21swapper/222:25:352
3404630992822,3cyclictest0-21swapper/219:45:412
3404630992821,4cyclictest3467050-21unixbench_multi21:50:442
3404629992821,4cyclictest3527131-21systemd-run23:30:011
3404629992821,4cyclictest0-21swapper/120:05:011
3404629992820,5cyclictest3437604-21munin-plugin-st21:00:001
3404629992820,5cyclictest1653682-21cups-browsed20:30:301
3404629992820,5cyclictest1653682-21cups-browsed20:11:471
3404629992819,6cyclictest3546603-21missed_timers00:00:331
3404629992819,6cyclictest3546603-21missed_timers00:00:331
3404628992823,2cyclictest0-21swapper/021:05:010
3404628992815,6cyclictest171rcu_preempt19:20:330
3404629992721,3cyclictest0-21swapper/120:20:011
3404629992719,5cyclictest3407609-21sh19:20:011
3404628992722,3cyclictest3404627-21cyclictest19:40:290
3404628992722,3cyclictest3404627-21cyclictest19:40:290
3404630992617,6cyclictest1001-21mta-sts-daemon19:30:262
3404630992617,5cyclictest3413927-21aten_r2power_en19:40:202
3404630992617,5cyclictest3413927-21aten_r2power_en19:40:202
340462899268,10cyclictest171rcu_preempt19:50:060
3404628992613,4cyclictest171rcu_preempt20:30:010
3404628992610,3cyclictest171rcu_preempt20:10:350
3404630992517,5cyclictest3418101-21cron19:55:012
3404630992517,5cyclictest265-21systemd-journal20:55:002
3404629992516,6cyclictest265-21systemd-journal20:25:011
340462899259,5cyclictest171rcu_preempt20:15:210
340462899252,12cyclictest1653682-21cups-browsed19:30:300
3404630992417,3cyclictest0-21swapper/220:20:012
3404628992418,3cyclictest427-21polkitd20:20:140
3404630992317,3cyclictest1000-21mta-sts-daemon20:40:302
3404630992314,6cyclictest3426979-21grep20:20:412
3404629992315,5cyclictest3428640-21systemd-run20:30:011
3404629992315,5cyclictest3412646-21fschecks_time19:35:251
3404630992217,2cyclictest0-21swapper/220:10:422
3404630992215,4cyclictest3439003-21unixbench_multi21:00:422
3404629992216,3cyclictest0-21swapper/119:40:221
3404629992216,3cyclictest0-21swapper/119:40:221
3404630992116,2cyclictest0-21swapper/219:25:402
3404629992014,3cyclictest0-21swapper/119:10:021
3404628992011,3cyclictest171rcu_preempt19:10:010
3404630991914,2cyclictest0-21swapper/219:10:022
340463199182,7cyclictest0-21swapper/321:35:323
340463199181,8cyclictest0-21swapper/319:20:363
340463199163,8cyclictest0-21swapper/322:40:303
340463199163,8cyclictest0-21swapper/322:40:303
340463199163,4cyclictest0-21swapper/321:00:313
340463199162,6cyclictest0-21swapper/322:00:323
340463199162,3cyclictest0-21swapper/320:40:313
340463199161,8cyclictest0-21swapper/322:35:333
340463199161,7cyclictest0-21swapper/321:30:383
340463199152,8cyclictest0-21swapper/322:20:363
340463199152,8cyclictest0-21swapper/300:35:383
340463199151,8cyclictest0-21swapper/323:30:363
340463199151,8cyclictest0-21swapper/323:10:333
340463199151,8cyclictest0-21swapper/323:10:333
340463199151,8cyclictest0-21swapper/322:55:323
340463199151,8cyclictest0-21swapper/322:55:323
340463199151,7cyclictest0-21swapper/321:10:323
340463199151,6cyclictest0-21swapper/320:25:303
340463199151,6cyclictest0-21swapper/320:15:313
340463199151,6cyclictest0-21swapper/319:15:363
340463199142,8cyclictest0-21swapper/321:20:023
340463199142,8cyclictest0-21swapper/321:20:023
340463199142,7cyclictest0-21swapper/322:30:303
340463199142,6cyclictest0-21swapper/321:40:353
340463199142,5cyclictest0-21swapper/320:20:283
340463199141,7cyclictest0-21swapper/323:55:373
340463199141,7cyclictest0-21swapper/323:45:323
340463199141,7cyclictest0-21swapper/323:05:333
340463199141,7cyclictest0-21swapper/323:05:333
340463199141,7cyclictest0-21swapper/322:45:323
340463199141,7cyclictest0-21swapper/322:45:323
340463199141,7cyclictest0-21swapper/322:25:323
340463199141,7cyclictest0-21swapper/321:55:343
340463199141,7cyclictest0-21swapper/321:20:213
340463199141,7cyclictest0-21swapper/321:20:213
340463199141,7cyclictest0-21swapper/320:00:323
340463199141,7cyclictest0-21swapper/300:00:353
340463199141,7cyclictest0-21swapper/300:00:353
340463199141,6cyclictest0-21swapper/319:55:303
340463199141,6cyclictest0-21swapper/319:25:293
340463199134,6cyclictest0-21swapper/300:25:333
340463199133,6cyclictest0-21swapper/321:45:293
340463199132,6cyclictest0-21swapper/300:10:233
340463199132,6cyclictest0-21swapper/300:10:233
340463199131,7cyclictest0-21swapper/323:25:343
340463199131,7cyclictest0-21swapper/319:40:013
340463199131,6cyclictest0-21swapper/323:00:333
340463199123,6cyclictest0-21swapper/323:15:413
340463199123,6cyclictest0-21swapper/300:15:353
340463199123,4cyclictest0-21swapper/320:15:013
340463199122,7cyclictest0-21swapper/322:05:283
340463199122,6cyclictest0-21swapper/322:15:243
340463199122,6cyclictest0-21swapper/321:50:213
340463199122,6cyclictest0-21swapper/300:10:013
340463199122,6cyclictest0-21swapper/300:10:013
340463199122,5cyclictest0-21swapper/320:50:013
340463199122,5cyclictest0-21swapper/320:50:013
340463199121,6cyclictest0-21swapper/322:10:203
340463199121,6cyclictest0-21swapper/300:30:223
340463199121,6cyclictest0-21swapper/300:20:263
340463199121,5cyclictest0-21swapper/320:30:303
340463199113,6cyclictest0-21swapper/323:50:223
340463199113,6cyclictest0-21swapper/322:50:253
340463199113,6cyclictest0-21swapper/322:50:253
340463199111,6cyclictest0-21swapper/323:40:313
340463199111,6cyclictest0-21swapper/319:30:223
340463199111,5cyclictest0-21swapper/323:35:193
340463199111,5cyclictest0-21swapper/323:20:213
340463199111,3cyclictest0-21swapper/321:00:023
340463199110,5cyclictest0-21swapper/320:50:283
340463199103,5cyclictest0-21swapper/319:50:353
340463199102,4cyclictest0-21swapper/319:40:223
340463199102,4cyclictest0-21swapper/319:40:223
340463199102,4cyclictest0-21swapper/319:10:223
340463199101,5cyclictest0-21swapper/320:35:233
34046319991,5cyclictest0-21swapper/321:25:223
34046319991,5cyclictest0-21swapper/321:10:033
34046319991,5cyclictest0-21swapper/320:05:293
34046319990,5cyclictest0-21swapper/319:45:293
34046319971,3cyclictest0-21swapper/319:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional