You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-11 - 03:56

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Mon May 11, 2026 00:43:08)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
69058997147,20cyclictest0-21swapper/122:30:581
69058995544,8cyclictest254735-21latency_hist00:15:021
69058995544,8cyclictest254735-21latency_hist00:15:021
69059995141,5cyclictest0-21swapper/200:30:012
69059994839,6cyclictest242551-21cups-browsed00:10:432
69059994839,6cyclictest242551-21cups-browsed00:10:432
69058994835,4cyclictest0-21swapper/121:55:561
69059994740,4cyclictest100553-21kworker/u8:6-xprtiod21:20:012
69059994738,6cyclictest2469968-21cups-browsed23:40:502
69059994738,6cyclictest2469968-21cups-browsed23:40:502
69058994638,5cyclictest223703-21uname23:35:491
69057994639,4cyclictest178085-21basename22:40:000
69057994639,4cyclictest1051-21mta-sts-daemon21:00:000
69059994537,5cyclictest131388-21unixbench_singl21:41:032
69058994536,6cyclictest421-21dbus-daemon20:45:011
69059994436,3cyclictest0-21swapper/221:10:562
69059994435,6cyclictest127217-21unixbench_multi21:36:022
69059994435,4cyclictest0-21swapper/223:25:012
69059994434,7cyclictest183849-21xargs22:46:022
69058994437,3cyclictest0-21swapper/122:40:011
69058994432,9cyclictest151276-21sshd22:05:541
69059994335,4cyclictest0-21swapper/200:16:022
69059994331,5cyclictest0-21swapper/222:20:522
69057994337,3cyclictest12350irq/32-eth022:10:510
69059994235,4cyclictest695-21cron19:25:012
69058994233,6cyclictest113191-21systemd-run21:20:011
69058994233,5cyclictest270771-21ssh00:35:011
6905899422,31cyclictest256115-21ssh00:16:011
69059994133,5cyclictest178706-21sh22:40:382
69058994135,3cyclictest0-21swapper/100:20:511
69058994131,6cyclictest2469968-21cups-browsed21:27:051
69058994130,6cyclictest228207-21/usr/sbin/munin23:41:091
69058994130,6cyclictest228207-21/usr/sbin/munin23:41:091
69057994135,4cyclictest218477-21ssh23:30:020
69057994133,5cyclictest1-21systemd23:59:590
69057994130,7cyclictest194232-21cut23:00:010
69057994121,16cyclictest183632-21ssh22:45:580
69059994033,3cyclictest0-21swapper/220:05:012
69059994033,3cyclictest0-21swapper/220:05:012
69059994032,5cyclictest105033-21diskmemload23:40:012
69059994031,6cyclictest118216-21kernelversion21:25:452
69058994031,5cyclictest105038-21munin-plugin-st21:10:001
69058994031,4cyclictest0-21swapper/121:10:481
69057994029,6cyclictest12350irq/32-eth022:50:540
69059993930,6cyclictest2469968-21cups-browsed21:25:012
69058993933,4cyclictest69056-21cyclictest23:05:581
69058993931,5cyclictest73545-21cron19:25:011
69058993931,5cyclictest137618-21systemd-run21:50:011
69059993831,3cyclictest0-21swapper/223:31:012
69059993829,4cyclictest0-21swapper/223:05:012
69059993829,4cyclictest0-21swapper/223:05:012
69058993831,3cyclictest0-21swapper/123:15:541
69058993829,5cyclictest194264-21systemd-run23:00:011
69057993830,5cyclictest121288-21systemd-run21:30:010
69057993828,7cyclictest210371-21cron23:20:010
69059993731,3cyclictest0-21swapper/200:21:042
69059993729,4cyclictest0-21swapper/222:35:522
69059993727,6cyclictest135381-21unixbench-2d21:46:022
69058993728,5cyclictest141692-21ssh21:55:011
69058993728,5cyclictest141692-21ssh21:55:011
69058993725,7cyclictest159214-21sh22:15:511
69057993731,3cyclictest0-21swapper/022:00:510
69057993730,4cyclictest170132-21latency_hist22:30:020
69057993730,4cyclictest170132-21latency_hist22:30:020
69057993729,6cyclictest12350irq/32-eth021:15:550
69057993728,5cyclictest427-21polkitd21:58:290
69057993727,7cyclictest210961-21acpi23:20:400
69059993628,4cyclictest235939-21modprobe23:50:552
69059993627,6cyclictest2469968-21cups-browsed21:31:182
69059993625,7cyclictest153862-21ssh22:10:002
69059993625,6cyclictest207573-21sh23:15:512
6905999361,29cyclictest167241-21ssh22:25:492
6905999361,29cyclictest167241-21ssh22:25:492
6905899364,26cyclictest167231-21ssh22:25:491
6905899364,26cyclictest167231-21ssh22:25:491
69058993629,3cyclictest0-21swapper/123:20:511
69058993628,3cyclictest0-21swapper/122:50:571
69058993626,6cyclictest0-21swapper/121:20:511
69057993629,5cyclictest12350irq/32-eth021:10:500
6905999353,21cyclictest231782-21ssh23:45:512
69059993527,5cyclictest272737-21unixbench_singl00:36:022
69059993527,5cyclictest242551-21cups-browsed00:32:462
69059993526,6cyclictest548-21gdbus19:45:012
69059993526,3cyclictest0-21swapper/223:56:072
69059993525,6cyclictest420-21avahi-daemon19:20:022
69058993529,3cyclictest0-21swapper/123:50:561
69058993529,3cyclictest0-21swapper/123:10:511
69058993529,3cyclictest0-21swapper/120:40:011
6905899351,27cyclictest219719-21ssh23:30:511
6905799353,26cyclictest134927-21ssh21:45:540
69059993428,3cyclictest0-21swapper/220:20:012
69059993427,4cyclictest69563-21fschecks_count19:10:432
69059993426,5cyclictest145809-21ssh22:00:012
69058993428,3cyclictest0-21swapper/121:40:011
69058993428,3cyclictest0-21swapper/100:40:011
69058993426,5cyclictest75564-21fschecks_count19:30:431
69058993426,5cyclictest234527-21idleruntime-cro23:50:001
69058993425,6cyclictest195262-21kernelversion23:00:511
69058993425,6cyclictest195262-21kernelversion23:00:511
69058993425,5cyclictest130149-21aten_r2power_po21:40:411
6905799342,9cyclictest171rcu_preempt21:30:590
69057993428,4cyclictest72033-21cron19:20:010
69057993428,3cyclictest0-21swapper/021:21:030
69057993427,4cyclictest202296-21kworker/u8:17-rpciod23:10:540
69057993425,6cyclictest159812-21unixbench_multi22:16:020
6905799341,29cyclictest260048-21ssh00:20:530
6905799341,26cyclictest264067-21ssh00:25:530
69059993324,6cyclictest2469968-21cups-browsed22:16:282
69059993323,7cyclictest82408-21grep19:50:592
6905999332,22cyclictest600-21gmain20:50:522
69058993328,2cyclictest0-21swapper/122:05:001
69058993325,5cyclictest0-21swapper/122:10:451
69058993312,14cyclictest86454-21ntp_kernel_pll_20:05:521
69057993327,4cyclictest151831-21grep22:06:030
69057993322,9cyclictest82549-21systemd-run19:55:010
69057993318,12cyclictest195712-21ssh23:01:040
69057993318,12cyclictest195712-21ssh23:01:040
69059993226,3cyclictest0-21swapper/222:35:022
69059993224,5cyclictest695-21cron21:00:002
69059993224,5cyclictest104906-21unixbench_multi21:06:032
69059993224,3cyclictest0-21swapper/222:00:532
69059993223,7cyclictest138992-21ntp_offset21:50:542
69059993223,7cyclictest138992-21ntp_offset21:50:542
69059993223,5cyclictest155709-21unixbench-2d22:11:022
69058993226,3cyclictest0-21swapper/122:45:501
69058993224,5cyclictest93066-21systemd-run20:30:011
69058993224,5cyclictest69069-21systemd-run19:10:011
69058993224,5cyclictest179135-21latency22:40:441
69058993223,3cyclictest0-21swapper/100:29:041
69058993220,9cyclictest74852-21timerwakeupswit19:26:021
69058993218,10cyclictest216170-21timerandwakeup23:26:051
6905799324,20cyclictest12350irq/32-eth022:30:510
69057993228,2cyclictest0-21swapper/023:35:010
69057993227,3cyclictest0-21swapper/000:10:010
69057993225,4cyclictest80078-21fschecks_time19:45:430
69057993225,4cyclictest80078-21fschecks_time19:45:430
69057993225,3cyclictest0-21swapper/000:16:580
69057993224,5cyclictest93193-21latency_hist20:30:020
69057993221,8cyclictest200128-21unixbench_multi23:06:040
69057993219,4cyclictest0-21swapper/023:51:540
6905799321,26cyclictest130884-21sh21:40:560
69059993125,3cyclictest0-21swapper/220:40:012
69059993124,4cyclictest194352-21ssh23:00:022
69059993124,4cyclictest1051-21mta-sts-daemon20:05:522
69059993123,5cyclictest215038-21aten_r2power_en23:25:382
69059993123,5cyclictest0-21swapper/200:00:552
69059993122,4cyclictest0-21swapper/200:10:012
69059993118,8cyclictest200190-21grep23:06:042
6905899315,18cyclictest428-21mta-sts-daemon21:00:491
6905899315,18cyclictest428-21mta-sts-daemon21:00:491
69058993123,5cyclictest421-21dbus-daemon00:00:011
6905899312,26cyclictest122579-21ssh21:30:531
6905799317,7cyclictest171rcu_preempt19:20:470
6905799314,22cyclictest243951-21sh00:00:540
69057993125,3cyclictest0-21swapper/022:23:480
69057993124,5cyclictest421-21dbus-daemon21:35:530
69057993124,3cyclictest0-21swapper/023:36:030
69057993121,4cyclictest421-21dbus-daemon21:10:010
6905999308,14cyclictest2469968-21cups-browsed20:10:542
69059993021,5cyclictest187418-21sh22:50:502
69058993023,3cyclictest0-21swapper/122:20:541
69057993024,3cyclictest182170-21kworker/u8:6-xprtiod22:45:010
69057993023,4cyclictest67669-21kworker/u8:10+rpciod19:30:010
69057993021,6cyclictest0-21swapper/020:55:010
69057993018,10cyclictest251542-21fschecks_time00:10:440
69057993018,10cyclictest251542-21fschecks_time00:10:440
6905799301,25cyclictest77506-21sshd19:35:540
69059992923,3cyclictest0-21swapper/219:40:012
69059992921,3cyclictest0-21swapper/223:14:152
69058992925,2cyclictest0-21swapper/100:05:531
69058992923,3cyclictest0-21swapper/119:15:551
69058992922,4cyclictest90042-21sendmail20:20:011
69058992919,7cyclictest80921-21unixbench_multi19:46:001
69058992919,7cyclictest80921-21unixbench_multi19:46:001
69057992923,3cyclictest151ktimers/021:50:510
69057992923,3cyclictest151ktimers/021:50:510
69057992922,4cyclictest1055-21mta-sts-daemon00:32:000
6905799292,23cyclictest272187-21ssh00:35:540
69057992919,5cyclictest151ktimers/019:55:550
6905799291,24cyclictest227875-21ssh23:40:580
6905799291,24cyclictest227875-21ssh23:40:580
69059992821,4cyclictest91777-21/usr/sbin/munin20:25:502
69058992822,3cyclictest3801152-21kworker/u8:11-rpciod20:05:011
69058992822,3cyclictest3801152-21kworker/u8:11-rpciod20:05:011
69058992822,3cyclictest0-21swapper/119:40:011
69058992819,3cyclictest1054-21mta-sts-daemon19:55:011
69057992818,8cyclictest86416-21ntp_kernel_pll_20:05:500
69059992716,8cyclictest98844-21timerwakeupswit20:46:022
69058992719,5cyclictest79700-21latency_hist19:45:021
69058992719,5cyclictest105033-21diskmemload00:01:021
69058992718,7cyclictest94553-21sh20:35:011
69058992717,7cyclictest100524-21cron20:55:001
69057992721,4cyclictest89974-21head20:16:020
69057992710,14cyclictest421-21dbus-daemon21:05:010
69057992710,14cyclictest421-21dbus-daemon21:05:010
69059992620,3cyclictest0-21swapper/220:20:422
69059992618,5cyclictest84072-21systemd-run20:00:012
69059992618,5cyclictest75271-21/usr/sbin/munin19:30:492
69059992617,7cyclictest102996-21ntp_states21:00:542
69059992617,7cyclictest102996-21ntp_states21:00:542
69058992620,3cyclictest0-21swapper/120:20:511
69058992620,3cyclictest0-21swapper/119:15:011
69058992618,5cyclictest98354-21needreboot20:45:481
69057992620,4cyclictest95899-21grep20:36:050
69057992619,4cyclictest0-21swapper/023:50:020
69057992618,7cyclictest12450irq/33-eth020:10:510
69057992617,6cyclictest0-21swapper/019:45:000
69059992519,3cyclictest0-21swapper/220:35:012
69059992515,7cyclictest1-21systemd19:28:552
69057992519,4cyclictest2469968-21cups-browsed20:40:050
69057992514,8cyclictest0-21swapper/020:46:020
69057992512,8cyclictest151ktimers/020:00:510
69057992512,8cyclictest151ktimers/020:00:510
6905999244,13cyclictest428-21mta-sts-daemon19:45:492
6905999244,13cyclictest428-21mta-sts-daemon19:45:492
69058992418,3cyclictest0-21swapper/121:00:011
69058992417,4cyclictest1056-21mta-sts-daemon19:58:551
69058992416,5cyclictest2469968-21cups-browsed20:12:561
69057992418,3cyclictest65035-21kworker/u8:2-xprtiod19:10:430
69059992318,2cyclictest0-21swapper/220:41:022
6905799231,17cyclictest2469963-21cupsd20:20:500
69057992213,7cyclictest1056-21mta-sts-daemon19:30:510
69057992116,3cyclictest1056-21mta-sts-daemon20:30:440
6906099193,7cyclictest0-21swapper/322:25:553
6906099193,7cyclictest0-21swapper/322:25:553
6905999195,8cyclictest421-21dbus-daemon19:10:012
6906099172,8cyclictest0-21swapper/300:35:553
69057991711,4cyclictest69007-21latency_hist19:10:020
6906099163,8cyclictest0-21swapper/323:50:583
6906099162,9cyclictest0-21swapper/322:35:553
6906099162,8cyclictest0-21swapper/322:31:023
6906099161,9cyclictest0-21swapper/300:05:543
6906099161,8cyclictest0-21swapper/323:30:553
6906099153,7cyclictest0-21swapper/323:10:543
6906099153,7cyclictest0-21swapper/322:05:543
6906099153,7cyclictest0-21swapper/321:40:553
6906099153,7cyclictest0-21swapper/321:20:493
6906099153,6cyclictest0-21swapper/321:15:553
6906099152,8cyclictest0-21swapper/322:15:553
6906099152,7cyclictest0-21swapper/321:45:503
6906099152,7cyclictest0-21swapper/319:25:563
6906099151,8cyclictest0-21swapper/300:30:583
6906099151,7cyclictest0-21swapper/319:45:523
6906099151,7cyclictest0-21swapper/319:45:523
6906099151,7cyclictest0-21swapper/300:25:443
6906099151,6cyclictest0-21swapper/320:40:493
6906099151,4cyclictest0-21swapper/300:16:013
6906099145,7cyclictest0-21swapper/323:20:013
6906099143,6cyclictest0-21swapper/323:40:013
6906099142,8cyclictest0-21swapper/322:45:573
6906099142,8cyclictest0-21swapper/321:55:403
6906099142,8cyclictest0-21swapper/321:25:473
6906099141,8cyclictest0-21swapper/323:45:553
6906099141,8cyclictest0-21swapper/323:26:063
6906099141,8cyclictest0-21swapper/322:20:563
6906099141,8cyclictest0-21swapper/321:50:533
6906099141,8cyclictest0-21swapper/321:50:533
6906099141,8cyclictest0-21swapper/320:05:003
6906099141,8cyclictest0-21swapper/320:05:003
6906099141,7cyclictest0-21swapper/321:30:473
6906099141,7cyclictest0-21swapper/321:10:483
6906099141,7cyclictest0-21swapper/321:05:503
6906099141,7cyclictest0-21swapper/320:30:483
6906099141,7cyclictest0-21swapper/300:20:523
6906099141,6cyclictest0-21swapper/323:20:393
6906099141,6cyclictest0-21swapper/319:55:513
6906099140,6cyclictest0-21swapper/319:40:503
6906099132,7cyclictest0-21swapper/323:40:503
6906099132,7cyclictest0-21swapper/323:40:503
6906099132,7cyclictest0-21swapper/322:50:513
6906099132,7cyclictest0-21swapper/322:10:433
6906099132,7cyclictest0-21swapper/320:20:013
6906099132,7cyclictest0-21swapper/300:00:513
6906099132,6cyclictest0-21swapper/320:35:553
6906099132,6cyclictest0-21swapper/319:15:513
6906099132,6cyclictest0-21swapper/300:10:493
6906099132,6cyclictest0-21swapper/300:10:493
6906099132,5cyclictest0-21swapper/319:10:503
6906099132,4cyclictest0-21swapper/321:00:493
6906099132,4cyclictest0-21swapper/321:00:493
6906099131,8cyclictest0-21swapper/322:55:543
6906099131,7cyclictest0-21swapper/323:00:543
6906099131,7cyclictest0-21swapper/323:00:543
6906099131,7cyclictest0-21swapper/322:00:523
6906099131,6cyclictest0-21swapper/320:55:563
6906099131,6cyclictest0-21swapper/320:45:503
6906099124,5cyclictest0-21swapper/319:55:003
6906099122,7cyclictest0-21swapper/321:35:513
6906099121,8cyclictest0-21swapper/322:40:383
6906099121,7cyclictest0-21swapper/320:25:533
6906099121,6cyclictest0-21swapper/319:35:513
6906099121,6cyclictest0-21swapper/319:20:553
6906099121,6cyclictest0-21swapper/300:00:033
6906099121,5cyclictest0-21swapper/319:30:483
6906099112,6cyclictest0-21swapper/320:20:513
6906099112,6cyclictest0-21swapper/320:05:403
6906099111,5cyclictest0-21swapper/320:50:503
6906099102,6cyclictest0-21swapper/320:10:493
6906099101,5cyclictest0-21swapper/323:05:553
690609981,4cyclictest0-21swapper/319:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional