You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-07 - 18:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot3s.osadl.org (updated Sun Dec 07, 2025 12:45:09)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
148368499120115,2cyclictest0-21swapper/008:05:010
1483694997629,41cyclictest235-21systemd-journal11:20:012
1483698996813,15cyclictest1485764-21sed07:50:013
148369499683,22cyclictest1484127-21cron07:19:592
1483694996722,7cyclictest1484916-21cron07:34:592
1483694996526,10cyclictest1492502-21pluginstate10:00:022
1483684996557,5cyclictest12-21ksoftirqd/007:30:020
1483684996557,5cyclictest12-21ksoftirqd/007:30:020
1483694996340,18cyclictest235-21systemd-journal12:00:002
1483694996324,6cyclictest1491698-21sh09:44:592
1483698996217,8cyclictest37-21ksoftirqd/312:40:043
148369499623,21cyclictest1491414-21modprobe09:40:002
1483698996120,10cyclictest1500117-21date12:25:033
1483698996111,15cyclictest1490141-21systemd-run09:15:003
1483694995924,7cyclictest30-21ksoftirqd/208:50:022
1483689995913,10cyclictest23-21ksoftirqd/108:00:011
1483689995913,10cyclictest23-21ksoftirqd/108:00:011
1483694995851,3cyclictest30-21ksoftirqd/208:45:022
148368999562,7cyclictest23-21ksoftirqd/107:25:001
1483698995512,7cyclictest37-21ksoftirqd/309:20:013
148368999557,8cyclictest23-21ksoftirqd/112:15:021
1483689995534,15cyclictest272-21dbus-daemon09:05:011
1483684995546,6cyclictest12-21ksoftirqd/010:05:130
1483694995436,12cyclictest235-21systemd-journal08:15:022
1483694995436,12cyclictest235-21systemd-journal08:15:012
1483698995313,6cyclictest37-21ksoftirqd/312:15:003
148368999536,6cyclictest23-21ksoftirqd/112:30:001
1483689995337,13cyclictest1-21systemd08:30:021
1483689995337,13cyclictest1-21systemd08:30:011
148369499522,3cyclictest131rcu_preempt09:20:002
148368999526,8cyclictest23-21ksoftirqd/107:20:021
148368999525,5cyclictest23-21ksoftirqd/108:45:021
1483689995234,13cyclictest272-21dbus-daemon10:35:001
1483689995215,10cyclictest23-21ksoftirqd/109:45:011
1483684995248,2cyclictest0-21swapper/010:30:010
1483698995130,17cyclictest1498744-21munin-run12:00:003
1483698995121,23cyclictest1497652-21cron11:40:003
1483698995121,23cyclictest1497652-21cron11:40:003
148368999517,8cyclictest23-21ksoftirqd/109:35:011
148368999514,6cyclictest23-21ksoftirqd/107:50:021
1483689995134,13cyclictest235-21systemd-journal12:35:011
1483689995112,11cyclictest23-21ksoftirqd/112:10:011
1483698995035,11cyclictest1493762-21sshd10:22:143
1483698995033,13cyclictest1500247-21sshd12:26:133
1483698995032,14cyclictest235-21systemd-journal11:50:033
1483698995030,16cyclictest1499219-21cron12:10:013
1483694995031,14cyclictest272-21dbus-daemon10:15:012
148368999507,6cyclictest23-21ksoftirqd/110:25:011
1483698994936,8cyclictest272-21dbus-daemon11:45:013
1483698994933,11cyclictest1496098-21sshd11:09:133
148368999498,8cyclictest23-21ksoftirqd/108:15:001
148368999498,8cyclictest23-21ksoftirqd/108:15:001
148368999496,11cyclictest23-21ksoftirqd/110:00:001
1483684994930,13cyclictest272-21dbus-daemon12:15:000
1483698994835,10cyclictest1499723-21sshd12:18:133
1483698994830,14cyclictest1495543-21sshd10:55:143
148368999486,10cyclictest23-21ksoftirqd/111:05:001
148368999485,9cyclictest23-21ksoftirqd/107:40:021
1483684994827,15cyclictest272-21dbus-daemon09:30:010
1483698994735,9cyclictest1492177-21sshd09:51:143
1483698994734,9cyclictest1495304-21sshd10:52:123
1483698994734,9cyclictest1490634-21sshd09:20:123
1483698994734,9cyclictest1490634-21sshd09:20:123
1483698994734,10cyclictest1496343-21sshd11:12:133
1483698994733,10cyclictest363-21snmpd10:16:073
1483698994733,10cyclictest1488840-21munin-run08:50:003
1483698994732,12cyclictest1486181-21sshd07:55:143
1483698994732,12cyclictest1486181-21sshd07:55:133
1483698994732,12cyclictest1485425-21sshd07:40:143
1483698994732,12cyclictest1485425-21sshd07:40:133
1483698994728,14cyclictest1487001-21munin-run08:15:013
1483698994728,14cyclictest1487001-21munin-run08:15:003
1483694994733,11cyclictest30-21ksoftirqd/211:49:592
148368999477,9cyclictest23-21ksoftirqd/110:49:591
148368999476,7cyclictest23-21ksoftirqd/107:42:131
148368999476,7cyclictest23-21ksoftirqd/107:42:131
148368999475,8cyclictest23-21ksoftirqd/111:25:011
148368999475,8cyclictest23-21ksoftirqd/111:25:001
148368999475,8cyclictest23-21ksoftirqd/107:35:021
148368999474,7cyclictest23-21ksoftirqd/108:10:031
1483684994729,12cyclictest1498750-21latency_hist12:00:000
1483698994634,5cyclictest1488042-21munin-plugin-st08:34:593
1483698994633,9cyclictest1486510-21munin-run08:05:003
1483698994633,10cyclictest1487241-21sshd08:18:133
1483698994632,10cyclictest1490932-21munin-run09:30:013
1483698994631,11cyclictest1500528-21munin-run12:35:003
1483698994631,11cyclictest1493217-21sshd10:11:133
1483698994631,10cyclictest1491173-21munin-run09:35:003
1483698994630,10cyclictest235-21systemd-journal09:50:003
1483698994629,14cyclictest1494006-21sshd10:25:463
1483698994620,20cyclictest1483842-21modprobe07:10:023
1483698994620,20cyclictest1483842-21modprobe07:10:023
148368999465,8cyclictest23-21ksoftirqd/111:30:021
148368999464,7cyclictest23-21ksoftirqd/109:29:591
148368499467,35cyclictest12-21ksoftirqd/012:32:120
148368499461,5cyclictest131rcu_preempt10:50:010
1483698994531,9cyclictest1495096-21latency_hist10:50:013
1483698994530,9cyclictest37-21ksoftirqd/309:45:003
1483698994528,14cyclictest1487776-21sshd08:29:143
1483698994528,14cyclictest1487776-21sshd08:29:133
1483698994526,15cyclictest1485167-21cron07:40:003
148369499454,3cyclictest131rcu_preempt10:35:012
148368999455,7cyclictest23-21ksoftirqd/112:05:031
148368999454,9cyclictest23-21ksoftirqd/110:30:021
148368999454,7cyclictest23-21ksoftirqd/110:10:011
1483689994534,9cyclictest23-21ksoftirqd/110:00:031
148368999452,13cyclictest23-21ksoftirqd/109:45:031
148368999451,9cyclictest1495329-21munin-run10:55:011
1483684994529,12cyclictest1-21systemd10:20:000
1483684994519,21cyclictest12-21ksoftirqd/009:10:020
1483684994518,24cyclictest12-21ksoftirqd/011:34:140
148368499451,5cyclictest131rcu_preempt10:15:010
1483698994435,6cyclictest1486725-21sshd08:07:123
1483698994435,6cyclictest1484407-21sshd07:24:143
1483698994432,9cyclictest1489829-21sshd09:05:403
1483698994432,9cyclictest1487523-21sshd08:24:133
1483698994430,10cyclictest1495875-21munin-run11:05:003
1483698994426,15cyclictest363-21snmpd10:36:283
1483698994419,19cyclictest1497150-21cron11:29:593
148369499443,3cyclictest131rcu_preempt07:45:032
148369499443,3cyclictest131rcu_preempt07:45:022
1483694994431,9cyclictest272-21dbus-daemon11:45:012
1483694994427,12cyclictest235-21systemd-journal08:00:012
1483694994427,12cyclictest235-21systemd-journal08:00:012
1483694994411,8cyclictest131rcu_preempt11:35:002
148368999447,7cyclictest23-21ksoftirqd/110:17:011
148368999446,10cyclictest23-21ksoftirqd/111:59:121
1483689994430,10cyclictest235-21systemd-journal11:40:021
1483689994430,10cyclictest1496619-21cron11:20:001
148368999442,8cyclictest23-21ksoftirqd/112:25:021
148368999441,8cyclictest1-21systemd12:40:011
1483689994410,5cyclictest131rcu_preempt11:15:011
148368499447,9cyclictest12-21ksoftirqd/008:15:130
1483684994427,13cyclictest272-21dbus-daemon07:40:000
148368499441,39cyclictest1499725-21sshd12:18:140
148369899438,29cyclictest1484945-21systemd07:35:023
1483698994332,8cyclictest1496889-21sshd11:23:133
1483698994332,8cyclictest1496889-21sshd11:23:123
1483698994331,9cyclictest1489590-21sshd09:03:133
1483698994331,9cyclictest1488627-21cat08:45:023
1483698994330,9cyclictest1485931-21sshd07:50:293
1483698994326,12cyclictest1489046-21sshd08:50:393
1483698994324,12cyclictest272-21dbus-daemon10:45:013
1483694994325,14cyclictest1489336-21run-parts09:00:012
1483694994325,13cyclictest235-21systemd-journal11:25:012
1483694994325,13cyclictest235-21systemd-journal11:25:002
1483694994324,14cyclictest272-21dbus-daemon11:55:002
148369499431,3cyclictest131rcu_preempt08:10:022
148368999436,9cyclictest23-21ksoftirqd/109:20:011
148368999435,6cyclictest23-21ksoftirqd/107:10:011
148368999433,8cyclictest23-21ksoftirqd/110:15:021
1483689994332,8cyclictest1484638-21sshd07:25:141
1483689994332,8cyclictest1484638-21sshd07:25:131
1483689994310,5cyclictest131rcu_preempt11:00:021
1483684994326,11cyclictest306-21in:imuxsock11:00:010
1483698994233,5cyclictest1491433-21munin-run09:40:003
1483698994230,9cyclictest1492433-21sshd09:57:133
1483698994229,10cyclictest1498992-21munin-run12:05:013
1483698994225,12cyclictest235-21systemd-journal09:00:013
1483698994223,15cyclictest363-21snmpd11:32:193
148368999429,5cyclictest131rcu_preempt07:55:001
148368999425,9cyclictest23-21ksoftirqd/108:50:001
148368999425,11cyclictest23-21ksoftirqd/109:00:001
148368999423,9cyclictest23-21ksoftirqd/107:15:011
148368999423,9cyclictest23-21ksoftirqd/107:15:001
1483689994233,6cyclictest23-21ksoftirqd/109:15:001
1483689994233,6cyclictest23-21ksoftirqd/108:40:011
1483689994229,8cyclictest306-21in:imuxsock10:45:011
1483689994224,14cyclictest235-21systemd-journal11:50:011
1483689994222,15cyclictest1-21systemd11:35:001
1483689994212,4cyclictest131rcu_preempt09:40:021
1483684994226,12cyclictest12-21ksoftirqd/011:25:010
1483684994226,12cyclictest12-21ksoftirqd/011:25:010
1483684994218,4cyclictest1496402-21latency_hist11:15:010
1483698994134,4cyclictest1498200-21munin-run11:50:003
1483698994127,10cyclictest37-21ksoftirqd/307:20:003
1483698994127,10cyclictest363-21snmpd10:32:233
148369499419,23cyclictest1495065-21modprobe10:49:592
148369499415,20cyclictest1497657-21modprobe11:40:012
148369499415,20cyclictest1497657-21modprobe11:40:002
1483694994128,8cyclictest306-21in:imuxsock12:40:012
1483694994125,12cyclictest272-21dbus-daemon10:10:012
1483694994112,20cyclictest1491947-21modprobe09:50:002
148368999413,9cyclictest23-21ksoftirqd/108:21:131
1483689994119,19cyclictest221rcuc/109:23:141
1483689994119,19cyclictest221rcuc/109:23:131
148368999411,11cyclictest23-21ksoftirqd/108:20:001
1483689994110,5cyclictest131rcu_preempt11:10:021
1483684994130,5cyclictest306-21in:imuxsock10:00:000
1483684994128,9cyclictest306-21in:imuxsock09:55:020
1483684994122,13cyclictest1-21systemd11:55:010
148368499411,7cyclictest1-21systemd11:50:000
148368499411,36cyclictest1490638-21sshd09:20:410
148368499411,36cyclictest1490638-21sshd09:20:410
1483698994033,4cyclictest1492741-21munin-run10:05:003
1483698994032,4cyclictest1484662-21sshd07:29:133
1483698994032,4cyclictest1484662-21sshd07:29:133
1483698994027,10cyclictest363-21snmpd10:09:223
148369499404,31cyclictest1485953-21cron07:55:002
1483694994030,7cyclictest30-21ksoftirqd/207:15:022
1483694994030,7cyclictest30-21ksoftirqd/207:15:022
1483694994022,13cyclictest235-21systemd-journal10:40:012
1483694994017,15cyclictest272-21dbus-daemon08:55:002
148368999409,5cyclictest131rcu_preempt08:35:001
148368999403,8cyclictest23-21ksoftirqd/111:55:001
1483689994028,9cyclictest235-21systemd-journal08:04:131
148368499409,27cyclictest150-21pr/ttyS210:36:290
148368499406,24cyclictest1483688-21latency_hist07:10:010
1483684994034,4cyclictest0-21swapper/008:00:020
1483684994034,4cyclictest0-21swapper/008:00:010
1483684994032,5cyclictest12-21ksoftirqd/012:25:020
1483684994026,10cyclictest12-21ksoftirqd/009:00:000
1483684994024,3cyclictest12-21ksoftirqd/009:15:010
1483684994016,4cyclictest131rcu_preempt08:11:140
1483684994016,4cyclictest131rcu_preempt08:11:130
148368499401,35cyclictest0-21swapper/012:30:010
148368499401,35cyclictest0-21swapper/008:45:020
1483698993929,8cyclictest37-21ksoftirqd/311:20:013
1483698993927,9cyclictest363-21snmpd08:39:033
148369499397,6cyclictest131rcu_preempt07:35:022
148369499392,30cyclictest272-21dbus-daemon08:40:002
148368999393,12cyclictest23-21ksoftirqd/109:50:131
1483689993910,4cyclictest131rcu_preempt11:40:011
1483689993910,4cyclictest131rcu_preempt11:40:001
148368499395,5cyclictest131rcu_preempt11:30:010
1483684993928,7cyclictest12-21ksoftirqd/012:40:010
1483684993925,10cyclictest306-21in:imuxsock09:35:020
1483684993921,9cyclictest12-21ksoftirqd/010:35:010
148368499391,7cyclictest1497907-21modprobe11:40:030
1483694993827,8cyclictest0-21swapper/212:35:012
1483694993824,10cyclictest30-21ksoftirqd/212:25:012
1483694993823,11cyclictest235-21systemd-journal07:49:592
1483694993820,13cyclictest272-21dbus-daemon10:45:002
1483689993821,13cyclictest1499749-21cat12:20:001
1483684993832,3cyclictest16950irq/224-800000011:19:240
1483684993823,12cyclictest272-21dbus-daemon09:50:000
1483684993821,13cyclictest1488805-21sshd08:48:130
1483698993722,11cyclictest1483715-21latency_hist07:10:013
148369499372,4cyclictest131rcu_preempt11:14:592
1483694993721,12cyclictest30-21ksoftirqd/211:05:002
148368999377,9cyclictest23-21ksoftirqd/109:09:391
148368999374,5cyclictest131rcu_preempt10:39:261
1483684993727,7cyclictest12-21ksoftirqd/008:30:010
1483684993727,7cyclictest12-21ksoftirqd/008:30:000
1483684993724,9cyclictest306-21in:imuxsock08:37:130
148368499372,32cyclictest408-21lldpd07:32:230
1483684993723,11cyclictest272-21dbus-daemon07:45:010
1483684993723,11cyclictest272-21dbus-daemon07:45:010
148368499371,8cyclictest1492701-21modprobe10:00:020
1483694993626,7cyclictest30-21ksoftirqd/212:30:022
1483694993624,7cyclictest0-21swapper/208:35:012
1483694993623,10cyclictest235-21systemd-journal09:35:022
1483694993620,13cyclictest1492716-21sshd10:02:132
1483694993620,12cyclictest0-21swapper/209:29:592
148369499361,4cyclictest131rcu_preempt07:30:022
148369499361,4cyclictest131rcu_preempt07:30:012
1483689993623,10cyclictest23-21ksoftirqd/108:55:001
1483684993629,4cyclictest1-21systemd08:35:000
1483684993622,11cyclictest12-21ksoftirqd/009:40:440
1483684993617,15cyclictest272-21dbus-daemon07:55:010
148368499361,31cyclictest1497641-21sshd11:37:120
148368499361,31cyclictest1497641-21sshd11:37:120
148369499354,4cyclictest131rcu_preempt08:25:002
1483694993526,6cyclictest30-21ksoftirqd/211:30:002
1483694993524,8cyclictest1492336-21sed09:55:022
1483694993523,9cyclictest235-21systemd-journal09:00:552
1483694993521,11cyclictest30-21ksoftirqd/212:17:002
1483694993521,10cyclictest30-21ksoftirqd/212:05:032
1483694993520,10cyclictest0-21swapper/212:15:012
1483694993519,12cyclictest272-21dbus-daemon09:10:002
148368499359,5cyclictest131rcu_preempt08:10:020
148368499359,5cyclictest131rcu_preempt07:20:010
148368499354,10cyclictest12-21ksoftirqd/008:51:080
148368499352,6cyclictest131rcu_preempt08:25:010
148368499352,5cyclictest131rcu_preempt07:25:010
148368499352,4cyclictest1496088-21sshd11:06:130
1483684993524,8cyclictest1-21systemd10:55:000
148368499352,30cyclictest1-21systemd09:30:420
1483684993522,10cyclictest1499196-21sshd12:05:140
1483684993519,13cyclictest0-21swapper/012:00:120
1483684993519,12cyclictest1494801-21sshd10:42:130
1483684993512,5cyclictest131rcu_preempt09:19:110
148369499345,4cyclictest131rcu_preempt10:20:022
1483694993427,4cyclictest1490700-21latency_hist09:25:022
1483694993427,4cyclictest1490700-21latency_hist09:25:012
1483694993427,4cyclictest1483820-21latency_hist07:10:032
148369499342,6cyclictest30-21ksoftirqd/208:05:022
1483694993423,8cyclictest235-21systemd-journal11:08:252
1483694993422,8cyclictest30-21ksoftirqd/210:25:032
148369499341,6cyclictest131rcu_preempt08:16:592
148368499349,11cyclictest12-21ksoftirqd/011:05:000
148369499334,5cyclictest131rcu_preempt09:15:002
1483694993326,4cyclictest1495325-21latency_hist10:55:032
1483694993322,8cyclictest30-21ksoftirqd/208:28:132
1483694993322,8cyclictest30-21ksoftirqd/208:28:132
1483694993317,12cyclictest1-21systemd10:30:022
1483684993328,3cyclictest0-21swapper/007:15:010
1483684993328,3cyclictest0-21swapper/007:15:010
148368499332,28cyclictest235-21systemd-journal07:48:010
148369499324,3cyclictest131rcu_preempt07:25:002
148369499323,4cyclictest131rcu_preempt12:05:012
1483694993223,5cyclictest1495803-21latency_hist11:00:022
1483684993226,4cyclictest0-21swapper/009:01:140
148368499321,29cyclictest0-21swapper/010:24:080
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional