You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-09-23 - 05:08

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Wed Sep 23, 2026 00:42:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2623957995446,5cyclictest2634466-21systemd-run19:45:011
2623957995443,7cyclictest917984-21cups-browsed23:16:201
2623957995344,6cyclictest2686301-21unixbench_multi21:51:281
2623957995242,7cyclictest2683346-21sshd21:46:311
2623957995041,6cyclictest2763307-40logrotate00:00:021
2623958994739,5cyclictest2632961-21tr19:40:012
2623958994638,5cyclictest2739119-21munin-run23:20:012
2623958994436,4cyclictest1003-21mta-sts-daemon23:23:292
2623957994437,3cyclictest0-21swapper/122:31:301
2623957994335,5cyclictest1-21systemd21:45:021
2623958994235,4cyclictest2754249-21kworker/u8:7+xprtiod00:00:012
2623957994235,4cyclictest2692833-21kworker/u8:1-rpciod22:11:131
2623957994233,6cyclictest2752637-21ps23:41:221
2623958994133,5cyclictest2681415-21cron21:45:012
2623958994130,8cyclictest2659942-21munin-plugin-st21:10:012
2623958994032,5cyclictest2650947-21idleruntime-cro20:40:012
2623958994032,4cyclictest0-21swapper/221:11:242
2623958994032,4cyclictest0-21swapper/221:11:242
2623958994029,8cyclictest2716136-21needreboot22:41:112
2623957994033,4cyclictest1002-21mta-sts-daemon21:11:241
2623957994033,4cyclictest1002-21mta-sts-daemon21:11:241
2623957994032,5cyclictest2751230-21systemd-run23:40:011
2623957994032,5cyclictest2718927-21idleruntime22:46:111
2623956994033,4cyclictest2687507-21latency_hist21:55:000
2623956994032,5cyclictest2641964-21systemd-run20:10:010
2623958993931,5cyclictest2736086-21ssh23:15:012
2623958993931,4cyclictest0-21swapper/200:16:192
2623957993934,2cyclictest0-21swapper/120:55:011
2623957993933,3cyclictest0-21swapper/122:20:011
2623957993931,5cyclictest2781404-21idleruntime-cro00:30:011
2623957993931,5cyclictest2775380-21latency_hist00:20:011
2623957993931,5cyclictest2713671-21unixbench-2d22:36:271
2623957993931,3cyclictest0-21swapper/121:20:001
2623957993931,3cyclictest0-21swapper/121:20:001
2623958993831,4cyclictest2706993-21needreboot22:26:132
2623957993831,4cyclictest2656919-21cron21:00:011
2623957993831,4cyclictest1002-21mta-sts-daemon22:58:121
2623958993726,7cyclictest2787438-21cron00:40:012
2623957993731,4cyclictest2623955-21cyclictest23:06:111
2623957993731,4cyclictest1000-21mta-sts-daemon00:21:291
2623957993731,2cyclictest0-21swapper/120:20:011
2623957993730,3cyclictest0-21swapper/122:45:011
2623957993729,5cyclictest2650986-21latency_hist20:40:021
2623956993730,5cyclictest2743806-21timerandwakeup23:26:280
2623956993730,4cyclictest1-21systemd00:35:020
2623956993727,8cyclictest151ktimers/023:01:240
2623956993725,9cyclictest2780096-21timerandwakeup00:26:280
262395699372,28cyclictest2704076-21ssh22:21:220
2623956993715,14cyclictest12650irq/32-eth023:56:150
2623958993630,3cyclictest0-21swapper/222:35:012
2623958993630,3cyclictest0-21swapper/222:00:002
2623958993628,5cyclictest2693639-21munin-plugin-st22:05:012
2623957993630,3cyclictest0-21swapper/121:40:011
2623956993630,4cyclictest2688694-21needreboot21:56:130
2623956993628,5cyclictest151ktimers/020:01:150
2623956993628,4cyclictest0-21swapper/019:36:200
2623956993623,10cyclictest2644941-21grep20:20:010
2623956993620,13cyclictest2754224-21cron23:45:010
2623958993528,4cyclictest2705807-21cron22:25:012
2623958993527,5cyclictest2678338-21munin-run21:40:012
2623958993525,7cyclictest1002-21mta-sts-daemon21:50:022
2623957993528,3cyclictest0-21swapper/121:56:051
2623957993526,6cyclictest917984-21cups-browsed21:06:151
2623956993526,6cyclictest2628458-21munin-plugin-st19:25:010
2623956993526,6cyclictest151ktimers/022:06:230
2623956993524,8cyclictest2764115-21cpu00:01:090
2623956993520,3cyclictest0-21swapper/023:00:020
2623958993428,3cyclictest0-21swapper/219:20:012
2623958993426,5cyclictest2730938-21fschecks_count23:06:102
2623958993426,5cyclictest2714937-21sh22:40:012
2623958993426,5cyclictest2700951-21ssh22:16:152
2623958993426,5cyclictest2685643-21needreboot21:51:132
2623958993426,4cyclictest2666052-21cron21:20:002
2623958993426,4cyclictest2666052-21cron21:20:002
262395799343,27cyclictest2707117-21ssh22:26:181
2623957993428,2cyclictest0-21swapper/119:15:011
2623957993427,3cyclictest0-21swapper/122:01:301
2623957993426,5cyclictest2787560-21latency_hist00:40:021
2623957993426,5cyclictest2745166-21grep23:30:011
2623957993426,4cyclictest2646457-21munin-plugin-st20:25:001
2623957993424,7cyclictest2758483-21collect223:51:161
262395799341,26cyclictest2734328-21ssh23:11:201
2623958993327,3cyclictest0-21swapper/221:25:012
2623958993326,4cyclictest1003-21mta-sts-daemon22:07:172
2623958993326,4cyclictest1002-21mta-sts-daemon22:12:332
2623958993325,5cyclictest2777181-21sed00:21:342
2623958993325,5cyclictest2758423-21needreboot23:51:142
262395899331,23cyclictest2746535-21ssh23:31:192
262395799337,21cyclictest917984-21cups-browsed19:46:161
262395799336,8cyclictest171rcu_preempt23:21:241
2623957993327,3cyclictest0-21swapper/122:25:021
2623957993325,5cyclictest2765103-21sh00:01:311
2623956993327,4cyclictest2698534-21tail22:11:330
2623956993327,4cyclictest2693654-21kworker/u8:4+xprtiod23:15:010
2623956993322,7cyclictest2770974-21switchtime00:11:280
262395899324,13cyclictest2659939-21diskmemload23:27:362
2623958993226,3cyclictest0-21swapper/221:30:012
2623958993223,6cyclictest420-21avahi-daemon20:45:022
2623958993223,5cyclictest2625588-21latency_hist19:15:032
2623958993222,7cyclictest2782480-21latency00:31:102
2623958993222,7cyclictest1-21systemd20:35:012
2623957993226,3cyclictest0-21swapper/122:55:011
2623957993225,3cyclictest0-21swapper/120:00:011
2623957993224,5cyclictest421-21dbus-daemon00:09:041
2623957993222,7cyclictest2728523-21processes23:01:251
2623957993221,5cyclictest0-21swapper/100:11:131
262395699326,17cyclictest12650irq/32-eth023:31:140
2623956993226,4cyclictest2638932-21grep20:00:010
2623956993224,5cyclictest420-21avahi-daemon20:40:010
2623956993223,6cyclictest2741042-21users23:21:320
2623956993223,6cyclictest2668659-21kworker/u8:2-xprtiod22:01:120
2623956993219,9cyclictest12650irq/32-eth021:11:220
2623956993219,9cyclictest12650irq/32-eth021:11:220
2623956993217,9cyclictest12650irq/32-eth022:41:130
2623956993217,12cyclictest2722941-21unixbench_singl22:51:280
2623958993124,4cyclictest2721076-21ssh22:50:022
2623958993124,4cyclictest1001-21mta-sts-daemon00:29:442
2623958993123,5cyclictest2745189-21kworker/u8:0+xprtiod23:46:102
2623958993122,5cyclictest1000-21mta-sts-daemon00:10:132
2623957993124,3cyclictest0-21swapper/119:16:081
2623957993123,5cyclictest2637364-21unixbench_singl19:51:281
2623957993122,6cyclictest2631459-21true19:35:021
262395799312,23cyclictest2667424-21ssh21:21:221
2623956993126,2cyclictest0-21swapper/023:40:010
2623956993125,4cyclictest2736796-21aten_r2power_po23:16:070
262395699311,27cyclictest0-21swapper/020:56:210
2623958993024,3cyclictest0-21swapper/223:00:012
2623958993023,3cyclictest0-21swapper/220:30:012
2623958993023,3cyclictest0-21swapper/220:30:012
2623958993022,5cyclictest1-21systemd20:55:022
262395899302,23cyclictest2752439-21ssh23:41:142
2623958993021,6cyclictest2769377-21munin-run00:10:012
262395899301,24cyclictest2722364-21ssh22:51:172
262395799303,22cyclictest2673553-21ntpq21:31:191
2623957993024,2cyclictest0-21swapper/121:26:101
2623957993022,3cyclictest0-21swapper/122:06:241
262395699307,16cyclictest917984-21cups-browsed21:21:200
2623956993026,2cyclictest0-21swapper/022:30:010
2623956993025,2cyclictest0-21swapper/022:20:010
2623956993025,2cyclictest0-21swapper/021:35:010
2623956993025,2cyclictest0-21swapper/000:40:010
2623956993023,4cyclictest2670902-21grep21:26:300
2623956993021,7cyclictest2713762-21unixbench_singl22:36:280
2623956993021,6cyclictest2682536-21missed_timers21:46:140
2623958992924,3cyclictest0-21swapper/220:00:012
2623958992923,4cyclictest2623955-21cyclictest21:31:132
2623958992923,3cyclictest0-21swapper/223:40:022
2623958992921,5cyclictest2628461-21munin-run19:25:002
262395799294,17cyclictest2782649-21ssh00:31:141
262395799293,15cyclictest1001-21mta-sts-daemon20:46:241
2623957992920,7cyclictest1-21systemd20:31:071
2623956992923,4cyclictest2649432-21cron20:35:000
2623956992923,4cyclictest2630461-21fschecks_count19:31:080
2623956992922,5cyclictest917984-21cups-browsed21:15:250
2623956992922,5cyclictest917984-21cups-browsed21:15:250
2623956992922,4cyclictest917984-21cups-browsed22:46:110
2623956992920,6cyclictest0-21swapper/021:40:020
2623956992917,4cyclictest2637365-21unixbench_singl19:51:280
2623958992821,4cyclictest1003-21mta-sts-daemon00:01:072
2623957992822,3cyclictest0-21swapper/123:31:071
262395799282,21cyclictest665-21snmpd21:01:201
262395799282,19cyclictest2755574-21ssh23:46:211
2623957992815,9cyclictest2629296-21ntp_kernel_err19:26:141
2623956992821,5cyclictest2660060-21latency_hist21:10:030
2623956992821,3cyclictest0-21swapper/000:06:270
2623956992820,6cyclictest2655426-21cron20:55:010
2623956992819,3cyclictest1002-21mta-sts-daemon00:17:310
262395699281,22cyclictest2710169-21ntpq22:31:190
262395699281,20cyclictest2758474-21ssh23:51:150
2623958992719,5cyclictest2658464-21systemd-run21:05:022
2623958992719,5cyclictest2656929-21munin-run21:00:012
2623958992719,5cyclictest2652717-21aten_r2power_cu20:46:082
2623958992719,5cyclictest2642585-21kernelversion20:11:112
262395699272,21cyclictest2755593-21ssh23:46:220
262395899265,4cyclictest2659939-21diskmemload23:03:562
2623958992618,5cyclictest917984-21cups-browsed19:50:522
2623958992618,5cyclictest2640447-21cron20:05:012
2623957992617,6cyclictest2631672-21find19:36:061
2623956992620,3cyclictest151ktimers/021:01:160
2623956992620,3cyclictest0-21swapper/019:10:010
2623956992619,5cyclictest421-21dbus-daemon19:46:050
2623956992618,6cyclictest2626931-21cron19:20:010
2623956992613,10cyclictest0-21swapper/000:21:200
262395699261,20cyclictest2679657-21diskmemload21:41:160
2623958992519,3cyclictest2629965-21kworker/u8:6-nfsiod19:30:012
2623958992519,3cyclictest0-21swapper/219:41:112
2623958992516,6cyclictest2636093-21latency_hist19:50:022
2623957992519,4cyclictest0-21swapper/120:05:011
2623957992517,4cyclictest0-21swapper/120:30:011
2623957992517,4cyclictest0-21swapper/120:30:011
2623956992519,4cyclictest151ktimers/020:21:160
2623956992517,6cyclictest627-21lldpd20:41:230
2623958992418,4cyclictest2630563-21if_wlan019:31:102
2623957992418,3cyclictest1002-21mta-sts-daemon20:41:051
2623957992417,4cyclictest1002-21mta-sts-daemon19:21:231
2623957992416,5cyclictest421-21dbus-daemon20:10:021
262395699249,6cyclictest151ktimers/019:26:150
2623956992417,5cyclictest2643351-21unixbench_singl20:11:270
2623956992416,5cyclictest0-21swapper/020:26:160
2623956992416,5cyclictest0-21swapper/020:26:160
2623958992317,3cyclictest0-21swapper/220:21:182
2623958992315,5cyclictest917984-21cups-browsed20:07:142
2623956992318,3cyclictest627-21lldpd20:46:210
262395699230,11cyclictest2731368-21ntpq23:06:190
2623958992215,5cyclictest917979-21cupsd20:16:252
262395999213,8cyclictest0-21swapper/322:51:193
262395799214,10cyclictest1017562-21munin-node20:11:201
262395699212,14cyclictest2633453-21diskstats19:41:080
2623956992015,3cyclictest2624216-21aten2.4-expect19:11:050
262395999184,9cyclictest0-21swapper/322:40:323
262395999183,6cyclictest0-21swapper/323:56:183
262395999182,8cyclictest0-21swapper/300:06:143
262395999182,7cyclictest0-21swapper/321:46:193
262395999173,7cyclictest0-21swapper/322:01:223
262395999172,9cyclictest0-21swapper/323:36:183
262395999172,9cyclictest0-21swapper/300:36:193
262395999172,8cyclictest0-21swapper/322:21:203
262395999172,8cyclictest0-21swapper/321:51:163
262395999172,7cyclictest0-21swapper/300:11:253
262395999172,5cyclictest0-21swapper/320:11:143
262395999171,7cyclictest0-21swapper/320:21:183
262395999171,10cyclictest0-21swapper/322:16:193
2623958991711,3cyclictest0-21swapper/219:10:012
262395999163,7cyclictest0-21swapper/323:16:153
262395999163,6cyclictest0-21swapper/300:01:183
262395999162,8cyclictest0-21swapper/323:01:223
262395999162,7cyclictest0-21swapper/322:46:173
262395999162,6cyclictest0-21swapper/323:11:203
262395999162,6cyclictest0-21swapper/322:31:153
262395999161,9cyclictest0-21swapper/323:41:223
262395999161,9cyclictest0-21swapper/322:36:153
262395999161,8cyclictest0-21swapper/323:51:163
262395999161,8cyclictest0-21swapper/300:16:193
262395799162,8cyclictest1-21systemd19:10:011
262395999153,7cyclictest0-21swapper/322:26:183
262395999153,7cyclictest0-21swapper/321:40:013
262395999153,6cyclictest0-21swapper/321:11:203
262395999153,6cyclictest0-21swapper/321:11:203
262395999152,9cyclictest0-21swapper/300:21:233
262395999152,8cyclictest0-21swapper/321:20:003
262395999152,8cyclictest0-21swapper/321:20:003
262395999152,7cyclictest0-21swapper/323:21:173
262395999152,7cyclictest0-21swapper/300:26:163
262395999152,6cyclictest0-21swapper/321:56:083
262395999152,6cyclictest0-21swapper/320:16:223
262395999151,8cyclictest0-21swapper/322:56:183
262395999151,8cyclictest0-21swapper/319:56:163
262395999151,7cyclictest0-21swapper/323:31:123
262395999151,7cyclictest0-21swapper/323:06:153
262395999151,7cyclictest0-21swapper/322:11:203
262395999151,7cyclictest0-21swapper/321:31:183
262395999151,7cyclictest0-21swapper/320:01:193
262395999151,7cyclictest0-21swapper/319:21:173
262395999151,6cyclictest0-21swapper/319:46:133
262395999144,8cyclictest0-21swapper/321:26:163
262395999142,7cyclictest0-21swapper/323:46:073
262395999142,7cyclictest0-21swapper/322:06:153
262395999141,7cyclictest0-21swapper/320:46:203
262395999141,7cyclictest0-21swapper/320:06:203
262395999141,6cyclictest0-21swapper/320:51:173
262395999141,6cyclictest0-21swapper/320:41:143
262395999141,6cyclictest0-21swapper/320:36:133
262395999141,6cyclictest0-21swapper/319:51:173
262395999141,6cyclictest0-21swapper/319:16:153
262395999141,5cyclictest0-21swapper/319:36:153
262395999132,6cyclictest0-21swapper/321:05:013
262395999132,6cyclictest0-21swapper/319:26:153
262395999131,8cyclictest0-21swapper/323:26:133
262395999131,8cyclictest0-21swapper/321:21:213
262395999131,7cyclictest0-21swapper/320:26:223
262395999131,7cyclictest0-21swapper/320:26:223
262395999131,7cyclictest0-21swapper/319:41:223
262395999131,7cyclictest0-21swapper/300:31:133
262395999131,6cyclictest0-21swapper/320:31:193
262395999131,6cyclictest0-21swapper/319:31:143
262395999122,5cyclictest0-21swapper/321:40:163
262395999113,5cyclictest0-21swapper/321:06:193
262395999111,6cyclictest0-21swapper/320:56:233
262395999111,6cyclictest0-21swapper/319:11:173
26239599981,3cyclictest0-21swapper/319:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional