You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-01-22 - 12:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7s.osadl.org (updated Wed Jan 22, 2025 00:42:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2751516996551,8cyclictest0-21swapper/220:41:252
2751515996047,8cyclictest2876667-21needreboot23:31:171
2751515996047,8cyclictest2876667-21needreboot23:31:171
275151599561,31cyclictest2857462-21ssh23:01:241
2751516995236,14cyclictest2876835-21kworker/u8:1+events_unbound23:31:252
2751516995236,14cyclictest2876835-21kworker/u8:1+events_unbound23:31:252
2751515995127,20cyclictest2920881-21latency_hist00:40:021
2751515995125,7cyclictest2917815-21cat00:35:021
275151699501,42cyclictest2841270-21ssh22:36:272
2751515995027,4cyclictest957-21mta-sts-daemon21:51:261
275151599495,22cyclictest2897698-21ssh00:01:301
2751515994926,6cyclictest422-21dbus-daemon23:55:021
2751515994925,3cyclictest0-21swapper/100:16:241
2751515994925,3cyclictest0-21swapper/100:16:241
2751514994926,15cyclictest151ktimers/019:16:260
2751515994838,6cyclictest2802669-21idleruntime-cro21:35:011
2751515994838,6cyclictest2802669-21idleruntime-cro21:35:011
2751515994821,5cyclictest2775431-21head20:26:341
275151599465,17cyclictest437-21mta-sts-daemon22:36:231
2751515994638,5cyclictest2783310-21systemctl21:00:011
2751514994638,5cyclictest1-21systemd22:20:010
2751516994536,6cyclictest2920661-21munin-plugin-st00:40:012
2751516994536,6cyclictest2830713-21systemd-run22:20:012
2751515994536,6cyclictest2759146-21latency_hist19:35:021
2751514994538,4cyclictest2846821-21systemd-run22:45:020
2751516994336,3cyclictest0-21swapper/200:11:192
2751515994333,7cyclictest2790902-21sort21:16:171
2751514994324,9cyclictest12450irq/32-eth023:36:230
2751516994236,3cyclictest0-21swapper/223:41:262
2751516994234,5cyclictest2896141-21idleruntime-cro00:00:012
2751516994234,5cyclictest2896141-21idleruntime-cro00:00:012
2751516994234,5cyclictest2849074-21ssh22:50:022
2751516994234,5cyclictest2849074-21ssh22:50:022
2751516994233,6cyclictest422-21dbus-daemon23:21:292
2751515994231,9cyclictest2910643-21needreboot00:21:221
2751515994231,9cyclictest2910643-21needreboot00:21:221
2751515994231,7cyclictest0-21swapper/123:18:231
2751515994221,3cyclictest0-21swapper/123:36:261
2751516994131,7cyclictest997201-21cups-browsed23:00:012
2751516994112,22cyclictest422-21dbus-daemon21:21:322
2751514994133,5cyclictest2809486-21ssh21:45:010
2751515994033,4cyclictest0-21swapper/122:05:011
2751515994032,5cyclictest2830656-21cron22:20:011
2751515994032,4cyclictest0-21swapper/121:40:011
2751514994032,5cyclictest2772537-21systemd-run20:20:010
2751514994024,14cyclictest2799133-21cron21:30:010
2751514994024,14cyclictest2799133-21cron21:30:010
2751514994023,10cyclictest12450irq/32-eth000:01:280
2751516993930,5cyclictest0-21swapper/221:51:282
2751516993917,8cyclictest59950lldpd21:13:172
275151599397,19cyclictest955-21mta-sts-daemon20:31:351
2751515993931,5cyclictest2754542-21systemd-run19:20:021
2751514993931,5cyclictest421-21avahi-daemon22:28:510
2751515993827,7cyclictest997201-21cups-browsed23:58:011
2751515993827,7cyclictest997201-21cups-browsed23:58:011
2751514993833,3cyclictest2786315-21diskmemload23:21:150
2751514993824,2cyclictest0-21swapper/022:15:000
275151499382,28cyclictest657-21snmpd00:36:270
2751514993818,13cyclictest151ktimers/023:41:250
275151499380,4cyclictest171rcu_preempt19:21:240
2751516993729,5cyclictest997201-21cups-browsed22:44:072
2751516993728,6cyclictest997201-21cups-browsed20:21:162
2751516993728,5cyclictest0-21swapper/221:31:222
2751516993728,5cyclictest0-21swapper/221:31:222
2751516993727,7cyclictest997201-21cups-browsed19:46:242
2751515993731,3cyclictest0-21swapper/100:30:011
2751515993731,3cyclictest0-21swapper/100:30:011
2751515993729,5cyclictest2774034-21systemd-run20:25:021
2751515993726,8cyclictest2823989-21cut22:10:011
275151599372,28cyclictest2863506-21ssh23:11:251
2751514993732,3cyclictest2775574-21latency_hist20:30:020
2751514993730,5cyclictest2906559-21aten_r2power_cu00:16:110
2751514993730,5cyclictest2906559-21aten_r2power_cu00:16:110
2751514993730,4cyclictest2813378-21switchtime21:51:380
2751514993728,6cyclictest2843367-21latency_hist22:40:020
275151699363,25cyclictest997201-21cups-browsed22:01:252
2751516993627,6cyclictest422-21dbus-daemon20:05:012
2751516993627,6cyclictest422-21dbus-daemon20:05:012
2751516993625,7cyclictest955-21mta-sts-daemon23:11:232
2751515993628,5cyclictest2837061-21aten_r2power_fr22:31:091
2751515993627,6cyclictest2856096-21unin-run23:00:011
2751515993625,7cyclictest997179-21cupsd22:52:071
2751515993623,10cyclictest2795033-21mailstats21:21:351
2751516993529,3cyclictest0-21swapper/221:05:012
2751516993527,5cyclictest2818497-21latency_hist22:00:022
2751516993527,5cyclictest1-21systemd22:30:012
2751516993526,6cyclictest997201-21cups-browsed23:54:212
2751516993526,6cyclictest498-21wpa_supplicant23:46:282
2751516993526,6cyclictest2896269-21cups-browsed00:16:342
2751516993526,6cyclictest2896269-21cups-browsed00:16:342
2751515993527,5cyclictest2861924-21munin-plugin-st23:10:011
275151599352,27cyclictest2825582-21ssh22:11:471
275151499353,26cyclictest2867156-21ssh23:16:280
2751514993529,3cyclictest0-21swapper/019:55:010
2751514993528,3cyclictest0-21swapper/023:31:200
2751514993528,3cyclictest0-21swapper/023:31:200
2751514993513,14cyclictest12450irq/32-eth021:31:220
2751514993513,14cyclictest12450irq/32-eth021:31:220
2751514993513,13cyclictest151ktimers/020:51:210
275151499351,29cyclictest2863479-21sh23:11:240
2751516993428,4cyclictest959-21mta-sts-daemon20:36:262
2751516993428,3cyclictest0-21swapper/221:50:022
2751516993426,5cyclictest2897887-21mailstats00:01:352
2751516993425,6cyclictest2882665-21sendmail23:40:012
2751516993425,6cyclictest2799259-21latency_hist21:30:032
2751516993425,6cyclictest2799259-21latency_hist21:30:032
2751516993425,5cyclictest2852535-21systemd-run22:55:012
2751515993428,3cyclictest0-21swapper/123:45:011
2751515993426,5cyclictest2759510-21fschecks_count19:36:171
2751515993426,5cyclictest0-21swapper/120:00:011
2751515993426,5cyclictest0-21swapper/120:00:011
2751515993425,5cyclictest2808107-21tail21:41:411
2751514993425,7cyclictest698-21cron00:25:010
2751514993425,7cyclictest698-21cron00:25:010
2751514993425,7cyclictest2751518-21sh19:10:020
2751514993424,7cyclictest266-21systemd-journal20:25:010
275151499342,24cyclictest2890254-21ssh23:51:200
275151499342,23cyclictest2837678-21ssh22:31:200
2751514993419,9cyclictest2857535-21rm23:01:260
2751514993419,12cyclictest2783291-21cron21:00:010
2751516993327,3cyclictest2827658-21kworker/u8:1-nfsiod23:20:022
2751516993327,3cyclictest0-21swapper/219:40:012
2751516993326,4cyclictest2809486-21ssh21:45:012
2751516993326,4cyclictest2804301-21sendmail_mailst21:36:292
2751516993325,5cyclictest477-21rs:main2
2751516993325,5cyclictest2791593-21systemctl21:16:332
2751516993325,5cyclictest2753018-21systemd-run19:15:022
2751515993325,6cyclictest2757413-21unixbench_multi19:26:341
2751515993325,5cyclictest2770984-21cron20:15:001
2751514993324,5cyclictest0-21swapper/021:16:300
275151699323,19cyclictest657-21snmpd23:01:232
2751516993226,3cyclictest0-21swapper/220:00:012
2751516993226,3cyclictest0-21swapper/220:00:012
2751516993225,3cyclictest0-21swapper/221:00:012
275151699322,21cyclictest2915950-21ssh00:31:222
2751516993221,8cyclictest698-21cron19:55:012
275151699321,23cyclictest2832270-21sh22:21:382
2751515993225,4cyclictest2834108-21cut22:25:011
2751515993225,3cyclictest0-21swapper/123:21:281
2751515993224,5cyclictest2875475-21latency_hist23:30:031
2751515993222,6cyclictest2905824-21cron00:15:011
2751514993224,5cyclictest266-21systemd-journal23:56:210
2751514993224,5cyclictest266-21systemd-journal23:56:210
2751514993223,6cyclictest0-21swapper/021:21:380
275151499321,24cyclictest2784203-21sshd21:01:210
2751516993125,3cyclictest0-21swapper/219:20:012
2751516993124,3cyclictest0-21swapper/220:20:002
2751515993125,3cyclictest0-21swapper/120:20:011
2751514993126,2cyclictest0-21swapper/020:00:010
2751514993126,2cyclictest0-21swapper/020:00:010
2751514993125,3cyclictest2849051-21cron22:50:010
2751514993125,3cyclictest2849051-21cron22:50:010
2751514993124,4cyclictest959-21mta-sts-daemon00:28:320
2751514993124,4cyclictest959-21mta-sts-daemon00:28:320
2751514993123,5cyclictest2761033-21fschecks_count19:41:170
275151499312,23cyclictest2819922-21ssh22:01:250
2751516993022,5cyclictest2827327-21systemd-run22:15:012
2751516993022,5cyclictest2785336-21fschecks_count21:06:172
2751516993022,5cyclictest2775030-21proc_pri20:26:292
275151699302,21cyclictest2837726-21ssh22:31:222
2751515993024,3cyclictest0-21swapper/122:41:221
2751515993022,5cyclictest2815813-21aten_r2power_fr21:56:131
2751515993022,5cyclictest2799133-21cron21:30:011
2751515993022,5cyclictest2799133-21cron21:30:011
2751515993022,5cyclictest2768004-21cron20:05:011
2751515993022,5cyclictest2768004-21cron20:05:011
2751515993013,12cyclictest271ktimers/121:01:261
2751514993024,4cyclictest2780422-21latency_hist20:50:020
2751514993022,5cyclictest421-21avahi-daemon21:39:580
2751514993022,3cyclictest0-21swapper/000:10:010
275151499302,22cyclictest2832221-21ssh22:21:360
275151499302,21cyclictest2816371-21sshd21:56:210
275151699293,19cyclictest997179-21cupsd19:41:242
2751516992923,4cyclictest2751513-21cyclictest23:10:032
2751516992923,3cyclictest0-21swapper/200:21:212
2751516992923,3cyclictest0-21swapper/200:21:212
2751516992921,5cyclictest2756005-21cron19:25:012
2751516992921,5cyclictest266-21systemd-journal20:46:212
2751516992918,7cyclictest266-21systemd-journal00:30:012
2751516992918,7cyclictest266-21systemd-journal00:30:012
2751515992923,4cyclictest957-21mta-sts-daemon23:48:111
2751514992923,3cyclictest0-21swapper/023:48:100
275151499292,22cyclictest2854070-21ssh22:56:260
2751516992821,3cyclictest0-21swapper/220:11:222
2751516992819,6cyclictest959-21mta-sts-daemon00:07:392
2751515992820,5cyclictest2849136-21grep22:50:031
2751515992820,5cyclictest2849136-21grep22:50:031
275151499283,19cyclictest2903738-21ssh00:11:200
2751514992822,4cyclictest2766971-21cpuspeed20:01:170
2751514992822,4cyclictest2766971-21cpuspeed20:01:170
2751514992822,3cyclictest0-21swapper/021:12:550
2751516992720,4cyclictest955-21mta-sts-daemon23:26:292
2751516992719,5cyclictest2824011-21systemd-run22:10:022
2751516992719,5cyclictest2757042-21processes19:26:292
2751515992720,4cyclictest0-21swapper/119:41:291
2751515992719,5cyclictest422-21dbus-daemon19:10:021
2751515992719,5cyclictest2896269-21cups-browsed00:07:571
2751515992719,5cyclictest2769428-21unixbench_singl20:06:351
275151599271,19cyclictest997201-21cups-browsed19:51:331
275151499274,18cyclictest2850566-21ssh22:51:250
275151499273,22cyclictest2755985-21kworker/0:1+events_power_efficient19:26:210
2751514992721,3cyclictest2763354-21unixbench-2d19:46:350
275151499271,22cyclictest2915977-21sh00:31:230
2751516992618,5cyclictest2759012-21systemd-run19:35:012
2751515992619,3cyclictest0-21swapper/122:30:011
275151599261,20cyclictest2787873-21ssh21:11:301
2751514992621,3cyclictest2751513-21cyclictest20:31:380
2751514992619,5cyclictest997201-21cups-browsed23:25:530
2751514992618,6cyclictest2778416-21unixbench_multi20:36:360
2751514992613,3cyclictest0-21swapper/021:45:250
2751514992613,10cyclictest2770884-21unixbench_multi20:11:370
2751514992610,5cyclictest2860723-21sh23:07:210
2751516992515,7cyclictest2780718-21cpu20:51:112
275151599254,16cyclictest957-21mta-sts-daemon19:46:291
2751515992520,2cyclictest0-21swapper/121:50:021
2751515992518,4cyclictest599-21lldpd20:44:471
2751515992518,4cyclictest599-21lldpd19:10:161
2751514992521,3cyclictest2751513-21cyclictest19:15:030
2751514992520,2cyclictest0-21swapper/019:36:290
275151499251,18cyclictest2779170-21awk20:41:190
275151599243,13cyclictest437-21mta-sts-daemon20:51:201
2751514992417,4cyclictest2824183-21latency_hist22:10:030
2751516992317,4cyclictest959-21mta-sts-daemon20:05:412
2751515992317,3cyclictest0-21swapper/121:10:021
2751515992316,4cyclictest2755921-21unixbench_multi19:21:341
2751515992315,6cyclictest957-21mta-sts-daemon20:36:301
275151499232,16cyclictest2785793-21ntp_states21:06:300
2751514992316,3cyclictest0-21swapper/020:06:250
2751515992116,2cyclictest0-21swapper/120:50:011
2751514992012,6cyclictest2757833-21aten_r2power_fr19:31:160
275151799193,8cyclictest0-21swapper/322:36:243
275151799185,7cyclictest0-21swapper/321:21:323
275151799181,8cyclictest0-21swapper/321:06:253
275151799173,8cyclictest0-21swapper/323:51:183
275151799173,8cyclictest0-21swapper/321:36:243
275151799173,7cyclictest0-21swapper/323:56:273
275151799173,7cyclictest0-21swapper/323:56:273
275151799172,9cyclictest0-21swapper/322:51:243
275151799172,9cyclictest0-21swapper/321:31:193
275151799172,9cyclictest0-21swapper/321:31:193
275151799172,9cyclictest0-21swapper/300:01:293
275151799172,8cyclictest0-21swapper/322:16:323
275151799172,8cyclictest0-21swapper/300:11:213
275151799172,10cyclictest0-21swapper/321:56:213
275151799171,7cyclictest0-21swapper/319:56:253
275151799171,7cyclictest0-21swapper/319:56:253
275151799165,8cyclictest0-21swapper/323:16:283
275151799162,9cyclictest0-21swapper/323:01:253
275151799162,8cyclictest0-21swapper/323:11:183
275151799162,8cyclictest0-21swapper/322:11:263
275151799162,8cyclictest0-21swapper/321:41:323
275151799162,8cyclictest0-21swapper/321:11:313
275151799161,9cyclictest0-21swapper/322:56:283
275151799161,8cyclictest0-21swapper/322:21:363
275151799161,8cyclictest0-21swapper/321:16:233
275151799161,6cyclictest0-21swapper/320:41:233
2751516991611,2cyclictest0-21swapper/219:10:022
275151799154,7cyclictest0-21swapper/300:16:223
275151799154,7cyclictest0-21swapper/300:16:223
275151799154,6cyclictest0-21swapper/323:21:223
275151799154,6cyclictest0-21swapper/320:51:213
275151799154,5cyclictest0-21swapper/320:01:293
275151799154,5cyclictest0-21swapper/320:01:293
275151799153,6cyclictest0-21swapper/322:50:033
275151799153,6cyclictest0-21swapper/322:50:033
275151799153,6cyclictest0-21swapper/319:41:293
275151799152,8cyclictest0-21swapper/323:41:213
275151799152,8cyclictest0-21swapper/322:41:243
275151799152,8cyclictest0-21swapper/300:36:193
275151799152,7cyclictest0-21swapper/323:31:193
275151799152,7cyclictest0-21swapper/323:31:193
275151799152,7cyclictest0-21swapper/322:01:233
275151799152,7cyclictest0-21swapper/321:01:233
275151799152,6cyclictest0-21swapper/319:26:253
275151799151,8cyclictest0-21swapper/323:36:123
275151799151,8cyclictest0-21swapper/300:21:223
275151799151,8cyclictest0-21swapper/300:21:223
275151799146,5cyclictest0-21swapper/320:21:263
275151799141,8cyclictest0-21swapper/321:51:183
275151799141,8cyclictest0-21swapper/300:31:233
275151799141,7cyclictest0-21swapper/322:31:093
275151799141,7cyclictest0-21swapper/320:06:233
275151799141,7cyclictest0-21swapper/319:11:283
275151799141,6cyclictest0-21swapper/320:11:283
275151799141,6cyclictest0-21swapper/319:31:283
275151799132,7cyclictest0-21swapper/321:29:223
275151799132,7cyclictest0-21swapper/321:29:223
275151799131,7cyclictest0-21swapper/321:48:533
275151799131,7cyclictest0-21swapper/319:36:233
275151799131,7cyclictest0-21swapper/319:16:293
275151799123,6cyclictest0-21swapper/320:36:303
275151799122,6cyclictest0-21swapper/322:10:023
275151799122,6cyclictest0-21swapper/319:51:263
275151799122,5cyclictest0-21swapper/300:10:033
275151799121,6cyclictest0-21swapper/320:31:293
275151799121,6cyclictest0-21swapper/320:26:263
275151799121,6cyclictest0-21swapper/320:16:223
275151799112,6cyclictest0-21swapper/323:25:323
275151799111,6cyclictest0-21swapper/319:46:233
275151799111,6cyclictest0-21swapper/319:21:213
275151799111,6cyclictest0-21swapper/300:30:023
275151799111,6cyclictest0-21swapper/300:30:023
275151799102,5cyclictest0-21swapper/321:00:013
275151799101,6cyclictest0-21swapper/322:30:023
275151799100,6cyclictest0-21swapper/320:50:023
27515179992,4cyclictest0-21swapper/319:10:033
27515179991,6cyclictest0-21swapper/323:47:353
27515179991,6cyclictest0-21swapper/323:09:353
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional