You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-26 - 23:53

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot5s.osadl.org (updated Fri Dec 26, 2025 12:44:23)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
14757992523,1cyclictest29244-21lockfile-create07:40:001
1476199240,0cyclictest0-21swapper/208:40:222
1475799240,23cyclictest0-21swapper/107:30:211
1475399240,23cyclictest0-21swapper/011:00:240
1475399240,1cyclictest0-21swapper/011:00:000
14763992323,0cyclictest0-21swapper/312:10:243
14763992321,1cyclictest0-21swapper/311:00:003
14763992320,2cyclictest10532-21munin-run10:20:003
14761992321,1cyclictest26718-21perf07:35:002
14761992320,2cyclictest19520-21perf07:20:012
1476199230,2cyclictest3316-21latency_hist10:05:002
14757992322,1cyclictest7102-21apt-get08:00:241
14757992321,1cyclictest21280-21perf08:30:001
1475799230,22cyclictest4287-21apt-get07:55:211
1475799230,22cyclictest0-21swapper/111:35:251
14753992321,1cyclictest30888-21munin-run08:50:010
14753992320,2cyclictest3681-21munin-plugin-st09:00:010
14763992222,0cyclictest0-21swapper/308:40:223
1476399220,21cyclictest6416-21perf08:00:013
1476399220,21cyclictest3314-21perf10:05:003
1476399220,21cyclictest27762-21latency_hist10:55:003
1476399220,21cyclictest10807-21apt-get10:20:233
1476399220,1cyclictest30922-21turbostat09:55:013
1476399220,1cyclictest26104-21cron09:45:013
14761992220,1cyclictest8744-21apt-get09:10:222
14761992220,1cyclictest1697-21apt-get12:15:242
14761992220,1cyclictest0-21swapper/208:50:022
14761992219,2cyclictest14625-21dump-pmu-power11:35:012
1476199220,21cyclictest30195-21sendmail-msp11:00:002
1476199220,21cyclictest24512-21apt-get11:55:232
1476199220,21cyclictest21274-21idleruntime-cro08:30:002
1476199220,21cyclictest10528-21perf10:20:002
1476199220,21cyclictest0-21swapper/208:35:222
1476199220,21cyclictest0-21swapper/208:15:212
1476199220,1cyclictest20918-21apt-get09:35:022
14757992220,1cyclictest3600-21apt-get10:05:241
14757992220,1cyclictest30471-21apt-get11:00:241
14757992220,1cyclictest2569-21sh11:10:011
1475799220,21cyclictest26408-21apt-get09:45:231
1475799220,21cyclictest23728-21sendmail-msp09:40:011
1475799220,21cyclictest22201-21apt-get07:25:211
1475799220,21cyclictest0-21swapper/112:20:201
1475799220,21cyclictest0-21swapper/110:00:231
1475799220,21cyclictest0-21swapper/109:30:211
1475799220,21cyclictest0-21swapper/107:50:221
1475799220,1cyclictest905-21perf10:00:011
1475799220,1cyclictest31448-21perf12:10:011
1475799220,1cyclictest0-21swapper/111:35:011
14753992220,1cyclictest3953-21apt-get09:00:230
14753992220,1cyclictest29322-21apt-get12:05:220
14753992220,1cyclictest26708-21awk07:35:000
14753992220,1cyclictest26656-21lockfile-create12:00:010
14753992220,1cyclictest1410-21perf12:15:010
1475399220,2cyclictest13720-21grep09:20:000
1475399220,21cyclictest7662-21apt-get11:20:240
1475399220,21cyclictest4016-21perf07:55:010
1475399220,21cyclictest20866-21apt-get10:40:220
1475399220,21cyclictest18528-21awk09:30:000
1475399220,1cyclictest31198-21apt-get09:55:230
1475399220,1cyclictest26927-21apt-get12:00:210
1475399220,1cyclictest23685-21cron09:40:010
14763992121,0cyclictest0-21swapper/309:30:213
14763992120,0cyclictest0-21swapper/312:20:203
14763992120,0cyclictest0-21swapper/311:15:213
14763992120,0cyclictest0-21swapper/311:15:213
1476399210,20cyclictest26727-21awk07:35:003
1476399210,20cyclictest14911-21apt-get11:35:253
1476399210,20cyclictest10837-21apt-get09:15:023
1476399210,20cyclictest0-21swapper/312:30:233
1476399210,20cyclictest0-21swapper/309:20:233
1476399210,20cyclictest0-21swapper/309:05:213
1476399210,20cyclictest0-21swapper/308:00:243
1476399210,0cyclictest19159-21apt-get08:25:243
1476399210,0cyclictest0-21swapper/310:35:023
14761992121,0cyclictest0-21swapper/210:10:222
14761992120,0cyclictest6344-21apt-get09:05:212
14761992120,0cyclictest0-21swapper/207:45:222
1476199210,21cyclictest0-21swapper/207:55:212
1476199210,20cyclictest6513-21apt-get12:25:242
1476199210,20cyclictest0-21swapper/211:35:252
1476199210,20cyclictest0-21swapper/208:20:232
1476199210,0cyclictest0-21swapper/212:20:202
1476199210,0cyclictest0-21swapper/211:50:222
1476199210,0cyclictest0-21swapper/210:40:222
14757992121,0cyclictest0-21swapper/112:25:241
14757992120,1cyclictest19719-21apt-get11:45:221
14757992120,0cyclictest18450-21apt-get10:35:231
14757992119,1cyclictest19453-21munin-run11:45:001
1475799210,21cyclictest0-21swapper/109:10:221
1475799210,20cyclictest5239-21apt-get11:15:211
1475799210,20cyclictest5239-21apt-get11:15:211
1475799210,20cyclictest0-21swapper/112:35:201
1475799210,0cyclictest16765-21apt-get08:20:231
1475799210,0cyclictest11888-21apt-get08:10:231
1475799210,0cyclictest0-21swapper/109:15:021
1475799210,0cyclictest0-21swapper/107:45:221
14753992121,0cyclictest12447-21apt-get11:30:210
14753992121,0cyclictest0-21swapper/010:30:220
14753992121,0cyclictest0-21swapper/008:50:230
14753992121,0cyclictest0-21swapper/008:35:220
14753992120,0cyclictest26994-21apt-get07:35:230
14753992120,0cyclictest17772-21apt-get10:35:020
14753992119,1cyclictest4972-21munin-run11:15:010
14753992118,2cyclictest17104-21wc07:15:010
14753992118,2cyclictest17104-21wc07:15:010
1475399210,20cyclictest9494-21apt-get08:05:220
1475399210,0cyclictest0-21swapper/011:45:220
1475399210,0cyclictest0-21swapper/010:20:230
1475399210,0cyclictest0-21swapper/009:10:220
14763992020,0cyclictest0-21swapper/311:50:223
14763992020,0cyclictest0-21swapper/311:45:223
14763992020,0cyclictest0-21swapper/310:40:223
14763992020,0cyclictest0-21swapper/309:35:023
14763992020,0cyclictest0-21swapper/309:00:233
14763992020,0cyclictest0-21swapper/308:50:023
1476399200,20cyclictest0-21swapper/312:15:243
1476399200,0cyclictest0-21swapper/309:55:223
14761992020,0cyclictest0-21swapper/211:10:242
14761992020,0cyclictest0-21swapper/210:35:232
14761992020,0cyclictest0-21swapper/210:30:222
14761992020,0cyclictest0-21swapper/208:30:202
14761992020,0cyclictest0-21swapper/207:35:232
14761992020,0cyclictest0-21swapper/207:20:232
14761992018,1cyclictest28-21ksoftirqd/211:40:232
1476199200,20cyclictest0-21swapper/209:50:222
1476199200,20cyclictest0-21swapper/209:25:242
1476199200,20cyclictest0-21swapper/209:20:232
1476199200,0cyclictest0-21swapper/212:30:222
1476199200,0cyclictest0-21swapper/212:05:222
1476199200,0cyclictest0-21swapper/210:45:242
1476199200,0cyclictest0-21swapper/209:00:232
14757992020,0cyclictest19809-21apt-get07:20:231
14757992020,0cyclictest0-21swapper/111:55:231
14757992020,0cyclictest0-21swapper/111:25:261
14757992020,0cyclictest0-21swapper/110:45:231
14757992020,0cyclictest0-21swapper/110:20:241
14757992020,0cyclictest0-21swapper/107:15:191
14757992020,0cyclictest0-21swapper/107:10:221
14757992020,0cyclictest0-21swapper/107:10:221
14757992019,1cyclictest0-21swapper/111:10:241
14757992019,1cyclictest0-21swapper/110:30:221
14757992018,1cyclictest16125-21perf09:25:001
1475799200,2cyclictest8094-21cron10:15:001
1475799200,20cyclictest0-21swapper/112:15:241
1475799200,20cyclictest0-21swapper/110:40:221
1475799200,20cyclictest0-21swapper/108:15:211
1475799200,0cyclictest28475-21perf08:45:011
1475799200,0cyclictest0-21swapper/109:40:221
14753992020,0cyclictest0-21swapper/010:05:240
14753992020,0cyclictest0-21swapper/009:50:220
14753992018,1cyclictest2567-21grep11:10:010
14753992018,1cyclictest0-21swapper/012:25:010
1475399200,20cyclictest0-21swapper/011:45:000
1475399200,0cyclictest0-21swapper/012:30:230
1475399200,0cyclictest0-21swapper/009:40:220
1475399200,0cyclictest0-21swapper/007:25:210
14763991919,0cyclictest23262-21apt-get10:45:243
14763991919,0cyclictest0-21swapper/312:05:223
14763991919,0cyclictest0-21swapper/311:55:233
14763991919,0cyclictest0-21swapper/311:40:233
14763991919,0cyclictest0-21swapper/308:35:223
14763991919,0cyclictest0-21swapper/308:20:233
14763991919,0cyclictest0-21swapper/308:15:213
14763991917,1cyclictest19533-21munin-run07:20:013
14763991917,1cyclictest17782-21awk10:35:013
1476399190,19cyclictest0-21swapper/311:05:233
14761991919,0cyclictest0-21swapper/211:00:242
14761991919,0cyclictest0-21swapper/208:55:202
14761991918,0cyclictest29515-21apt-get07:40:222
14761991918,0cyclictest13253-21apt-get10:25:242
14757991919,0cyclictest0-21swapper/112:00:221
14757991919,0cyclictest0-21swapper/111:50:221
14757991919,0cyclictest0-21swapper/109:25:241
14757991916,2cyclictest27776-21perf10:55:001
14753991919,0cyclictest0-21swapper/012:25:240
14753991919,0cyclictest0-21swapper/009:45:220
14753991919,0cyclictest0-21swapper/007:20:240
14753991919,0cyclictest0-21swapper/007:15:190
14763991818,0cyclictest0-21swapper/312:25:243
14763991818,0cyclictest0-21swapper/311:20:243
14763991818,0cyclictest0-21swapper/311:10:243
14763991818,0cyclictest0-21swapper/310:10:223
14763991817,1cyclictest31908-21apt-get07:45:223
14763991816,1cyclictest9462-21/usr/sbin/munin08:05:233
14763991816,1cyclictest19809-21apt-get07:20:233
14763991816,1cyclictest16410-21apt-get09:25:243
14763991816,1cyclictest14595-21cron11:35:013
14761991818,0cyclictest14994-21apt-get07:10:212
14761991818,0cyclictest14994-21apt-get07:10:212
14761991818,0cyclictest0-21swapper/210:20:232
14761991818,0cyclictest0-21swapper/210:05:232
14761991818,0cyclictest0-21swapper/209:45:232
14761991818,0cyclictest0-21swapper/209:40:232
14761991818,0cyclictest0-21swapper/209:15:222
14761991818,0cyclictest0-21swapper/208:45:222
14761991817,0cyclictest11299-21apt-get12:35:202
14761991816,1cyclictest21847-21munin-run11:50:002
1476199180,17cyclictest2557-21awk11:10:012
14757991818,0cyclictest0-21swapper/112:10:231
14757991818,0cyclictest0-21swapper/110:55:211
14757991818,0cyclictest0-21swapper/110:15:231
14757991818,0cyclictest0-21swapper/108:55:201
14757991818,0cyclictest0-21swapper/108:50:231
1475799180,0cyclictest8907-21apt-get12:30:231
14753991818,0cyclictest0-21swapper/011:50:220
14753991818,0cyclictest0-21swapper/009:05:210
14753991818,0cyclictest0-21swapper/008:00:240
14753991818,0cyclictest0-21swapper/007:45:220
14763991717,0cyclictest0-21swapper/309:10:223
14763991717,0cyclictest0-21swapper/308:30:203
14763991717,0cyclictest0-21swapper/307:35:233
14763991715,1cyclictest3600-21apt-get10:05:233
14763991714,2cyclictest14284-21ntp_kernel_pll_10:25:283
14757991717,0cyclictest0-21swapper/111:20:241
14757991717,0cyclictest0-21swapper/109:50:221
14757991717,0cyclictest0-21swapper/109:00:231
14757991715,1cyclictest15387-21munin-run10:30:011
14753991717,0cyclictest0-21swapper/010:10:210
14753991717,0cyclictest0-21swapper/010:00:230
14753991717,0cyclictest0-21swapper/008:40:220
14753991715,1cyclictest14028-21cron08:15:010
14753991715,1cyclictest0-21swapper/009:25:000
14753991715,1cyclictest0-21swapper/008:30:210
14763991616,0cyclictest0-21swapper/311:00:243
14763991616,0cyclictest0-21swapper/309:45:233
14763991616,0cyclictest0-21swapper/308:55:203
14763991614,1cyclictest0-21swapper/308:45:213
1476399160,15cyclictest1891-21apt-get07:50:223
1476399160,15cyclictest0-21swapper/307:10:233
1476399160,15cyclictest0-21swapper/307:10:233
14761991616,0cyclictest0-21swapper/211:30:012
14761991615,0cyclictest0-21swapper/208:10:232
1476199160,15cyclictest0-21swapper/212:10:252
14757991616,0cyclictest28758-21apt-get08:45:221
14757991616,0cyclictest0-21swapper/109:05:211
14757991616,0cyclictest0-21swapper/108:30:201
14757991616,0cyclictest0-21swapper/108:05:231
1475399165,7cyclictest793-21lldpd10:15:220
14753991616,0cyclictest0-21swapper/011:25:250
14753991616,0cyclictest0-21swapper/010:45:230
14753991614,1cyclictest6410-21apt-get08:00:010
14753991614,1cyclictest0-21swapper/010:30:010
1475399160,15cyclictest20116-21find09:30:280
14763991515,0cyclictest0-21swapper/307:40:223
14763991513,1cyclictest12182-21awk11:30:013
14761991515,0cyclictest0-21swapper/212:00:222
14761991513,1cyclictest28-21ksoftirqd/210:50:202
1476199150,14cyclictest0-21swapper/211:20:312
1475799150,14cyclictest0-21swapper/108:35:581
14753991515,0cyclictest0-21swapper/011:35:250
14753991515,0cyclictest0-21swapper/008:20:230
14763991412,1cyclictest0-21swapper/308:10:233
1476399140,14cyclictest0-21swapper/312:35:053
1476399140,14cyclictest0-21swapper/312:01:083
1476399140,0cyclictest0-21swapper/307:25:203
1476199140,14cyclictest0-21swapper/211:16:312
1476199140,14cyclictest0-21swapper/211:16:312
1476199140,14cyclictest0-21swapper/209:55:292
1476199140,14cyclictest0-21swapper/208:05:032
1476199140,14cyclictest0-21swapper/208:00:412
1476199140,14cyclictest0-21swapper/207:51:472
1476199140,14cyclictest0-21swapper/207:25:122
1476199140,0cyclictest0-21swapper/209:31:322
1475399140,14cyclictest0-21swapper/012:16:090
1475399140,14cyclictest0-21swapper/010:51:060
1475399140,14cyclictest0-21swapper/008:15:200
1475399140,0cyclictest0-21swapper/008:25:120
1475399140,0cyclictest0-21swapper/007:40:070
14753991313,0cyclictest0-21swapper/012:37:190
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional