You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-02 - 16:30
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackbslot6.osadl.org (updated Sat May 02, 2026 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1101721670,5sleep2930199cyclictest08:28:322
220021570,5sleep1929499cyclictest13:43:271
1068911010,4ptp4l401ktimersoftd/308:23:263
87082730,5sleep28707-21cut11:38:252
928999669,22cyclictest164162rm12:18:320
206682650,4sleep3930599cyclictest08:48:243
9289996313,22cyclictest2473-21diskmemload13:40:580
930199581,26cyclictest15820-21ssh13:57:302
9294995848,6cyclictest25-21ksoftirqd/110:58:181
930199571,26cyclictest25740-21needreboot08:58:262
930199570,25cyclictest26066-21ssh13:02:202
915225737,8sleep20-21swapper/208:27:362
930199561,25cyclictest16609-21ssh11:46:532
930199561,25cyclictest16386-21ssh10:41:122
930199561,23cyclictest29499-21ssh11:27:142
930199560,25cyclictest12243-21ssh13:20:232
101882560,4sleep09-21ksoftirqd/008:28:220
930199559,25cyclictest5480-21sh10:29:302
930199554,19cyclictest2473-21diskmemload11:51:512
930199554,19cyclictest2473-21diskmemload11:51:512
930199550,25cyclictest30182-21ssh13:05:582
930199550,25cyclictest27389-21ssh13:35:382
930199550,25cyclictest27389-21ssh13:35:382
930199550,22cyclictest4969-21ssh11:33:552
930199541,26cyclictest1087-21chrt09:14:042
9301995412,18cyclictest26734-21sh12:28:442
930199540,24cyclictest8555-21ssh12:11:222
930199540,24cyclictest29784-21chrt10:13:422
928999542,4cyclictest0-21swapper/012:23:220
930199530,23cyclictest2473-21diskmemload13:45:002
930199530,21cyclictest18424-21sh11:15:382
40452530,1sleep00-21swapper/013:44:180
9301995212,27cyclictest32479-21sh12:35:062
9301995212,26cyclictest13089-21sh12:15:422
930199520,23cyclictest30133-21ssh10:54:032
930199510,23cyclictest1356-21/usr/sbin/munin12:03:312
930599504,7cyclictest41-21ksoftirqd/311:23:073
9294995040,4cyclictest25-21ksoftirqd/111:18:191
106891500,1ptp4l401ktimersoftd/308:58:353
9301994914,20cyclictest11164-21sh13:53:002
928999494,36cyclictest7247-21ssh12:43:210
930599484,6cyclictest41-21ksoftirqd/312:55:363
930599484,6cyclictest41-21ksoftirqd/312:19:593
930199481,25cyclictest13904-21mailstats08:33:262
930199480,22cyclictest383-21/usr/sbin/munin13:08:292
9294994841,3cyclictest25-21ksoftirqd/113:08:211
930599476,9cyclictest41-21ksoftirqd/309:28:263
930599474,7cyclictest9283-21cyclictest11:48:323
930599474,7cyclictest9283-21cyclictest11:48:323
930599474,7cyclictest41-21ksoftirqd/313:18:253
930599474,7cyclictest41-21ksoftirqd/312:23:293
930599474,6cyclictest41-21ksoftirqd/313:18:103
930599474,6cyclictest41-21ksoftirqd/310:51:373
930599473,8cyclictest41-21ksoftirqd/311:13:233
930599473,7cyclictest41-21ksoftirqd/310:18:353
930599473,6cyclictest14650-21sed11:43:383
9305994721,4cyclictest41-21ksoftirqd/313:51:163
930199471,24cyclictest19534-21taskset12:54:382
930199471,24cyclictest15393-21taskset12:50:572
930199471,23cyclictest30600-21ssh12:00:302
930199471,23cyclictest19759-21chrt12:23:142
9301994710,21cyclictest31580-21sh13:39:222
930199470,23cyclictest24520-21/usr/sbin/munin10:48:322
930199470,23cyclictest233-21systemd-journal10:05:142
930199470,23cyclictest233-21systemd-journal10:05:142
9294994736,6cyclictest25-21ksoftirqd/109:23:191
928999475,4cyclictest1055-21runrttasks08:59:330
106891470,1ptp4l401ktimersoftd/313:56:153
930599466,7cyclictest2312-21tail10:58:353
930599465,9cyclictest41-21ksoftirqd/311:38:283
930599464,8cyclictest41-21ksoftirqd/309:38:253
930599464,7cyclictest41-21ksoftirqd/312:43:283
930599464,7cyclictest41-21ksoftirqd/312:13:263
930599464,7cyclictest29216-21ssh11:58:363
930599464,6cyclictest41-21ksoftirqd/312:05:123
9305994640,3cyclictest41-21ksoftirqd/310:28:113
930599463,7cyclictest41-21ksoftirqd/311:30:383
930599463,7cyclictest41-21ksoftirqd/310:58:073
930599463,6cyclictest41-21ksoftirqd/313:03:113
9305994618,4cyclictest41-21ksoftirqd/312:33:223
930599461,7cyclictest28919-21munin-run13:38:103
930599461,7cyclictest28919-21munin-run13:38:103
930599460,8cyclictest41-21ksoftirqd/312:08:283
930199468,22cyclictest4390-21sh12:39:022
930199461,25cyclictest7128-21chrt12:43:172
930199461,25cyclictest27041-21snmp_o5powerctl10:08:292
930199461,24cyclictest3740-21taskset11:00:502
930199461,24cyclictest2473-21diskmemload13:17:162
930199461,23cyclictest4591-21smartctl09:23:242
930199461,22cyclictest17817-21sh12:20:192
930199461,21cyclictest18180-21taskset13:27:052
930199460,23cyclictest0-21swapper/211:53:462
930599454,7cyclictest41-21ksoftirqd/313:08:383
930599454,7cyclictest41-21ksoftirqd/312:38:253
930599454,7cyclictest41-21ksoftirqd/311:27:303
930599454,7cyclictest41-21ksoftirqd/310:08:063
930599454,7cyclictest41-21ksoftirqd/308:33:073
930599454,6cyclictest41-21ksoftirqd/309:23:213
930599454,6cyclictest41-21ksoftirqd/308:28:253
930599453,6cyclictest41-21ksoftirqd/313:32:393
930599453,6cyclictest41-21ksoftirqd/309:33:193
930599452,6cyclictest41-21ksoftirqd/313:23:373
930199450,22cyclictest233-21systemd-journal09:39:132
9294994535,5cyclictest25-21ksoftirqd/113:28:221
9289994524,10cyclictest2473-21diskmemload10:53:190
930599447,9cyclictest41-21ksoftirqd/311:08:223
930599447,9cyclictest41-21ksoftirqd/311:03:203
930599444,9cyclictest41-21ksoftirqd/310:44:313
930599444,6cyclictest41-21ksoftirqd/309:48:183
930599444,6cyclictest41-21ksoftirqd/308:38:213
9305994436,4cyclictest41-21ksoftirqd/308:53:083
930599442,7cyclictest41-21ksoftirqd/311:58:083
930599442,6cyclictest41-21ksoftirqd/309:08:193
9305994419,9cyclictest41-21ksoftirqd/310:38:243
930599440,6cyclictest401ktimersoftd/313:43:313
930199441,26cyclictest9457-21/usr/sbin/munin10:33:282
930199440,24cyclictest7708-21ptp4l-jitter09:28:282
930199440,23cyclictest21766-21chrt13:29:272
930199440,22cyclictest14895-21/usr/sbin/munin08:38:242
928999441,3cyclictest0-21swapper/010:27:450
930599436,9cyclictest41-21ksoftirqd/310:23:253
930599436,7cyclictest41-21ksoftirqd/308:43:333
930599436,10cyclictest41-21ksoftirqd/309:43:193
930599434,6cyclictest41-21ksoftirqd/310:33:133
930599434,6cyclictest41-21ksoftirqd/310:08:063
930599434,6cyclictest41-21ksoftirqd/309:13:233
930599433,7cyclictest41-21ksoftirqd/313:42:503
930599433,7cyclictest41-21ksoftirqd/311:36:393
930599433,6cyclictest41-21ksoftirqd/313:03:233
930599432,8cyclictest41-21ksoftirqd/312:32:043
930599432,7cyclictest41-21ksoftirqd/312:51:063
930599430,8cyclictest41-21ksoftirqd/309:58:233
930199431,22cyclictest22863-21sh11:19:452
930199430,23cyclictest32469-21runrttasks11:28:572
928999430,3cyclictest21286-21ssh12:57:370
930599426,9cyclictest41-21ksoftirqd/309:23:053
930599424,7cyclictest41-21ksoftirqd/310:08:223
930199420,29cyclictest18246-21taskset09:53:112
928999420,5cyclictest23965-21/usr/sbin/munin10:03:240
928999420,5cyclictest23965-21/usr/sbin/munin10:03:240
928999420,4cyclictest1055-21runrttasks11:24:100
930599415,10cyclictest41-21ksoftirqd/309:03:273
930199411,24cyclictest15598-21taskset09:47:292
930199411,22cyclictest23628-21snmp_o5powerctl08:53:312
929499413,10cyclictest25-21ksoftirqd/111:03:231
928999410,4cyclictest23604-21gltestperf10:48:250
9294994028,10cyclictest25-21ksoftirqd/111:43:071
9294994027,4cyclictest25-21ksoftirqd/111:23:091
9294994025,7cyclictest25-21ksoftirqd/111:43:231
928999402,32cyclictest12847-21ssh11:43:210
84852403,22sleep18488-21/usr/sbin/munin08:23:311
930599392,8cyclictest41-21ksoftirqd/309:55:343
930199391,24cyclictest21442-21sh10:46:022
930199391,23cyclictest29322-21runrttasks09:08:122
930199391,23cyclictest19114-21chrt08:44:302
930199391,23cyclictest10176-21snmp_o5powerctl09:33:282
930199391,22cyclictest11133-21awk11:08:252
930199390,23cyclictest31984-21sed10:18:352
930199390,20cyclictest0-21swapper/211:03:182
9294993927,3cyclictest25-21ksoftirqd/110:43:061
928999393,30cyclictest0-21swapper/012:03:210
928999390,5cyclictest22063-21snmp_o5powerctl09:58:320
928999390,4cyclictest8198-21ssh11:05:020
912523918,10sleep00-21swapper/008:27:140
930599383,6cyclictest28125-21egrep10:13:193
930199380,20cyclictest19410-21turbostat08:52:592
929499387,28cyclictest17186-21unixbench_singl11:13:361
9294993829,4cyclictest25-21ksoftirqd/113:03:211
9294993828,6cyclictest25-21ksoftirqd/111:58:181
928999383,30cyclictest0-21swapper/009:48:170
928999383,28cyclictest31894-21apt-get13:08:210
928999382,6cyclictest26974-21apt-get13:03:220
928999382,31cyclictest0-21swapper/008:48:170
928999381,4cyclictest10820-21ssh10:35:090
9289993814,21cyclictest32224-21date12:03:080
9289993814,21cyclictest24873-21idleruntime-cro11:23:070
9289993814,21cyclictest14227-21/usr/sbin/munin13:23:400
928999381,33cyclictest10969-21ls11:08:240
9289993813,22cyclictest2473-21diskmemload13:53:460
9289993810,25cyclictest2613-21uname09:18:240
928999380,5cyclictest3380-21sh10:28:210
928999380,4cyclictest4271-21grep11:33:310
9294993732,3cyclictest25-21ksoftirqd/113:58:111
9294993731,3cyclictest25-21ksoftirqd/110:58:071
928999372,29cyclictest0-21swapper/009:08:160
9289993715,19cyclictest18351-21missed_timers08:43:240
9289993714,20cyclictest2473-21diskmemload11:29:580
928999371,31cyclictest0-21swapper/013:48:230
9289993712,22cyclictest11764-21if_enp1s0.109:38:220
9289993710,23cyclictest9998-21cat12:13:190
928999370,4cyclictest22984-21ssh11:53:230
928999370,4cyclictest15626-21irqrtprio08:38:220
928999370,3cyclictest18260-21cat09:53:160
929499365,4cyclictest25-21ksoftirqd/112:08:221
9294993619,8cyclictest25-21ksoftirqd/109:13:221
928999369,23cyclictest9831-21latency_hist12:13:090
928999368,24cyclictest1055-21runrttasks10:59:450
9289993611,22cyclictest9884-21gltestperf13:18:270
9289993610,23cyclictest30049-21df12:33:240
9289993610,23cyclictest16969-21sed11:13:350
928999360,6cyclictest13717-21switchtime12:48:360
928999360,4cyclictest26293-21sh12:28:360
928999360,4cyclictest18049-21df_inode11:48:230
928999360,4cyclictest18049-21df_inode11:48:230
928999360,3cyclictest11502-21ssh11:41:350
145452360,2sleep00-21swapper/009:43:250
929499355,5cyclictest25-21ksoftirqd/113:18:391
9294993529,4cyclictest25-21ksoftirqd/112:53:101
9294993529,3cyclictest25-21ksoftirqd/113:53:111
9294993529,3cyclictest25-21ksoftirqd/113:33:231
9294993529,3cyclictest25-21ksoftirqd/113:33:231
9294993529,3cyclictest25-21ksoftirqd/112:58:401
9294993529,3cyclictest25-21ksoftirqd/110:38:061
9294993523,3cyclictest25-21ksoftirqd/109:33:241
9294993521,4cyclictest25-21ksoftirqd/112:23:261
928999358,23cyclictest4891-21cut13:13:260
928999353,5cyclictest13012-21apt-get10:38:190
928999352,6cyclictest19451-21apt-get13:28:220
9289993512,20cyclictest2473-21diskmemload10:43:570
9289993511,21cyclictest4051-21acpi09:23:190
928999350,4cyclictest3252-21irqstats12:38:280
928999350,31cyclictest23572-21grep12:58:390
928999350,2cyclictest0-21swapper/013:33:120
928999350,2cyclictest0-21swapper/013:33:120
929499348,4cyclictest25-21ksoftirqd/112:18:091
929499344,3cyclictest25-21ksoftirqd/111:13:081
9294993429,3cyclictest25-21ksoftirqd/112:58:101
9294993429,3cyclictest25-21ksoftirqd/112:33:091
9294993428,4cyclictest25-21ksoftirqd/109:13:051
9294993428,3cyclictest25-21ksoftirqd/112:43:091
9294993428,3cyclictest25-21ksoftirqd/111:53:211
9294993428,3cyclictest25-21ksoftirqd/111:48:221
9294993428,3cyclictest25-21ksoftirqd/111:48:221
9294993421,3cyclictest25-21ksoftirqd/113:38:391
928999347,23cyclictest30868-21gltestperf10:18:230
928999346,25cyclictest23166-21uname08:53:240
928999341,29cyclictest30137-21latency_hist10:18:060
9289993410,21cyclictest6710-21expr09:28:190
928999340,4cyclictest10172-21python09:33:280
928999340,3cyclictest12166-21snmp_o5powerctl08:33:060
930199331,29cyclictest2614-21irqstats09:18:242
929499338,4cyclictest25-21ksoftirqd/110:43:231
9294993328,3cyclictest25-21ksoftirqd/112:08:091
9294993328,3cyclictest25-21ksoftirqd/110:28:061
9294993328,3cyclictest25-21ksoftirqd/108:38:041
9294993327,3cyclictest25-21ksoftirqd/112:18:201
9294993327,3cyclictest25-21ksoftirqd/110:28:071
928999336,23cyclictest25989-21fschecks_count10:08:210
930199323,21cyclictest27035-21apt-get09:03:162
929499328,8cyclictest25-21ksoftirqd/109:48:281
929499327,4cyclictest25-21ksoftirqd/113:23:281
9294993226,3cyclictest25-21ksoftirqd/113:13:381
9294993226,3cyclictest25-21ksoftirqd/110:48:251
9294993226,3cyclictest25-21ksoftirqd/110:18:061
9294993226,3cyclictest25-21ksoftirqd/110:08:211
9294993226,3cyclictest25-21ksoftirqd/109:58:051
9294993226,3cyclictest25-21ksoftirqd/109:38:231
9294993226,3cyclictest25-21ksoftirqd/109:18:181
9294993221,9cyclictest25-21ksoftirqd/111:33:291
9294993210,7cyclictest25-21ksoftirqd/112:38:091
928999321,8cyclictest31896-21cpuspeed_turbos09:13:170
930199311,25cyclictest0-21swapper/209:58:172
9294993126,3cyclictest25-21ksoftirqd/112:43:101
9294993126,3cyclictest25-21ksoftirqd/109:58:271
9294993126,3cyclictest25-21ksoftirqd/109:08:041
9294993126,3cyclictest25-21ksoftirqd/108:53:041
9294993125,3cyclictest25-21ksoftirqd/111:33:071
9294993125,3cyclictest25-21ksoftirqd/110:18:361
9294993118,6cyclictest25-21ksoftirqd/108:48:041
928999311,3cyclictest0-21swapper/009:03:330
930199301,25cyclictest0-21swapper/210:23:192
930199300,27cyclictest0-21swapper/209:48:212
9294993025,3cyclictest25-21ksoftirqd/109:43:211
9294993025,3cyclictest25-21ksoftirqd/109:33:041
9294993025,3cyclictest25-21ksoftirqd/108:58:051
9294993024,3cyclictest25-21ksoftirqd/110:03:191
9294993024,3cyclictest25-21ksoftirqd/110:03:191
9294992923,4cyclictest25-21ksoftirqd/108:38:171
9294992923,3cyclictest25-21ksoftirqd/108:53:181
9294992822,3cyclictest25-21ksoftirqd/108:33:041
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional