You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-13 - 06:09
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackbslot6.osadl.org (updated Sat Jun 13, 2026 00:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
942321530,3sleep03029899cyclictest01:20:050
1068911200,8ptp4l14808-21kworker/3:220:50:553
1068911200,8ptp4l14808-21kworker/3:220:50:553
1387021180,4sleep13030499cyclictest23:11:341
175082640,5sleep13030499cyclictest23:49:001
53822630,4sleep0101ktimersoftd/001:47:390
299642604,10sleep10-21swapper/120:48:091
299642604,10sleep10-21swapper/120:48:091
315332570,2sleep00-21swapper/002:15:250
315332570,2sleep00-21swapper/002:15:250
30298995649,4cyclictest9-21ksoftirqd/001:51:190
30318995410,13cyclictest15591-21expr01:26:203
281632520,2sleep30-21swapper/323:26:263
30318995113,9cyclictest28981-21sh00:33:293
3031899510,18cyclictest0-21swapper/323:21:043
3031899510,13cyclictest24228-21grep22:51:153
3031899500,13cyclictest25642-21/usr/sbin/munin01:36:223
3031899500,12cyclictest25639-21grep00:31:053
30298995045,3cyclictest9-21ksoftirqd/023:46:160
3031899490,13cyclictest14886-21/usr/sbin/munin00:51:333
3031899481,18cyclictest0-21swapper/301:04:213
3031899480,13cyclictest3365-21idleruntime01:46:283
3031899480,13cyclictest23581-21gltestperf21:41:173
245302480,2sleep10-21swapper/121:41:251
3031899470,14cyclictest19170-21cut00:56:233
3031899470,14cyclictest11426-21tr21:16:143
3031899470,13cyclictest25539-21sed23:56:313
3031899470,13cyclictest17177-21fschecks_time22:36:193
3031899470,13cyclictest17177-21fschecks_time22:36:193
3031899470,13cyclictest12886-21grep01:56:213
3031899470,12cyclictest2834-21mailstats00:06:273
3031899470,11cyclictest5062-21sed00:41:333
30309994736,5cyclictest33-21ksoftirqd/221:26:142
3031899460,13cyclictest30675-21mailstats22:56:283
3031899460,12cyclictest28933-21acpi00:01:163
3031899460,11cyclictest2447-21chrt00:40:093
3031899450,18cyclictest14968-21latency_hist01:26:073
3031899450,14cyclictest10209-21mailstats21:11:233
3031899450,13cyclictest15806-21mailstats22:31:243
3031899450,12cyclictest4185-21apt-get23:36:163
3031899450,12cyclictest0-21swapper/301:46:073
30309994534,5cyclictest33-21ksoftirqd/222:41:152
30309994534,5cyclictest33-21ksoftirqd/222:41:152
30304994536,5cyclictest25-21ksoftirqd/100:46:181
3031899440,19cyclictest5333-21grep21:01:283
3031899440,18cyclictest23672-21diskmemload02:17:553
3031899440,17cyclictest3217-21if_ens322:06:183
3031899440,13cyclictest23672-21diskmemload01:18:343
3031899440,12cyclictest27058-21latency_hist02:11:083
3031899440,11cyclictest26926-21cat21:46:293
3031899440,11cyclictest23672-21diskmemload00:11:103
30309994433,6cyclictest33-21ksoftirqd/223:56:162
30309994428,3cyclictest33-21ksoftirqd/222:56:032
30309994416,4cyclictest33-21ksoftirqd/223:06:212
30309994415,6cyclictest33-21ksoftirqd/200:21:182
30309994415,6cyclictest33-21ksoftirqd/200:21:182
30298994436,4cyclictest9-21ksoftirqd/000:21:160
30298994436,4cyclictest9-21ksoftirqd/000:21:160
3031899431,10cyclictest694-21snmp_o5powerctl23:31:283
3031899430,12cyclictest29458-21timerwakeupswit21:51:293
3031899430,12cyclictest12328-21munin-run01:56:073
3030999434,3cyclictest33-21ksoftirqd/200:26:342
30309994317,4cyclictest33-21ksoftirqd/200:06:322
3031899420,12cyclictest23672-21diskmemload23:23:513
30309994229,3cyclictest33-21ksoftirqd/200:31:332
30309994223,6cyclictest33-21ksoftirqd/223:41:192
30309994216,6cyclictest33-21ksoftirqd/223:21:192
3031899410,13cyclictest9761-21snmp_o5powerctl00:46:303
3031899410,11cyclictest7796-21irqstats23:06:193
3031899410,11cyclictest23672-21diskmemload01:07:413
3031899410,11cyclictest20681-21perl01:31:223
3031899410,10cyclictest23672-21diskmemload02:13:433
3031899410,10cyclictest23672-21diskmemload02:13:433
3031899410,10cyclictest16468-21diskstats00:21:193
3031899410,10cyclictest16468-21diskstats00:21:193
30309994125,3cyclictest33-21ksoftirqd/201:24:092
30309994124,7cyclictest33-21ksoftirqd/201:56:362
30309994121,8cyclictest33-21ksoftirqd/201:36:202
30309994116,4cyclictest33-21ksoftirqd/221:31:192
30309994116,4cyclictest33-21ksoftirqd/221:01:212
30309994115,4cyclictest33-21ksoftirqd/222:16:172
30309994115,4cyclictest33-21ksoftirqd/221:26:012
30309994112,6cyclictest33-21ksoftirqd/200:46:222
30298994135,3cyclictest9-21ksoftirqd/022:56:080
30298994135,3cyclictest9-21ksoftirqd/001:56:200
30309994033,3cyclictest33-21ksoftirqd/223:11:082
30309994025,3cyclictest33-21ksoftirqd/221:36:172
30309994024,4cyclictest33-21ksoftirqd/221:41:142
30309994023,4cyclictest33-21ksoftirqd/222:36:242
30309994023,4cyclictest33-21ksoftirqd/222:36:242
30309994017,7cyclictest33-21ksoftirqd/200:16:162
30309994017,7cyclictest33-21ksoftirqd/200:16:162
30309994015,7cyclictest33-21ksoftirqd/222:56:332
30309994013,4cyclictest33-21ksoftirqd/222:01:032
30309994011,10cyclictest33-21ksoftirqd/200:51:202
30298994030,6cyclictest9-21ksoftirqd/000:36:170
30298994023,5cyclictest9-21ksoftirqd/000:26:340
3031899390,11cyclictest2083-21snmp_o5powerctl01:11:313
30309993932,4cyclictest33-21ksoftirqd/223:46:092
30309993930,5cyclictest33-21ksoftirqd/221:06:122
30309993921,6cyclictest33-21ksoftirqd/201:26:212
30309993912,6cyclictest33-21ksoftirqd/201:06:232
30309993912,5cyclictest33-21ksoftirqd/221:11:172
30309993912,5cyclictest33-21ksoftirqd/201:51:262
30309993912,5cyclictest33-21ksoftirqd/201:36:082
30298993932,3cyclictest9-21ksoftirqd/022:36:150
30298993932,3cyclictest9-21ksoftirqd/022:36:150
30298993931,4cyclictest9-21ksoftirqd/021:31:120
260872390,26sleep125-21ksoftirqd/121:46:191
106891390,1ptp4l401ktimersoftd/323:44:573
3031899380,12cyclictest17005-21ssh23:48:083
3031899380,10cyclictest0-21swapper/322:46:333
3030999389,4cyclictest33-21ksoftirqd/223:01:232
30309993832,3cyclictest33-21ksoftirqd/223:31:042
30309993825,4cyclictest33-21ksoftirqd/202:06:292
30309993825,3cyclictest33-21ksoftirqd/222:06:202
30309993825,3cyclictest33-21ksoftirqd/201:11:352
30309993824,3cyclictest33-21ksoftirqd/223:51:182
30309993811,6cyclictest33-21ksoftirqd/201:46:302
3030999380,3cyclictest121rcu_preempt22:01:152
106891380,1ptp4l401ktimersoftd/302:03:583
3030999378,6cyclictest33-21ksoftirqd/221:51:302
3030999375,3cyclictest121rcu_preempt22:31:182
30309993731,3cyclictest33-21ksoftirqd/201:21:072
30309993719,7cyclictest33-21ksoftirqd/223:31:152
30309993713,4cyclictest33-21ksoftirqd/220:56:292
30309993711,6cyclictest33-21ksoftirqd/201:01:222
3030999370,3cyclictest30671-21apt-get20:51:052
30298993731,3cyclictest9-21ksoftirqd/000:01:160
30298993729,4cyclictest9-21ksoftirqd/022:11:140
30298993724,7cyclictest23672-21diskmemload23:01:140
3029899370,4cyclictest9-21ksoftirqd/000:47:290
106891370,1ptp4l401ktimersoftd/323:54:373
106891370,1ptp4l401ktimersoftd/323:15:493
106891370,1ptp4l401ktimersoftd/323:04:373
106891370,1ptp4l401ktimersoftd/321:56:323
106891370,1ptp4l401ktimersoftd/300:19:323
106891370,1ptp4l401ktimersoftd/300:19:323
3030999368,6cyclictest33-21ksoftirqd/201:41:292
3030999368,6cyclictest33-21ksoftirqd/201:01:072
3030999367,6cyclictest33-21ksoftirqd/200:41:202
30309993616,9cyclictest33-21ksoftirqd/202:16:272
30309993616,9cyclictest33-21ksoftirqd/202:06:072
30309993610,7cyclictest33-21ksoftirqd/223:36:242
30298993629,3cyclictest9-21ksoftirqd/020:56:110
3031899350,20cyclictest20728-21/usr/sbin/munin21:36:203
3031899350,10cyclictest6004-21cat22:11:223
3030999359,6cyclictest33-21ksoftirqd/221:16:172
3030999358,4cyclictest33-21ksoftirqd/222:46:322
3030999355,6cyclictest33-21ksoftirqd/202:11:212
3030999355,6cyclictest33-21ksoftirqd/202:11:212
30309993528,4cyclictest33-21ksoftirqd/200:11:132
30309993522,3cyclictest33-21ksoftirqd/200:36:212
30309993513,7cyclictest33-21ksoftirqd/222:21:312
30298993526,4cyclictest9-21ksoftirqd/023:26:140
30298993525,6cyclictest9-21ksoftirqd/000:31:170
106891350,0ptp4l401ktimersoftd/322:18:103
106891350,0ptp4l401ktimersoftd/321:28:283
3030999348,4cyclictest33-21ksoftirqd/222:26:292
30309993428,3cyclictest33-21ksoftirqd/220:51:002
30309993428,3cyclictest33-21ksoftirqd/220:51:002
30309993428,3cyclictest33-21ksoftirqd/200:01:252
30309993419,5cyclictest33-21ksoftirqd/222:11:152
30309993410,7cyclictest33-21ksoftirqd/223:16:332
30298993428,3cyclictest9-21ksoftirqd/000:41:180
30298993426,4cyclictest9-21ksoftirqd/021:01:110
30298993423,5cyclictest9-21ksoftirqd/001:11:180
30298993422,10cyclictest9-21ksoftirqd/000:11:210
205462340,5sleep03029899cyclictest01:31:210
3030999334,3cyclictest121rcu_preempt21:46:172
30298993328,3cyclictest9-21ksoftirqd/001:06:350
30298993327,3cyclictest9-21ksoftirqd/000:01:040
30298993324,5cyclictest9-21ksoftirqd/021:16:120
2996823315,8sleep00-21swapper/020:48:120
2996823315,8sleep00-21swapper/020:48:120
30298993227,3cyclictest9-21ksoftirqd/022:21:020
3029899322,6cyclictest9-21ksoftirqd/023:51:230
30298993226,3cyclictest9-21ksoftirqd/022:01:020
30298993226,3cyclictest9-21ksoftirqd/001:36:230
30298993226,3cyclictest9-21ksoftirqd/001:26:070
3031899316,9cyclictest30290-21cyclictest20:51:123
30304993126,3cyclictest25-21ksoftirqd/123:21:041
30298993126,3cyclictest9-21ksoftirqd/000:56:230
30298993125,3cyclictest9-21ksoftirqd/022:46:200
30298993125,3cyclictest9-21ksoftirqd/001:41:260
77202300,2sleep10-21swapper/121:06:281
30298993026,3cyclictest9-21ksoftirqd/023:41:240
30298993025,3cyclictest9-21ksoftirqd/023:06:040
30298993025,3cyclictest9-21ksoftirqd/022:26:200
30298993025,3cyclictest9-21ksoftirqd/020:56:010
30298993025,3cyclictest9-21ksoftirqd/002:11:070
30298993025,3cyclictest9-21ksoftirqd/002:06:080
30298993025,3cyclictest9-21ksoftirqd/000:56:070
30298993024,3cyclictest9-21ksoftirqd/023:26:040
30298993024,3cyclictest9-21ksoftirqd/023:16:040
30298993024,3cyclictest9-21ksoftirqd/022:26:030
30298993024,3cyclictest9-21ksoftirqd/021:11:290
30298993024,3cyclictest9-21ksoftirqd/001:26:250
30304992923,3cyclictest25-21ksoftirqd/101:26:231
30298992923,3cyclictest9-21ksoftirqd/002:21:080
30298992923,3cyclictest9-21ksoftirqd/000:06:230
3031899280,19cyclictest0-21swapper/321:21:153
30304992823,3cyclictest25-21ksoftirqd/100:51:171
30304992822,3cyclictest25-21ksoftirqd/101:31:251
30298992823,3cyclictest9-21ksoftirqd/023:36:340
30298992823,3cyclictest9-21ksoftirqd/023:31:210
30298992823,3cyclictest9-21ksoftirqd/022:01:170
30298992823,3cyclictest9-21ksoftirqd/021:51:170
30298992823,3cyclictest9-21ksoftirqd/021:41:020
30298992823,3cyclictest12372-1kworker/u9:001:01:270
30298992822,3cyclictest9-21ksoftirqd/022:56:040
30298992822,3cyclictest9-21ksoftirqd/000:16:300
30298992822,3cyclictest9-21ksoftirqd/000:16:300
30298992818,8cyclictest9-21ksoftirqd/023:16:140
222312280,2sleep10-21swapper/100:26:261
30304992722,3cyclictest25-21ksoftirqd/121:56:141
30304992722,3cyclictest25-21ksoftirqd/101:41:061
30298992721,3cyclictest9-21ksoftirqd/022:06:290
30298992721,3cyclictest9-21ksoftirqd/021:51:020
30298992721,3cyclictest9-21ksoftirqd/021:31:020
30298992721,3cyclictest9-21ksoftirqd/021:06:200
3031899260,13cyclictest0-21swapper/320:56:293
3031899260,11cyclictest0-21swapper/322:41:223
3031899260,11cyclictest0-21swapper/322:41:223
3031899260,11cyclictest0-21swapper/321:31:163
3030499265,18cyclictest10124-21sh00:14:511
30304992621,3cyclictest25-21ksoftirqd/101:21:181
30304992621,3cyclictest25-21ksoftirqd/100:01:041
30304992620,3cyclictest25-21ksoftirqd/101:01:181
3029899268,8cyclictest9-21ksoftirqd/022:31:150
30298992621,3cyclictest9-21ksoftirqd/021:21:130
30298992620,3cyclictest9-21ksoftirqd/022:46:030
30298992620,3cyclictest9-21ksoftirqd/022:46:030
30318992519,3cyclictest41-21ksoftirqd/322:01:263
30304992520,3cyclictest25-21ksoftirqd/122:56:221
30304992520,3cyclictest25-21ksoftirqd/122:11:211
30304992520,3cyclictest25-21ksoftirqd/121:06:011
30304992520,3cyclictest25-21ksoftirqd/100:56:181
30304992519,4cyclictest25-21ksoftirqd/121:52:291
30304992519,3cyclictest25-21ksoftirqd/123:04:151
30304992519,3cyclictest25-21ksoftirqd/122:42:071
30304992519,3cyclictest25-21ksoftirqd/122:42:071
30304992518,4cyclictest25-21ksoftirqd/122:31:441
30304992518,4cyclictest25-21ksoftirqd/122:20:071
30298992519,3cyclictest9-21ksoftirqd/021:41:200
30304992419,3cyclictest26862-21irqrtprio00:31:241
30304992418,3cyclictest25-21ksoftirqd/122:25:291
30304992418,3cyclictest25-21ksoftirqd/101:16:191
30304992417,5cyclictest25-21ksoftirqd/102:01:201
115582240,4sleep111563-21fschecks_count21:16:161
106891240,1ptp4l401ktimersoftd/322:21:143
106891240,1ptp4l401ktimersoftd/321:11:013
30304992318,3cyclictest25-21ksoftirqd/122:26:261
30304992318,3cyclictest25-21ksoftirqd/100:41:231
30304992318,3cyclictest25-21ksoftirqd/100:16:251
30304992318,3cyclictest25-21ksoftirqd/100:16:251
30304992317,4cyclictest25-21ksoftirqd/123:42:261
30304992317,4cyclictest25-21ksoftirqd/121:39:241
30304992317,3cyclictest25-21ksoftirqd/101:43:061
30304992317,3cyclictest25-21ksoftirqd/100:08:191
30304992316,4cyclictest25-21ksoftirqd/121:25:311
106891230,1ptp4l401ktimersoftd/322:26:223
3030499226,3cyclictest121rcu_preempt01:51:231
3030499222,13cyclictest24089-21ssh22:51:151
30304992217,3cyclictest25-21ksoftirqd/123:36:161
30304992217,3cyclictest25-21ksoftirqd/122:41:031
30304992217,3cyclictest25-21ksoftirqd/122:41:031
30304992217,3cyclictest25-21ksoftirqd/100:38:061
30304992217,3cyclictest25-21ksoftirqd/100:21:251
30304992217,3cyclictest25-21ksoftirqd/100:21:251
30304992210,9cyclictest241ktimersoftd/101:09:381
882622114,3sleep125-21ksoftirqd/121:11:031
30304992116,3cyclictest25-21ksoftirqd/102:11:071
30304992116,3cyclictest25-21ksoftirqd/101:46:271
30304992115,4cyclictest25-21ksoftirqd/122:02:491
30304992115,3cyclictest31954-21sh02:16:081
30304992115,3cyclictest31954-21sh02:16:081
3030499211,4cyclictest29605-21ssh23:28:141
30304992114,4cyclictest19054-21/usr/sbin/munin23:51:211
30304992015,3cyclictest25-21ksoftirqd/123:11:041
30304992015,3cyclictest25-21ksoftirqd/120:56:011
30304992014,3cyclictest3796-21sh02:20:031
30304992014,3cyclictest25-21ksoftirqd/121:26:031
30304992013,5cyclictest25-21ksoftirqd/123:36:041
30304992013,4cyclictest22869-21find22:46:261
30304992013,4cyclictest18363-21/usr/sbin/munin21:31:141
3030499200,17cyclictest31714-21ssh00:03:041
30304991915,3cyclictest25-21ksoftirqd/101:11:271
30304991913,3cyclictest30735-21cat20:51:101
30304991912,5cyclictest25-21ksoftirqd/101:56:341
30304991912,4cyclictest23225-21mailstats23:21:271
30304991811,4cyclictest2890-21df_inode22:06:141
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional