You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-24 - 09:08
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 792 highest latencies:
System rackdslot2.osadl.org (updated Mon Aug 24, 2026 00:45:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
254792237170,22sleep10-21swapper/119:06:341
139591208174,22phc2sys0-21swapper/319:07:053
254442207172,23sleep20-21swapper/219:06:072
236142203169,22sleep00-21swapper/019:05:040
26046997537,7cyclictest41-21ksoftirqd/319:40:003
26046997034,5cyclictest41-21ksoftirqd/320:14:593
26046996933,4cyclictest41-21ksoftirqd/320:44:593
26046996734,9cyclictest41-21ksoftirqd/300:05:003
26046996630,3cyclictest41-21ksoftirqd/300:20:143
26046996531,7cyclictest41-21ksoftirqd/322:50:253
26046996531,6cyclictest41-21ksoftirqd/323:35:253
26046996531,6cyclictest41-21ksoftirqd/322:55:253
26046996531,4cyclictest41-21ksoftirqd/320:30:003
26046996530,5cyclictest41-21ksoftirqd/323:45:003
2604599656,11cyclictest25798-21sed22:30:182
2604599653,6cyclictest19981-21latency_hist22:20:012
135291650,6getstats2604699cyclictest22:25:183
26046996432,8cyclictest41-21ksoftirqd/322:45:203
26046996431,3cyclictest41-21ksoftirqd/321:40:123
26046996430,3cyclictest41-21ksoftirqd/321:09:593
2604599645,12cyclictest4169-21kernelversion19:30:202
26046996233,3cyclictest41-21ksoftirqd/321:55:003
26046996232,4cyclictest41-21ksoftirqd/320:15:183
26046996231,4cyclictest41-21ksoftirqd/322:20:203
26046996228,7cyclictest41-21ksoftirqd/319:50:223
26046996227,4cyclictest41-21ksoftirqd/323:20:263
2604399620,3cyclictest3273-21/usr/sbin/munin00:00:300
26046996132,7cyclictest41-21ksoftirqd/322:45:003
26046996132,4cyclictest41-21ksoftirqd/320:45:253
26046996131,8cyclictest41-21ksoftirqd/322:05:203
26046996130,4cyclictest41-21ksoftirqd/320:50:203
26046996129,4cyclictest41-21ksoftirqd/322:35:183
26046996128,4cyclictest41-21ksoftirqd/323:25:173
26046996128,4cyclictest41-21ksoftirqd/321:30:143
26046996128,4cyclictest41-21ksoftirqd/321:10:153
26046996128,4cyclictest41-21ksoftirqd/300:25:273
26046996128,4cyclictest41-21ksoftirqd/300:25:273
26046996126,9cyclictest41-21ksoftirqd/300:15:003
26046996125,4cyclictest41-21ksoftirqd/323:10:223
26046996032,4cyclictest41-21ksoftirqd/319:45:143
26046996030,4cyclictest41-21ksoftirqd/319:30:013
26046996028,4cyclictest41-21ksoftirqd/320:35:133
26046996027,4cyclictest41-21ksoftirqd/321:55:253
26046996027,4cyclictest41-21ksoftirqd/321:15:153
26046996026,4cyclictest41-21ksoftirqd/321:00:263
26046996024,4cyclictest41-21ksoftirqd/321:35:193
2604599605,17cyclictest10497-21gzip20:50:252
290342590,3sleep20-21swapper/223:45:162
26046995931,4cyclictest41-21ksoftirqd/322:30:233
26046995930,7cyclictest41-21ksoftirqd/300:15:253
26046995928,4cyclictest41-21ksoftirqd/320:05:273
26046995928,3cyclictest41-21ksoftirqd/320:30:163
26046995927,4cyclictest41-21ksoftirqd/300:30:173
26046995925,4cyclictest41-21ksoftirqd/322:00:013
26046995925,4cyclictest41-21ksoftirqd/322:00:013
26046995925,4cyclictest41-21ksoftirqd/321:45:173
26046995925,4cyclictest41-21ksoftirqd/319:10:123
26046995922,4cyclictest41-21ksoftirqd/321:20:263
26046995920,9cyclictest41-21ksoftirqd/323:30:303
2604599595,16cyclictest7963-21/usr/sbin/munin19:40:212
2604599595,10cyclictest11966-21df_abs23:10:142
2604599593,6cyclictest29285-21wc20:25:002
26046995831,3cyclictest41-21ksoftirqd/319:40:233
26046995830,7cyclictest41-21ksoftirqd/319:20:233
26046995829,8cyclictest41-21ksoftirqd/321:25:253
26046995825,9cyclictest41-21ksoftirqd/323:45:153
26046995825,5cyclictest41-21ksoftirqd/320:25:003
26046995825,4cyclictest41-21ksoftirqd/319:20:003
26046995824,10cyclictest41-21ksoftirqd/323:50:163
26046995819,10cyclictest41-21ksoftirqd/322:15:153
2604599585,10cyclictest25011-21/usr/sbin/munin21:20:252
2604599585,10cyclictest20646-21/usr/sbin/munin22:20:162
2604599583,11cyclictest16337-21cut22:10:182
2604599583,10cyclictest19214-21cstates23:25:122
2604399580,3cyclictest29271-21seq22:37:300
26046995728,3cyclictest41-21ksoftirqd/323:55:173
26046995728,3cyclictest41-21ksoftirqd/323:55:173
26046995726,4cyclictest41-21ksoftirqd/320:55:173
26046995725,10cyclictest41-21ksoftirqd/323:05:273
2604599574,11cyclictest30910-21cat20:25:252
2604599574,11cyclictest27403-21grep22:35:122
2604599574,11cyclictest20878-21cat20:05:212
2604599573,11cyclictest26148-21ls20:15:282
2604599573,10cyclictest12968-21cat22:05:012
2604599573,10cyclictest12968-21cat22:05:002
2604599572,19cyclictest0-21swapper/219:20:012
2604599571,17cyclictest0-21swapper/220:45:232
26046995627,4cyclictest41-21ksoftirqd/322:10:183
2604599568,16cyclictest16749-21cat19:55:282
2604599565,18cyclictest23002-21timerwakeupswit23:30:292
2604599563,11cyclictest24502-21latency_hist20:15:002
26046995527,3cyclictest41-21ksoftirqd/319:30:153
26046995524,8cyclictest41-21ksoftirqd/319:55:233
26046995523,6cyclictest41-21ksoftirqd/300:35:203
2604599554,17cyclictest8752-21/usr/sbin/munin21:55:192
2604599554,11cyclictest14129-21sed22:05:212
2604599554,10cyclictest3210-21date21:45:012
2604599553,11cyclictest17150-21irqrtprio23:20:192
2604599553,10cyclictest6567-21latency19:35:202
2604599552,16cyclictest0-21swapper/200:10:272
2604599552,12cyclictest15566-21unixbench_multi21:00:272
26046995422,8cyclictest41-21ksoftirqd/300:10:013
2604599546,11cyclictest32257-21awk19:20:252
2604599545,16cyclictest26613-21/usr/sbin/munin21:25:162
2604599545,11cyclictest17793-21timerandwakeup21:05:252
2604599544,12cyclictest15299-21date00:25:002
26046995315,10cyclictest41-21ksoftirqd/323:00:143
2604599534,18cyclictest8035-21/usr/sbin/munin23:00:222
2604599532,18cyclictest0-21swapper/220:40:262
2604599525,11cyclictest7061-21sensors00:05:262
2604599524,17cyclictest5373-21sshd00:04:412
2604599524,17cyclictest17601-21date00:30:002
2604599524,17cyclictest17601-21date00:29:592
2604599524,14cyclictest0-21swapper/223:35:182
2604599523,11cyclictest19755-21irqrtprio21:10:182
2604399520,3cyclictest13421-21seq20:57:050
26046995119,4cyclictest41-21ksoftirqd/320:00:223
2604599514,16cyclictest17567-21grep20:00:122
2604599514,11cyclictest18570-21cut00:30:192
2604599513,11cyclictest22622-21systemctl21:15:252
2604599511,17cyclictest0-21swapper/220:30:182
2604599502,10cyclictest0-21swapper/219:50:002
2604599501,10cyclictest0-21swapper/223:55:252
2604599501,10cyclictest0-21swapper/223:55:252
2604599494,11cyclictest31914-21sort21:35:202
2604599483,8cyclictest26579-21hddtemp_smartct19:10:162
2604599483,10cyclictest0-21swapper/222:25:242
2604599482,16cyclictest0-21swapper/221:45:202
2604399480,3cyclictest8695-21runrttasks20:47:540
2604399480,3cyclictest4157-21seq22:53:550
2604599470,9cyclictest0-21swapper/223:05:162
2604399471,3cyclictest1308-21runrttasks20:34:060
2604599463,15cyclictest445-21sshd23:53:422
26043994639,4cyclictest17606-21cron22:15:000
2604399460,2cyclictest15904-21runrttasks21:03:190
2604399451,2cyclictest0-21swapper/021:48:400
2604599445,8cyclictest14026-21/usr/sbin/munin23:15:132
2604599445,12cyclictest2309-21ls22:50:112
2604599443,9cyclictest1312-21snmpd22:56:502
2604599442,8cyclictest11518-21/usr/sbin/munin20:55:252
2604399441,2cyclictest0-21swapper/023:34:150
2604399441,2cyclictest0-21swapper/000:38:580
2604399440,3cyclictest1308-21runrttasks23:43:180
2604599435,10cyclictest30215-21fschecks_time22:40:162
26043994325,15cyclictest9-21ksoftirqd/022:10:000
2604399430,3cyclictest1308-21runrttasks21:22:320
26046994225,10cyclictest41-21ksoftirqd/323:15:133
2604599423,8cyclictest1065-21df19:25:152
2604599421,17cyclictest0-21swapper/219:50:172
2604399421,2cyclictest0-21swapper/000:33:080
2604399420,3cyclictest25851-21seq23:39:530
2604399420,3cyclictest1308-21runrttasks23:54:130
2604599413,16cyclictest21964-21sshd00:37:102
26044994122,16cyclictest25-21ksoftirqd/121:49:381
26044993932,5cyclictest25-21ksoftirqd/122:49:191
2604399390,3cyclictest21288-21grep21:15:130
2604399380,3cyclictest12446-21runrttasks19:49:100
2604599372,5cyclictest0-21swapper/221:50:412
26044993731,4cyclictest25-21ksoftirqd/123:11:171
26044993731,4cyclictest25-21ksoftirqd/122:40:401
26044993731,4cyclictest25-21ksoftirqd/100:22:581
26043993731,4cyclictest9-21ksoftirqd/022:20:050
26043993731,4cyclictest9-21ksoftirqd/021:26:540
2604399371,3cyclictest1308-21runrttasks23:05:020
2604399371,3cyclictest1308-21runrttasks20:08:320
26044993631,3cyclictest25-21ksoftirqd/122:37:151
26044993630,4cyclictest25-21ksoftirqd/121:24:381
26044993630,4cyclictest25-21ksoftirqd/119:54:001
26043993630,4cyclictest9-21ksoftirqd/020:22:190
26045993529,4cyclictest33-21ksoftirqd/221:34:192
26045993528,4cyclictest33-21ksoftirqd/222:45:122
26044993530,3cyclictest25-21ksoftirqd/122:15:001
26044993529,4cyclictest25-21ksoftirqd/123:32:431
26044993529,4cyclictest25-21ksoftirqd/123:04:511
26044993529,4cyclictest25-21ksoftirqd/121:50:501
26044993529,4cyclictest25-21ksoftirqd/121:11:381
26044993529,4cyclictest25-21ksoftirqd/119:12:471
26044993529,4cyclictest25-21ksoftirqd/100:07:141
26044993529,3cyclictest25-21ksoftirqd/122:17:001
26044993514,3cyclictest22307-21sed21:15:231
26043993529,4cyclictest9-21ksoftirqd/021:08:400
26043993529,4cyclictest9-21ksoftirqd/020:37:360
26043993529,4cyclictest9-21ksoftirqd/019:20:530
26043993529,4cyclictest9-21ksoftirqd/000:11:020
2604399351,31cyclictest31871-21turbostat.cron22:45:000
26043993512,20cyclictest25658-21cut22:30:180
26043993510,22cyclictest19117-21ls21:10:130
2604399350,4cyclictest730-21cut21:40:010
2604399350,3cyclictest16880-21/usr/sbin/munin23:20:160
2604399350,3cyclictest13461-21grep00:20:170
26045993428,4cyclictest33-21ksoftirqd/200:19:262
26044993429,3cyclictest25-21ksoftirqd/123:23:041
26044993429,3cyclictest25-21ksoftirqd/119:49:541
26044993428,4cyclictest25-21ksoftirqd/123:43:031
26044993428,4cyclictest25-21ksoftirqd/120:25:331
26044993428,4cyclictest25-21ksoftirqd/120:12:371
26043993429,3cyclictest9-21ksoftirqd/019:26:370
26043993428,4cyclictest9-21ksoftirqd/020:43:530
26043993428,4cyclictest9-21ksoftirqd/000:25:420
26043993428,4cyclictest9-21ksoftirqd/000:25:420
26043993428,3cyclictest9-21ksoftirqd/019:32:160
26043993412,19cyclictest17089-21seq19:58:000
26043993411,21cyclictest18701-21phc2sys20:00:210
26043993410,21cyclictest6823-21ls23:00:020
2604399340,3cyclictest14237-21cstates23:15:120
2604599333,7cyclictest3015-21meminfo20:35:212
26044993328,3cyclictest25-21ksoftirqd/122:33:051
26044993328,3cyclictest25-21ksoftirqd/122:29:121
26044993328,3cyclictest25-21ksoftirqd/119:44:201
26044993328,3cyclictest25-21ksoftirqd/119:30:321
26044993327,4cyclictest25-21ksoftirqd/121:57:441
26044993327,4cyclictest25-21ksoftirqd/100:31:051
26044993327,3cyclictest25-21ksoftirqd/123:59:591
26044993327,3cyclictest25-21ksoftirqd/123:59:591
26044993327,3cyclictest25-21ksoftirqd/120:20:121
26044993326,5cyclictest25-21ksoftirqd/120:48:031
26044993326,4cyclictest25-21ksoftirqd/120:15:141
26044993326,4cyclictest25-21ksoftirqd/100:35:381
2604499331,2cyclictest121rcu_preempt21:06:521
26043993328,3cyclictest9-21ksoftirqd/022:15:130
26043993327,4cyclictest9-21ksoftirqd/021:56:260
26043993327,4cyclictest9-21ksoftirqd/021:41:100
26043993327,4cyclictest9-21ksoftirqd/020:54:120
2604399330,3cyclictest31668-21latency_hist20:30:000
26044993227,3cyclictest25-21ksoftirqd/123:19:021
26044993227,3cyclictest25-21ksoftirqd/122:01:561
26044993227,3cyclictest25-21ksoftirqd/122:01:561
26044993227,3cyclictest25-21ksoftirqd/120:39:561
26044993226,4cyclictest25-21ksoftirqd/123:38:051
26044993226,4cyclictest25-21ksoftirqd/120:09:161
26044993226,4cyclictest25-21ksoftirqd/119:26:281
26044993226,4cyclictest25-21ksoftirqd/119:25:011
2604399328,21cyclictest28582-21grep19:15:130
26043993227,3cyclictest9-21ksoftirqd/020:15:250
26043993227,3cyclictest9-21ksoftirqd/000:09:120
26043993226,4cyclictest9-21ksoftirqd/023:11:200
26043993226,4cyclictest9-21ksoftirqd/019:10:510
2604399320,4cyclictest2640-21users23:55:290
2604399320,4cyclictest2640-21users23:55:290
2604399320,3cyclictest9717-21users19:40:290
26044993126,3cyclictest25-21ksoftirqd/122:58:301
26044993126,3cyclictest25-21ksoftirqd/121:04:071
26044993125,4cyclictest25-21ksoftirqd/122:08:351
26044993125,4cyclictest25-21ksoftirqd/121:28:351
26044993125,4cyclictest25-21ksoftirqd/119:56:291
26044993125,4cyclictest25-21ksoftirqd/119:15:361
26044993125,3cyclictest25-21ksoftirqd/122:22:521
26044993124,4cyclictest25-21ksoftirqd/122:52:121
2604399319,19cyclictest5951-21expr21:50:160
2604399318,20cyclictest12098-21grep00:15:260
2604399317,21cyclictest7677-21cut23:00:190
26043993126,3cyclictest9-21ksoftirqd/022:28:440
26043993125,4cyclictest9-21ksoftirqd/023:46:060
26043993125,4cyclictest9-21ksoftirqd/019:51:500
2604399310,3cyclictest22235-21/usr/sbin/munin20:10:170
2604399310,2cyclictest19706-21cut23:25:160
26044993025,3cyclictest25-21ksoftirqd/121:34:041
26044993024,4cyclictest25-21ksoftirqd/123:45:111
26044993024,4cyclictest25-21ksoftirqd/121:37:221
26044993024,4cyclictest25-21ksoftirqd/120:34:231
26044993024,3cyclictest25-21ksoftirqd/120:43:541
26044993024,3cyclictest25-21ksoftirqd/100:27:551
26044993024,3cyclictest25-21ksoftirqd/100:27:551
26043993025,3cyclictest9-21ksoftirqd/019:38:180
2604399300,2cyclictest28584-21apt-get21:30:120
2604399297,19cyclictest12283-21timerandwakeup22:00:270
2604399297,19cyclictest12283-21timerandwakeup22:00:260
26044992823,3cyclictest25-21ksoftirqd/123:26:451
26044992823,3cyclictest25-21ksoftirqd/120:02:431
26044992823,3cyclictest25-21ksoftirqd/119:36:491
26044992823,3cyclictest25-21ksoftirqd/100:16:081
2604399286,20cyclictest32521-21fschecks_count22:45:160
26045992722,3cyclictest33-21ksoftirqd/223:44:452
26044992722,3cyclictest25-21ksoftirqd/120:53:411
26044992721,4cyclictest25-21ksoftirqd/123:08:041
26044992721,3cyclictest25-21ksoftirqd/121:42:461
26044992620,4cyclictest25-21ksoftirqd/123:52:051
26044992519,4cyclictest25-21ksoftirqd/100:10:391
26044992419,3cyclictest25-21ksoftirqd/120:55:131
26044992318,3cyclictest25-21ksoftirqd/100:03:181
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional