You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-15 - 13:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack5slot2.osadl.org (updated Sat Nov 15, 2025 00:44:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
180032202185,11sleep10-21swapper/119:09:561
178812197181,11sleep30-21swapper/319:08:213
179922194176,13sleep00-21swapper/019:09:470
157952175158,12sleep20-21swapper/219:05:112
53872390,0sleep00-21swapper/021:37:390
30852260,0sleep30-21swapper/323:28:153
181859965,1cyclictest25733-21chrt00:30:432
181809961,2cyclictest0-21swapper/121:25:131
32047250,1sleep1211ktimersoftd/123:29:021
2349250,0sleep30-21swapper/319:40:153
181899955,0cyclictest0-21swapper/323:32:563
181899950,5cyclictest10866-21ntp_states22:45:183
181899950,5cyclictest0-21swapper/323:20:163
181899950,5cyclictest0-21swapper/323:00:123
181899950,5cyclictest0-21swapper/300:35:113
181899950,3cyclictest12977-21ssh21:41:093
181859955,0cyclictest0-21swapper/222:55:162
181859955,0cyclictest0-21swapper/221:47:282
181859955,0cyclictest0-21swapper/200:13:082
181859954,1cyclictest32381-21ssh23:12:352
181859950,5cyclictest0-21swapper/222:32:352
181859950,5cyclictest0-21swapper/221:35:322
181859950,4cyclictest24381-21ssh22:20:122
181859950,4cyclictest0-21swapper/220:50:122
181859950,4cyclictest0-21swapper/220:10:112
181859950,0cyclictest0-21swapper/222:03:112
181859950,0cyclictest0-21swapper/220:15:122
181809951,3cyclictest0-21swapper/120:15:111
181809951,2cyclictest0-21swapper/121:30:151
181809950,5cyclictest0-21swapper/123:14:081
181809950,5cyclictest0-21swapper/123:02:031
181809950,5cyclictest0-21swapper/121:16:341
181769955,0cyclictest0-21swapper/000:05:480
181769954,1cyclictest16559-21munin-run22:00:010
181769952,3cyclictest714-21snmpd20:45:190
181769951,4cyclictest23788-21munin-run19:20:000
181769950,5cyclictest23985-21/usr/sbin/munin20:25:210
181769950,5cyclictest0-21swapper/023:37:080
181769950,5cyclictest0-21swapper/023:26:480
181769950,5cyclictest0-21swapper/023:17:470
181769950,0cyclictest0-21swapper/023:04:590
181769950,0cyclictest0-21swapper/022:21:550
181769950,0cyclictest0-21swapper/000:04:210
14600250,0sleep20-21swapper/223:20:132
181899942,1cyclictest714-21snmpd22:31:533
181899941,3cyclictest714-21snmpd23:50:203
181899940,4cyclictest5925-21ntp_states22:10:183
181899940,4cyclictest3402-21apt-get00:20:123
181899940,4cyclictest32338-21df20:40:133
181899940,4cyclictest0-21swapper/323:55:123
181899940,4cyclictest0-21swapper/323:41:393
181899940,4cyclictest0-21swapper/322:35:133
181899940,4cyclictest0-21swapper/322:27:103
181899940,4cyclictest0-21swapper/322:05:123
181899940,4cyclictest0-21swapper/321:30:153
181899940,4cyclictest0-21swapper/321:20:173
181899940,4cyclictest0-21swapper/321:16:033
181899940,4cyclictest0-21swapper/320:30:113
181899940,4cyclictest0-21swapper/320:25:013
181899940,4cyclictest0-21swapper/320:00:123
181899940,4cyclictest0-21swapper/319:55:023
181899940,4cyclictest0-21swapper/319:50:113
181899940,4cyclictest0-21swapper/300:27:173
181899940,4cyclictest0-21swapper/300:10:123
181899940,3cyclictest31635-21latency_hist20:40:003
181899940,3cyclictest31493-21ssh22:40:033
181899940,3cyclictest31146-21sh22:23:193
181899940,3cyclictest29531-21/usr/sbin/munin21:50:213
181899940,3cyclictest29311-21/usr/sbin/munin22:55:163
181899940,3cyclictest29095-21df_inode00:00:133
181899940,3cyclictest28871-21date19:30:023
181899940,3cyclictest25904-21/usr/sbin/munin00:15:143
181899940,3cyclictest2484-21sh21:35:483
181899940,3cyclictest24751-21perl19:20:163
181899940,3cyclictest23677-21sh00:30:153
181899940,3cyclictest21703-21users21:45:243
181899940,3cyclictest21481-21cat20:20:013
181899940,3cyclictest20703-21cat19:15:013
181899940,3cyclictest20604-21awk20:15:203
181899940,3cyclictest20348-21rm23:06:133
181899940,3cyclictest19956-21df_inode22:50:143
181899940,3cyclictest17610-21sh23:37:553
181899940,3cyclictest17350-21ssh21:10:493
181899940,3cyclictest15574-21/usr/sbin/munin22:15:193
181899940,3cyclictest12213-21apt-get21:25:133
181899940,3cyclictest11771-21/usr/sbin/munin21:05:243
181899940,3cyclictest10164-21sh21:55:583
181899940,2cyclictest0-21swapper/322:00:123
181899940,1cyclictest6810-21/usr/sbin/munin20:55:173
181899940,1cyclictest28965-21/usr/sbin/munin19:30:183
181899940,1cyclictest1875-21/usr/sbin/munin20:45:173
181899940,1cyclictest17181-21which20:10:143
181859943,1cyclictest32602-21gltestperf20:40:152
181859943,1cyclictest19345-21sort23:55:142
181859942,1cyclictest28534-21ssh00:00:112
181859942,1cyclictest15052-21ssh21:25:512
181859941,3cyclictest714-21snmpd23:16:392
181859941,3cyclictest14803-21awk20:05:192
181859941,2cyclictest0-21swapper/223:30:132
181859941,2cyclictest0-21swapper/221:30:152
181859941,1cyclictest0-21swapper/219:15:122
181859940,4cyclictest2169-21ssh21:20:112
181859940,4cyclictest0-21swapper/223:51:522
181859940,4cyclictest0-21swapper/223:40:132
181859940,4cyclictest0-21swapper/223:35:502
181859940,4cyclictest0-21swapper/223:25:142
181859940,4cyclictest0-21swapper/223:05:012
181859940,4cyclictest0-21swapper/223:00:122
181859940,4cyclictest0-21swapper/222:36:032
181859940,4cyclictest0-21swapper/222:15:152
181859940,4cyclictest0-21swapper/221:50:122
181859940,4cyclictest0-21swapper/220:55:122
181859940,4cyclictest0-21swapper/219:25:112
181859940,4cyclictest0-21swapper/200:35:062
181859940,4cyclictest0-21swapper/200:25:132
181859940,4cyclictest0-21swapper/200:24:042
181859940,4cyclictest0-21swapper/200:15:012
181859940,4cyclictest0-21swapper/200:05:112
181859940,3cyclictest9041-21apt-config22:45:012
181859940,3cyclictest6805-21ssh21:55:032
181859940,3cyclictest4479-21rm22:10:102
181859940,3cyclictest4294-21cat20:50:002
181859940,3cyclictest314212sleep219:35:032
181859940,3cyclictest30310-21ssh21:17:392
181859940,3cyclictest25080-21memory20:25:172
181859940,3cyclictest18296-21/usr/sbin/munin19:10:202
181859940,3cyclictest1215-21ssh22:08:142
181859940,3cyclictest0-21swapper/222:25:132
181859940,3cyclictest0-21swapper/221:40:122
181859940,3cyclictest0-21swapper/221:10:022
181859940,3cyclictest0-21swapper/220:30:122
181859940,1cyclictest32461-21irqstats23:45:172
181859940,1cyclictest11524-21grep20:00:132
181809944,0cyclictest0-21swapper/123:45:251
181809944,0cyclictest0-21swapper/122:37:021
181809944,0cyclictest0-21swapper/120:51:491
181809944,0cyclictest0-21swapper/100:28:461
181809942,1cyclictest0-21swapper/120:00:121
181809941,2cyclictest0-21swapper/123:50:111
181809941,2cyclictest0-21swapper/122:30:141
181809941,2cyclictest0-21swapper/122:25:121
181809941,2cyclictest0-21swapper/120:55:121
181809941,2cyclictest0-21swapper/120:35:131
181809941,1cyclictest0-21swapper/121:05:161
181809941,1cyclictest0-21swapper/120:10:121
181809940,4cyclictest0-21swapper/122:46:551
181809940,4cyclictest0-21swapper/121:48:001
181809940,4cyclictest0-21swapper/100:15:321
181809940,2cyclictest0-21swapper/123:40:131
181809940,0cyclictest0-21swapper/121:22:321
181769944,0cyclictest0-21swapper/022:41:330
181769944,0cyclictest0-21swapper/022:02:160
181769944,0cyclictest0-21swapper/021:12:130
181769944,0cyclictest0-21swapper/000:23:240
181769943,1cyclictest6978-21diskstats19:50:140
181769940,4cyclictest26994-21ssh21:48:450
181769940,4cyclictest26348-21ssh23:42:080
181769940,4cyclictest14010-21diskmemload23:30:020
181769940,4cyclictest14010-21diskmemload00:36:080
181769940,4cyclictest0-21swapper/023:20:120
181769940,4cyclictest0-21swapper/022:55:500
181769940,4cyclictest0-21swapper/022:48:170
181769940,4cyclictest0-21swapper/022:25:120
181769940,4cyclictest0-21swapper/021:25:130
181769940,4cyclictest0-21swapper/020:05:150
181769940,4cyclictest0-21swapper/019:35:120
181769940,3cyclictest7538-21sh22:10:590
181769940,3cyclictest27025-21ssh22:05:130
181769940,3cyclictest26276-21munin-run19:25:010
181769940,3cyclictest25619-21ssh00:15:010
181769940,3cyclictest20544-21ssh00:12:030
181769940,3cyclictest20115-21perl22:50:150
181769940,3cyclictest15402-21hddtemp_smartct22:15:180
181769940,3cyclictest10805-21grep23:50:200
181769940,3cyclictest0-21swapper/021:21:510
181769940,1cyclictest21067-21latency_hist20:20:010
181769940,0cyclictest0-21swapper/023:49:390
181769940,0cyclictest0-21swapper/021:40:350
3835230,0sleep10-21swapper/122:09:561
23825230,0sleep10-21swapper/122:19:591
181899932,1cyclictest714-21snmpd20:50:113
181899931,2cyclictest24793-1kworker/3:0H00:05:043
181899930,3cyclictest9818-21expr21:00:143
181899930,3cyclictest26841-21apt-get23:10:133
181899930,3cyclictest0-21swapper/323:45:123
181899930,3cyclictest0-21swapper/320:05:133
181899930,3cyclictest0-21swapper/319:45:053
181899930,3cyclictest0-21swapper/319:15:013
181899930,1cyclictest4014-21dpkg23:15:013
181899930,1cyclictest31956-21df19:35:133
181859930,3cyclictest0-21swapper/222:50:122
181859930,3cyclictest0-21swapper/222:40:142
181859930,3cyclictest0-21swapper/221:05:022
181859930,3cyclictest0-21swapper/221:00:132
181859930,3cyclictest0-21swapper/220:35:132
181859930,3cyclictest0-21swapper/220:20:122
181859930,3cyclictest0-21swapper/219:55:122
181859930,3cyclictest0-21swapper/219:50:112
181859930,3cyclictest0-21swapper/219:45:152
181859930,3cyclictest0-21swapper/219:40:132
181859930,3cyclictest0-21swapper/219:30:122
181859930,3cyclictest0-21swapper/219:20:142
181809933,0cyclictest0-21swapper/123:58:401
181809933,0cyclictest0-21swapper/119:30:291
181809931,1cyclictest0-21swapper/123:35:141
181809931,1cyclictest0-21swapper/123:30:131
181809931,1cyclictest0-21swapper/123:20:121
181809931,1cyclictest0-21swapper/123:15:131
181809931,1cyclictest0-21swapper/123:05:011
181809931,1cyclictest0-21swapper/122:55:141
181809931,1cyclictest0-21swapper/122:50:121
181809931,1cyclictest0-21swapper/121:55:121
181809931,1cyclictest0-21swapper/121:50:121
181809931,1cyclictest0-21swapper/121:10:141
181809931,1cyclictest0-21swapper/121:00:121
181809931,1cyclictest0-21swapper/120:45:161
181809931,1cyclictest0-21swapper/120:30:011
181809931,1cyclictest0-21swapper/120:25:121
181809931,1cyclictest0-21swapper/120:05:151
181809931,1cyclictest0-21swapper/119:45:151
181809931,1cyclictest0-21swapper/119:35:121
181809931,1cyclictest0-21swapper/119:20:141
181809931,1cyclictest0-21swapper/119:15:121
181809931,1cyclictest0-21swapper/100:35:111
181809931,1cyclictest0-21swapper/100:30:121
181809931,1cyclictest0-21swapper/100:20:121
181809931,1cyclictest0-21swapper/100:10:121
181809930,2cyclictest0-21swapper/122:40:141
181809930,2cyclictest0-21swapper/122:20:111
181809930,2cyclictest0-21swapper/122:00:121
181809930,2cyclictest0-21swapper/119:10:131
181809930,1cyclictest0-21swapper/121:40:121
181769933,0cyclictest32708-21kworker/0:221:15:010
181769933,0cyclictest32708-21kworker/0:220:10:090
181769933,0cyclictest32708-21kworker/0:219:40:050
181769932,1cyclictest714-21snmpd22:35:050
181769932,1cyclictest714-21snmpd21:05:050
181769932,1cyclictest714-21snmpd19:31:280
181769932,1cyclictest515-21in:imuxsock00:30:000
181769932,1cyclictest26958-21grep20:30:130
181769931,2cyclictest29291-21cpuspeed20:35:150
181769930,3cyclictest7557-21gltestperf20:55:140
181769930,3cyclictest31370-21apt-get20:40:000
181769930,3cyclictest22508-21irqstats20:20:160
181769930,3cyclictest16976-21rm23:05:150
181769930,3cyclictest14010-21diskmemload23:55:090
181769930,3cyclictest14010-21diskmemload21:30:050
181769930,3cyclictest129742sleep000:25:010
181769930,3cyclictest12283-21basename20:00:160
181769930,3cyclictest0-21swapper/023:10:130
181769930,3cyclictest0-21swapper/022:30:110
181769930,3cyclictest0-21swapper/021:50:120
181769930,3cyclictest0-21swapper/021:00:120
181769930,3cyclictest0-21swapper/020:50:020
181769930,3cyclictest0-21swapper/019:55:120
181769930,3cyclictest0-21swapper/019:45:150
181769930,3cyclictest0-21swapper/019:25:120
181769930,2cyclictest18284-21chrt19:10:020
181809921,1cyclictest0-21swapper/122:10:121
181809921,1cyclictest0-21swapper/120:20:011
181809921,1cyclictest0-21swapper/119:40:121
181809921,1cyclictest0-21swapper/119:25:121
181809921,1cyclictest0-21swapper/100:05:131
181809920,2cyclictest10839-21taskset19:56:061
181809920,1cyclictest28435-21chrt00:00:081
181809920,1cyclictest0-21swapper/121:35:141
181809920,1cyclictest0-21swapper/120:40:131
181809920,1cyclictest0-21swapper/119:50:111
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional