You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-17 - 09:39
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack5slot2.osadl.org (updated Wed Dec 17, 2025 00:44:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
204672203187,11sleep10-21swapper/119:07:321
184392186170,11sleep30-21swapper/319:05:093
205482178160,13sleep00-21swapper/019:08:360
205652173158,11sleep20-21swapper/219:08:492
219222470,0sleep00-21swapper/019:10:160
208429996,2cyclictest24049-21apt-get22:30:113
208429994,4cyclictest14295-21apt-get23:15:123
208429986,2cyclictest32037-21apt-get23:50:113
208429986,1cyclictest12182-21apt-get00:15:093
208429985,2cyclictest4758-21apt-get00:00:013
208429985,2cyclictest4195-21apt-get22:55:113
208429985,2cyclictest1293-21idleruntime-cro22:50:013
208429983,3cyclictest2616-21smartctl21:45:153
208289981,3cyclictest4323-21apt-get00:00:000
208429975,2cyclictest26672-21apt-get19:20:113
208429975,2cyclictest26672-21apt-get19:20:113
208429975,2cyclictest26344-21munin-run21:30:023
208429975,2cyclictest20948-21apt-get19:10:113
208429975,2cyclictest19617-21apt-get00:30:123
208429975,2cyclictest0-21swapper/319:15:113
208429975,1cyclictest24339-21apt-get20:20:023
208429974,3cyclictest4327-21ls00:00:003
208429974,2cyclictest9954-21perl19:50:143
208429974,2cyclictest9404-21tr20:55:133
208429974,2cyclictest7494-21tr00:05:123
208429974,2cyclictest5046-21fschecks_time19:40:143
208429974,2cyclictest3128-21ntp_states19:35:203
208429974,2cyclictest31249-21dump-pmu-power22:45:013
208429974,2cyclictest29680-21/usr/sbin/munin19:25:143
208429974,2cyclictest27441-21awk22:35:153
208429974,2cyclictest25868-21/usr/sbin/munin23:35:163
208429974,2cyclictest22985-21cut20:15:193
208429974,2cyclictest19103-21apt-get22:20:133
208429974,2cyclictest18471-21grep21:10:213
208429974,2cyclictest17972-21cat20:05:173
208429974,2cyclictest14880-21perl22:10:143
208429974,2cyclictest13045-21/usr/sbin/munin19:55:163
208429973,4cyclictest23609-21python00:35:203
208429973,3cyclictest235052sleep322:26:103
208429973,3cyclictest0-21swapper/300:10:123
208429973,1cyclictest12246-21df21:00:143
208429972,3cyclictest2662-21chrt20:40:173
208289971,3cyclictest13981-21perf21:05:020
208429965,1cyclictest29298-21cpuspeed21:35:143
208429965,1cyclictest27099-21apt-get23:40:113
208429965,1cyclictest19182-21apt-get20:10:133
208429965,1cyclictest16785-21apt-get23:20:113
208429965,1cyclictest16610-21apt-get22:15:113
208429964,2cyclictest8329-21wc20:50:203
208429964,2cyclictest7522-21grep21:55:153
208429964,2cyclictest663-21cat21:40:203
208429964,2cyclictest4693-21expr20:45:113
208429964,2cyclictest31980-21/usr/sbin/munin19:30:113
208429964,2cyclictest30810-21ntpq23:45:173
208429964,2cyclictest29318-21wget20:30:113
208429964,2cyclictest27721-21/usr/sbin/munin21:30:183
208429964,2cyclictest27541-21tune2fs20:25:133
208429964,2cyclictest22204-21wc23:30:133
208429964,2cyclictest21376-21systemctl21:20:013
208429964,2cyclictest19297-21/usr/sbin/munin23:25:113
208429964,2cyclictest15206-21diskstats00:20:133
208429964,2cyclictest0-21swapper/323:00:123
208429964,2cyclictest0-21swapper/321:20:123
208429964,1cyclictest17147-21apt-get00:25:113
208429964,1cyclictest0-21swapper/322:50:113
208429963,3cyclictest14743-21expr20:00:123
208429963,2cyclictest91492sleep323:05:103
208429963,2cyclictest6802-21seq19:45:023
208429963,2cyclictest31873-21/usr/sbin/munin20:35:103
208429963,2cyclictest14803-21fschecks_count21:05:133
208429963,2cyclictest11620-21seq23:10:113
208429962,4cyclictest0-21swapper/321:50:133
208429960,1cyclictest9721-21df22:00:133
208379960,5cyclictest11486-21munin-run21:00:012
208339961,2cyclictest0-21swapper/122:25:121
208339960,5cyclictest0-21swapper/123:55:111
208339960,5cyclictest0-21swapper/120:30:111
208289960,3cyclictest21446-21perf20:15:000
208429953,2cyclictest11679-21/usr/sbin/munin22:05:133
208379951,1cyclictest0-21swapper/220:20:122
208379950,5cyclictest0-21swapper/200:25:112
208379950,4cyclictest24591-21apt-get23:35:012
208339952,3cyclictest0-21swapper/122:10:111
208339950,5cyclictest0-21swapper/123:05:111
208339950,5cyclictest0-21swapper/121:45:181
208339950,4cyclictest9852sleep122:46:181
208339950,4cyclictest985-21chrt21:40:411
208339950,4cyclictest9709-21chrt00:10:081
208339950,4cyclictest9148-21chrt00:05:571
208339950,4cyclictest86922sleep119:45:351
208339950,4cyclictest8604-21chrt21:55:461
208339950,4cyclictest62022chrt22:57:151
208339950,4cyclictest3788-21chrt19:36:141
208339950,4cyclictest31438-21chrt23:45:301
208339950,4cyclictest31122-21chrt19:26:541
208339950,4cyclictest29037-21chrt23:41:221
208339950,4cyclictest28732-21chrt20:25:581
208339950,4cyclictest26528-21taskset23:36:101
208339950,4cyclictest260312sleep122:31:571
208339950,4cyclictest259612sleep121:25:231
208339950,4cyclictest25421-21chrt19:15:161
208339950,4cyclictest239522sleep100:35:221
208339950,4cyclictest21133-21chrt20:11:261
208339950,4cyclictest21011-21chrt22:20:571
208339950,4cyclictest20497-21chrt23:25:171
208339950,4cyclictest19193-21chrt00:27:471
208339950,4cyclictest18056-21chrt23:20:171
208339950,4cyclictest16596-21chrt00:21:091
208339950,4cyclictest16154-21chrt23:15:241
208339950,4cyclictest1493-21chrt23:50:431
208339950,4cyclictest14189-21chrt21:05:101
208339950,4cyclictest141042sleep100:16:091
208339950,4cyclictest1326-21chrt20:37:041
208339950,4cyclictest12930-21chrt21:00:171
208339950,4cyclictest12915-21chrt22:05:191
208339950,4cyclictest12643-21chrt23:10:161
208339950,4cyclictest110682sleep122:00:271
208339950,4cyclictest0-21swapper/119:30:101
208339950,4cyclictest0-21swapper/119:10:111
208289952,3cyclictest6682-21/usr/sbin/munin23:00:130
208289951,4cyclictest0-21swapper/023:50:110
208289950,5cyclictest12299-21/usr/sbin/munin19:55:130
208289950,5cyclictest0-21swapper/020:04:570
208379942,1cyclictest7115-21grep19:45:122
208379940,4cyclictest19133-21apt-get21:15:112
208379940,4cyclictest0-21swapper/221:25:122
208379940,4cyclictest0-21swapper/221:05:102
208379940,3cyclictest7767-21df_inode00:05:132
208379940,3cyclictest338-21ntp_states21:40:182
208379940,3cyclictest23872-21latency_hist21:25:012
208379940,3cyclictest23181-21latency_hist19:15:012
208379940,3cyclictest17983-21ntp_states20:05:182
208339941,2cyclictest0-21swapper/123:30:121
208339941,2cyclictest0-21swapper/122:40:121
208339941,2cyclictest0-21swapper/121:35:131
208339941,2cyclictest0-21swapper/121:20:121
208339941,2cyclictest0-21swapper/119:55:101
208339941,2cyclictest0-21swapper/100:00:121
208339941,1cyclictest0-21swapper/123:00:131
208339940,4cyclictest61752sleep121:51:131
208339940,4cyclictest6152-21chrt20:45:191
208339940,4cyclictest4339-21taskset19:40:061
208339940,4cyclictest28569-21chrt19:20:491
208339940,4cyclictest28569-21chrt19:20:491
208339940,4cyclictest28406-21chrt22:35:451
208339940,4cyclictest26216-21chrt20:20:251
208339940,4cyclictest23664-21chrt20:17:091
208339940,4cyclictest21096-21chrt21:16:361
208339940,4cyclictest18679-21chrt20:06:441
208339940,4cyclictest18494-21chrt22:15:431
208339940,4cyclictest16649-21chrt21:10:021
208339940,4cyclictest11261-21chrt19:51:521
208339940,4cyclictest0-21swapper/122:50:111
208339940,4cyclictest0-21swapper/120:56:461
208339940,4cyclictest0-21swapper/120:50:131
208339940,4cyclictest0-21swapper/120:40:141
208339940,4cyclictest0-21swapper/120:03:361
208339940,4cyclictest0-21swapper/100:31:301
208339940,3cyclictest0-21swapper/121:30:131
208289944,0cyclictest0-21swapper/020:50:220
208289943,1cyclictest29140-21/usr/sbin/munin19:25:150
208289942,1cyclictest7240-21/usr/sbin/munin00:05:170
208289942,1cyclictest16661-21/usr/sbin/munin21:10:170
208289942,1cyclictest0-21swapper/023:15:120
208289941,3cyclictest0-21swapper/020:15:130
208289941,2cyclictest0-21swapper/019:15:120
208289940,4cyclictest22093-21apt-get00:35:110
208289940,4cyclictest21931-21/usr/sbin/munin23:30:200
208289940,4cyclictest1566-21aten2_r5power_e22:50:120
208289940,4cyclictest0-21swapper/023:35:390
208289940,4cyclictest0-21swapper/021:55:120
208289940,4cyclictest0-21swapper/021:49:190
208289940,4cyclictest0-21swapper/021:40:130
208289940,4cyclictest0-21swapper/019:35:140
208289940,3cyclictest7907-21memory19:45:170
208289940,3cyclictest24011-21date22:30:010
208289940,3cyclictest19826-21perl22:20:150
208289940,3cyclictest19379-21latency_hist00:30:000
208289940,3cyclictest17125-21df22:15:120
208289940,3cyclictest12561-21/usr/sbin/munin23:10:150
208289940,3cyclictest11673-21/usr/sbin/munin22:05:220
208289940,3cyclictest10245-21/usr/sbin/munin00:10:140
208289940,3cyclictest10119-21hddtemp_smartct19:50:140
208289940,2cyclictest29820-21expr21:35:150
208289940,1cyclictest4246-21/usr/sbin/munin21:50:170
208379933,0cyclictest31-21ksoftirqd/223:30:002
208379933,0cyclictest31-21ksoftirqd/200:35:002
208379932,1cyclictest7844-21tr23:00:172
208379932,1cyclictest774-21snmpd19:25:012
208379932,1cyclictest28088-21irqstats23:40:152
208379932,1cyclictest24181-21apt-get19:15:112
208379931,1cyclictest0-21swapper/222:50:112
208379931,1cyclictest0-21swapper/221:45:112
208379930,3cyclictest9821-21perl23:05:132
208379930,3cyclictest9288-21cut22:00:122
208379930,3cyclictest6982-21cpuspeed_turbos21:55:132
208379930,3cyclictest6618-21users00:00:212
208379930,3cyclictest32311-21grep19:30:132
208379930,3cyclictest32274-21tr23:50:112
208379930,3cyclictest29537-21diskstats22:40:132
208379930,3cyclictest27151-21expr19:20:132
208379930,3cyclictest27151-21expr19:20:122
208379930,3cyclictest19185-21taskset20:10:132
208379930,3cyclictest0-21swapper/223:55:122
208379930,3cyclictest0-21swapper/223:45:062
208379930,3cyclictest0-21swapper/223:25:112
208379930,3cyclictest0-21swapper/223:20:112
208379930,3cyclictest0-21swapper/223:15:012
208379930,3cyclictest0-21swapper/223:10:112
208379930,3cyclictest0-21swapper/222:55:022
208379930,3cyclictest0-21swapper/222:45:112
208379930,3cyclictest0-21swapper/222:35:082
208379930,3cyclictest0-21swapper/222:30:112
208379930,3cyclictest0-21swapper/222:25:092
208379930,3cyclictest0-21swapper/222:20:132
208379930,3cyclictest0-21swapper/222:15:172
208379930,3cyclictest0-21swapper/222:10:102
208379930,3cyclictest0-21swapper/222:05:102
208379930,3cyclictest0-21swapper/221:50:132
208379930,3cyclictest0-21swapper/221:35:132
208379930,3cyclictest0-21swapper/221:30:142
208379930,3cyclictest0-21swapper/221:10:132
208379930,3cyclictest0-21swapper/221:00:122
208379930,3cyclictest0-21swapper/220:50:092
208379930,3cyclictest0-21swapper/220:45:092
208379930,3cyclictest0-21swapper/220:40:142
208379930,3cyclictest0-21swapper/220:35:052
208379930,3cyclictest0-21swapper/220:30:052
208379930,3cyclictest0-21swapper/220:25:122
208379930,3cyclictest0-21swapper/220:15:082
208379930,3cyclictest0-21swapper/220:00:082
208379930,3cyclictest0-21swapper/219:55:102
208379930,3cyclictest0-21swapper/219:50:122
208379930,3cyclictest0-21swapper/219:40:122
208379930,3cyclictest0-21swapper/219:35:012
208379930,3cyclictest0-21swapper/200:30:122
208379930,3cyclictest0-21swapper/200:20:112
208379930,3cyclictest0-21swapper/200:15:092
208379930,3cyclictest0-21swapper/200:10:102
208289933,0cyclictest0-21swapper/022:45:130
208289933,0cyclictest0-21swapper/020:55:010
208289932,1cyclictest29564-21/usr/sbin/munin23:45:140
208289932,1cyclictest17474-21grep20:05:140
208289932,1cyclictest16051-21taskset21:05:230
208289932,1cyclictest15117-21awk22:10:150
208289931,1cyclictest0-21swapper/021:15:110
208289930,3cyclictest9156-21dpkg23:05:120
208289930,3cyclictest4694-21apt-config00:00:000
208289930,3cyclictest4579-21grep20:45:100
208289930,3cyclictest32290-21diskstats20:35:110
208289930,3cyclictest29700-21cat20:30:120
208289930,3cyclictest19923-21perl23:25:130
208289930,3cyclictest15509-21hddtemp_smartct00:20:140
208289930,3cyclictest0-21swapper/023:40:110
208289930,3cyclictest0-21swapper/023:20:110
208289930,3cyclictest0-21swapper/022:55:110
208289930,3cyclictest0-21swapper/022:40:110
208289930,3cyclictest0-21swapper/022:35:120
208289930,3cyclictest0-21swapper/022:30:110
208289930,3cyclictest0-21swapper/022:00:110
208289930,3cyclictest0-21swapper/021:25:120
208289930,3cyclictest0-21swapper/021:20:090
208289930,3cyclictest0-21swapper/020:40:180
208289930,3cyclictest0-21swapper/020:25:080
208289930,3cyclictest0-21swapper/020:20:010
208289930,3cyclictest0-21swapper/019:40:120
208289930,3cyclictest0-21swapper/019:30:070
208289930,3cyclictest0-21swapper/019:20:110
208289930,3cyclictest0-21swapper/019:20:110
208289930,3cyclictest0-21swapper/000:30:130
208289930,3cyclictest0-21swapper/000:15:060
208289930,0cyclictest0-21swapper/021:30:140
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional