You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-02-05 - 12:46

x86 Intel Core i5-6440EQ @2700 MHz, Linux 4.9.47-rt37 (Profile)

Latency plot of system in rack #5, slot #2
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the alll highest latencies:
System rack5slot2.osadl.org (updated Sun Feb 05, 2023 00:44:42)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
119552188171,12sleep30-21swapper/319:09:563
117222182166,12sleep00-21swapper/019:06:570
118362173155,13sleep10-21swapper/119:08:211
11736210285,12sleep20-21swapper/219:07:062
127042530,0sleep10-21swapper/123:22:251
178132490,0sleep00-21swapper/022:10:240
161042490,0sleep10-21swapper/121:50:591
202342470,0sleep10-21swapper/121:16:281
46852430,0sleep30-21swapper/322:59:313
121449981,3cyclictest25373-21munin-run19:35:010
121539975,1cyclictest19439-21ssh00:03:582
121449970,6cyclictest0-21swapper/020:45:110
121579964,1cyclictest15601-21sh22:10:063
121579960,4cyclictest18427-21cron23:49:553
121449960,1cyclictest5096-21expr21:45:150
6774250,0sleep10-21swapper/120:00:171
121579955,0cyclictest0-21swapper/321:35:203
121579950,4cyclictest13003-21apt-get20:15:113
121579950,0cyclictest0-21swapper/300:26:523
121539955,0cyclictest7598-21diskmemload21:42:072
121539955,0cyclictest0-21swapper/222:41:552
121539955,0cyclictest0-21swapper/222:33:032
121539955,0cyclictest0-21swapper/200:20:252
121539950,5cyclictest0-21swapper/223:52:112
121539950,5cyclictest0-21swapper/222:21:412
121539950,5cyclictest0-21swapper/200:39:112
121539950,4cyclictest0-21swapper/223:45:102
121539950,4cyclictest0-21swapper/221:20:122
121539950,4cyclictest0-21swapper/219:30:132
121539950,4cyclictest0-21swapper/219:15:112
121489951,2cyclictest0-21swapper/123:10:111
121489951,2cyclictest0-21swapper/121:30:141
121489951,2cyclictest0-21swapper/120:05:181
121489951,2cyclictest0-21swapper/119:45:111
121489951,2cyclictest0-21swapper/100:00:121
121489950,5cyclictest0-21swapper/122:22:541
121489950,5cyclictest0-21swapper/100:35:191
121489950,5cyclictest0-21swapper/100:17:161
121449955,0cyclictest7598-21diskmemload22:24:000
121449955,0cyclictest0-21swapper/023:05:540
121449955,0cyclictest0-21swapper/022:35:210
121449955,0cyclictest0-21swapper/022:35:210
121449950,5cyclictest0-21swapper/023:55:150
121449950,5cyclictest0-21swapper/023:02:420
121449950,5cyclictest0-21swapper/021:21:530
121449950,5cyclictest0-21swapper/021:05:000
121449950,5cyclictest0-21swapper/020:24:580
121449950,5cyclictest0-21swapper/020:05:020
121449950,5cyclictest0-21swapper/000:13:160
121449950,4cyclictest0-21swapper/022:05:170
121449950,3cyclictest2923-21ntp_states23:35:190
121449950,0cyclictest0-21swapper/023:30:400
121579944,0cyclictest0-21swapper/322:45:013
121579942,1cyclictest740-21snmpd23:34:053
121579942,1cyclictest740-21snmpd20:50:573
121579942,1cyclictest740-21snmpd00:21:413
121579942,1cyclictest18386-21ssh21:52:423
121579940,4cyclictest7716-21rm23:38:303
121579940,4cyclictest23000-21ssh21:18:323
121579940,4cyclictest0-21swapper/323:26:053
121579940,4cyclictest0-21swapper/323:10:113
121579940,4cyclictest0-21swapper/322:41:153
121579940,4cyclictest0-21swapper/322:00:153
121579940,4cyclictest0-21swapper/319:30:123
121579940,4cyclictest0-21swapper/300:30:133
121579940,4cyclictest0-21swapper/300:08:503
121579940,3cyclictest9246-21memory23:20:183
121579940,3cyclictest9051-21ssh21:10:173
121579940,3cyclictest7710-21ssh22:05:193
121579940,3cyclictest6854-21ntp_states20:00:193
121579940,3cyclictest6376-21df_inode23:00:133
121579940,3cyclictest5471-21/usr/sbin/munin21:05:133
121579940,3cyclictest3919-21hddtemp_smartct19:55:153
121579940,3cyclictest3425-21sort21:00:163
121579940,3cyclictest2868-21cat19:55:023
121579940,3cyclictest24939-21df_inode22:15:143
121579940,3cyclictest22723-21perl21:55:163
121579940,3cyclictest21017-21rm23:08:483
121579940,3cyclictest18507-21/usr/sbin/munin19:20:143
121579940,3cyclictest15493-21taskset20:20:063
121579940,3cyclictest15102-21memory19:15:013
121579940,3cyclictest11803-21ntp_states20:10:223
121579940,3cyclictest11396-21/usr/sbin/munin22:25:213
121579940,3cyclictest10386-21sort21:30:023
121579940,3cyclictest0-21swapper/321:25:123
121579940,3cyclictest0-21swapper/320:40:123
121579940,2cyclictest29208-21ssh22:35:243
121579940,2cyclictest29208-21ssh22:35:243
121579940,1cyclictest30782-21gltestperf00:10:153
121579940,1cyclictest17970-21/usr/sbin/munin20:25:113
121579940,0cyclictest0-21swapper/323:57:033
121579940,0cyclictest0-21swapper/300:16:413
121539944,0cyclictest0-21swapper/223:56:072
121539944,0cyclictest0-21swapper/223:37:562
121539944,0cyclictest0-21swapper/222:00:362
121539944,0cyclictest0-21swapper/200:10:142
121539943,1cyclictest7129-21sed21:05:232
121539942,2cyclictest15351-21ssh22:46:092
121539942,1cyclictest24949-21diskstats22:15:142
121539941,2cyclictest0-21swapper/222:25:132
121539941,2cyclictest0-21swapper/221:55:122
121539941,2cyclictest0-21swapper/221:35:132
121539941,2cyclictest0-21swapper/200:05:132
121539941,1cyclictest0-21swapper/220:55:112
121539940,4cyclictest31214-21ssh23:14:562
121539940,4cyclictest13650-21ssh23:04:462
121539940,4cyclictest0-21swapper/223:15:142
121539940,4cyclictest0-21swapper/222:55:112
121539940,4cyclictest0-21swapper/222:37:062
121539940,4cyclictest0-21swapper/222:37:062
121539940,4cyclictest0-21swapper/221:45:132
121539940,4cyclictest0-21swapper/221:15:142
121539940,4cyclictest0-21swapper/221:10:142
121539940,4cyclictest0-21swapper/221:00:132
121539940,4cyclictest0-21swapper/220:30:132
121539940,3cyclictest9689-21ssh00:16:292
121539940,3cyclictest7914-21ssh23:20:052
121539940,3cyclictest6835-21ssh00:34:062
121539940,3cyclictest4108-21/usr/sbin/munin19:55:162
121539940,3cyclictest3573-21ssh21:25:212
121539940,3cyclictest27777-21wc20:45:002
121539940,3cyclictest25287-21rm22:52:082
121539940,3cyclictest24184-21ntp_states20:35:182
121539940,3cyclictest18657-21perl19:20:162
121539940,3cyclictest17245-21df23:25:142
121539940,3cyclictest16596-21memory20:20:202
121539940,3cyclictest15839-21ssh22:10:132
121539940,3cyclictest14280-21ssh23:05:042
121539940,3cyclictest0-21swapper/220:50:122
121539940,1cyclictest13286-21cut21:50:132
121539940,0cyclictest0-21swapper/223:41:092
121539940,0cyclictest0-21swapper/221:30:022
121539940,0cyclictest0-21swapper/200:26:402
121489944,0cyclictest0-21swapper/123:56:011
121489944,0cyclictest0-21swapper/123:03:211
121489944,0cyclictest0-21swapper/122:44:001
121489944,0cyclictest0-21swapper/122:36:441
121489944,0cyclictest0-21swapper/122:36:431
121489944,0cyclictest0-21swapper/122:00:561
121489944,0cyclictest0-21swapper/100:27:271
121489944,0cyclictest0-21swapper/100:05:291
121489943,1cyclictest0-21swapper/122:14:461
121489941,2cyclictest0-21swapper/123:45:001
121489941,2cyclictest0-21swapper/123:05:111
121489941,2cyclictest0-21swapper/122:55:121
121489941,2cyclictest0-21swapper/122:45:111
121489941,2cyclictest0-21swapper/122:30:131
121489941,2cyclictest0-21swapper/122:15:111
121489941,2cyclictest0-21swapper/122:05:171
121489941,2cyclictest0-21swapper/121:40:121
121489941,2cyclictest0-21swapper/120:55:111
121489941,2cyclictest0-21swapper/120:40:131
121489941,2cyclictest0-21swapper/120:15:111
121489941,2cyclictest0-21swapper/119:50:121
121489941,2cyclictest0-21swapper/119:35:161
121489941,2cyclictest0-21swapper/119:20:131
121489941,2cyclictest0-21swapper/119:10:121
121489940,4cyclictest0-21swapper/122:26:591
121489940,4cyclictest0-21swapper/121:23:511
121489940,4cyclictest0-21swapper/121:06:051
121489940,4cyclictest0-21swapper/100:13:211
121489940,3cyclictest0-21swapper/121:10:131
121489940,0cyclictest0-21swapper/120:45:071
121449944,0cyclictest0-21swapper/023:29:030
121449944,0cyclictest0-21swapper/023:10:430
121449942,1cyclictest740-21snmpd22:50:160
121449942,1cyclictest740-21snmpd00:35:020
121449942,1cyclictest0-21swapper/020:55:190
121449941,3cyclictest740-21snmpd22:59:370
121449940,4cyclictest8424-21cstates23:20:130
121449940,4cyclictest17973-21apt-get20:25:110
121449940,4cyclictest1787-21ssh21:25:120
121449940,4cyclictest0-21swapper/023:45:100
121449940,4cyclictest0-21swapper/023:40:120
121449940,4cyclictest0-21swapper/022:15:110
121449940,4cyclictest0-21swapper/021:41:240
121449940,4cyclictest0-21swapper/021:15:140
121449940,4cyclictest0-21swapper/019:10:200
121449940,4cyclictest0-21swapper/000:30:130
121449940,3cyclictest32404-21users19:45:220
121449940,3cyclictest31809-21apt23:15:130
121449940,3cyclictest31351-21diskstats22:00:170
121449940,3cyclictest273092sleep023:50:010
121449940,3cyclictest24001-21memory20:35:180
121449940,3cyclictest18510-21df19:20:160
121449940,3cyclictest16019-21df_inode19:15:150
121449940,3cyclictest13403-21sh22:26:350
121449940,3cyclictest0-21swapper/020:10:150
121449940,3cyclictest0-21swapper/019:50:120
121449940,0cyclictest31799-21perf00:30:000
121449940,0cyclictest0-21swapper/021:33:570
121579932,1cyclictest740-21snmpd20:55:093
121579932,1cyclictest740-21snmpd19:40:033
121579932,1cyclictest740-21snmpd19:35:093
121579931,1cyclictest0-21swapper/322:50:123
121579930,3cyclictest8492-21apt00:35:113
121579930,3cyclictest32381-21df_inode23:15:153
121579930,3cyclictest28646-21grep20:45:153
121579930,3cyclictest25356-21ssh21:20:063
121579930,3cyclictest0-21swapper/323:50:113
121579930,3cyclictest0-21swapper/323:40:123
121579930,3cyclictest0-21swapper/322:20:023
121579930,3cyclictest0-21swapper/320:35:123
121579930,3cyclictest0-21swapper/320:30:113
121579930,3cyclictest0-21swapper/320:05:163
121579930,3cyclictest0-21swapper/319:45:123
121579930,3cyclictest0-21swapper/319:25:013
121579930,3cyclictest0-21swapper/300:00:003
121579930,2cyclictest18241-21ssh22:30:033
121579930,1cyclictest4537-21ssh21:45:123
121579930,1cyclictest27995-21ssh21:40:023
121579930,1cyclictest12785-21diskstats19:10:143
121539932,1cyclictest13279-21cat20:15:122
121539930,3cyclictest0-21swapper/223:30:122
121539930,3cyclictest0-21swapper/222:05:172
121539930,3cyclictest0-21swapper/220:45:122
121539930,3cyclictest0-21swapper/220:25:112
121539930,3cyclictest0-21swapper/220:10:142
121539930,3cyclictest0-21swapper/220:05:172
121539930,3cyclictest0-21swapper/220:00:112
121539930,3cyclictest0-21swapper/219:50:112
121539930,3cyclictest0-21swapper/219:45:052
121539930,3cyclictest0-21swapper/219:40:012
121539930,3cyclictest0-21swapper/219:35:162
121539930,3cyclictest0-21swapper/219:10:122
121539930,2cyclictest20585-21dpkg19:25:012
121489931,2cyclictest0-21swapper/100:30:131
121489931,1cyclictest0-21swapper/123:45:101
121489931,1cyclictest0-21swapper/123:35:121
121489931,1cyclictest0-21swapper/123:30:121
121489931,1cyclictest0-21swapper/123:15:131
121489931,1cyclictest0-21swapper/121:35:121
121489931,1cyclictest0-21swapper/121:25:121
121489931,1cyclictest0-21swapper/121:00:131
121489931,1cyclictest0-21swapper/119:40:121
121489931,1cyclictest0-21swapper/119:25:121
121489931,1cyclictest0-21swapper/100:20:111
121489930,3cyclictest0-21swapper/120:34:381
121489930,2cyclictest0-21swapper/123:50:111
121489930,2cyclictest0-21swapper/123:25:121
121489930,2cyclictest0-21swapper/121:45:141
121489930,2cyclictest0-21swapper/120:50:131
121489930,2cyclictest0-21swapper/120:35:111
121489930,2cyclictest0-21swapper/120:20:131
121449932,1cyclictest740-21snmpd22:45:010
121449931,2cyclictest25468-21hostname20:40:130
121449931,1cyclictest740-21snmpd00:15:070
121449930,3cyclictest3429-21ssh22:40:040
121449930,3cyclictest25719-21cpu19:35:170
121449930,3cyclictest23697-21python21:55:230
121449930,3cyclictest19439-21ssh21:35:120
121449930,3cyclictest13981-21perl21:50:170
121449930,3cyclictest0-21swapper/022:30:100
121449930,3cyclictest0-21swapper/021:10:130
121449930,3cyclictest0-21swapper/021:05:050
121449930,3cyclictest0-21swapper/020:50:120
121449930,3cyclictest0-21swapper/020:30:110
121449930,3cyclictest0-21swapper/020:15:110
121449930,3cyclictest0-21swapper/020:00:110
121449930,3cyclictest0-21swapper/019:55:110
121449930,3cyclictest0-21swapper/019:40:110
121449930,3cyclictest0-21swapper/019:25:050
121449930,3cyclictest0-21swapper/000:20:110
121449930,3cyclictest0-21swapper/000:05:120
121449930,3cyclictest0-21swapper/000:00:000
121489921,1cyclictest0-21swapper/122:50:121
121489921,1cyclictest0-21swapper/120:25:111
121489920,1cyclictest0-21swapper/121:55:121
121489920,1cyclictest0-21swapper/120:10:141
121489920,1cyclictest0-21swapper/119:55:111
121489920,1cyclictest0-21swapper/119:30:121
121489920,1cyclictest0-21swapper/119:15:111
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional