You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-03-21 - 05:21

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #0, slot #2

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  

x86 Intel Core i9-10900K @3700 MHz, Linux 5.15.49-rt47 (Profile)

Latency plot of shadow in rack #0, slot #2
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot2s.osadl.org (updated Tue Mar 21, 2023 00:44:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
3914572244212,25sleep50-21swapper/519:08:585
3914272243207,12sleep80-21swapper/819:08:398
3912092241224,11sleep30-21swapper/319:06:453
3911802236217,13sleep90-21swapper/919:06:319
3914512235219,11sleep10-21swapper/119:08:541
3911022235216,13sleep70-21swapper/719:05:497
3910832234216,12sleep60-21swapper/619:05:386
3914872233216,11sleep20-21swapper/219:09:152
3913122231212,13sleep40-21swapper/419:07:364
3911102231213,12sleep00-21swapper/019:05:520
391848992525,0cyclictest0-21swapper/723:59:597
391856992220,2cyclictest528350-21ntpq23:05:249
39184899220,22cyclictest0-21swapper/700:12:597
39182899220,22cyclictest0-21swapper/221:17:002
39185299210,0cyclictest0-21swapper/823:05:588
39184499210,21cyclictest0-21swapper/622:14:006
39184499210,21cyclictest0-21swapper/622:14:006
391840992121,0cyclictest521rcuc/519:30:185
39183799210,21cyclictest0-21swapper/420:41:004
391833992121,0cyclictest0-21swapper/319:21:593
391828992121,0cyclictest0-21swapper/219:22:002
39182899210,0cyclictest0-21swapper/220:15:002
391856992020,0cyclictest0-21swapper/920:04:009
39185699200,20cyclictest0-21swapper/921:10:169
39185699200,20cyclictest0-21swapper/900:15:199
39185699200,19cyclictest548433-21ntpq23:40:239
39185699200,0cyclictest0-21swapper/922:55:219
39185699200,0cyclictest0-21swapper/922:40:249
39185699200,0cyclictest0-21swapper/922:25:219
39185699200,0cyclictest0-21swapper/919:10:559
391852992020,0cyclictest0-21swapper/821:25:198
391852992020,0cyclictest0-21swapper/820:30:188
39185299200,20cyclictest462608-21ntp_states21:10:188
39185299200,0cyclictest0-21swapper/819:15:188
39185299200,0cyclictest0-21swapper/819:10:258
391844992020,0cyclictest0-21swapper/622:39:596
391833992020,0cyclictest0-21swapper/300:12:593
39182899200,0cyclictest0-21swapper/220:41:002
39182499200,20cyclictest0-21swapper/100:16:591
391856991919,0cyclictest431179-21ntpq20:15:209
391856991919,0cyclictest0-21swapper/923:25:239
391856991919,0cyclictest0-21swapper/923:20:229
391856991919,0cyclictest0-21swapper/923:10:189
391856991919,0cyclictest0-21swapper/922:50:219
391856991919,0cyclictest0-21swapper/922:35:259
391856991919,0cyclictest0-21swapper/922:30:269
391856991919,0cyclictest0-21swapper/921:30:209
391856991919,0cyclictest0-21swapper/921:20:209
391856991919,0cyclictest0-21swapper/921:05:239
391856991919,0cyclictest0-21swapper/920:50:169
391856991919,0cyclictest0-21swapper/920:30:179
391856991919,0cyclictest0-21swapper/919:55:199
39185699190,19cyclictest0-21swapper/920:35:219
39185699190,0cyclictest0-21swapper/920:10:199
39185699190,0cyclictest0-21swapper/920:05:259
39185699190,0cyclictest0-21swapper/900:30:209
391852991919,0cyclictest0-21swapper/823:40:238
391852991919,0cyclictest0-21swapper/822:55:218
391852991919,0cyclictest0-21swapper/822:40:258
391852991919,0cyclictest0-21swapper/821:40:228
391852991919,0cyclictest0-21swapper/820:45:208
391852991919,0cyclictest0-21swapper/820:20:218
391852991919,0cyclictest0-21swapper/800:20:248
39185299190,19cyclictest408312-21ntpq19:35:218
39185299190,0cyclictest0-21swapper/820:15:228
39184899190,19cyclictest0-21swapper/719:30:187
39184499190,1cyclictest557003-21ntpq23:55:206
39184499190,19cyclictest562785-21ntpq00:05:276
391840991918,1cyclictest0-21swapper/521:15:225
391837991918,1cyclictest482554-21ntpq21:45:194
39183799190,1cyclictest534079-21ntp_states23:15:204
39183799190,19cyclictest496905-21ntp_states22:10:224
39183799190,19cyclictest496905-21ntp_states22:10:224
39183799190,19cyclictest425422-21ntpq20:05:254
39183799190,19cyclictest393679-21timerandwakeup19:10:214
39183799190,18cyclictest485417-21ntpq21:50:204
391833991919,0cyclictest0-21swapper/322:40:593
391833991919,0cyclictest0-21swapper/321:27:583
39183399190,19cyclictest511207-21ntpq22:35:243
39183399190,19cyclictest428326-21ntpq20:10:213
391828991918,1cyclictest551306-21ntpq23:45:212
39182899190,1cyclictest554120-21ntpq23:50:212
39182899190,1cyclictest534027-21ntpq23:15:202
39182899190,1cyclictest442550-21ntpq20:35:212
39182899190,18cyclictest0-21swapper/223:05:232
391856991818,0cyclictest0-21swapper/923:30:349
391856991818,0cyclictest0-21swapper/923:00:229
391856991818,0cyclictest0-21swapper/922:10:229
391856991818,0cyclictest0-21swapper/922:10:229
391856991818,0cyclictest0-21swapper/921:50:219
391856991818,0cyclictest0-21swapper/921:35:249
391856991818,0cyclictest0-21swapper/921:15:209
391856991818,0cyclictest0-21swapper/921:00:159
391856991818,0cyclictest0-21swapper/920:45:209
391856991818,0cyclictest0-21swapper/920:25:209
391856991818,0cyclictest0-21swapper/919:30:199
391856991818,0cyclictest0-21swapper/900:20:229
391856991818,0cyclictest0-21swapper/900:05:269
391856991818,0cyclictest0-21swapper/900:00:229
39185699180,18cyclictest0-21swapper/921:45:199
39185699180,0cyclictest0-21swapper/923:45:229
391852991818,0cyclictest0-21swapper/822:45:178
391852991818,0cyclictest0-21swapper/821:35:238
391852991818,0cyclictest0-21swapper/821:30:208
391852991818,0cyclictest0-21swapper/820:25:218
391852991818,0cyclictest0-21swapper/820:05:268
391852991818,0cyclictest0-21swapper/800:15:198
391852991818,0cyclictest0-21swapper/800:05:278
391852991817,1cyclictest482580-21ntpq21:45:208
39185299180,18cyclictest422570-21ntpq20:00:198
39185299180,18cyclictest0-21swapper/823:15:218
39185299180,18cyclictest0-21swapper/822:26:328
39185299180,18cyclictest0-21swapper/819:40:178
391848991818,0cyclictest0-21swapper/723:40:237
391848991818,0cyclictest0-21swapper/723:10:207
391848991818,0cyclictest0-21swapper/720:40:177
391848991818,0cyclictest0-21swapper/720:30:197
391848991818,0cyclictest0-21swapper/719:40:197
391848991818,0cyclictest0-21swapper/719:25:217
39184899180,18cyclictest0-21swapper/721:55:207
39184899180,18cyclictest0-21swapper/720:20:217
39184899180,18cyclictest0-21swapper/720:05:267
39184899180,18cyclictest0-21swapper/719:10:187
39184899180,18cyclictest0-21swapper/700:35:287
39184899180,0cyclictest0-21swapper/721:25:197
39184899180,0cyclictest0-21swapper/720:00:207
39184899180,0cyclictest0-21swapper/700:25:217
391844991818,0cyclictest482511-21strings21:45:186
391844991818,0cyclictest0-21swapper/620:25:206
39184499180,18cyclictest468287-21ntpq21:20:206
39184499180,18cyclictest392588-21expr19:10:136
39184499180,18cyclictest0-21swapper/620:35:216
39184499180,18cyclictest0-21swapper/620:30:186
39184499180,0cyclictest0-21swapper/622:30:266
39184499180,0cyclictest0-21swapper/620:15:196
391840991818,0cyclictest0-21swapper/522:30:255
391840991818,0cyclictest0-21swapper/519:10:195
391840991818,0cyclictest0-21swapper/500:10:195
391840991817,1cyclictest416851-21ntpq19:50:205
39184099180,18cyclictest0-21swapper/522:35:245
39184099180,18cyclictest0-21swapper/522:20:285
39184099180,18cyclictest0-21swapper/520:30:165
39184099180,18cyclictest0-21swapper/520:25:215
39184099180,18cyclictest0-21swapper/520:10:205
39184099180,0cyclictest0-21swapper/523:50:215
39184099180,0cyclictest0-21swapper/522:00:215
39184099180,0cyclictest0-21swapper/520:55:205
391837991818,0cyclictest519743-21ntpq22:50:214
391837991818,0cyclictest0-21swapper/423:00:224
391837991818,0cyclictest0-21swapper/421:05:224
391837991818,0cyclictest0-21swapper/420:25:204
391837991818,0cyclictest0-21swapper/419:55:184
391837991818,0cyclictest0-21swapper/400:05:274
391837991817,1cyclictest577090-21ntpq00:30:214
391837991817,1cyclictest502765-21smart_nvme0n122:20:314
39183799180,18cyclictest530592-21df23:10:164
39183799180,18cyclictest474007-21ntpq21:30:204
39183799180,18cyclictest0-21swapper/423:20:214
39183799180,18cyclictest0-21swapper/422:35:244
39183799180,18cyclictest0-21swapper/421:40:224
39183799180,18cyclictest0-21swapper/400:26:294
39183799180,0cyclictest545602-21ntpq23:35:244
39183799180,0cyclictest505426-21ntpq22:25:214
39183799180,0cyclictest0-21swapper/423:05:234
39183799180,0cyclictest0-21swapper/422:55:204
39183799180,0cyclictest0-21swapper/422:45:224
39183799180,0cyclictest0-21swapper/422:40:254
39183799180,0cyclictest0-21swapper/421:10:174
39183799180,0cyclictest0-21swapper/419:50:224
391833991818,0cyclictest506222-40dnf22:26:303
391833991818,0cyclictest0-21swapper/300:17:593
39183399180,1cyclictest448276-21ntpq20:45:183
39183399180,18cyclictest0-21swapper/323:15:203
39183399180,18cyclictest0-21swapper/323:05:233
39183399180,18cyclictest0-21swapper/323:00:223
39183399180,18cyclictest0-21swapper/322:20:293
39183399180,18cyclictest0-21swapper/321:20:213
39183399180,18cyclictest0-21swapper/320:15:203
39183399180,18cyclictest0-21swapper/300:00:213
39183399180,0cyclictest0-21swapper/323:45:223
39183399180,0cyclictest0-21swapper/322:10:223
39183399180,0cyclictest0-21swapper/322:10:223
39183399180,0cyclictest0-21swapper/321:30:193
39183399180,0cyclictest0-21swapper/320:35:223
39183399180,0cyclictest0-21swapper/319:10:533
391828991818,0cyclictest0-21swapper/222:50:202
391828991818,0cyclictest0-21swapper/220:55:202
391828991818,0cyclictest0-21swapper/219:10:192
391828991817,1cyclictest431122-21ntpq20:15:192
39182899180,18cyclictest574977-40dnf00:26:292
39182899180,18cyclictest0-21swapper/223:20:192
39182899180,18cyclictest0-21swapper/222:26:292
39182899180,18cyclictest0-21swapper/222:20:282
39182899180,18cyclictest0-21swapper/220:25:212
39182899180,18cyclictest0-21swapper/200:30:162
39182499180,1cyclictest419703-21ntpq19:55:191
39182499180,18cyclictest0-21swapper/123:30:331
391819991817,1cyclictest488312-21ntpq21:55:200
39181999180,1cyclictest393898-21unixbench-2d19:10:210
39181999180,18cyclictest559911-21ntpq00:00:230
39181999180,18cyclictest554127-21ntpq23:50:210
39181999180,18cyclictest502624-21ntp_states22:20:280
39181999180,18cyclictest436836-21ntpq20:25:200
391856991717,0cyclictest0-21swapper/923:15:209
391856991717,0cyclictest0-21swapper/922:45:169
391856991717,0cyclictest0-21swapper/921:25:199
391856991717,0cyclictest0-21swapper/920:40:199
391856991717,0cyclictest0-21swapper/900:26:299
391856991717,0cyclictest0-21swapper/900:10:209
391852991717,0cyclictest0-21swapper/823:00:228
391852991717,0cyclictest0-21swapper/822:50:218
391852991717,0cyclictest0-21swapper/822:35:208
391852991717,0cyclictest0-21swapper/822:30:218
391852991717,0cyclictest0-21swapper/821:15:208
391852991717,0cyclictest0-21swapper/821:00:178
391852991717,0cyclictest0-21swapper/820:35:228
391852991717,0cyclictest0-21swapper/819:55:188
391852991717,0cyclictest0-21swapper/800:10:158
391852991717,0cyclictest0-21swapper/800:00:238
39185299170,0cyclictest0-21swapper/819:30:198
391848991717,0cyclictest443819-21kworker/7:222:48:397
391848991717,0cyclictest0-21swapper/723:45:207
391848991717,0cyclictest0-21swapper/722:05:237
391848991717,0cyclictest0-21swapper/721:15:207
391848991717,0cyclictest0-21swapper/721:00:197
391848991717,0cyclictest0-21swapper/720:55:187
391848991717,0cyclictest0-21swapper/719:35:197
391848991717,0cyclictest0-21swapper/700:15:217
39184899170,17cyclictest0-21swapper/723:50:207
39184899170,0cyclictest0-21swapper/722:15:247
391844991717,0cyclictest0-21swapper/623:30:266
391844991717,0cyclictest0-21swapper/623:20:216
391844991717,0cyclictest0-21swapper/623:00:226
391844991717,0cyclictest0-21swapper/622:50:206
391844991717,0cyclictest0-21swapper/621:50:206
391844991717,0cyclictest0-21swapper/621:40:226
391844991717,0cyclictest0-21swapper/621:35:236
391844991717,0cyclictest0-21swapper/621:30:196
391844991717,0cyclictest0-21swapper/621:05:236
391844991717,0cyclictest0-21swapper/621:00:226
391844991717,0cyclictest0-21swapper/619:15:186
391844991717,0cyclictest0-21swapper/600:35:246
39184499170,17cyclictest0-21swapper/620:10:206
39184499170,0cyclictest0-21swapper/623:25:246
391840991717,0cyclictest0-21swapper/523:55:195
391840991717,0cyclictest0-21swapper/523:45:215
391840991717,0cyclictest0-21swapper/523:20:205
391840991717,0cyclictest0-21swapper/522:05:245
391840991717,0cyclictest0-21swapper/521:40:245
391840991717,0cyclictest0-21swapper/521:00:195
391840991717,0cyclictest0-21swapper/520:35:215
391840991717,0cyclictest0-21swapper/520:20:225
391840991717,0cyclictest0-21swapper/520:15:195
391840991717,0cyclictest0-21swapper/500:35:285
391840991717,0cyclictest0-21swapper/500:30:165
39184099170,17cyclictest0-21swapper/500:00:225
391837991717,0cyclictest0-21swapper/423:55:194
391837991717,0cyclictest0-21swapper/421:20:204
391837991717,0cyclictest0-21swapper/420:30:194
391837991717,0cyclictest0-21swapper/420:15:204
391837991717,0cyclictest0-21swapper/420:10:204
391837991717,0cyclictest0-21swapper/419:20:184
391837991716,1cyclictest456254-21df21:00:144
39183799170,17cyclictest0-21swapper/422:30:264
39183799170,17cyclictest0-21swapper/420:50:194
39183799170,17cyclictest0-21swapper/400:10:154
391833991717,0cyclictest0-21swapper/323:20:193
391833991717,0cyclictest0-21swapper/323:10:163
391833991717,0cyclictest0-21swapper/322:15:243
391833991717,0cyclictest0-21swapper/320:25:193
391833991717,0cyclictest0-21swapper/319:55:183
391833991717,0cyclictest0-21swapper/319:50:203
391833991717,0cyclictest0-21swapper/300:07:263
391833991716,1cyclictest0-21swapper/322:30:263
391828991717,0cyclictest488319-21ntpq21:55:202
391828991717,0cyclictest0-21swapper/223:10:162
391828991717,0cyclictest0-21swapper/220:30:162
391828991717,0cyclictest0-21swapper/219:50:192
391828991717,0cyclictest0-21swapper/200:00:222
391828991716,1cyclictest545564-21ntpq23:35:242
39182899170,17cyclictest0-21swapper/222:40:242
39182899170,17cyclictest0-21swapper/222:15:232
39182899170,16cyclictest0-21swapper/219:30:192
39182899170,0cyclictest0-21swapper/219:55:192
391824991716,1cyclictest514034-21ntpq22:40:241
39182499170,17cyclictest433993-21ntpq20:20:211
39182499170,17cyclictest0-21swapper/122:55:211
39182499170,17cyclictest0-21swapper/122:26:321
39182499170,17cyclictest0-21swapper/119:10:241
39182499170,17cyclictest0-21swapper/100:35:241
39182499170,0cyclictest0-21swapper/123:40:211
39182499170,0cyclictest0-21swapper/121:05:231
39182499170,0cyclictest0-21swapper/120:30:181
39182499170,0cyclictest0-21swapper/120:00:191
39182499170,0cyclictest0-21swapper/119:15:191
39182499170,0cyclictest0-21swapper/100:20:241
391819991717,0cyclictest0-21swapper/000:35:230
391819991716,1cyclictest551260-21ntpq23:45:190
39181999170,17cyclictest0-21swapper/023:30:340
39181999170,17cyclictest0-21swapper/020:40:170
39181999170,0cyclictest456840-21ntpq21:00:200
391856991616,0cyclictest0-21swapper/923:55:219
391856991616,0cyclictest0-21swapper/922:20:289
391856991616,0cyclictest0-21swapper/922:05:199
391856991616,0cyclictest0-21swapper/919:15:189
391852991616,0cyclictest0-21swapper/823:10:188
391852991616,0cyclictest0-21swapper/821:20:218
391852991616,0cyclictest0-21swapper/821:05:238
391852991616,0cyclictest0-21swapper/819:25:008
391852991616,0cyclictest0-21swapper/800:35:238
391852991615,1cyclictest620912-21snmpd23:54:058
391852991615,1cyclictest620912-21snmpd00:31:308
391848991616,0cyclictest0-21swapper/723:15:167
391848991616,0cyclictest0-21swapper/723:05:597
391848991616,0cyclictest0-21swapper/721:45:197
391848991616,0cyclictest0-21swapper/720:50:207
391848991616,0cyclictest0-21swapper/720:15:007
391848991616,0cyclictest0-21swapper/719:15:197
391848991615,1cyclictest620912-21snmpd21:07:017
391844991616,0cyclictest0-21swapper/623:15:206
391844991616,0cyclictest0-21swapper/623:05:256
391844991616,0cyclictest0-21swapper/622:55:216
391844991616,0cyclictest0-21swapper/622:40:256
391844991616,0cyclictest0-21swapper/622:25:196
391844991616,0cyclictest0-21swapper/622:15:246
391844991616,0cyclictest0-21swapper/621:10:176
391844991616,0cyclictest0-21swapper/620:45:196
391844991616,0cyclictest0-21swapper/620:05:256
391844991616,0cyclictest0-21swapper/620:00:176
391844991616,0cyclictest0-21swapper/619:30:186
391844991616,0cyclictest0-21swapper/619:20:196
391844991615,1cyclictest548402-21ntpq23:40:226
391840991616,0cyclictest0-21swapper/522:10:215
391840991616,0cyclictest0-21swapper/522:10:205
391840991616,0cyclictest0-21swapper/521:55:205
391840991616,0cyclictest0-21swapper/519:40:185
391840991615,1cyclictest620912-21snmpd22:15:065
391840991615,1cyclictest620912-21snmpd21:24:005
391840991615,1cyclictest620912-21snmpd19:56:115
391840991615,1cyclictest620912-21snmpd00:16:545
391840991615,1cyclictest0-21swapper/522:50:205
391837991616,0cyclictest559873-21ntpq00:00:224
391837991616,0cyclictest0-21swapper/423:25:244
391837991616,0cyclictest0-21swapper/420:35:214
391833991616,0cyclictest0-21swapper/323:50:213
391833991616,0cyclictest0-21swapper/322:50:213
391833991616,0cyclictest0-21swapper/321:55:193
391833991616,0cyclictest0-21swapper/321:35:233
391833991616,0cyclictest0-21swapper/321:10:173
391833991616,0cyclictest0-21swapper/321:05:213
391833991616,0cyclictest0-21swapper/321:00:213
391833991616,0cyclictest0-21swapper/319:30:193
391833991615,1cyclictest620912-21snmpd23:37:083
391833991615,1cyclictest620912-21snmpd22:05:123
391833991615,1cyclictest620912-21snmpd21:47:083
391828991616,0cyclictest0-21swapper/222:55:202
391828991616,0cyclictest0-21swapper/222:30:262
391828991616,0cyclictest0-21swapper/222:10:222
391828991616,0cyclictest0-21swapper/222:10:222
391828991616,0cyclictest0-21swapper/222:05:242
391828991616,0cyclictest0-21swapper/221:05:222
391828991616,0cyclictest0-21swapper/221:00:202
391828991616,0cyclictest0-21swapper/200:10:202
391828991615,1cyclictest620912-21snmpd21:10:342
391824991616,0cyclictest0-21swapper/123:00:211
391824991616,0cyclictest0-21swapper/122:45:171
391824991616,0cyclictest0-21swapper/122:30:201
391824991616,0cyclictest0-21swapper/121:35:241
391824991616,0cyclictest0-21swapper/121:00:151
391824991616,0cyclictest0-21swapper/120:50:181
391824991616,0cyclictest0-21swapper/119:40:181
391824991616,0cyclictest0-21swapper/100:30:201
391824991615,1cyclictest620912-21snmpd22:53:401
39182499160,16cyclictest0-21swapper/123:05:241
39182499160,16cyclictest0-21swapper/120:05:251
39182499160,0cyclictest0-21swapper/123:10:201
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional