You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-15 - 22:09
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackeslot3.osadl.org (updated Tue Jul 15, 2025 12:43:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2153018996845,21cyclictest1628716-1kworker/1:1H09:45:001
2153018996461,1cyclictest0-21swapper/112:10:191
2153018996461,1cyclictest0-21swapper/112:10:181
215301899640,63cyclictest0-21swapper/112:22:091
215301899640,63cyclictest0-21swapper/109:53:441
215301899630,1cyclictest0-21swapper/110:33:101
2153018996242,18cyclictest1628716-1kworker/1:1H10:05:161
2153018996146,14cyclictest2152907-21kworker/1:307:10:161
2153018996044,15cyclictest2186153-21kworker/1:108:50:151
2153018995944,14cyclictest2171349-21kworker/1:208:34:111
2153018995944,14cyclictest2157270-21kworker/1:107:25:171
2153018995943,15cyclictest2232369-21kworker/1:111:20:301
2153018995943,15cyclictest2188360-21kworker/1:008:56:431
2153018995943,14cyclictest2232369-21kworker/1:111:50:201
2153018995942,16cyclictest2157270-21kworker/1:107:35:001
2153018995942,15cyclictest1628716-1kworker/1:1H09:10:151
2153018995940,16cyclictest1628716-1kworker/1:1H08:10:141
2153018995939,19cyclictest2252339-21kworker/1:212:30:151
2153018995938,19cyclictest2232369-21kworker/1:111:10:151
2153018995843,14cyclictest2252339-21kworker/1:212:27:441
2153018995843,14cyclictest2232369-21kworker/1:111:44:401
2153018995843,14cyclictest2232369-21kworker/1:111:15:251
2153018995843,14cyclictest2210538-21kworker/1:210:40:001
2153018995843,14cyclictest2188360-21kworker/1:009:45:011
2153018995843,14cyclictest2188360-21kworker/1:009:34:281
2153018995843,14cyclictest2161574-21kworker/1:007:55:001
2153018995842,15cyclictest2210538-21kworker/1:210:45:251
2153018995842,15cyclictest2210538-21kworker/1:210:25:281
2153018995842,15cyclictest2155234-21kworker/1:007:15:161
2153018995841,16cyclictest2232369-21kworker/1:111:55:071
2153018995755,1cyclictest0-21swapper/111:25:271
2153018995742,14cyclictest2210538-21kworker/1:211:05:161
2153018995742,14cyclictest2210538-21kworker/1:211:03:131
2153018995742,14cyclictest2155234-21kworker/1:007:20:081
2153018995741,15cyclictest2210538-21kworker/1:210:20:441
2153018995741,15cyclictest2188360-21kworker/1:009:25:101
2153018995740,16cyclictest2210538-21kworker/1:210:15:171
2153018995740,16cyclictest2188360-21kworker/1:009:00:171
2153018995739,16cyclictest2232369-21kworker/1:112:05:141
2153018995641,14cyclictest2232369-21kworker/1:111:30:151
2153018995641,14cyclictest2220760-21kworker/1:110:39:341
2153018995641,14cyclictest2210538-21kworker/1:210:51:131
2153018995641,14cyclictest2188360-21kworker/1:009:35:011
2153018995641,14cyclictest2171349-21kworker/1:208:25:191
2153018995641,14cyclictest1628716-1kworker/1:1H12:19:521
2153018995640,15cyclictest2252339-21kworker/1:212:35:021
2153018995640,15cyclictest2188360-21kworker/1:009:15:171
2153018995640,15cyclictest2161574-21kworker/1:007:35:141
2153018995640,15cyclictest1628716-1kworker/1:1H08:49:451
2153018995639,16cyclictest2171349-21kworker/1:208:20:181
2153018995638,16cyclictest2188360-21kworker/1:010:00:161
2153019995551,3cyclictest2154543-21kworker/2:207:50:272
2153018995540,14cyclictest2171349-21kworker/1:208:05:351
2153018995540,14cyclictest2161574-21kworker/1:008:00:161
2153018995539,15cyclictest2188360-21kworker/1:009:55:151
2153018995539,15cyclictest2188360-21kworker/1:009:20:161
2153018995538,16cyclictest2188360-21kworker/1:009:05:151
2153023995450,3cyclictest2213763-21kworker/3:110:16:423
2153023995449,3cyclictest2672433-1kworker/3:2H09:40:223
2153019995449,3cyclictest2222204-21kworker/2:210:54:412
2153018995449,3cyclictest2212820-21fschecks_time10:10:151
2153018995439,14cyclictest2232369-21kworker/1:112:04:441
2153018995439,14cyclictest2171349-21kworker/1:208:35:011
2153018995439,14cyclictest2161574-21kworker/1:007:45:161
2153018995437,14cyclictest2161574-21kworker/1:007:50:031
215301899540,2cyclictest2175177-21fschecks_time08:15:141
2153019995350,2cyclictest2222204-21kworker/2:210:59:372
2153019995350,2cyclictest1501592-1kworker/2:2H09:07:082
2153019995349,2cyclictest2222204-21kworker/2:210:40:362
2153013995348,3cyclictest2212148-21kworker/0:210:12:080
2153013995348,2cyclictest3945724-1kworker/0:2H11:45:110
2153023995249,2cyclictest2151374-21kworker/3:207:46:133
2153023995247,3cyclictest2672433-1kworker/3:2H10:29:333
2153019995248,3cyclictest2222204-21kworker/2:211:53:132
2153019995248,3cyclictest2222204-21kworker/2:211:49:412
2153018995237,14cyclictest2232369-21kworker/1:111:45:121
2153018995237,14cyclictest2232369-21kworker/1:111:35:101
2153018995237,14cyclictest2171349-21kworker/1:208:40:361
2153018995236,15cyclictest2161574-21kworker/1:007:40:011
2153018995235,15cyclictest2210538-21kworker/1:210:55:161
2153013995249,2cyclictest2204251-21kworker/0:009:59:120
2153023995139,7cyclictest2672433-1kworker/3:2H11:30:213
2153019995148,2cyclictest2207339-21kworker/2:110:36:432
2153023995045,3cyclictest2213763-21kworker/3:112:38:133
2153019995047,2cyclictest2222204-21kworker/2:211:27:422
2153019995047,2cyclictest2154543-21kworker/2:207:34:432
2153019995046,3cyclictest2177845-21kworker/2:208:36:422
2153019995046,3cyclictest2168099-21kworker/2:007:58:372
2153019995046,2cyclictest2222204-21kworker/2:211:03:082
2153019995046,2cyclictest2177845-21kworker/2:208:45:312
2153019995045,3cyclictest2207339-21kworker/2:110:24:132
2153019995045,3cyclictest2177845-21kworker/2:209:50:242
2153013995047,2cyclictest2186396-21kworker/0:108:51:080
2153013995045,3cyclictest3945724-1kworker/0:2H11:34:480
2153013995045,3cyclictest3945724-1kworker/0:2H09:49:180
2153023994945,3cyclictest2672433-1kworker/3:2H07:52:083
2153023994945,2cyclictest2672433-1kworker/3:2H07:42:373
2153023994944,3cyclictest2672433-1kworker/3:2H08:04:553
2153019994946,2cyclictest2177845-21kworker/2:209:29:182
2153013994946,2cyclictest2251393-21kworker/0:212:10:410
2153013994946,2cyclictest2251393-21kworker/0:212:10:400
2153013994946,2cyclictest2181264-21kworker/0:009:20:210
2153013994946,2cyclictest2176529-21kworker/0:108:39:430
2153013994944,3cyclictest3945724-1kworker/0:2H10:09:290
2153013994944,3cyclictest3945724-1kworker/0:2H08:08:370
2153019994845,2cyclictest2222204-21kworker/2:211:23:142
2153019994844,3cyclictest2222204-21kworker/2:211:13:432
2153019994844,2cyclictest2177845-21kworker/2:209:19:432
2153019994843,3cyclictest1501592-1kworker/2:2H09:00:252
2153013994844,2cyclictest3945724-1kworker/0:2H11:05:050
2153013994844,2cyclictest2204251-21kworker/0:010:00:290
2153023994743,2cyclictest2672433-1kworker/3:2H07:25:013
2153019994744,2cyclictest2177845-21kworker/2:209:42:082
2153019994743,2cyclictest2177845-21kworker/2:208:58:422
2153019994743,2cyclictest2166426-21kworker/2:108:08:432
2153019994742,3cyclictest2207339-21kworker/2:110:12:132
2153019994742,3cyclictest2154543-21kworker/2:207:21:492
2153019994742,3cyclictest1501592-1kworker/2:2H09:45:172
2153013994744,2cyclictest2181264-21kworker/0:009:15:570
2153013994744,2cyclictest2181264-21kworker/0:008:56:580
2153013994744,2cyclictest2181264-21kworker/0:008:45:360
2153013994744,2cyclictest2168039-21kworker/0:208:19:390
2153013994744,2cyclictest2161529-21kworker/0:107:54:200
2153013994744,2cyclictest2154492-21kworker/0:007:21:130
2153013994743,2cyclictest3945724-1kworker/0:2H12:23:120
2153013994741,4cyclictest3945724-1kworker/0:2H09:44:260
2153013994741,3cyclictest3945724-1kworker/0:2H09:10:140
2153023994643,2cyclictest2213763-21kworker/3:112:15:053
2153023994643,2cyclictest2213763-21kworker/3:110:44:093
2153023994642,3cyclictest2212145-21kworker/3:012:05:213
2153023994641,3cyclictest2672433-1kworker/3:2H10:49:083
2153019994643,2cyclictest2249114-21kworker/2:012:13:132
2153019994643,2cyclictest2249114-21kworker/2:012:13:132
2153019994643,2cyclictest2207339-21kworker/2:110:01:052
2153019994643,2cyclictest2177845-21kworker/2:209:56:422
2153019994643,2cyclictest2177845-21kworker/2:209:24:232
2153019994643,2cyclictest2166426-21kworker/2:108:01:072
2153019994643,2cyclictest2154543-21kworker/2:207:41:132
2153019994642,3cyclictest2154543-21kworker/2:207:19:252
2153019994642,2cyclictest2166426-21kworker/2:108:22:092
2153013994643,2cyclictest2213764-21kworker/0:110:44:400
2153013994643,2cyclictest2213764-21kworker/0:110:20:290
2153013994642,2cyclictest2213764-21kworker/0:110:25:380
2153023994542,2cyclictest2212145-21kworker/3:010:55:463
2153023994542,2cyclictest2151374-21kworker/3:207:25:533
2153023994542,2cyclictest2148433-21kworker/3:307:17:443
2153023994541,3cyclictest2672433-1kworker/3:2H10:24:083
2153023994541,3cyclictest2202367-21kworker/3:309:46:483
2153023994540,3cyclictest2672433-1kworker/3:2H11:35:143
2153023994540,3cyclictest2672433-1kworker/3:2H08:40:153
2153023994538,4cyclictest2672433-1kworker/3:2H10:30:143
2153019994542,2cyclictest2222204-21kworker/2:211:30:332
2153019994542,2cyclictest2154543-21kworker/2:207:45:292
2153019994542,2cyclictest2154543-21kworker/2:207:26:202
2153019994542,2cyclictest1501592-1kworker/2:2H11:57:422
2153019994541,2cyclictest2222204-21kworker/2:211:38:082
2153019994540,3cyclictest2166426-21kworker/2:108:10:382
2153013994542,2cyclictest2251393-21kworker/0:212:07:420
2153013994542,2cyclictest2247204-21kworker/0:011:50:460
2153013994542,2cyclictest2230743-21kworker/0:211:19:180
2153013994542,2cyclictest2154492-21kworker/0:007:25:250
2153023994441,2cyclictest2213763-21kworker/3:112:30:133
2153023994441,2cyclictest2212145-21kworker/3:011:59:073
2153023994441,2cyclictest2151374-21kworker/3:208:14:433
2153023994440,3cyclictest2672433-1kworker/3:2H09:59:073
2153023994440,2cyclictest2213763-21kworker/3:112:27:423
2153023994440,2cyclictest2151374-21kworker/3:209:29:423
2153023994440,2cyclictest2151374-21kworker/3:209:08:133
2153023994440,2cyclictest2148433-21kworker/3:308:30:133
2153019994441,2cyclictest2177845-21kworker/2:208:32:132
2153019994441,2cyclictest1501592-1kworker/2:2H12:19:082
2153013994441,2cyclictest2262053-21kworker/0:012:39:560
2153013994441,2cyclictest2251393-21kworker/0:212:19:140
2153013994441,2cyclictest2247204-21kworker/0:012:00:130
2153013994441,2cyclictest2230743-21kworker/0:211:40:430
2153013994441,2cyclictest2213764-21kworker/0:111:01:420
2153013994441,2cyclictest2168039-21kworker/0:208:00:530
2153013994440,2cyclictest3945724-1kworker/0:2H11:38:440
2153023994340,2cyclictest2672433-1kworker/3:2H07:30:133
2153023994340,2cyclictest2212145-21kworker/3:011:45:243
2153023994340,2cyclictest2151374-21kworker/3:208:48:083
2153023994339,3cyclictest2672433-1kworker/3:2H09:21:443
2153023994339,3cyclictest2212145-21kworker/3:010:11:423
2153023994339,2cyclictest2672433-1kworker/3:2H11:04:363
2153023994338,2cyclictest2672433-1kworker/3:2H07:35:143
2153019994340,2cyclictest2255606-21kworker/2:212:22:192
2153019994340,2cyclictest2222204-21kworker/2:211:05:542
2153019994338,3cyclictest1501592-1kworker/2:2H12:25:152
2153019994338,3cyclictest1501592-1kworker/2:2H08:15:162
2153013994340,2cyclictest2213764-21kworker/0:110:45:050
2153013994340,2cyclictest2166421-21kworker/0:007:46:430
2153013994339,2cyclictest2176529-21kworker/0:108:35:000
2153013994338,3cyclictest3945724-1kworker/0:2H08:45:000
2153013994336,4cyclictest3945724-1kworker/0:2H09:09:140
2153023994239,2cyclictest2672433-1kworker/3:2H11:27:063
2153023994239,2cyclictest2672433-1kworker/3:2H08:55:193
2153023994239,2cyclictest2151374-21kworker/3:208:07:083
2153023994239,2cyclictest2151374-21kworker/3:207:58:083
2153023994238,3cyclictest2672433-1kworker/3:2H09:36:033
2153023994238,2cyclictest2151374-21kworker/3:209:17:063
2153023994238,2cyclictest2151374-21kworker/3:209:13:423
2153023994237,3cyclictest2672433-1kworker/3:2H08:19:553
2153019994239,2cyclictest2222204-21kworker/2:212:00:062
2153019994239,2cyclictest2207339-21kworker/2:110:29:072
2153019994239,2cyclictest2177845-21kworker/2:209:12:082
2153019994239,2cyclictest1501592-1kworker/2:2H10:15:102
2153019994238,2cyclictest1501592-1kworker/2:2H09:35:182
2153018994235,4cyclictest2153052-21latency_hist07:10:011
2153013994240,1cyclictest2213764-21kworker/0:110:56:080
2153013994239,2cyclictest3945724-1kworker/0:2H08:24:150
2153013994239,2cyclictest2218891-21kworker/0:010:31:140
2153013994237,3cyclictest3945724-1kworker/0:2H08:29:080
2153013994237,3cyclictest3945724-1kworker/0:2H07:33:580
2153023994138,2cyclictest2213763-21kworker/3:112:20:453
2153023994138,2cyclictest2212145-21kworker/3:011:20:263
2153023994138,2cyclictest2151374-21kworker/3:209:05:013
2153023994138,2cyclictest2148433-21kworker/3:307:14:243
2153023994136,3cyclictest2672433-1kworker/3:2H11:52:083
2153019994138,2cyclictest1501592-1kworker/2:2H09:30:212
2153019994138,2cyclictest1501592-1kworker/2:2H08:41:422
2153019994137,2cyclictest1501592-1kworker/2:2H10:30:142
2153013994139,1cyclictest2213764-21kworker/0:110:51:070
2153013994138,2cyclictest2152835-21kworker/0:107:13:430
2153013994136,3cyclictest2152835-21kworker/0:107:15:170
2153013994135,4cyclictest3945724-1kworker/0:2H07:40:000
2153023994037,2cyclictest2672433-1kworker/3:2H12:02:083
2153023994037,2cyclictest2672433-1kworker/3:2H08:38:083
2153023994036,3cyclictest2672433-1kworker/3:2H08:24:083
2153019994037,2cyclictest2222204-21kworker/2:211:16:132
2153013994037,2cyclictest2181264-21kworker/0:009:35:330
2153013994035,3cyclictest3945724-1kworker/0:2H09:34:420
2153023993936,2cyclictest2212145-21kworker/3:011:05:143
2153023993934,3cyclictest2672433-1kworker/3:2H12:10:143
2153023993934,3cyclictest2672433-1kworker/3:2H12:10:133
2153019993936,2cyclictest2222204-21kworker/2:210:46:062
2153019993935,3cyclictest1501592-1kworker/2:2H12:31:422
2153013993936,2cyclictest2230743-21kworker/0:211:20:340
2153023993834,3cyclictest2151374-21kworker/3:209:31:433
2153019993835,2cyclictest2255606-21kworker/2:212:35:102
2153019993835,2cyclictest2249114-21kworker/2:012:06:422
2153019993835,2cyclictest2207339-21kworker/2:110:07:422
2153019993835,2cyclictest2177845-21kworker/2:208:53:502
2153013993835,2cyclictest3945724-1kworker/0:2H09:04:440
2153013993833,3cyclictest3945724-1kworker/0:2H11:55:150
2153023993734,2cyclictest2672433-1kworker/3:2H10:36:013
2153023993734,2cyclictest2672433-1kworker/3:2H10:09:553
2153019993733,3cyclictest1501592-1kworker/2:2H07:11:152
2153013993733,3cyclictest2230743-21kworker/0:211:14:090
2153013993733,2cyclictest3945724-1kworker/0:2H10:38:420
2153013993733,2cyclictest3945724-1kworker/0:2H10:17:140
2153023993631,3cyclictest2672433-1kworker/3:2H08:26:423
2153013993633,2cyclictest3945724-1kworker/0:2H11:29:440
2153019993530,3cyclictest1501592-1kworker/2:2H07:36:092
2153013993533,1cyclictest2255561-21kworker/0:112:25:160
2153013993532,2cyclictest2181264-21kworker/0:009:25:490
2153023993431,2cyclictest2672433-1kworker/3:2H11:10:263
2153023993430,3cyclictest2672433-1kworker/3:2H11:16:083
2153019993430,3cyclictest2177845-21kworker/2:208:27:052
2153013993431,2cyclictest3945724-1kworker/0:2H07:42:450
2153023993330,2cyclictest2672433-1kworker/3:2H11:40:133
2153013993228,3cyclictest3945724-1kworker/0:2H08:00:000
2153013993225,5cyclictest3945724-1kworker/0:2H12:34:550
215302399290,4cyclictest151rcu_preempt10:00:173
2153023992724,2cyclictest2672433-1kworker/3:2H10:55:003
2153019992521,3cyclictest2243391-21sensors11:40:202
2153013992522,2cyclictest3945724-1kworker/0:2H08:12:530
215301399251,13cyclictest0-21swapper/009:50:120
2153023992319,2cyclictest2672433-1kworker/3:2H09:50:073
215302399227,12cyclictest2187307-21/usr/sbin/munin08:50:193
2153023991711,4cyclictest2153047-21latency_hist07:10:013
215301999170,5cyclictest2153112-21sed07:10:012
215301399141,3cyclictest2153021-21ls07:10:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional