You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-24 - 14:19
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot3.osadl.org (updated Mon Aug 24, 2026 00:43:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
895617997938,38cyclictest3834693-1kworker/1:1H19:45:001
895617996939,29cyclictest1069353-21kworker/1:323:44:481
895617996861,4cyclictest1084934-21ssh23:57:131
89561799660,64cyclictest0-21swapper/123:51:481
89561799660,2cyclictest0-21swapper/122:35:491
895617996561,2cyclictest0-21swapper/122:44:481
895617996539,25cyclictest895498-21kworker/1:019:22:121
895617996346,16cyclictest966008-21kworker/1:121:50:171
895617996345,17cyclictest1034241-21kworker/1:123:05:141
89561799630,2cyclictest0-21swapper/100:21:481
895617996243,18cyclictest920927-21kworker/1:020:35:141
895617996241,19cyclictest1026032-21kworker/1:022:55:161
895617996239,21cyclictest1090110-21kworker/1:200:05:151
895617996236,24cyclictest1067182-21kworker/1:223:38:481
89561799620,1cyclictest0-21swapper/119:35:231
895617996144,16cyclictest938151-21kworker/1:121:17:001
895617996143,17cyclictest3834693-1kworker/1:1H23:20:171
895617996143,17cyclictest1004702-21kworker/1:222:30:011
895617996142,17cyclictest934698-21kworker/1:021:11:591
895617996142,17cyclictest902148-21kworker/1:119:32:481
895617996142,17cyclictest1111827-21kworker/1:100:30:011
895617996043,16cyclictest971315-21kworker/1:022:10:161
895617996043,16cyclictest971315-21kworker/1:021:55:141
895617996043,16cyclictest930415-21kworker/1:221:01:481
895617996042,17cyclictest914496-21kworker/1:120:15:161
895617996042,17cyclictest912956-21kworker/1:220:02:481
895617996042,16cyclictest1034241-21kworker/1:123:15:001
895617996041,17cyclictest3834693-1kworker/1:1H21:49:471
895617996041,17cyclictest1029326-21kworker/1:223:02:591
895617996040,18cyclictest995163-21kworker/1:222:20:131
895617996040,18cyclictest957979-21kworker/1:021:43:481
895617996040,18cyclictest919388-21kworker/1:120:25:001
895617996040,18cyclictest919388-21kworker/1:120:25:001
895617995942,16cyclictest919388-21kworker/1:120:26:481
895617995942,16cyclictest3834693-1kworker/1:1H22:25:131
895617995942,16cyclictest3834693-1kworker/1:1H20:50:141
895617995941,17cyclictest942692-21kworker/1:021:25:151
895617995941,17cyclictest895498-21kworker/1:019:15:011
895617995941,17cyclictest1034241-21kworker/1:123:25:121
895617995941,16cyclictest3834693-1kworker/1:1H23:30:241
895617995941,16cyclictest3834693-1kworker/1:1H21:20:401
895617995939,18cyclictest1090110-21kworker/1:200:10:151
895617995938,20cyclictest947245-21kworker/1:221:35:151
895617995938,19cyclictest895498-21kworker/1:019:10:131
895617995854,2cyclictest0-21swapper/122:05:111
895617995840,16cyclictest930415-21kworker/1:221:05:011
895617995840,16cyclictest920927-21kworker/1:020:45:011
895617995840,16cyclictest3834693-1kworker/1:1H00:25:161
895617995839,17cyclictest912956-21kworker/1:220:05:031
895617995839,17cyclictest1034241-21kworker/1:123:12:271
895617995837,19cyclictest920927-21kworker/1:020:30:141
895617995836,19cyclictest3834693-1kworker/1:1H21:00:011
895623995751,4cyclictest3299579-1kworker/3:0H23:25:053
895617995740,16cyclictest895498-21kworker/1:019:25:141
895617995740,16cyclictest1069353-21kworker/1:323:45:131
895617995736,19cyclictest1021336-21kworker/1:122:50:121
895618995651,3cyclictest3685223-1kworker/2:2H23:55:002
895617995638,17cyclictest904310-21kworker/1:319:50:151
895617995538,16cyclictest947245-21kworker/1:221:32:131
895617995537,17cyclictest971315-21kworker/1:022:00:021
895617995536,17cyclictest914496-21kworker/1:120:10:131
895617995437,16cyclictest909855-21kworker/1:119:55:161
895623995349,3cyclictest3299579-1kworker/3:0H21:25:233
895623995348,3cyclictest3299579-1kworker/3:0H22:52:473
895617995338,14cyclictest920927-21kworker/1:020:44:481
895617995333,19cyclictest990468-21kworker/1:122:15:141
89561799530,52cyclictest0-21swapper/119:45:341
89561799530,1cyclictest1023764-21sh22:50:001
895623995248,2cyclictest889938-21kworker/3:120:51:593
895623995248,2cyclictest3299579-1kworker/3:0H00:10:143
895623995247,3cyclictest3299579-1kworker/3:0H19:24:553
895618995246,3cyclictest3685223-1kworker/2:2H23:05:142
895618995245,4cyclictest3685223-1kworker/2:2H20:50:152
895617995237,14cyclictest1116650-21kworker/1:200:35:171
895614995248,2cyclictest1014801-1kworker/0:2H23:20:060
895614995247,3cyclictest954539-21kworker/0:221:50:220
895623995148,2cyclictest889938-21kworker/3:119:13:183
895623995146,3cyclictest3299579-1kworker/3:0H00:04:173
895617995134,16cyclictest1073930-21kworker/1:000:00:181
895623995045,3cyclictest3299579-1kworker/3:0H20:59:473
895623995044,4cyclictest889938-21kworker/3:120:26:183
895623995044,3cyclictest3299579-1kworker/3:0H21:06:563
895618995044,4cyclictest3685223-1kworker/2:2H22:45:182
89561799500,1cyclictest0-21swapper/100:17:481
895614995047,2cyclictest909854-21kworker/0:220:15:390
895614995046,3cyclictest954539-21kworker/0:221:42:080
895614995046,2cyclictest899322-21kworker/0:019:32:250
895623994946,2cyclictest3299579-1kworker/3:0H22:16:443
895623994944,3cyclictest889938-21kworker/3:119:40:213
895623994944,3cyclictest3299579-1kworker/3:0H19:50:143
895618994943,3cyclictest3685223-1kworker/2:2H19:20:142
895614994946,2cyclictest974086-21kworker/0:122:02:230
895614994945,2cyclictest935493-21kworker/0:021:25:470
895623994845,2cyclictest889938-21kworker/3:120:02:133
895623994845,2cyclictest889938-21kworker/3:119:27:473
895623994845,2cyclictest1057863-21kworker/3:223:40:063
895623994844,3cyclictest964806-21kworker/3:222:55:063
895623994844,3cyclictest889938-21kworker/3:121:01:063
895623994844,3cyclictest889938-21kworker/3:120:49:533
895623994844,2cyclictest889938-21kworker/3:121:35:003
895623994844,2cyclictest1107155-21kworker/3:200:29:213
895623994843,3cyclictest3299579-1kworker/3:0H23:32:583
895623994842,4cyclictest3299579-1kworker/3:0H23:23:343
895618994843,4cyclictest3685223-1kworker/2:2H20:35:222
895618994841,4cyclictest3685223-1kworker/2:2H23:15:132
895614994845,2cyclictest927341-21kworker/0:021:00:310
895614994845,2cyclictest895430-21kworker/0:119:20:110
895614994843,4cyclictest974086-21kworker/0:122:16:390
895623994743,2cyclictest889938-21kworker/3:120:14:183
895623994743,2cyclictest3299579-1kworker/3:0H22:30:013
895623994743,2cyclictest1046501-21kworker/3:123:15:063
895623994742,4cyclictest3299579-1kworker/3:0H21:20:353
895623994742,3cyclictest3299579-1kworker/3:0H23:59:483
895623994742,3cyclictest3299579-1kworker/3:0H23:00:153
895623994742,3cyclictest3299579-1kworker/3:0H20:05:143
895618994742,3cyclictest1061988-21kworker/2:023:47:312
895618994741,4cyclictest3685223-1kworker/2:2H22:19:132
895618994741,4cyclictest3685223-1kworker/2:2H21:25:152
895614994744,2cyclictest1053679-21kworker/0:223:27:580
895614994744,2cyclictest1014801-1kworker/0:2H00:27:470
895614994743,3cyclictest1014801-1kworker/0:2H22:40:290
895614994743,3cyclictest1014801-1kworker/0:2H00:36:170
895614994742,3cyclictest1401721-1kworker/0:0H20:45:140
895614994742,3cyclictest1013047-21kworker/0:123:01:480
895623994643,2cyclictest964806-21kworker/3:222:06:473
895623994643,2cyclictest889938-21kworker/3:119:38:133
895623994643,2cyclictest889938-21kworker/3:119:30:233
895623994643,2cyclictest889938-21kworker/3:119:15:483
895618994641,3cyclictest3685223-1kworker/2:2H20:48:482
895618994640,4cyclictest3685223-1kworker/2:2H00:26:252
895614994643,2cyclictest927341-21kworker/0:020:53:140
895614994643,2cyclictest1087244-21kworker/0:000:05:290
895614994643,2cyclictest1014801-1kworker/0:2H00:24:160
895614994642,2cyclictest935493-21kworker/0:021:23:530
895614994640,3cyclictest1014801-1kworker/0:2H22:50:110
895623994542,2cyclictest889938-21kworker/3:121:19:133
895623994542,2cyclictest3299579-1kworker/3:0H00:23:423
895623994540,3cyclictest3299579-1kworker/3:0H21:37:373
895618994540,4cyclictest3685223-1kworker/2:2H23:10:402
895614994543,1cyclictest940295-21kworker/0:221:17:110
895614994543,1cyclictest909854-21kworker/0:220:20:140
895614994543,1cyclictest909854-21kworker/0:220:20:140
895614994543,1cyclictest909854-21kworker/0:219:58:530
895614994542,2cyclictest903679-21kworker/0:119:36:440
895614994542,2cyclictest1014801-1kworker/0:2H23:05:430
895614994541,3cyclictest1401721-1kworker/0:0H19:45:060
895614994541,2cyclictest1401721-1kworker/0:0H20:25:270
895614994541,2cyclictest1053679-21kworker/0:223:43:470
895623994441,2cyclictest964806-21kworker/3:222:34:123
895623994441,2cyclictest889938-21kworker/3:119:45:533
895623994439,3cyclictest3299579-1kworker/3:0H23:49:553
895614994441,2cyclictest935493-21kworker/0:021:30:280
895614994439,3cyclictest1014801-1kworker/0:2H00:01:530
895614994438,4cyclictest1401721-1kworker/0:0H20:02:190
895623994339,2cyclictest3299579-1kworker/3:0H20:30:133
895623994339,2cyclictest3299579-1kworker/3:0H00:35:153
895623994338,3cyclictest964806-21kworker/3:221:53:183
895623994338,3cyclictest3299579-1kworker/3:0H20:35:043
895618994338,3cyclictest3685223-1kworker/2:2H20:00:152
895618994337,4cyclictest3685223-1kworker/2:2H22:39:532
895614994341,1cyclictest1082591-21kworker/0:300:13:590
895614994340,2cyclictest917565-21kworker/0:120:34:210
895614994340,2cyclictest1401721-1kworker/0:0H22:31:550
895614994340,2cyclictest1401721-1kworker/0:0H21:58:190
895614994340,2cyclictest1401721-1kworker/0:0H21:38:480
895614994339,2cyclictest974086-21kworker/0:122:22:190
895623994239,2cyclictest1057863-21kworker/3:223:50:463
895623994238,3cyclictest964806-21kworker/3:223:06:563
895623994238,3cyclictest3299579-1kworker/3:0H23:36:483
895623994238,3cyclictest3299579-1kworker/3:0H19:57:473
895623994237,3cyclictest3299579-1kworker/3:0H20:21:103
895623994237,3cyclictest3299579-1kworker/3:0H20:21:103
895623994236,4cyclictest3299579-1kworker/3:0H22:42:483
895618994238,2cyclictest3685223-1kworker/2:2H20:43:482
895618994238,2cyclictest1017557-21kworker/2:222:58:482
895614994240,1cyclictest933512-21kworker/0:121:07:180
895614994239,2cyclictest954539-21kworker/0:221:47:190
895614994239,2cyclictest903679-21kworker/0:119:54:480
895614994239,2cyclictest1401721-1kworker/0:0H22:27:480
895614994237,3cyclictest1401721-1kworker/0:0H22:12:180
895623994138,2cyclictest1107155-21kworker/3:200:34:483
895623994136,3cyclictest3299579-1kworker/3:0H21:45:143
895618994137,2cyclictest953628-21kworker/2:022:07:102
895614994139,1cyclictest903679-21kworker/0:119:42:470
895614994138,2cyclictest1014801-1kworker/0:2H23:11:530
895623994037,2cyclictest964806-21kworker/3:222:35:293
895623994037,2cyclictest3299579-1kworker/3:0H22:46:483
895623994037,2cyclictest3299579-1kworker/3:0H22:22:243
895618994037,2cyclictest1095310-21kworker/2:100:10:442
895614994038,1cyclictest1039291-21kworker/0:023:19:180
895614994037,2cyclictest51650irq/160-enp0s2923:55:230
895614994037,2cyclictest1053679-21kworker/0:223:32:190
895614994037,2cyclictest1014801-1kworker/0:2H00:18:190
895623993936,2cyclictest3299579-1kworker/3:0H22:10:163
895618993934,3cyclictest3685223-1kworker/2:2H21:40:272
895618993934,3cyclictest1107050-21kworker/2:000:40:002
895618993933,3cyclictest3685223-1kworker/2:2H21:05:132
895614993936,2cyclictest917565-21kworker/0:120:42:180
895614993934,3cyclictest1401721-1kworker/0:0H20:09:590
895623993833,3cyclictest3299579-1kworker/3:0H20:41:153
895618993832,3cyclictest3685223-1kworker/2:2H20:25:002
895618993832,3cyclictest3685223-1kworker/2:2H20:25:002
895614993836,1cyclictest917565-21kworker/0:120:36:560
895614993835,2cyclictest1401721-1kworker/0:0H21:10:480
895614993835,2cyclictest1082591-21kworker/0:300:30:310
895614993834,2cyclictest895430-21kworker/0:119:17:530
895618993734,2cyclictest953628-21kworker/2:021:56:482
895618993732,3cyclictest3685223-1kworker/2:2H22:45:012
895614993734,2cyclictest1401721-1kworker/0:0H20:55:540
895614993734,2cyclictest1014801-1kworker/0:2H22:47:230
895614993732,2cyclictest1014801-1kworker/0:2H23:50:140
895618993633,2cyclictest895435-21kworker/2:220:25:112
895618993632,2cyclictest3685223-1kworker/2:2H00:17:472
895614993633,2cyclictest909854-21kworker/0:220:10:470
895623993533,1cyclictest1088529-21kworker/3:000:16:493
895623993532,2cyclictest3299579-1kworker/3:0H00:05:063
895623993529,4cyclictest3299579-1kworker/3:0H22:00:003
895618993530,3cyclictest3685223-1kworker/2:2H23:27:272
895623993429,3cyclictest3299579-1kworker/3:0H21:45:003
895618993431,2cyclictest3685223-1kworker/2:2H23:30:382
895618993431,2cyclictest3685223-1kworker/2:2H21:00:152
895618993431,2cyclictest1-21systemd00:00:012
895618993429,3cyclictest3685223-1kworker/2:2H00:00:412
895618993428,3cyclictest3685223-1kworker/2:2H20:31:502
895614993431,2cyclictest1401721-1kworker/0:0H22:07:170
895614993429,3cyclictest881431-21kworker/0:019:11:440
895614993427,3cyclictest1401721-1kworker/0:0H22:35:130
89561899334,26cyclictest943673-21/usr/sbin/munin21:20:182
89561899334,11cyclictest933545-21diskmemload22:24:082
895618993328,4cyclictest3685223-1kworker/2:2H19:52:472
89562399320,1cyclictest151rcu_preempt23:10:363
89561899326,23cyclictest940146-21ssh21:16:042
89561899322,5cyclictest0-21swapper/200:31:042
895618993224,5cyclictest1095603-21apt-config00:10:002
89561899321,3cyclictest0-21swapper/222:31:222
895614993230,1cyclictest1013047-21kworker/0:122:57:180
895614993228,2cyclictest899322-21kworker/0:019:29:180
89561899317,21cyclictest902719-21/usr/sbin/munin19:30:152
89561899316,5cyclictest1053306-21ssh23:21:242
89561899314,8cyclictest1026650-21ssh22:52:162
895618993127,3cyclictest3685223-1kworker/2:2H22:15:002
895618993122,6cyclictest973338-21ssh21:54:072
89561899308,3cyclictest1065834-21awk23:35:212
89561899303,5cyclictest0-21swapper/200:21:592
895618993024,3cyclictest3685223-1kworker/2:2H19:36:392
895618993024,3cyclictest3685223-1kworker/2:2H19:25:132
895618993023,5cyclictest908290-21sed19:45:212
895618993021,7cyclictest0-21swapper/221:30:132
895623992926,2cyclictest889938-21kworker/3:121:10:133
89561899292,6cyclictest980277-21ssh22:00:462
895618992920,7cyclictest0-21swapper/223:04:432
895614992926,2cyclictest1053679-21kworker/0:223:39:180
89561899284,3cyclictest935247-21users21:10:202
89561899284,20cyclictest906148-21/usr/sbin/munin19:40:172
89561899282,5cyclictest957913-21ssh21:35:552
895618992822,5cyclictest0-21swapper/223:44:522
895614992825,2cyclictest1053679-21kworker/0:223:45:410
895623992723,3cyclictest3299579-1kworker/3:0H22:04:533
895618992722,4cyclictest0-21swapper/221:48:232
89561899272,23cyclictest0-21swapper/219:20:012
895618992719,5cyclictest897296-21latency_hist19:15:012
89561899271,5cyclictest954417-21systemd-journal20:06:422
895618992623,2cyclictest3685223-1kworker/2:2H20:10:152
89561899260,23cyclictest1001577-21/usr/sbin/munin22:25:122
895618992518,4cyclictest916383-21/usr/sbin/munin20:15:132
89561899251,4cyclictest910240-21/usr/sbin/munin19:55:142
89562399240,22cyclictest916929-21/usr/sbin/munin20:15:173
895618992416,6cyclictest930414-21sshd20:55:432
89561799241,3cyclictest26-21ksoftirqd/119:10:011
895618992215,5cyclictest895620-21latency_hist19:10:012
89562399160,14cyclictest895676-21sed19:10:013
895614991512,2cyclictest895628-21latency_hist19:10:010
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional