You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-23 - 10:24
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackeslot3.osadl.org (updated Tue Jun 23, 2026 00:43:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1821195997346,25cyclictest1845449-21kworker/1:320:30:141
1821195997138,32cyclictest2016083-21kworker/1:000:05:141
1821195997037,32cyclictest1861645-21kworker/1:121:30:161
182119599691,1cyclictest0-21swapper/123:50:401
182119599670,64cyclictest0-21swapper/121:58:581
1821195996662,2cyclictest0-21swapper/119:51:351
1821195996641,23cyclictest1845449-21kworker/1:320:40:141
1821195996631,32cyclictest2026004-21kworker/1:000:20:191
1821195996542,20cyclictest2026004-21kworker/1:000:30:141
1821195996535,28cyclictest2037870-21kworker/1:300:27:391
1821195996535,28cyclictest1975584-21kworker/1:023:20:101
1821195996452,9cyclictest1909949-21fschecks_time22:05:161
1821195996445,17cyclictest1878723-21kworker/1:221:37:461
1821195996443,19cyclictest1290408-1kworker/1:0H19:35:051
1821195996442,20cyclictest1929935-21kworker/1:122:35:151
1821195996344,18cyclictest2026004-21kworker/1:000:35:151
1821195996344,18cyclictest2026004-21kworker/1:000:35:151
1821195996342,19cyclictest1983249-21kworker/1:323:45:151
1821195996331,30cyclictest1956434-21kworker/1:123:10:141
1821195996331,29cyclictest1290408-1kworker/1:0H19:40:141
1821195996242,18cyclictest1861645-21kworker/1:121:15:141
1821195996241,20cyclictest1837220-21kworker/1:120:10:001
1821195996240,21cyclictest2011066-21kworker/1:300:00:021
1821195996144,16cyclictest1851990-21kworker/1:220:50:141
1821195996141,18cyclictest2011066-21kworker/1:300:00:161
1821195996130,29cyclictest1290408-1kworker/1:0H20:10:141
1821195996056,2cyclictest0-21swapper/120:57:361
1821195996043,16cyclictest1956434-21kworker/1:123:15:011
1821195996041,18cyclictest1845449-21kworker/1:320:25:151
1821195996040,18cyclictest1868459-21kworker/1:321:20:161
1821195996038,20cyclictest1290408-1kworker/1:0H22:10:151
1821195995956,2cyclictest0-21swapper/120:02:421
1821195995956,2cyclictest0-21swapper/120:02:411
1821195995943,15cyclictest1893449-21kworker/1:221:49:281
1821195995942,16cyclictest2021190-21kworker/1:100:11:121
1821195995942,15cyclictest1290408-1kworker/1:0H22:50:211
1821195995941,17cyclictest2026004-21kworker/1:000:15:291
1821195995941,16cyclictest1949757-21kworker/1:022:55:011
1821195995941,16cyclictest1949757-21kworker/1:022:55:011
1821195995941,16cyclictest1855977-21kworker/1:021:10:141
1821195995937,20cyclictest1983249-21kworker/1:323:35:141
1821195995855,2cyclictest0-21swapper/119:46:591
1821195995843,14cyclictest1983249-21kworker/1:323:32:281
182119599580,56cyclictest0-21swapper/122:03:271
1821194995838,2cyclictest1897321-21kworker/0:222:17:140
1821195995742,14cyclictest1949757-21kworker/1:022:49:551
1821195995742,14cyclictest1920333-21kworker/1:222:25:111
1821195995742,14cyclictest1883784-21kworker/1:021:50:061
1821195995742,14cyclictest1855977-21kworker/1:021:07:071
1821195995742,14cyclictest1845449-21kworker/1:320:35:131
1821195995738,17cyclictest1824606-21kworker/1:019:25:131
1821195995641,14cyclictest1956434-21kworker/1:123:02:221
1821195995641,14cyclictest1956434-21kworker/1:123:02:211
1821195995641,14cyclictest1909451-21kworker/1:122:15:131
1821195995640,15cyclictest1983249-21kworker/1:323:25:141
1821195995637,18cyclictest1820193-21kworker/1:319:15:141
1821195995633,21cyclictest1851990-21kworker/1:221:00:171
1821198995550,3cyclictest1829301-21kworker/3:220:17:353
1821198995550,3cyclictest1346134-1kworker/3:1H19:20:123
1821198995550,3cyclictest1346134-1kworker/3:1H19:10:273
1821197995549,4cyclictest2427282-1kworker/2:0H21:36:262
1821195995540,14cyclictest1965962-21kworker/1:023:07:221
1821195995540,14cyclictest1939511-21kworker/1:022:40:031
1821195995540,14cyclictest1829249-21kworker/1:319:56:401
1821195995539,15cyclictest1983249-21kworker/1:323:40:221
1821195995538,16cyclictest1845449-21kworker/1:320:45:141
1821195995535,19cyclictest1837220-21kworker/1:120:15:121
1821195995439,14cyclictest1888672-21kworker/1:121:43:581
1821195995439,14cyclictest1824606-21kworker/1:019:33:381
1821195995339,14cyclictest1837220-21kworker/1:120:22:041
1821195995338,14cyclictest1929935-21kworker/1:122:30:141
1821195995338,14cyclictest1825284-21kworker/1:219:20:131
1821195995337,15cyclictest1920333-21kworker/1:222:20:131
1821195995336,16cyclictest1808256-21kworker/1:119:10:131
1821195995326,26cyclictest1290408-1kworker/1:0H21:25:131
1821198995248,2cyclictest1829301-21kworker/3:220:11:173
1821198995248,2cyclictest1829301-21kworker/3:219:40:413
1821198995230,2cyclictest1941157-1kworker/3:2H00:36:223
1821198995230,2cyclictest1941157-1kworker/3:2H00:36:223
1821194995249,2cyclictest2013251-21kworker/0:200:00:120
1821194995247,3cyclictest1087385-1kworker/0:2H22:40:040
1821194995244,6cyclictest1087385-1kworker/0:2H22:07:140
1821198995149,1cyclictest1829301-21kworker/3:219:52:063
1821198995147,2cyclictest1829301-21kworker/3:220:00:313
1821198995147,2cyclictest1829301-21kworker/3:220:00:313
1821198995146,3cyclictest1941157-1kworker/3:2H23:55:133
1821198995146,3cyclictest1346134-1kworker/3:1H21:00:143
1821197995148,2cyclictest1846745-21kworker/2:220:32:052
1821197995145,4cyclictest2427282-1kworker/2:0H22:00:212
1821198995046,3cyclictest1829301-21kworker/3:220:26:513
1821198995045,3cyclictest1941157-1kworker/3:2H23:10:063
1821197995047,2cyclictest1829241-21kworker/2:119:41:432
1821197995045,3cyclictest2427282-1kworker/2:0H21:18:532
1821197995045,3cyclictest1880500-21kworker/2:221:34:032
1821198994945,3cyclictest1854508-21kworker/3:021:08:273
1821197994946,2cyclictest1920572-21kworker/2:122:16:392
1821197994946,2cyclictest1880500-21kworker/2:221:43:332
1821197994945,3cyclictest2427282-1kworker/2:0H23:23:542
1821194994945,2cyclictest1087385-1kworker/0:2H23:00:150
1821194994945,2cyclictest1087385-1kworker/0:2H23:00:150
1821198994845,2cyclictest1829301-21kworker/3:219:46:583
1821197994845,2cyclictest1852904-21kworker/2:120:55:062
1821197994845,2cyclictest1846745-21kworker/2:220:38:552
1821197994844,3cyclictest2427282-1kworker/2:0H22:52:262
1821197994843,3cyclictest2427282-1kworker/2:0H00:22:532
1821197994843,3cyclictest2008318-21kworker/2:223:56:532
1821197994842,4cyclictest2427282-1kworker/2:0H22:24:532
1821197994842,3cyclictest2427282-1kworker/2:0H21:10:142
1821197994744,2cyclictest1829241-21kworker/2:119:35:512
1821197994743,3cyclictest1833891-21kworker/2:219:52:012
1821197994742,3cyclictest2427282-1kworker/2:0H00:00:422
1821194994741,4cyclictest1087385-1kworker/0:2H20:40:000
1821198994643,2cyclictest1854508-21kworker/3:022:35:433
1821198994642,3cyclictest1829301-21kworker/3:219:56:093
1821198994642,2cyclictest1829301-21kworker/3:220:58:123
1821198994641,3cyclictest1941157-1kworker/3:2H00:00:133
1821197994643,2cyclictest1970845-21kworker/2:023:12:222
1821197994643,2cyclictest1833891-21kworker/2:220:05:212
1821197994642,3cyclictest1987427-21kworker/2:123:30:452
1821197994642,3cyclictest1852904-21kworker/2:121:02:422
1821197994642,3cyclictest1821001-21kworker/2:219:28:072
1821197994642,2cyclictest1945151-21kworker/2:122:47:552
1821197994641,4cyclictest1880500-21kworker/2:221:56:532
1821197994641,3cyclictest2427282-1kworker/2:0H23:50:222
1821194994642,3cyclictest1087385-1kworker/0:2H20:20:310
1821198994542,2cyclictest4029706-21kworker/3:119:31:583
1821198994542,2cyclictest1955193-21kworker/3:123:05:003
1821198994542,2cyclictest1955193-21kworker/3:123:05:003
1821198994542,2cyclictest1346134-1kworker/3:1H21:35:173
1821198994540,3cyclictest1346134-1kworker/3:1H22:06:533
1821197994542,2cyclictest2018037-21kworker/2:000:11:282
1821197994542,2cyclictest1925427-21kworker/2:222:31:242
1821197994542,2cyclictest1829241-21kworker/2:119:30:412
1821197994540,3cyclictest2427282-1kworker/2:0H20:40:142
1821194994541,3cyclictest1087385-1kworker/0:2H21:22:160
1821194994541,2cyclictest1087385-1kworker/0:2H00:05:140
1821194994538,6cyclictest1087385-1kworker/0:2H00:25:140
1821198994441,2cyclictest1941157-1kworker/3:2H00:11:533
1821198994440,3cyclictest1346134-1kworker/3:1H21:25:153
1821197994441,2cyclictest2427282-1kworker/2:0H00:36:092
1821197994441,2cyclictest2427282-1kworker/2:0H00:36:092
1821197994441,2cyclictest2018037-21kworker/2:000:05:142
1821197994441,2cyclictest1880500-21kworker/2:221:50:282
1821197994441,2cyclictest1870660-21kworker/2:121:28:322
1821197994441,2cyclictest1821001-21kworker/2:219:12:252
1821197994440,3cyclictest1935145-21kworker/2:022:35:532
1821197994439,3cyclictest1833891-21kworker/2:220:15:062
1821194994441,2cyclictest1087385-1kworker/0:2H00:20:000
1821194994441,1cyclictest1087385-1kworker/0:2H19:15:130
1821194994440,3cyclictest1087385-1kworker/0:2H23:17:280
1821198994340,2cyclictest1955193-21kworker/3:123:28:273
1821198994338,3cyclictest1346134-1kworker/3:1H21:49:593
1821197994340,2cyclictest1998546-21kworker/2:123:42:282
1821197994340,2cyclictest1910134-21kworker/2:122:07:512
1821197994340,2cyclictest1852904-21kworker/2:121:05:282
1821197994339,2cyclictest2018037-21kworker/2:000:17:342
1821197994339,2cyclictest1821001-21kworker/2:219:24:332
1821194994339,3cyclictest1087385-1kworker/0:2H00:35:440
1821194994339,3cyclictest1087385-1kworker/0:2H00:35:440
1821194994338,3cyclictest1822698-21kworker/0:319:23:310
1821198994239,2cyclictest1941157-1kworker/3:2H23:22:583
1821198994238,3cyclictest1941157-1kworker/3:2H00:30:163
1821198994237,3cyclictest1346134-1kworker/3:1H21:20:273
1821197994239,2cyclictest2427282-1kworker/2:0H23:00:242
1821197994239,2cyclictest2427282-1kworker/2:0H23:00:242
1821197994239,2cyclictest2044051-21kworker/2:000:32:282
1821197994239,2cyclictest1880500-21kworker/2:221:48:532
1821197994239,2cyclictest1845199-21kworker/2:120:24:472
1821197994237,3cyclictest2427282-1kworker/2:0H22:10:192
1821194994238,3cyclictest1832345-21kworker/0:120:15:110
1821198994138,2cyclictest1941157-1kworker/3:2H23:40:063
1821198994137,3cyclictest1941157-1kworker/3:2H23:53:523
1821198994137,3cyclictest1941157-1kworker/3:2H22:42:503
1821198994137,2cyclictest1346134-1kworker/3:1H20:50:133
1821197994138,2cyclictest2427282-1kworker/2:0H23:19:592
1821197994137,2cyclictest1965970-21kworker/2:123:09:532
1821194994138,2cyclictest1837217-21kworker/0:020:00:210
1821194994138,2cyclictest1837217-21kworker/0:020:00:200
1821194994137,3cyclictest1087385-1kworker/0:2H23:25:070
1821194994137,2cyclictest1087385-1kworker/0:2H21:25:120
1821194994137,2cyclictest1087385-1kworker/0:2H20:10:010
1821194994136,4cyclictest1087385-1kworker/0:2H23:21:580
1821194994136,3cyclictest1087385-1kworker/0:2H22:55:350
1821194994136,3cyclictest1087385-1kworker/0:2H22:55:350
1821194994136,3cyclictest1087385-1kworker/0:2H22:20:130
1821194994136,3cyclictest1087385-1kworker/0:2H19:52:000
1821198994037,2cyclictest1941157-1kworker/3:2H00:06:333
1821198994037,2cyclictest1854508-21kworker/3:022:26:433
1821198994037,2cyclictest1346134-1kworker/3:1H20:40:063
1821198994037,2cyclictest1346134-1kworker/3:1H20:34:263
1821198994036,3cyclictest1346134-1kworker/3:1H22:15:293
1821198994036,2cyclictest1346134-1kworker/3:1H21:15:143
1821197994037,2cyclictest1845199-21kworker/2:120:29:272
1821197994037,2cyclictest1829241-21kworker/2:119:46:322
1821197994036,2cyclictest2427282-1kworker/2:0H22:40:102
182119599402,2cyclictest1821256-21latency_hist19:10:011
1821194994037,2cyclictest1087385-1kworker/0:2H23:30:170
1821194994037,2cyclictest1087385-1kworker/0:2H22:35:480
1821194994036,2cyclictest1087385-1kworker/0:2H19:30:130
1821194994034,5cyclictest1882599-21kworker/0:021:50:130
1821198993936,2cyclictest1941157-1kworker/3:2H22:54:273
1821198993936,2cyclictest1346134-1kworker/3:1H22:30:283
1821198993936,2cyclictest1346134-1kworker/3:1H21:33:283
1821198993935,2cyclictest1941157-1kworker/3:2H00:20:143
1821198993934,3cyclictest1941157-1kworker/3:2H00:15:153
1821198993934,3cyclictest1346134-1kworker/3:1H21:55:133
1821198993934,3cyclictest1346134-1kworker/3:1H19:15:143
1821197993936,2cyclictest2039387-21kworker/2:200:26:072
1821197993936,2cyclictest1821001-21kworker/2:219:19:032
1821194993936,2cyclictest1087385-1kworker/0:2H00:10:420
1821194993935,3cyclictest1087385-1kworker/0:2H21:16:030
1821194993934,3cyclictest1087385-1kworker/0:2H23:37:290
1821194993934,3cyclictest1087385-1kworker/0:2H21:10:150
1821198993834,3cyclictest1346134-1kworker/3:1H22:20:093
1821198993834,3cyclictest1346134-1kworker/3:1H22:00:063
1821197993836,1cyclictest1833891-21kworker/2:220:03:092
1821197993836,1cyclictest1833891-21kworker/2:220:03:082
1821197993835,2cyclictest1852904-21kworker/2:120:51:332
1821197993834,3cyclictest1980486-21kworker/2:223:28:332
1821197993834,3cyclictest1955050-21kworker/2:022:55:222
1821197993834,3cyclictest1955050-21kworker/2:022:55:222
1821197993833,3cyclictest2427282-1kworker/2:0H21:20:142
1821194993835,2cyclictest1967949-21kworker/0:023:10:140
1821194993835,2cyclictest1843647-21kworker/0:220:33:520
1821194993833,3cyclictest1087385-1kworker/0:2H21:32:160
1821198993734,2cyclictest1941157-1kworker/3:2H23:47:383
1821198993734,2cyclictest1346134-1kworker/3:1H22:14:553
1821198993734,2cyclictest1346134-1kworker/3:1H21:44:553
1821198993733,3cyclictest1941157-1kworker/3:2H00:28:283
1821197993734,2cyclictest2427282-1kworker/2:0H23:46:002
1821197993734,2cyclictest1833891-21kworker/2:220:13:122
1821197993733,2cyclictest2427282-1kworker/2:0H20:45:132
1821197993732,3cyclictest2427282-1kworker/2:0H19:55:142
1821194993735,1cyclictest1882599-21kworker/0:021:45:110
1821194993734,2cyclictest1998883-21kworker/0:123:44:530
1821194993734,2cyclictest1897321-21kworker/0:222:11:280
1821194993732,3cyclictest1087385-1kworker/0:2H20:10:140
1821194993730,4cyclictest1087385-1kworker/0:2H23:45:140
1821198993633,2cyclictest1346134-1kworker/3:1H20:24:423
1821197993632,2cyclictest1925427-21kworker/2:222:25:282
1821194993630,3cyclictest1087385-1kworker/0:2H22:00:140
1821194993531,3cyclictest1087385-1kworker/0:2H23:59:060
1821194993531,3cyclictest1087385-1kworker/0:2H20:44:580
1821194993530,3cyclictest1848276-21kworker/0:121:05:160
1821194993530,3cyclictest1087385-1kworker/0:2H22:32:180
1821198993432,1cyclictest1955193-21kworker/3:123:40:003
1821198993432,1cyclictest1829301-21kworker/3:220:09:543
1821198993429,4cyclictest1941157-1kworker/3:2H22:47:263
1821194993431,2cyclictest1087385-1kworker/0:2H20:49:520
1821194993429,3cyclictest1087385-1kworker/0:2H23:50:400
1821194993428,4cyclictest1087385-1kworker/0:2H20:50:130
1821198993329,2cyclictest1346134-1kworker/3:1H21:50:143
1821198993326,4cyclictest1941157-1kworker/3:2H23:15:143
1821194993328,3cyclictest1087385-1kworker/0:2H21:40:130
1821198993229,2cyclictest1955193-21kworker/3:122:55:063
1821198993229,2cyclictest1955193-21kworker/3:122:55:063
1821198993229,2cyclictest1346134-1kworker/3:1H19:29:323
1821198993228,3cyclictest1941157-1kworker/3:2H23:30:283
1821198993128,2cyclictest1346134-1kworker/3:1H19:39:553
182119499318,3cyclictest1948793-21kworker/0:222:50:220
1821194993128,2cyclictest1897321-21kworker/0:222:26:270
1821194993128,2cyclictest1877583-21kworker/0:221:35:220
182119499311,26cyclictest1-21systemd19:15:000
1821198993027,2cyclictest1941157-1kworker/3:2H23:05:053
1821197993028,1cyclictest1987427-21kworker/2:123:35:222
1821194993027,2cyclictest1087385-1kworker/0:2H19:55:470
1821194992926,2cyclictest1958378-21kworker/0:123:06:530
182119899280,25cyclictest1848828-21/usr/sbin/munin20:35:123
1821194992824,3cyclictest1087385-1kworker/0:2H20:25:340
1821194992820,5cyclictest1900422-21apt-get21:55:110
1821198992721,4cyclictest1346134-1kworker/3:1H21:10:343
1821194992722,3cyclictest51650irq/160-enp0s2922:46:020
1821194992719,6cyclictest1831077-21cat19:40:110
1821194992719,5cyclictest1829612-21/usr/sbin/munin19:35:120
1821194992623,2cyclictest1848276-21kworker/0:120:55:140
1821194992619,4cyclictest0-21swapper/000:20:120
182119499260,2cyclictest0-21swapper/000:34:140
182119499241,2cyclictest1856473-21/usr/sbin/munin21:00:120
182119499241,20cyclictest1826796-21/usr/sbin/munin19:25:120
182119899230,20cyclictest1852540-21/usr/sbin/munin20:45:203
1821194992317,4cyclictest1833960-21munin-run19:50:000
182119899131,2cyclictest0-21swapper/319:10:013
182119799111,3cyclictest151rcu_preempt19:10:012
18211949991,5cyclictest1821015-21latency_hist19:10:010
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional