You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-01-09 - 15:22
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot7.osadl.org (updated Fri Jan 09, 2026 12:44:34)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
20348213814,53sleep015-21ksoftirqd/007:04:570
20348213814,53sleep015-21ksoftirqd/007:04:570
215449912769,50cyclictest5399-21runrttasks07:55:040
2145421117,82sleep20-21swapper/207:09:312
2145421117,82sleep20-21swapper/207:09:312
20657210911,68sleep120701-21/usr/sbin/munin07:05:101
20657210911,68sleep120701-21/usr/sbin/munin07:05:101
215659910755,45cyclictest9158-21fschecks_count09:29:512
215659910755,45cyclictest9158-21fschecks_count09:29:512
215569910642,57cyclictest544-21cron08:49:301
215569910580,19cyclictest1-21systemd11:10:231
215569910540,10cyclictest0-21swapper/110:34:321
215659910445,49cyclictest4581-21latency_hist07:54:322
215569910449,8cyclictest0-21swapper/109:09:291
215569910449,8cyclictest0-21swapper/109:09:291
215569910440,9cyclictest0-21swapper/112:05:021
215569910362,34cyclictest12545-21ntp_kernel_pll_09:34:581
215569910346,7cyclictest0-21swapper/110:24:451
215569910346,7cyclictest0-21swapper/110:24:451
215659910146,49cyclictest0-21swapper/211:49:452
215659910054,38cyclictest0-21swapper/212:14:452
215659910054,38cyclictest0-21swapper/212:14:452
215659910034,8cyclictest0-21swapper/211:19:322
215569910049,44cyclictest0-21swapper/107:39:451
215569910041,11cyclictest0-21swapper/111:24:331
215569910041,11cyclictest0-21swapper/111:24:331
215569910036,11cyclictest0-21swapper/110:14:391
21565999943,9cyclictest0-21swapper/210:00:042
21565999943,9cyclictest0-21swapper/210:00:042
21556999947,45cyclictest18496-21fschecks_count12:24:511
21556999941,15cyclictest0-21swapper/110:44:581
166402990,4sleep10-21swapper/108:30:011
21565999747,43cyclictest0-21swapper/208:34:322
21565999744,45cyclictest0-21swapper/209:34:572
21556999779,11cyclictest12302-21kworker/u17:0-rpciod09:40:031
21556999779,11cyclictest12302-21kworker/u17:0-rpciod09:40:031
21556999736,16cyclictest0-21swapper/109:00:041
21565999647,43cyclictest7645-21kworker/u17:1-rpciod11:45:332
21565999647,43cyclictest7645-21kworker/u17:1-rpciod11:45:332
21565999643,16cyclictest0-21swapper/207:14:292
21565999643,16cyclictest0-21swapper/207:14:292
21565999630,9cyclictest0-21swapper/210:19:312
21556999642,7cyclictest0-21swapper/110:20:001
84962950,7sleep10-21swapper/109:29:131
21565999449,38cyclictest0-21swapper/209:15:052
21565999449,38cyclictest0-21swapper/209:15:052
21565999445,38cyclictest0-21swapper/210:55:032
21565999443,7cyclictest0-21swapper/211:19:512
21565999443,7cyclictest0-21swapper/211:19:512
21565999437,7cyclictest0-21swapper/211:25:022
21565999436,13cyclictest32407-21switchtime11:00:032
21565999433,11cyclictest0-21swapper/210:24:162
21556999443,12cyclictest17636-21cpu08:34:431
21565999341,7cyclictest0-21swapper/208:10:032
21565999341,7cyclictest0-21swapper/208:10:032
21565999340,12cyclictest0-21swapper/212:30:082
21565999340,12cyclictest0-21swapper/212:30:082
21565999328,12cyclictest0-21swapper/210:11:112
21565999322,20cyclictest2826-21cron07:49:292
21565999322,20cyclictest2826-21cron07:49:292
21565999236,14cyclictest0-21swapper/210:45:042
21565999234,9cyclictest0-21swapper/209:10:052
21556999144,9cyclictest16152-21timerandwakeup12:20:041
21556999141,11cyclictest28684-21diskmemload10:53:581
21565999045,7cyclictest0-21swapper/207:35:362
21565999039,13cyclictest16474-21fschecks_time10:34:502
21565999039,13cyclictest16474-21fschecks_time10:34:502
21565999038,9cyclictest0-21swapper/210:29:302
21565999038,9cyclictest0-21swapper/210:29:302
21565999033,8cyclictest0-21swapper/207:25:362
21556999044,14cyclictest352-21runrttasks12:13:081
21556999044,14cyclictest352-21runrttasks12:13:081
2156599893,27cyclictest23640-21cut07:14:392
2156599892,37cyclictest27872-21ntp_states09:04:592
2156599892,37cyclictest27872-21ntp_states09:04:592
21556998940,9cyclictest21535-21cyclictest07:30:041
21565998840,10cyclictest352-21runrttasks09:59:192
21565998835,7cyclictest0-21swapper/210:09:312
2156599883,31cyclictest26065-21/usr/sbin/munin10:50:262
21565998823,20cyclictest13096-21fschecks_time08:19:522
21565998823,20cyclictest13096-21fschecks_time08:19:522
21556998841,10cyclictest27337-21cpu07:25:351
21565998742,8cyclictest4461-21sh11:08:192
21565998742,8cyclictest4461-21sh11:08:192
21565998738,11cyclictest28684-21diskmemload12:25:472
21565998639,8cyclictest10317-21sh12:10:162
21565998639,8cyclictest10317-21sh12:10:162
21565998638,8cyclictest7719-21sh09:27:032
21565998618,25cyclictest23390-21seq11:39:382
21556998663,16cyclictest21535-21cyclictest11:34:311
21556998639,12cyclictest14513-21sh12:18:311
21556998639,12cyclictest14513-21sh12:18:311
21556998638,13cyclictest352-21runrttasks08:54:481
21544998663,17cyclictest16028-21latency_hist10:34:320
21565998531,13cyclictest0-21swapper/209:19:522
21544998565,11cyclictest19283-21grep12:25:060
21565998440,8cyclictest4804-21diskmemload12:01:462
21565998434,12cyclictest0-21swapper/210:39:462
21556998463,14cyclictest200-21systemd-journal11:48:231
21556998463,14cyclictest200-21systemd-journal11:48:231
21544998245,12cyclictest9561-21apt-get08:09:400
21544998245,12cyclictest9561-21apt-get08:09:400
21556998157,13cyclictest0-21swapper/109:24:331
21556998114,27cyclictest32472-21ssh11:00:041
21544998163,11cyclictest298-21in:imuxsock10:24:300
21565998054,16cyclictest0-21swapper/209:39:532
21565998054,16cyclictest0-21swapper/209:39:532
21556998062,8cyclictest0-21swapper/108:49:591
21556998062,8cyclictest0-21swapper/108:49:591
21544998063,11cyclictest1-21systemd09:19:290
21544998063,11cyclictest1-21systemd09:19:290
21565997939,9cyclictest0-21swapper/210:29:482
2156599793,27cyclictest23103-21basename11:39:292
21565997821,23cyclictest18523-21memory09:44:542
21556997863,8cyclictest0-21swapper/109:51:131
21556997863,8cyclictest0-21swapper/109:51:131
21544997855,16cyclictest14871-21latency_hist09:39:320
21565997755,15cyclictest25896-21ntp_kernel_err07:19:562
21565997755,15cyclictest25896-21ntp_kernel_err07:19:562
21556997757,11cyclictest0-21swapper/111:55:071
21556997757,10cyclictest0-21swapper/109:10:011
21556997754,10cyclictest0-21swapper/111:09:331
21556997754,10cyclictest0-21swapper/111:09:331
21556997752,14cyclictest0-21swapper/107:14:391
21544997760,11cyclictest26892-21systemd-run09:59:300
21544997757,14cyclictest8610-21idleruntime-cro09:29:290
21544997750,11cyclictest181rcu_preempt08:47:410
21565997649,21cyclictest5876-21sh11:10:022
21556997661,8cyclictest0-21swapper/108:29:301
21556997661,11cyclictest21535-21cyclictest11:40:041
21556997660,9cyclictest0-21swapper/109:59:311
21556997654,12cyclictest30511-21fschecks_time10:04:551
21556997652,18cyclictest27406-21sh09:59:491
21556997652,18cyclictest27406-21sh09:59:491
21556997652,15cyclictest0-21swapper/111:39:291
21556997651,18cyclictest0-21swapper/110:35:001
21556997651,18cyclictest0-21swapper/110:35:001
21544997663,9cyclictest21535-21cyclictest12:23:210
21544997641,24cyclictest14371-21latency_hist08:24:450
21544997641,24cyclictest14371-21latency_hist08:24:450
21565997552,16cyclictest21535-21cyclictest08:09:322
21556997553,14cyclictest0-21swapper/107:59:321
21556997538,17cyclictest19747-21sh09:46:481
21565997450,8cyclictest181rcu_preempt08:59:512
21556997450,16cyclictest32711-21sh09:15:021
21556997450,16cyclictest32711-21sh09:15:021
21556997435,20cyclictest3188-21/usr/sbin/munin11:59:451
21544997459,9cyclictest1566-21ssh10:10:030
21544997442,10cyclictest58-21kcompactd011:21:130
21544997442,10cyclictest58-21kcompactd011:21:130
21565997353,14cyclictest20190-21latency_hist11:34:322
21565997353,10cyclictest0-21swapper/208:40:012
21565997352,10cyclictest0-21swapper/212:34:512
21556997351,11cyclictest0-21swapper/108:19:311
21556997350,15cyclictest0-21swapper/107:49:561
21556997340,24cyclictest19619-21if_eth010:39:521
21544997357,10cyclictest3551-21runrttasks07:49:550
21544997353,15cyclictest29516-21ssh09:09:550
21544997342,12cyclictest24088-21apt-get08:54:410
21565997255,11cyclictest16188-21ssh12:20:052
21556997257,8cyclictest0-21swapper/111:14:551
21556997253,10cyclictest0-21swapper/107:39:321
21556997248,18cyclictest0-21swapper/107:19:551
21556997248,18cyclictest0-21swapper/107:19:551
21556997243,8cyclictest181rcu_preempt08:19:481
21556997243,8cyclictest181rcu_preempt08:19:481
21556997229,8cyclictest181rcu_preempt09:34:331
21556997229,8cyclictest181rcu_preempt09:34:331
21544997255,11cyclictest200-21systemd-journal07:14:230
21544997255,11cyclictest200-21systemd-journal07:14:230
21544997238,27cyclictest0-21swapper/011:04:320
21565997156,11cyclictest21535-21cyclictest07:29:452
21556997154,8cyclictest0-21swapper/111:54:311
21544997151,15cyclictest23901-21latency_hist09:54:320
21544997151,15cyclictest23901-21latency_hist09:54:320
2043627129,25sleep30-21swapper/307:05:003
2043627129,25sleep30-21swapper/307:05:003
21556997057,8cyclictest0-21swapper/110:54:581
21556997030,7cyclictest181rcu_preempt08:00:041
21544997052,13cyclictest28165-21sh10:00:040
21544997052,13cyclictest28165-21sh10:00:040
21544997049,14cyclictest26871-21apt-key07:24:320
21544997049,14cyclictest26871-21apt-key07:24:320
21565996952,11cyclictest297-21systemd-logind08:29:302
21565996950,13cyclictest22844-21kernelversion08:49:522
21565996950,13cyclictest22844-21kernelversion08:49:522
21565996946,12cyclictest0-21swapper/207:59:502
21565996943,12cyclictest21535-21cyclictest11:59:172
21544996951,13cyclictest28164-21kworker/u19:2+events_unbound12:34:290
21544996951,13cyclictest28164-21kworker/u19:2+events_unbound12:34:290
21544996944,19cyclictest1103-21kworker/u17:3+nfsiod09:23:180
21544996942,21cyclictest22577-21kworker/u17:3+nfsiod11:43:460
21565996856,7cyclictest0-21swapper/212:04:492
21565996820,34cyclictest0-21swapper/208:34:372
21556996853,8cyclictest0-21swapper/110:09:511
21556996852,9cyclictest0-21swapper/107:44:561
21556996852,9cyclictest0-21swapper/107:44:561
21556996846,12cyclictest0-21swapper/112:39:301
21544996850,11cyclictest19676-21snmpd08:29:460
21544996847,15cyclictest2984-21latency_hist11:59:320
21544996842,19cyclictest26137-21kworker/u17:2+nfsiod11:50:320
21544996841,21cyclictest7645-21kworker/u17:1+nfsiod11:35:200
252312670,8sleep30-21swapper/307:19:323
21565996751,10cyclictest297-21systemd-logind07:59:302
2156599673,26cyclictest24341-21fschecks_time08:54:512
21556996743,14cyclictest0-21swapper/108:40:051
21544996754,9cyclictest21535-21cyclictest09:30:560
21544996754,9cyclictest21535-21cyclictest09:30:560
21544996748,13cyclictest6846-21systemd-run10:19:300
21544996747,14cyclictest24861-21sh12:34:560
21544996743,18cyclictest4400-21kworker/u17:2+nfsiod11:11:550
21544996741,20cyclictest2998-21kworker/u17:3+nfsiod10:49:070
21544996741,20cyclictest2998-21kworker/u17:3+nfsiod10:40:300
21544996740,21cyclictest7645-21kworker/u17:1+nfsiod11:15:530
21565996649,7cyclictest0-21swapper/207:42:232
21565996643,17cyclictest0-21swapper/208:15:052
21556996642,13cyclictest0-21swapper/108:14:321
21556996642,13cyclictest0-21swapper/108:14:321
2154499667,26cyclictest25541-21apt-get10:49:530
21544996652,10cyclictest21535-21cyclictest10:04:590
21544996646,14cyclictest29559-21unixbench_multi10:55:060
21544996639,20cyclictest2998-21kworker/u17:3+nfsiod10:26:140
21544996639,20cyclictest2998-21kworker/u17:3+nfsiod10:26:140
21565996548,11cyclictest277-21dbus-daemon09:54:302
21565996548,11cyclictest277-21dbus-daemon09:54:302
21565996517,17cyclictest0-21swapper/208:44:502
21556996551,8cyclictest0-21swapper/107:09:551
21556996551,8cyclictest0-21swapper/107:09:551
21556996543,12cyclictest0-21swapper/112:30:021
21556996543,12cyclictest0-21swapper/112:30:021
21556996542,12cyclictest0-21swapper/111:24:541
21544996549,10cyclictest7180-21ssh12:05:050
2154499654,33cyclictest17517-21ssh11:29:470
2154499644,36cyclictest25705-21acpi08:59:390
21544996439,19cyclictest4400-21kworker/u17:2+nfsiod11:08:570
21544996439,19cyclictest4400-21kworker/u17:2+nfsiod11:08:570
21544996439,19cyclictest2629-21kworker/u17:1+nfsiod12:01:510
21544996436,21cyclictest0-21swapper/012:14:320
21544996436,21cyclictest0-21swapper/012:14:320
21544996435,23cyclictest29115-21ssh11:49:260
21544996435,23cyclictest29115-21ssh11:49:260
21556996338,17cyclictest0-21swapper/108:04:491
21544996348,9cyclictest19220-21ssh09:45:220
2154499633,34cyclictest16325-21ssh10:34:460
2154499633,34cyclictest16325-21ssh10:34:460
21544996247,9cyclictest18973-21apt08:39:290
21544996246,9cyclictest15721-21ssh09:40:030
21544996246,9cyclictest15721-21ssh09:40:030
21544996242,14cyclictest300-21rs:main0
21544996242,14cyclictest300-21rs:main0
21544996236,19cyclictest7645-21kworker/u17:1+nfsiod11:26:100
21544996236,19cyclictest26137-21kworker/u17:2+nfsiod12:16:420
21544996236,19cyclictest26137-21kworker/u17:2+nfsiod12:16:420
21544996147,8cyclictest28722-21rm09:09:300
21544996147,8cyclictest28722-21rm09:09:300
21544996144,11cyclictest352-21runrttasks07:15:080
21544996144,11cyclictest20637-21systemd-run08:44:310
21544996140,15cyclictest12117-21chrt08:15:060
21544996047,7cyclictest0-21swapper/007:25:360
21544996042,11cyclictest0-21swapper/008:04:530
21544995940,13cyclictest22460-21/usr/sbin/munin08:49:440
21544995940,13cyclictest22460-21/usr/sbin/munin08:49:440
21544995915,30cyclictest29838-21grep07:30:050
2154499574,38cyclictest570-21sensors_temp07:40:020
21544995743,10cyclictest21535-21cyclictest07:59:520
21544995738,13cyclictest14611-21fschecks_count08:25:040
2154499563,31cyclictest352-21runrttasks07:39:290
2157399533,33cyclictest917-21kworker/3:1+events09:15:053
2157399533,33cyclictest917-21kworker/3:1+events09:15:053
21573995323,21cyclictest11250-21chrt11:19:353
21573995323,21cyclictest11250-21chrt11:19:353
2157399523,35cyclictest27360-21taskset09:59:483
2157399523,35cyclictest27360-21taskset09:59:483
2157399523,34cyclictest7292-21taskset10:19:463
2157399515,31cyclictest15194-21taskset09:39:493
2157399515,31cyclictest15194-21taskset09:39:493
2157399506,31cyclictest4096-21chrt10:14:473
2157399504,32cyclictest25115-21taskset09:55:063
2157399504,31cyclictest917-21kworker/3:1+events12:38:473
2157399494,34cyclictest28307-21taskset10:54:313
2157399494,33cyclictest23856-21taskset08:54:303
2157399494,33cyclictest23856-21taskset08:54:303
2157399493,32cyclictest17258-21taskset11:29:323
2157399492,33cyclictest23987-21chrt10:46:453
2157399484,32cyclictest19060-21taskset09:45:043
2157399483,32cyclictest30224-21chrt10:04:423
2157399483,32cyclictest24274-21chrt08:54:503
2157399483,32cyclictest23823-21chrt11:39:543
2157399483,32cyclictest21283-21taskset12:29:423
2157399483,32cyclictest21283-21taskset12:29:423
2157399474,31cyclictest20107-21chrt10:40:043
2157399474,30cyclictest6141-21chrt12:04:423
2157399474,30cyclictest28839-21taskset09:09:323
2157399474,30cyclictest28839-21taskset09:09:323
2157399474,28cyclictest19268-21taskset08:39:433
2157399474,28cyclictest11176-21taskset08:14:443
2157399473,35cyclictest23090-21taskset11:39:293
2157399473,33cyclictest2871-21chrt09:19:503
2157399473,31cyclictest29034-21taskset09:09:453
2157399473,31cyclictest12187-21taskset12:14:433
2157399473,31cyclictest12187-21taskset12:14:433
2157399473,30cyclictest8248-21chrt11:14:413
2157399473,30cyclictest5891-21chrt09:24:413
2157399473,30cyclictest21749-21chrt07:09:433
2157399473,30cyclictest21749-21chrt07:09:433
2157399473,29cyclictest4719-21taskset07:54:433
2157399473,29cyclictest32350-21taskset07:39:413
2157399465,28cyclictest21287-21taskset09:49:513
2157399465,28cyclictest21287-21taskset09:49:513
2157399464,34cyclictest285742sleep310:54:443
2157399464,31cyclictest4943-21chrt11:09:303
2157399464,31cyclictest4943-21chrt11:09:303
2157399464,30cyclictest25421-21chrt07:19:403
2157399464,30cyclictest25421-21chrt07:19:403
2157399464,29cyclictest917-21kworker/3:1+events07:29:453
2157399464,29cyclictest13021-21chrt08:19:513
2157399464,29cyclictest13021-21chrt08:19:513
2157399463,33cyclictest15871-21taskset10:34:293
2157399463,32cyclictest30081-21chrt11:49:593
2157399463,31cyclictest5635-21taskset11:09:553
2157399463,30cyclictest14990-21taskset08:25:263
2157399463,30cyclictest11968-21taskset09:34:423
2157399463,30cyclictest10560-21taskset09:31:343
2157399463,30cyclictest10560-21taskset09:31:343
2157399454,30cyclictest22267-21taskset08:49:323
2157399453,31cyclictest18833-21chrt11:31:103
2157399453,31cyclictest17930-21taskset10:36:523
2157399453,31cyclictest17930-21taskset10:36:523
2157399453,30cyclictest9783-21chrt08:09:503
2157399453,30cyclictest9783-21chrt08:09:503
2157399453,30cyclictest6873-21chrt07:59:583
2157399453,30cyclictest409-21chrt11:54:533
2157399453,30cyclictest27287-21taskset07:24:583
2157399453,29cyclictest15349-21taskset12:19:453
2157399453,27cyclictest17633-21taskset08:34:413
2157399452,31cyclictest31545-21taskset10:59:333
2157399452,31cyclictest10107-21taskset10:24:363
2157399452,31cyclictest10107-21taskset10:24:363
2157399452,29cyclictest3032-21taskset11:59:353
2157399444,28cyclictest8018-21chrt08:04:443
2157399443,28cyclictest30715-21taskset07:34:433
2157399434,30cyclictest3032-21taskset10:13:133
2157399434,29cyclictest2857-21taskset07:49:293
2157399434,29cyclictest2857-21taskset07:49:293
2157399433,29cyclictest3754-21taskset07:50:023
2157399433,28cyclictest18267-21taskset12:24:443
2157399432,30cyclictest26435-21taskset11:44:403
2157399432,30cyclictest26435-21taskset11:44:403
2157399432,29cyclictest9156-21chrt12:09:403
2157399432,29cyclictest9156-21chrt12:09:403
2157399423,29cyclictest26684-21chrt09:00:053
2157399423,29cyclictest17258-21taskset08:33:193
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional