You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-08-26 - 17:24

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack8slot6s.osadl.org (updated Wed Aug 26, 2026 12:43:39)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
63339910521049,3cyclictest24487-21kworker/3:2+events09:57:123
63339910521049,3cyclictest1869-21kworker/3:0+events11:11:393
63179910521049,3cyclictest16078-21kworker/0:0+events12:37:330
63179910521048,3cyclictest25965-21kworker/0:0+events09:18:040
63179910521048,3cyclictest16078-21kworker/0:0+events11:29:170
63339910511049,2cyclictest28267-21kworker/3:1+events12:09:543
63339910511049,2cyclictest21325-21kworker/3:0+events10:37:433
63339910511049,2cyclictest21325-21kworker/3:0+events09:30:223
63339910511049,2cyclictest16390-21kworker/3:0+events12:00:203
63339910511049,2cyclictest16390-21kworker/3:0+events11:56:283
63179910511049,2cyclictest22721-21kworker/0:1+events11:31:280
63179910511049,2cyclictest22206-21kworker/0:2+events11:21:370
63179910511049,2cyclictest15624-21kworker/0:1+events09:44:400
63339910501049,1cyclictest24487-21kworker/3:2+events10:03:523
63339910501049,1cyclictest24487-21kworker/3:2+events10:03:523
63339910501048,2cyclictest7494-21kworker/3:1+events11:15:443
63339910501048,2cyclictest24487-21kworker/3:2+events09:52:553
63339910501048,2cyclictest23345-21kworker/3:2+events12:13:533
63339910501048,2cyclictest21325-21kworker/3:0+events10:07:113
63339910501048,2cyclictest1990-21kworker/3:1+events10:30:453
63179910501048,2cyclictest3034-21kworker/0:2+events11:48:190
63179910501048,2cyclictest17805-21kworker/0:1+events12:34:470
63179910501045,3cyclictest16078-21kworker/0:0+events11:35:220
63339910491048,1cyclictest24487-21kworker/3:2+events10:17:233
63339910491047,2cyclictest803-21kworker/3:2+events08:28:293
63339910491047,2cyclictest23345-21kworker/3:2+events12:29:153
63339910491047,2cyclictest23345-21kworker/3:2+events12:17:133
63339910491047,2cyclictest1859-21kworker/3:1+events07:12:243
63339910491047,2cyclictest10578-21kworker/3:0+events12:23:383
63179910491047,2cyclictest3034-21kworker/0:2+events11:43:160
63179910491047,2cyclictest25965-21kworker/0:0+events09:35:200
63339910481046,2cyclictest8495-21kworker/3:2+events07:40:223
63339910481046,2cyclictest17288-21kworker/3:0+events07:37:463
63339910471045,2cyclictest803-21kworker/3:2+events08:58:403
63339910471045,2cyclictest21325-21kworker/3:0+events10:14:473
63339910461044,2cyclictest26612-21kworker/3:1+events08:15:433
63339910461044,2cyclictest15167-21kworker/3:1+events08:45:543
63339910441042,2cyclictest803-21kworker/3:2+events08:21:503
63339910421040,2cyclictest1869-21kworker/3:0+events11:08:303
63229910421040,2cyclictest27256-21kworker/1:1+events10:58:261
63339910411038,2cyclictest803-21kworker/3:2+events08:13:433
63339910361034,2cyclictest26612-21kworker/3:1+events08:04:463
63179910361033,3cyclictest11843-21turbostat11:54:550
63179910341032,2cyclictest24540-21turbostat09:49:560
63279910331030,3cyclictest10770-21kworker/2:1+events10:28:272
63179910331031,2cyclictest5657-21turbostat09:29:560
63279910281025,3cyclictest24728-21kworker/2:0+events10:21:302
63179910261024,2cyclictest12712-21turbostat07:29:540
63179910251023,2cyclictest15539-21turbostat08:54:560
63339910241023,1cyclictest803-21kworker/3:2+events08:50:233
63229910241023,1cyclictest1591-21kworker/1:2+events10:41:451
63339910221021,1cyclictest10556-21kworker/3:1+events07:26:373
63279910211019,2cyclictest5023-21turbostat08:29:552
63229910191018,1cyclictest16226-21kworker/1:0+events10:52:091
63229910111009,2cyclictest9060-21turbostat08:39:561
63279910081004,4cyclictest28710-21turbostat09:19:552
633399995994,1cyclictest11049-21kworker/3:0+events08:43:473
632299993992,1cyclictest27256-21kworker/1:1+events11:01:291
633399990987,3cyclictest7274-21turbostat11:49:553
632299989988,1cyclictest11186-21kworker/1:1+events10:45:211
632299986985,1cyclictest9305-21kworker/1:1+events09:24:531
632299979978,1cyclictest27256-21kworker/1:1+events11:54:281
631799979976,3cyclictest29429-21turbostat10:29:560
632299977976,1cyclictest1591-21kworker/1:2+events09:27:521
631799976973,3cyclictest6660-21turbostat10:39:550
633399974973,1cyclictest21325-21kworker/3:0+events09:05:223
632299973972,1cyclictest7023-21kworker/1:2+events08:34:031
633399948947,1cyclictest21325-21kworker/3:0+events09:14:133
631799945943,2cyclictest8660-21turbostat07:19:550
631799924921,3cyclictest21068-21turbostat12:04:550
631799922919,3cyclictest30722-21turbostat12:14:550
632799917914,3cyclictest28922-21turbostat08:09:552
631799910907,3cyclictest21595-21turbostat09:09:560
633399898897,1cyclictest21325-21kworker/3:0+events09:45:233
631799898896,2cyclictest29684-21turbostat11:04:550
633399895894,1cyclictest5980-21kworker/3:0+events07:15:433
631799895892,3cyclictest10595-21turbostat10:09:560
633399889888,1cyclictest26612-21kworker/3:1+events07:57:593
633399889888,1cyclictest24552-21kworker/3:0+events07:54:043
633399888887,1cyclictest8495-21kworker/3:2+events07:24:443
633399880879,1cyclictest22509-21kworker/3:2+events07:49:033
633399880879,1cyclictest10556-21kworker/3:1+events07:31:503
633399878877,1cyclictest28685-21kworker/3:0+events08:09:363
633399877876,1cyclictest21325-21kworker/3:0+events09:02:573
632299870869,1cyclictest1936-21turbostat11:09:541
631799853849,4cyclictest24039-21turbostat09:14:560
633399680676,4cyclictest29684-21turbostat11:04:543
633399674672,2cyclictest9060-21turbostat08:39:553
631799667664,3cyclictest12156-21turbostat12:29:550
632299646645,1cyclictest6660-21turbostat10:39:551
632299634633,1cyclictest7274-21turbostat11:49:551
633399616613,3cyclictest11843-21turbostat11:54:553
633399614611,3cyclictest5657-21turbostat09:29:563
633399558555,3cyclictest29429-21turbostat10:29:553
633399556554,2cyclictest19898-21turbostat09:44:563
631799530529,1cyclictest10696-21turbostat09:34:560
632799525524,1cyclictest20199-21turbostat10:19:562
632299521520,1cyclictest5023-21turbostat08:29:551
632299506505,1cyclictest28710-21turbostat09:19:551
631799488486,2cyclictest11544-21turbostat11:19:550
6333991818,0cyclictest67750irq/123-lan10:42:233
6333991817,1cyclictest67750irq/123-lan10:50:143
6333991817,1cyclictest67750irq/123-lan09:25:013
6333991717,0cyclictest67750irq/123-lan08:30:203
6333991716,1cyclictest67750irq/123-lan12:38:363
6333991716,1cyclictest67750irq/123-lan11:41:183
6333991716,1cyclictest67750irq/123-lan11:35:163
6333991716,1cyclictest67750irq/123-lan11:25:473
6333991716,1cyclictest67750irq/123-lan10:20:453
6333991716,1cyclictest67750irq/123-lan09:15:513
6333991616,0cyclictest67750irq/123-lan12:32:303
6333991616,0cyclictest67750irq/123-lan11:20:123
6333991616,0cyclictest67750irq/123-lan09:39:113
6333991615,1cyclictest67750irq/123-lan11:31:083
6333991615,1cyclictest67750irq/123-lan10:56:263
6333991615,1cyclictest67750irq/123-lan10:48:493
6322991210,2cyclictest762-21ntpd11:32:071
632299109,1cyclictest762-21ntpd11:55:311
63279998,1cyclictest784-21snmpd07:13:132
63229998,1cyclictest784-21snmpd09:32:511
63229998,1cyclictest784-21snmpd08:19:241
63179998,1cyclictest8165-21ntp_kernel_pll_11:10:170
63179998,1cyclictest784-21snmpd12:15:400
63179997,2cyclictest21251-21sed10:50:140
63279988,0cyclictest784-21snmpd11:11:232
63279988,0cyclictest784-21snmpd10:53:172
63279988,0cyclictest784-21snmpd08:34:462
63279988,0cyclictest784-21snmpd08:14:572
63279988,0cyclictest782-21lldpd09:57:482
63279988,0cyclictest782-21lldpd08:04:282
63279987,1cyclictest784-21snmpd12:38:442
63279987,1cyclictest784-21snmpd08:35:492
63279987,1cyclictest782-21lldpd11:40:312
63279987,1cyclictest782-21lldpd10:49:112
63279987,1cyclictest3569-21gltestperf08:20:132
63279987,1cyclictest26054-21gltestperf11:30:122
63279986,2cyclictest784-21snmpd09:32:202
63279986,2cyclictest784-21snmpd07:57:242
63279986,2cyclictest1885-21cat09:20:142
63279986,2cyclictest17263-21cat11:55:132
63279985,3cyclictest12091-21cat10:40:122
63229988,0cyclictest784-21snmpd10:17:101
63229988,0cyclictest784-21snmpd09:45:241
63229988,0cyclictest784-21snmpd09:42:151
63229988,0cyclictest782-21lldpd10:31:541
63229988,0cyclictest782-21lldpd10:27:521
63229988,0cyclictest782-21lldpd07:14:281
63229987,1cyclictest784-21snmpd11:14:111
63229987,1cyclictest784-21snmpd10:14:301
63229987,1cyclictest784-21snmpd09:57:351
63229987,1cyclictest526-21avahi-daemon12:04:191
63229986,2cyclictest784-21snmpd08:47:031
63229986,2cyclictest784-21snmpd07:55:211
63229986,2cyclictest784-21snmpd07:24:281
63179988,0cyclictest784-21snmpd07:40:170
63179988,0cyclictest782-21lldpd11:05:110
63179988,0cyclictest782-21lldpd08:40:270
63179987,1cyclictest784-21snmpd08:20:320
63179987,1cyclictest526-21avahi-daemon10:47:120
63179986,2cyclictest784-21snmpd08:13:000
63179986,2cyclictest784-21snmpd08:00:500
63179986,2cyclictest784-21snmpd07:32:430
63279977,0cyclictest784-21snmpd07:42:012
63279977,0cyclictest782-21lldpd09:36:022
63279976,1cyclictest784-21snmpd11:26:472
63279976,1cyclictest784-21snmpd08:16:572
63279976,1cyclictest7393-21gltestperf10:35:152
63279976,1cyclictest572-21in:imuxsock12:19:022
63279976,1cyclictest572-21in:imuxsock12:12:482
63279976,1cyclictest572-21in:imuxsock11:36:072
63279976,1cyclictest507-21systemd-resolve11:46:172
63279976,1cyclictest507-21systemd-resolve10:31:002
63279976,1cyclictest22341-21cat12:00:122
63279976,1cyclictest11580-21needreboot07:20:142
63279975,2cyclictest784-21snmpd08:44:272
63279973,3cyclictest32693-21ssh09:53:142
63279973,3cyclictest14769-21ssh11:17:432
63229977,0cyclictest784-21snmpd09:07:441
63229977,0cyclictest782-21lldpd10:24:551
63229977,0cyclictest526-21avahi-daemon08:22:201
63229976,1cyclictest782-21lldpd09:39:081
63229976,1cyclictest782-21lldpd07:19:451
63229976,1cyclictest507-21systemd-resolve12:37:421
63229976,1cyclictest3273-21cut11:40:121
63229975,2cyclictest784-21snmpd12:32:501
63229975,2cyclictest784-21snmpd07:32:251
63229975,2cyclictest29603-21cat08:05:131
63229974,2cyclictest574-21rs:main1
63229974,2cyclictest245-20systemd-journal12:08:241
63179977,0cyclictest784-21snmpd10:57:230
63179977,0cyclictest784-21snmpd10:11:150
63179977,0cyclictest784-21snmpd09:53:000
63179977,0cyclictest784-21snmpd07:14:270
63179976,1cyclictest784-21snmpd11:57:040
63179976,1cyclictest507-21systemd-resolve10:43:350
63179976,1cyclictest25175-21acpi10:20:110
63179975,2cyclictest784-21snmpd10:19:340
63179975,2cyclictest784-21snmpd08:36:100
63179975,2cyclictest21545-21cat07:45:130
63179974,3cyclictest6147-21ntpq08:25:160
63279966,0cyclictest784-21snmpd07:39:472
63279966,0cyclictest782-21lldpd08:51:462
63279966,0cyclictest782-21lldpd07:51:532
63279966,0cyclictest782-21lldpd07:15:172
63279965,1cyclictest784-21snmpd08:58:042
63279965,1cyclictest784-21snmpd07:26:432
63279965,1cyclictest507-21systemd-resolve09:05:172
63279964,2cyclictest784-21snmpd07:33:232
63279963,3cyclictest784-21snmpd09:02:072
63279963,3cyclictest547-21NetworkManager11:01:562
63279963,3cyclictest16735-21cron12:30:002
63279963,2cyclictest21214-21ssh12:34:062
63279963,2cyclictest18735-21ssh10:12:352
63279962,3cyclictest8094-21ssh10:00:492
63279962,3cyclictest8094-21ssh10:00:492
63279962,3cyclictest5917-21ssh11:08:592
63279962,3cyclictest18030-21ssh11:20:222
63279962,3cyclictest13476-21cat11:50:222
63229966,0cyclictest784-21snmpd12:26:141
63229965,1cyclictest6308-21cyclictest11:15:191
63229965,1cyclictest24673-21fschecks_time09:10:121
63229964,2cyclictest784-21snmpd09:52:381
63229964,2cyclictest762-21ntpd08:50:141
63229962,3cyclictest245-20systemd-journal10:07:091
63179966,0cyclictest782-21lldpd07:50:560
63179965,1cyclictest784-21snmpd09:57:110
63179965,1cyclictest784-21snmpd08:59:590
63179963,3cyclictest8139-21ntp_states08:30:170
63179963,3cyclictest8117-21diskstats12:20:130
63179963,2cyclictest574-21rs:main0
63279954,1cyclictest8750-21ntpq12:20:172
63279954,1cyclictest782-21lldpd07:46:202
63279954,1cyclictest421ktimers/209:40:122
63279952,3cyclictest547-21NetworkManager09:45:222
63279952,2cyclictest26438-21ssh12:05:092
63279952,2cyclictest26431-21ssh09:11:182
63279952,2cyclictest14533-21ld08:45:152
63279952,2cyclictest13098-21ssh10:05:482
63279950,5cyclictest547-21NetworkManager09:25:462
63229955,0cyclictest526-21avahi-daemon07:45:231
63229954,1cyclictest762-21ntpd10:00:151
63229954,1cyclictest762-21ntpd10:00:151
63229954,1cyclictest526-21avahi-daemon12:21:251
63229953,2cyclictest784-21snmpd08:02:381
63229953,2cyclictest762-21ntpd07:28:351
63229953,2cyclictest331ktimers/112:10:121
63229952,3cyclictest547-21NetworkManager11:27:361
63229952,2cyclictest30494-21dpkg11:35:001
63229952,2cyclictest18236-21ssh11:20:441
63229952,2cyclictest17629-21sed07:35:151
63229952,2cyclictest12145-21cut08:40:121
63229951,3cyclictest21705-21apt-config09:05:001
63179955,0cyclictest782-21lldpd09:00:270
63179954,1cyclictest784-21snmpd08:49:510
63179953,2cyclictest784-21snmpd07:24:170
63179952,2cyclictest8506-21ssh10:01:310
63179952,2cyclictest8506-21ssh10:01:310
63179952,2cyclictest3087-21ssh09:20:420
63179952,2cyclictest2461-21unixbench-2d08:15:210
63179951,3cyclictest30009-21sh08:05:160
63179950,4cyclictest27332-21ntpq12:05:160
63179950,4cyclictest17853-21ntpq07:35:170
63279940,3cyclictest26192-21ntpq10:55:152
63229941,2cyclictest23757-21needreboot07:50:161
63229940,3cyclictest31781-21diskstats08:10:131
63229940,3cyclictest18102-21fw_conntrack08:55:141
63229940,2cyclictest20021-21awk07:40:181
63179941,2cyclictest245-20systemd-journal07:55:560
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional