You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-14 - 02:01

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack8slot6s.osadl.org (updated Sat Sep 13, 2025 12:43:45)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
32382992019,1cyclictest66850irq/125-lan11:46:060
32382991919,0cyclictest66850irq/125-lan09:30:400
32382991918,1cyclictest66850irq/125-lan12:33:310
32382991918,1cyclictest66850irq/125-lan12:26:320
32382991918,1cyclictest66850irq/125-lan12:00:160
32382991918,1cyclictest66850irq/125-lan10:58:280
32382991918,1cyclictest66850irq/125-lan10:24:540
32382991918,1cyclictest66850irq/125-lan09:45:210
32382991918,1cyclictest66850irq/125-lan08:55:010
32382991918,1cyclictest66850irq/125-lan08:54:160
32395991818,0cyclictest771-21snmpd08:43:402
32395991818,0cyclictest771-21snmpd08:26:122
32395991818,0cyclictest771-21snmpd08:26:122
32382991818,0cyclictest66850irq/125-lan11:38:110
32382991818,0cyclictest66850irq/125-lan11:25:180
32382991818,0cyclictest66850irq/125-lan11:05:060
32382991818,0cyclictest66850irq/125-lan10:40:120
32382991818,0cyclictest66850irq/125-lan09:13:490
32382991818,0cyclictest66850irq/125-lan07:16:010
32382991817,1cyclictest66850irq/125-lan12:15:220
32382991817,1cyclictest66850irq/125-lan12:13:300
32382991817,1cyclictest66850irq/125-lan12:05:190
32382991817,1cyclictest66850irq/125-lan11:30:210
32382991817,1cyclictest66850irq/125-lan11:10:230
32382991817,1cyclictest66850irq/125-lan10:55:000
32382991817,1cyclictest66850irq/125-lan10:36:190
32382991817,1cyclictest66850irq/125-lan10:18:100
32382991817,1cyclictest66850irq/125-lan09:55:180
32382991817,1cyclictest66850irq/125-lan09:25:010
32382991817,1cyclictest66850irq/125-lan08:45:120
32382991817,1cyclictest66850irq/125-lan07:30:130
32382991817,1cyclictest66850irq/125-lan07:25:210
32395991717,0cyclictest771-21snmpd12:33:232
32395991717,0cyclictest771-21snmpd11:26:122
32395991717,0cyclictest771-21snmpd11:17:412
32395991717,0cyclictest771-21snmpd10:04:122
32395991717,0cyclictest771-21snmpd08:51:102
32395991717,0cyclictest19154-21cat10:25:142
32395991717,0cyclictest13566-21cat09:00:182
32382991717,0cyclictest66850irq/125-lan10:30:160
32382991717,0cyclictest66850irq/125-lan10:06:210
32382991717,0cyclictest66850irq/125-lan09:21:040
32382991716,1cyclictest66850irq/125-lan12:36:230
32382991716,1cyclictest66850irq/125-lan12:23:320
32382991716,1cyclictest66850irq/125-lan11:57:330
32382991716,1cyclictest66850irq/125-lan11:23:170
32382991716,1cyclictest66850irq/125-lan11:02:270
32382991716,1cyclictest66850irq/125-lan10:29:550
32382991716,1cyclictest66850irq/125-lan10:10:180
32382991716,1cyclictest66850irq/125-lan09:35:220
32382991716,1cyclictest66850irq/125-lan08:40:300
32382991616,0cyclictest66850irq/125-lan10:45:100
32382991616,0cyclictest66850irq/125-lan10:00:130
32382991616,0cyclictest66850irq/125-lan09:44:140
32382991615,1cyclictest66850irq/125-lan11:40:160
32382991615,1cyclictest66850irq/125-lan11:17:230
32382991615,1cyclictest66850irq/125-lan09:50:290
32382991615,1cyclictest66850irq/125-lan09:15:200
32382991615,1cyclictest66850irq/125-lan08:05:150
32382991615,1cyclictest66850irq/125-lan07:40:140
32382991615,1cyclictest66850irq/125-lan07:35:180
32382991515,0cyclictest66850irq/125-lan07:45:150
32382991514,1cyclictest66850irq/125-lan09:05:160
32382991514,1cyclictest66850irq/125-lan08:35:120
32382991514,1cyclictest66850irq/125-lan08:15:180
32382991514,1cyclictest66850irq/125-lan08:00:150
32382991414,0cyclictest66850irq/125-lan08:10:120
32382991413,1cyclictest66850irq/125-lan07:50:170
32382991413,1cyclictest66850irq/125-lan07:22:300
32382991211,1cyclictest66850irq/125-lan07:10:130
32395991110,1cyclictest749-21ntpd11:39:132
32382991111,0cyclictest66850irq/125-lan07:55:180
3238799109,1cyclictest586-21rs:main1
3238299109,1cyclictest66850irq/125-lan08:25:170
3238299109,1cyclictest66850irq/125-lan08:25:170
3238299109,1cyclictest66850irq/125-lan08:20:210
32382991010,0cyclictest66850irq/125-lan09:00:150
324009998,1cyclictest771-21snmpd11:18:563
324009998,1cyclictest6485-21turbostat.cron09:35:003
323959998,1cyclictest771-21snmpd09:51:422
323959996,2cyclictest749-21ntpd11:30:232
324009988,0cyclictest771-21snmpd09:00:283
324009988,0cyclictest769-21lldpd12:32:513
324009988,0cyclictest769-21lldpd12:01:073
324009988,0cyclictest769-21lldpd09:29:013
324009988,0cyclictest769-21lldpd07:31:363
324009987,1cyclictest771-21snmpd11:59:553
324009987,1cyclictest771-21snmpd09:16:593
324009987,1cyclictest524-21avahi-daemon09:48:003
324009987,1cyclictest30387-21cpuspeed_turbos12:20:143
324009987,1cyclictest255-20systemd-journal12:17:223
324009986,2cyclictest771-21snmpd08:08:363
324009986,2cyclictest771-21snmpd07:36:353
323959988,0cyclictest771-21snmpd11:58:192
323959988,0cyclictest771-21snmpd09:49:032
323959988,0cyclictest771-21snmpd07:42:472
323959988,0cyclictest769-21lldpd11:21:102
323959988,0cyclictest769-21lldpd08:13:062
323959988,0cyclictest769-21lldpd07:28:272
323959988,0cyclictest769-21lldpd07:21:192
323959987,1cyclictest771-21snmpd12:00:552
323959987,1cyclictest771-21snmpd11:40:392
323959987,1cyclictest771-21snmpd10:33:312
323959986,2cyclictest771-21snmpd09:57:512
323959986,2cyclictest749-21ntpd12:35:042
323959986,2cyclictest749-21ntpd12:25:072
323959986,2cyclictest749-21ntpd12:20:232
323959986,2cyclictest749-21ntpd12:17:052
323959986,2cyclictest749-21ntpd12:10:392
323959986,2cyclictest749-21ntpd12:06:472
323959986,2cyclictest749-21ntpd11:54:332
323959986,2cyclictest749-21ntpd11:05:062
323959986,2cyclictest749-21ntpd11:00:162
323959986,2cyclictest749-21ntpd10:55:082
323959986,2cyclictest749-21ntpd10:54:502
323959986,2cyclictest749-21ntpd10:41:142
323959986,2cyclictest749-21ntpd10:16:012
323959986,2cyclictest749-21ntpd09:40:072
323959986,2cyclictest749-21ntpd09:36:192
323959986,2cyclictest749-21ntpd09:25:232
323959986,2cyclictest749-21ntpd09:20:092
323959986,2cyclictest749-21ntpd09:15:232
323959986,2cyclictest749-21ntpd07:10:222
323879988,0cyclictest771-21snmpd10:56:141
323879988,0cyclictest771-21snmpd10:50:261
323879988,0cyclictest771-21snmpd10:44:441
323879988,0cyclictest771-21snmpd10:29:461
323879988,0cyclictest769-21lldpd10:18:071
323879988,0cyclictest769-21lldpd09:57:411
323879987,1cyclictest771-21snmpd11:55:431
323879987,1cyclictest771-21snmpd09:22:501
323879987,1cyclictest771-21snmpd09:01:581
323879987,1cyclictest771-21snmpd07:56:031
323879987,1cyclictest769-21lldpd07:40:271
323879987,1cyclictest517-21systemd-resolve12:35:241
323879987,1cyclictest517-21systemd-resolve08:30:191
323879986,2cyclictest771-21snmpd11:20:501
323879986,2cyclictest771-21snmpd10:48:011
323879986,2cyclictest771-21snmpd08:35:071
323879986,2cyclictest771-21snmpd07:20:461
323829988,0cyclictest66850irq/125-lan08:30:210
324009977,0cyclictest771-21snmpd12:11:163
324009977,0cyclictest771-21snmpd11:48:393
324009977,0cyclictest771-21snmpd08:33:123
324009977,0cyclictest771-21snmpd08:17:143
324009977,0cyclictest771-21snmpd07:26:443
324009977,0cyclictest769-21lldpd10:41:163
324009977,0cyclictest769-21lldpd10:03:533
324009977,0cyclictest769-21lldpd09:39:153
324009977,0cyclictest769-21lldpd09:11:463
324009977,0cyclictest769-21lldpd07:42:333
324009976,1cyclictest771-21snmpd11:20:383
324009976,1cyclictest771-21snmpd08:41:403
324009976,1cyclictest771-21snmpd07:10:493
324009976,1cyclictest6427-21idleruntime-cro07:25:003
324009976,1cyclictest524-21avahi-daemon12:08:523
324009976,1cyclictest524-21avahi-daemon11:50:173
324009976,1cyclictest524-21avahi-daemon09:41:303
324009976,1cyclictest511ktimers/310:25:213
324009976,1cyclictest15487-21fschecks_time11:35:143
324009975,2cyclictest771-21snmpd11:12:593
324009975,2cyclictest771-21snmpd09:58:063
324009975,2cyclictest771-21snmpd08:51:403
324009975,2cyclictest15272-21cat12:35:163
324009973,3cyclictest255-20systemd-journal10:15:183
324009972,4cyclictest30220-21cat09:25:013
323959977,0cyclictest771-21snmpd07:48:312
323959977,0cyclictest771-21snmpd07:35:382
323959976,1cyclictest749-21ntpd10:35:002
323959976,1cyclictest749-21ntpd08:55:212
323959975,2cyclictest749-21ntpd10:45:242
323959975,2cyclictest749-21ntpd10:22:562
323959975,2cyclictest749-21ntpd09:33:092
323959975,2cyclictest749-21ntpd08:05:242
323879977,0cyclictest771-21snmpd11:37:091
323879977,0cyclictest771-21snmpd11:11:081
323879977,0cyclictest769-21lldpd12:11:531
323879977,0cyclictest769-21lldpd12:06:271
323879977,0cyclictest769-21lldpd09:40:451
323879977,0cyclictest769-21lldpd08:27:261
323879977,0cyclictest769-21lldpd08:27:261
323879977,0cyclictest769-21lldpd08:05:291
323879977,0cyclictest769-21lldpd08:04:551
323879977,0cyclictest769-21lldpd07:54:211
323879976,1cyclictest771-21snmpd12:26:161
323879976,1cyclictest771-21snmpd11:51:481
323879976,1cyclictest771-21snmpd09:47:301
323879976,1cyclictest769-21lldpd11:46:571
323879976,1cyclictest524-21avahi-daemon12:22:021
323879976,1cyclictest524-21avahi-daemon08:45:171
323879975,2cyclictest771-21snmpd12:01:011
323879975,2cyclictest771-21snmpd10:31:401
323879975,2cyclictest771-21snmpd10:07:361
323879975,2cyclictest771-21snmpd08:23:361
323879975,2cyclictest771-21snmpd08:12:061
323879973,3cyclictest21963-21wc11:05:161
324009966,0cyclictest771-21snmpd11:31:003
324009966,0cyclictest769-21lldpd10:30:543
324009966,0cyclictest769-21lldpd08:56:463
324009966,0cyclictest524-21avahi-daemon11:00:473
324009966,0cyclictest517-21systemd-resolve10:54:333
324009965,1cyclictest771-21snmpd08:38:463
324009965,1cyclictest771-21snmpd08:20:183
324009965,1cyclictest524-21avahi-daemon10:55:153
324009965,1cyclictest24144-21ssh09:53:473
324009963,2cyclictest3290-21ssh10:06:293
324009963,2cyclictest255-20systemd-journal12:29:503
324009962,3cyclictest29005-21ssh10:35:243
324009962,3cyclictest23519-21ssh11:06:293
324009962,3cyclictest21819-21sed08:00:153
323959966,0cyclictest769-21lldpd08:35:322
323959966,0cyclictest769-21lldpd07:31:002
323959966,0cyclictest517-21systemd-resolve07:55:562
323959965,1cyclictest18624-21unixbench_singl09:10:242
323959964,2cyclictest749-21ntpd10:10:032
323959962,3cyclictest26098-21fw_conntrack11:10:122
323879966,0cyclictest771-21snmpd09:26:141
323879966,0cyclictest771-21snmpd07:45:411
323879966,0cyclictest769-21lldpd12:16:331
323879966,0cyclictest769-21lldpd09:19:051
323879966,0cyclictest769-21lldpd08:58:051
323879966,0cyclictest769-21lldpd07:27:131
323879965,1cyclictest771-21snmpd10:00:391
323879965,1cyclictest524-21avahi-daemon12:30:321
323879965,1cyclictest17598-21gltestperf09:10:151
323879964,2cyclictest771-21snmpd10:36:521
323879963,3cyclictest550-21NetworkManager11:31:551
323879963,2cyclictest31319-21sed11:15:231
324009955,0cyclictest769-21lldpd07:17:243
324009955,0cyclictest25686-21gltestperf08:10:143
324009955,0cyclictest0-21swapper/307:49:593
324009954,1cyclictest511ktimers/308:25:213
324009954,1cyclictest511ktimers/308:25:203
324009954,1cyclictest21014-21sh08:00:003
324009954,1cyclictest0-21swapper/311:25:143
324009953,2cyclictest771-21snmpd11:41:213
324009953,2cyclictest771-21snmpd10:11:123
324009953,2cyclictest771-21snmpd08:46:193
324009953,2cyclictest771-21snmpd07:53:563
324009952,3cyclictest550-21NetworkManager10:48:573
324009952,2cyclictest15450-21xargs10:20:223
324009951,3cyclictest15701-21memory09:05:163
323959955,0cyclictest771-21snmpd10:06:242
323959954,1cyclictest524-21avahi-daemon07:15:042
323959954,1cyclictest0-21swapper/207:55:002
323959953,2cyclictest771-21snmpd08:15:122
323959953,0cyclictest191rcu_preempt08:30:192
323959952,3cyclictest30721-21awk08:20:222
323959950,5cyclictest7898-21ntpq08:45:172
323959950,4cyclictest24012-21expr11:45:142
323959950,4cyclictest15979-21ntp_states09:05:182
323959950,3cyclictest21278-21find08:00:112
323879954,1cyclictest771-21snmpd09:53:361
323879954,1cyclictest771-21snmpd09:30:561
323879954,1cyclictest518-21gltestperf07:10:141
323879954,1cyclictest3412-21ntp_kernel_pll_07:15:181
323879953,2cyclictest771-21snmpd09:35:171
323879953,2cyclictest771-21snmpd07:38:351
323879953,2cyclictest5496-21cat08:40:161
323879952,3cyclictest15735-21cat09:05:161
323879952,2cyclictest9082-21dpkg07:30:021
323879952,2cyclictest8759-21ssh10:13:441
323879952,2cyclictest28203-21ntpq08:15:191
323879952,2cyclictest20111-21ls11:40:161
323879952,2cyclictest18278-21ssh11:00:261
323879952,2cyclictest17122-21ssh10:22:521
323879951,3cyclictest10942-21wc08:55:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional