You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-01 - 15:48

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rack8slot6s.osadl.org (updated Sat Nov 01, 2025 12:43:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
11661991918,1cyclictest6728-21kworker/2:2+events12:22:472
11661991918,1cyclictest66850irq/125-lan11:50:012
11661991918,1cyclictest66850irq/125-lan09:41:242
11661991918,1cyclictest66850irq/125-lan09:35:232
11661991918,1cyclictest66850irq/125-lan09:24:492
11661991818,0cyclictest66850irq/125-lan12:35:492
11661991818,0cyclictest66850irq/125-lan10:55:192
11661991818,0cyclictest66850irq/125-lan09:13:072
11661991818,0cyclictest66850irq/125-lan07:44:032
11661991818,0cyclictest66850irq/125-lan07:15:212
11661991817,1cyclictest66850irq/125-lan12:06:032
11661991817,1cyclictest66850irq/125-lan11:55:162
11661991817,1cyclictest66850irq/125-lan11:20:122
11661991817,1cyclictest66850irq/125-lan11:10:482
11661991817,1cyclictest66850irq/125-lan11:05:102
11661991817,1cyclictest66850irq/125-lan10:50:412
11661991817,1cyclictest66850irq/125-lan10:40:182
11661991817,1cyclictest66850irq/125-lan10:33:012
11661991817,1cyclictest66850irq/125-lan07:55:132
11661991717,0cyclictest66850irq/125-lan12:29:482
11661991717,0cyclictest66850irq/125-lan12:15:592
11661991717,0cyclictest66850irq/125-lan11:51:412
11661991717,0cyclictest66850irq/125-lan11:33:182
11661991717,0cyclictest66850irq/125-lan10:45:062
11661991717,0cyclictest66850irq/125-lan07:35:132
11661991717,0cyclictest66850irq/125-lan07:25:182
11661991716,1cyclictest66850irq/125-lan12:31:432
11661991716,1cyclictest66850irq/125-lan12:10:132
11661991716,1cyclictest66850irq/125-lan11:15:002
11661991716,1cyclictest66850irq/125-lan10:35:172
11661991716,1cyclictest66850irq/125-lan10:10:182
11661991716,1cyclictest66850irq/125-lan10:00:212
11661991716,1cyclictest66850irq/125-lan09:56:142
11661991716,1cyclictest66850irq/125-lan09:50:352
11661991716,1cyclictest66850irq/125-lan09:45:122
11661991716,1cyclictest66850irq/125-lan09:30:292
11661991716,1cyclictest66850irq/125-lan07:45:192
11661991616,0cyclictest66850irq/125-lan12:02:082
11661991616,0cyclictest66850irq/125-lan10:05:152
11661991616,0cyclictest66850irq/125-lan09:00:142
11661991616,0cyclictest66850irq/125-lan08:15:222
11661991616,0cyclictest66850irq/125-lan08:10:212
11661991616,0cyclictest66850irq/125-lan07:30:182
11661991616,0cyclictest66850irq/125-lan07:20:202
11661991615,1cyclictest66850irq/125-lan11:40:102
11661991615,1cyclictest66850irq/125-lan11:00:122
11661991615,1cyclictest66850irq/125-lan10:28:192
11661991615,1cyclictest66850irq/125-lan10:22:282
11661991615,1cyclictest66850irq/125-lan10:19:562
11661991615,1cyclictest66850irq/125-lan09:25:152
11663991514,1cyclictest749-21ntpd09:55:483
11661991515,0cyclictest66850irq/125-lan11:35:472
11661991515,0cyclictest66850irq/125-lan11:27:232
11661991515,0cyclictest66850irq/125-lan07:10:032
11661991514,1cyclictest66850irq/125-lan09:15:202
11661991514,1cyclictest66850irq/125-lan08:55:282
11661991414,0cyclictest66850irq/125-lan08:46:412
11661991414,0cyclictest66850irq/125-lan08:30:202
11661991414,0cyclictest66850irq/125-lan08:25:152
11661991414,0cyclictest66850irq/125-lan08:25:152
11661991414,0cyclictest66850irq/125-lan08:05:162
11661991413,1cyclictest66850irq/125-lan08:40:172
11661991313,0cyclictest9487-21cat08:20:152
11661991313,0cyclictest771-21snmpd08:38:012
11661991313,0cyclictest66850irq/125-lan07:50:212
11661991312,1cyclictest66850irq/125-lan08:00:152
11661991212,0cyclictest66850irq/125-lan09:05:192
11661991010,0cyclictest66850irq/125-lan08:50:222
116639998,1cyclictest771-21snmpd12:38:253
116639998,1cyclictest771-21snmpd10:44:393
116639998,1cyclictest771-21snmpd10:21:503
116639998,1cyclictest771-21snmpd07:32:193
116569998,1cyclictest771-21snmpd08:14:561
116569998,1cyclictest771-21snmpd08:01:081
116569998,1cyclictest769-21lldpd11:01:281
116569998,1cyclictest524-21avahi-daemon11:56:471
116499998,1cyclictest771-21snmpd11:01:280
116499998,1cyclictest771-21snmpd08:48:100
116639988,0cyclictest771-21snmpd10:45:153
116639988,0cyclictest769-21lldpd12:12:403
116639988,0cyclictest769-21lldpd08:30:053
116639988,0cyclictest769-21lldpd08:23:313
116639987,1cyclictest771-21snmpd10:51:363
116639987,1cyclictest771-21snmpd10:31:143
116639987,1cyclictest771-21snmpd09:35:193
116639987,1cyclictest771-21snmpd07:40:553
116639987,1cyclictest524-21avahi-daemon11:41:113
116639987,1cyclictest524-21avahi-daemon10:58:563
116639987,1cyclictest524-21avahi-daemon09:25:193
116639987,1cyclictest27509-21gltestperf09:05:143
116639986,2cyclictest771-21snmpd11:37:233
116639986,2cyclictest771-21snmpd10:11:233
116639986,2cyclictest771-21snmpd07:48:493
116639984,3cyclictest255-20systemd-journal10:03:153
116569988,0cyclictest771-21snmpd11:16:501
116569988,0cyclictest771-21snmpd11:12:341
116569988,0cyclictest771-21snmpd10:38:451
116569988,0cyclictest771-21snmpd10:23:231
116569988,0cyclictest769-21lldpd09:26:281
116569988,0cyclictest769-21lldpd07:15:541
116569987,1cyclictest771-21snmpd12:27:211
116569987,1cyclictest771-21snmpd09:47:491
116569987,1cyclictest771-21snmpd08:20:011
116569987,1cyclictest524-21avahi-daemon10:32:151
116569987,1cyclictest517-21systemd-resolve12:24:431
116569987,1cyclictest21714-21ntp_offset11:25:191
116569986,2cyclictest771-21snmpd11:40:501
116569986,2cyclictest771-21snmpd10:16:141
116569986,2cyclictest771-21snmpd09:20:571
116569986,2cyclictest771-21snmpd08:50:221
116569986,2cyclictest771-21snmpd07:40:101
116499988,0cyclictest771-21snmpd10:36:330
116499988,0cyclictest771-21snmpd09:24:090
116499988,0cyclictest771-21snmpd08:51:440
116499988,0cyclictest771-21snmpd08:10:440
116499988,0cyclictest769-21lldpd12:23:360
116499988,0cyclictest769-21lldpd11:55:040
116499988,0cyclictest769-21lldpd10:30:590
116499987,1cyclictest771-21snmpd11:08:010
116499987,1cyclictest771-21snmpd08:02:500
116499987,1cyclictest524-21avahi-daemon10:43:460
116499987,1cyclictest524-21avahi-daemon10:23:190
116499986,2cyclictest771-21snmpd11:39:140
116499986,2cyclictest771-21snmpd11:25:310
116499986,2cyclictest749-21ntpd08:36:190
116499986,2cyclictest18337-21cat07:25:150
116499986,2cyclictest16575-21cat11:20:140
116639977,0cyclictest771-21snmpd12:27:273
116639977,0cyclictest771-21snmpd08:19:223
116639977,0cyclictest769-21lldpd12:03:443
116639977,0cyclictest769-21lldpd09:16:593
116639977,0cyclictest769-21lldpd07:57:283
116639976,1cyclictest771-21snmpd10:16:203
116639976,1cyclictest771-21snmpd09:42:223
116639976,1cyclictest771-21snmpd09:10:093
116639976,1cyclictest771-21snmpd07:53:223
116639976,1cyclictest6398-21fschecks_count11:10:123
116639976,1cyclictest517-21systemd-resolve11:26:083
116639976,1cyclictest25808-21fschecks_time11:30:143
116639976,1cyclictest12074-21cut11:15:173
116639975,2cyclictest771-21snmpd11:45:323
116639975,2cyclictest771-21snmpd11:00:273
116639975,2cyclictest771-21snmpd08:46:133
116639975,2cyclictest771-21snmpd08:01:173
116569977,0cyclictest771-21snmpd12:12:571
116569977,0cyclictest771-21snmpd09:39:041
116569977,0cyclictest771-21snmpd07:12:451
116569977,0cyclictest769-21lldpd07:51:131
116569977,0cyclictest769-21lldpd07:33:341
116569977,0cyclictest255-20systemd-journal09:52:531
116569976,1cyclictest771-21snmpd12:31:071
116569976,1cyclictest771-21snmpd12:17:491
116569976,1cyclictest771-21snmpd09:10:211
116569976,1cyclictest771-21snmpd09:01:211
116569976,1cyclictest769-21lldpd08:17:151
116569976,1cyclictest524-21avahi-daemon10:01:471
116569976,1cyclictest524-21avahi-daemon09:30:571
116569976,1cyclictest27690-21grep12:05:191
116569976,1cyclictest255-20systemd-journal11:37:471
116569975,2cyclictest771-21snmpd08:56:451
116569975,2cyclictest771-21snmpd07:28:011
116569975,2cyclictest12379-21cat10:05:131
116569973,3cyclictest13594-21ssh11:50:271
116499977,0cyclictest769-21lldpd10:53:070
116499977,0cyclictest769-21lldpd09:41:300
116499977,0cyclictest769-21lldpd08:19:410
116499976,1cyclictest769-21lldpd11:42:300
116499976,1cyclictest590-21gmain12:28:510
116499976,1cyclictest524-21avahi-daemon11:47:140
116499976,1cyclictest524-21avahi-daemon10:05:410
116499976,1cyclictest524-21avahi-daemon09:50:010
116499976,1cyclictest524-21avahi-daemon09:38:330
116499976,1cyclictest30105-21cpuspeed_turbos10:25:120
116499975,2cyclictest771-21snmpd12:15:090
116499975,2cyclictest771-21snmpd12:00:500
116499975,2cyclictest771-21snmpd10:18:540
116499975,2cyclictest771-21snmpd09:57:550
116499975,2cyclictest771-21snmpd09:34:460
116499975,2cyclictest771-21snmpd08:33:280
116499975,2cyclictest771-21snmpd07:57:020
116499974,3cyclictest771-21snmpd08:25:190
116499974,3cyclictest771-21snmpd08:25:190
116639966,0cyclictest769-21lldpd11:55:063
116639966,0cyclictest769-21lldpd11:08:113
116639966,0cyclictest769-21lldpd08:26:473
116639966,0cyclictest769-21lldpd08:26:473
116639966,0cyclictest769-21lldpd07:22:523
116639965,1cyclictest771-21snmpd07:38:433
116639965,1cyclictest25178-21/usr/sbin/munin09:00:203
116639964,2cyclictest771-21snmpd09:23:153
116639964,2cyclictest550-21NetworkManager12:31:353
116639963,3cyclictest550-21NetworkManager09:52:273
116639962,3cyclictest6602-21ssh12:16:193
116569966,0cyclictest771-21snmpd08:07:011
116569966,0cyclictest769-21lldpd10:57:551
116569966,0cyclictest524-21avahi-daemon08:49:301
116569966,0cyclictest524-21avahi-daemon08:27:541
116569966,0cyclictest524-21avahi-daemon08:27:541
116569965,1cyclictest771-21snmpd12:38:131
116569965,1cyclictest769-21lldpd10:51:331
116569965,1cyclictest16614-21pmu-power10:45:201
116569964,2cyclictest771-21snmpd12:00:151
116569963,3cyclictest550-21NetworkManager11:07:021
116569963,3cyclictest550-21NetworkManager09:56:151
116569963,2cyclictest586-21rs:main1
116569962,3cyclictest11373-21ssh11:49:381
116499966,0cyclictest769-21lldpd11:33:080
116499966,0cyclictest769-21lldpd09:45:190
116499966,0cyclictest769-21lldpd09:03:450
116499966,0cyclictest584-21in:imuxsock07:40:350
116499965,1cyclictest771-21snmpd09:15:210
116499965,1cyclictest771-21snmpd08:21:010
116499965,1cyclictest771-21snmpd07:21:470
116499965,1cyclictest771-21snmpd07:11:030
116499965,1cyclictest769-21lldpd10:46:040
116499963,3cyclictest550-21NetworkManager12:12:370
116499963,2cyclictest31350-21ssh12:09:310
116499963,2cyclictest28775-21ssh12:38:250
116499962,3cyclictest255-20systemd-journal07:50:290
116639955,0cyclictest769-21lldpd08:50:513
116639955,0cyclictest769-21lldpd07:19:123
116639955,0cyclictest524-21avahi-daemon08:38:483
116639954,1cyclictest771-21snmpd10:35:263
116639954,1cyclictest771-21snmpd08:06:533
116639953,2cyclictest749-21ntpd10:25:293
116639953,2cyclictest5740-21ntpq08:10:173
116639952,2cyclictest586-21rs:main3
116639952,2cyclictest28501-21ssh09:46:363
116639952,2cyclictest27545-21grep12:05:183
116639952,2cyclictest17943-21ntpq08:40:163
116639952,2cyclictest15145-21seq10:08:373
116639952,2cyclictest10729-21needreboot12:20:173
116639951,3cyclictest13529-21cat09:30:153
116569955,0cyclictest769-21lldpd07:55:041
116569955,0cyclictest524-21avahi-daemon08:44:141
116569955,0cyclictest0-21swapper/108:35:001
116569954,1cyclictest771-21snmpd09:40:221
116569954,1cyclictest16442-21gltestperf11:20:131
116569953,2cyclictest771-21snmpd07:48:101
116569952,3cyclictest771-21snmpd09:05:121
116569952,2cyclictest3387-21ssh09:17:341
116569952,2cyclictest31230-21wc10:25:211
116569952,2cyclictest26093-21sed11:30:171
116569951,3cyclictest16450-21diskstats10:10:131
116499955,0cyclictest771-21snmpd09:25:090
116499954,1cyclictest171ktimers/012:30:140
116499953,2cyclictest550-21NetworkManager09:10:140
116499953,2cyclictest17133-21apt-get08:40:110
116499953,2cyclictest12949-21ntpq11:50:190
116499953,0cyclictest0-21swapper/011:15:550
116499952,3cyclictest7459-21sed11:10:200
116499952,3cyclictest24833-21df10:55:140
116499952,2cyclictest586-21rs:main0
116499952,2cyclictest22740-21sed07:35:130
116499952,2cyclictest18537-21ssh10:11:470
116499952,2cyclictest11452-21ssh10:04:450
116639942,2cyclictest23601-21cat08:55:163
116639941,2cyclictest18178-21grep07:25:143
116639940,4cyclictest12578-21ntpq07:10:193
116639940,3cyclictest12683-21memory11:50:173
116569941,2cyclictest16123-21grep07:20:141
116569940,4cyclictest23101-21ntpq07:35:161
116569940,4cyclictest15930-21ntpq08:35:191
116499942,2cyclictest27924-21ntpq09:05:160
116499942,2cyclictest14461-21sed07:15:150
116499941,2cyclictest3294-21gltestperf08:05:170
116499941,2cyclictest26611-21readlink07:45:010
116499941,2cyclictest20740-21smartctl07:30:150
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional