You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-09 - 19:34

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack8slot6s.osadl.org (updated Tue Dec 09, 2025 12:43:43)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
8634991919,0cyclictest66850irq/125-lan11:40:213
8634991918,1cyclictest66850irq/125-lan12:35:113
8634991918,1cyclictest66850irq/125-lan11:10:113
8634991918,1cyclictest66850irq/125-lan11:08:563
8634991918,1cyclictest66850irq/125-lan10:35:013
8634991918,1cyclictest66850irq/125-lan10:10:013
8634991918,1cyclictest66850irq/125-lan09:37:343
8634991918,1cyclictest66850irq/125-lan09:14:243
8634991817,1cyclictest66850irq/125-lan12:27:293
8634991817,1cyclictest66850irq/125-lan12:20:153
8634991817,1cyclictest66850irq/125-lan11:17:013
8634991817,1cyclictest66850irq/125-lan10:56:233
8634991817,1cyclictest66850irq/125-lan10:29:043
8634991817,1cyclictest66850irq/125-lan10:18:413
8634991817,1cyclictest66850irq/125-lan10:00:173
8634991817,1cyclictest66850irq/125-lan09:23:543
8634991817,1cyclictest66850irq/125-lan08:20:153
8634991817,1cyclictest66850irq/125-lan07:20:193
8634991817,1cyclictest66850irq/125-lan07:15:153
8623991818,0cyclictest771-21snmpd12:36:301
8623991818,0cyclictest771-21snmpd09:43:531
8623991818,0cyclictest771-21snmpd08:16:051
8623991818,0cyclictest771-21snmpd07:16:151
8623991818,0cyclictest3930-21cat11:45:131
8623991818,0cyclictest16581-21cat10:50:161
8634991717,0cyclictest66850irq/125-lan12:15:203
8634991717,0cyclictest66850irq/125-lan12:14:343
8634991717,0cyclictest66850irq/125-lan12:02:143
8634991717,0cyclictest66850irq/125-lan11:51:143
8634991717,0cyclictest66850irq/125-lan10:53:423
8634991717,0cyclictest66850irq/125-lan09:51:203
8634991717,0cyclictest66850irq/125-lan09:18:293
8634991716,1cyclictest66850irq/125-lan12:30:063
8634991716,1cyclictest66850irq/125-lan11:59:563
8634991716,1cyclictest66850irq/125-lan11:30:483
8634991716,1cyclictest66850irq/125-lan11:28:513
8634991716,1cyclictest66850irq/125-lan11:20:033
8634991716,1cyclictest66850irq/125-lan10:43:433
8634991716,1cyclictest66850irq/125-lan09:58:213
8634991716,1cyclictest66850irq/125-lan09:40:003
8634991716,1cyclictest66850irq/125-lan09:33:383
8634991716,1cyclictest66850irq/125-lan09:26:243
8634991716,1cyclictest66850irq/125-lan08:55:293
8634991716,1cyclictest66850irq/125-lan08:45:233
8634991716,1cyclictest66850irq/125-lan08:36:293
8634991716,1cyclictest66850irq/125-lan07:45:153
8623991717,0cyclictest771-21snmpd11:15:381
8623991717,0cyclictest771-21snmpd11:02:161
8623991717,0cyclictest771-21snmpd10:27:181
8623991717,0cyclictest771-21snmpd10:21:461
8623991717,0cyclictest771-21snmpd07:32:241
8634991616,0cyclictest66850irq/125-lan11:36:463
8634991616,0cyclictest66850irq/125-lan11:02:033
8634991615,1cyclictest66850irq/125-lan12:06:513
8634991615,1cyclictest66850irq/125-lan10:46:303
8634991615,1cyclictest66850irq/125-lan10:35:173
8634991615,1cyclictest66850irq/125-lan10:05:163
8634991615,1cyclictest66850irq/125-lan09:45:043
8634991615,1cyclictest66850irq/125-lan08:25:143
8634991615,1cyclictest66850irq/125-lan08:10:223
8634991615,1cyclictest66850irq/125-lan07:25:173
8634991515,0cyclictest66850irq/125-lan11:47:433
8634991515,0cyclictest66850irq/125-lan10:20:223
8634991514,1cyclictest66850irq/125-lan08:08:453
8634991514,1cyclictest66850irq/125-lan08:00:153
8634991514,1cyclictest66850irq/125-lan07:55:183
8634991514,1cyclictest66850irq/125-lan07:10:203
8623991513,2cyclictest13366-21cat12:30:141
8634991413,1cyclictest66850irq/125-lan08:15:123
8634991313,0cyclictest66850irq/125-lan09:05:223
8634991313,0cyclictest66850irq/125-lan08:40:213
8634991313,0cyclictest66850irq/125-lan08:30:123
8634991313,0cyclictest66850irq/125-lan07:50:443
8634991212,0cyclictest66850irq/125-lan07:30:163
8634991110,1cyclictest66850irq/125-lan07:41:283
8617991010,0cyclictest7100-21fwupd11:14:210
86349999,0cyclictest66850irq/125-lan09:00:153
86299998,1cyclictest771-21snmpd12:36:152
86299998,1cyclictest771-21snmpd09:21:112
86299998,1cyclictest769-21lldpd09:00:372
86239998,1cyclictest771-21snmpd10:31:061
86239996,2cyclictest771-21snmpd08:24:031
86179998,1cyclictest771-21snmpd09:58:560
86179998,1cyclictest771-21snmpd09:39:360
86179998,1cyclictest771-21snmpd08:12:260
86179998,1cyclictest769-21lldpd09:45:410
86179998,1cyclictest769-21lldpd07:58:090
86349988,0cyclictest66850irq/125-lan07:35:173
86349987,1cyclictest17478-21fschecks_count08:50:143
86299988,0cyclictest771-21snmpd10:14:002
86299988,0cyclictest771-21snmpd07:19:102
86299988,0cyclictest769-21lldpd11:23:212
86299988,0cyclictest769-21lldpd07:46:322
86299987,1cyclictest771-21snmpd10:26:152
86299987,1cyclictest771-21snmpd08:39:482
86299987,1cyclictest771-21snmpd08:32:392
86299987,1cyclictest771-21snmpd08:11:382
86299987,1cyclictest771-21snmpd07:38:042
86299987,1cyclictest769-21lldpd10:37:262
86299987,1cyclictest524-21avahi-daemon12:03:112
86299987,1cyclictest517-21systemd-resolve09:38:042
86239988,0cyclictest769-21lldpd10:40:001
86239988,0cyclictest769-21lldpd10:04:271
86239987,1cyclictest771-21snmpd10:07:521
86239987,1cyclictest771-21snmpd07:36:001
86239987,1cyclictest255-20systemd-journal09:36:081
86239987,1cyclictest21506-21latency_hist12:05:001
86239986,2cyclictest749-21ntpd11:36:101
86239986,2cyclictest749-21ntpd11:25:521
86239986,2cyclictest749-21ntpd11:20:591
86239986,2cyclictest749-21ntpd11:06:291
86239986,2cyclictest749-21ntpd10:56:001
86239986,2cyclictest749-21ntpd10:40:401
86239986,2cyclictest749-21ntpd10:13:151
86239986,2cyclictest749-21ntpd09:58:051
86239986,2cyclictest749-21ntpd09:53:201
86239986,2cyclictest749-21ntpd09:26:411
86239986,2cyclictest749-21ntpd09:15:141
86239986,2cyclictest749-21ntpd09:10:121
86239986,2cyclictest749-21ntpd08:50:211
86239986,2cyclictest23754-21cat09:05:151
86239985,2cyclictest771-21snmpd11:12:381
86179988,0cyclictest771-21snmpd12:35:420
86179988,0cyclictest771-21snmpd12:06:220
86179988,0cyclictest771-21snmpd08:06:290
86179988,0cyclictest769-21lldpd07:17:360
86179988,0cyclictest524-21avahi-daemon12:27:030
86179987,1cyclictest771-21snmpd10:07:400
86179987,1cyclictest771-21snmpd09:16:340
86179987,1cyclictest771-21snmpd09:06:470
86179987,1cyclictest771-21snmpd08:31:020
86179987,1cyclictest771-21snmpd08:29:410
86179987,1cyclictest769-21lldpd11:09:430
86179986,2cyclictest771-21snmpd12:30:460
86179986,2cyclictest771-21snmpd08:43:180
86299977,0cyclictest771-21snmpd12:25:382
86299977,0cyclictest771-21snmpd08:21:382
86299977,0cyclictest769-21lldpd12:31:272
86299977,0cyclictest769-21lldpd12:18:412
86299977,0cyclictest769-21lldpd07:21:102
86299976,1cyclictest771-21snmpd08:52:002
86299976,1cyclictest771-21snmpd08:00:552
86299976,1cyclictest771-21snmpd07:59:042
86299976,1cyclictest771-21snmpd07:31:012
86299976,1cyclictest769-21lldpd11:07:492
86299976,1cyclictest769-21lldpd08:43:482
86299976,1cyclictest524-21avahi-daemon10:58:012
86299975,2cyclictest771-21snmpd11:51:012
86299975,2cyclictest771-21snmpd11:03:562
86299975,2cyclictest771-21snmpd10:15:272
86299974,3cyclictest771-21snmpd10:34:252
86299973,3cyclictest255-20systemd-journal11:11:352
86299973,3cyclictest11498-21ssh11:19:002
86239977,0cyclictest771-21snmpd08:48:241
86239977,0cyclictest769-21lldpd11:52:331
86239977,0cyclictest769-21lldpd10:19:311
86239977,0cyclictest769-21lldpd09:31:461
86239977,0cyclictest769-21lldpd08:37:011
86239977,0cyclictest769-21lldpd08:03:251
86239977,0cyclictest769-21lldpd07:59:251
86239977,0cyclictest769-21lldpd07:28:071
86239977,0cyclictest524-21avahi-daemon08:59:431
86239976,1cyclictest8721-21gltestperf12:25:151
86239976,1cyclictest749-21ntpd11:58:061
86239976,1cyclictest749-21ntpd11:41:081
86239976,1cyclictest524-21avahi-daemon08:40:231
86239976,1cyclictest255-20systemd-journal12:16:401
86239975,2cyclictest771-21snmpd12:20:591
86239975,2cyclictest771-21snmpd12:08:321
86239975,2cyclictest749-21ntpd11:32:211
86239975,2cyclictest749-21ntpd09:49:451
86179977,0cyclictest771-21snmpd11:37:100
86179977,0cyclictest771-21snmpd11:04:590
86179977,0cyclictest771-21snmpd10:01:560
86179977,0cyclictest771-21snmpd07:33:570
86179977,0cyclictest769-21lldpd10:57:510
86179977,0cyclictest769-21lldpd10:11:430
86179977,0cyclictest769-21lldpd09:42:180
86179977,0cyclictest769-21lldpd08:00:270
86179977,0cyclictest769-21lldpd07:47:510
86179976,1cyclictest769-21lldpd07:10:140
86179976,1cyclictest524-21avahi-daemon10:29:420
86179976,1cyclictest517-21systemd-resolve10:37:290
86179976,1cyclictest19715-21sed07:35:150
86179975,2cyclictest771-21snmpd09:00:180
86179973,3cyclictest5323-21df08:20:120
86299966,0cyclictest771-21snmpd10:05:162
86299966,0cyclictest771-21snmpd09:49:442
86299966,0cyclictest771-21snmpd08:28:382
86299966,0cyclictest769-21lldpd10:42:552
86299966,0cyclictest769-21lldpd10:02:072
86299966,0cyclictest769-21lldpd08:59:222
86299965,1cyclictest771-21snmpd08:08:502
86299965,1cyclictest3424-21gltestperf08:15:142
86299965,1cyclictest17332-21fschecks_count11:25:152
86299964,2cyclictest771-21snmpd12:13:472
86299964,2cyclictest771-21snmpd09:10:342
86299964,2cyclictest771-21snmpd07:44:222
86299963,3cyclictest550-21NetworkManager10:50:512
86299963,3cyclictest27690-21fw_packets09:50:132
86299963,2cyclictest29459-21ssh11:38:182
86299962,3cyclictest25011-21ssh10:24:252
86299960,5cyclictest12316-21ntpq10:45:162
86239966,0cyclictest771-21snmpd07:42:341
86239965,1cyclictest8934-21cut08:29:591
86239965,1cyclictest749-21ntpd08:10:191
86239964,2cyclictest771-21snmpd12:10:171
86239964,2cyclictest771-21snmpd09:00:211
86239960,4cyclictest25079-21diskmemload10:48:151
86179966,0cyclictest771-21snmpd09:22:560
86179966,0cyclictest769-21lldpd12:16:270
86179966,0cyclictest769-21lldpd11:24:250
86179966,0cyclictest769-21lldpd08:16:090
86179966,0cyclictest255-20systemd-journal09:13:190
86179965,1cyclictest8070-21fschecks_count11:15:150
86179965,1cyclictest771-21snmpd10:24:310
86179965,1cyclictest769-21lldpd11:42:130
86179965,1cyclictest3842-21gltestperf12:20:120
86179963,3cyclictest771-21snmpd12:03:160
86179963,3cyclictest550-21NetworkManager09:32:010
86179963,3cyclictest550-21NetworkManager09:26:310
86179963,2cyclictest21618-21ssh11:30:000
86179963,2cyclictest13195-21ssh10:45:470
86179963,2cyclictest12924-21sed11:55:140
86179962,3cyclictest17702-21memory11:25:180
86179961,5cyclictest550-21NetworkManager07:40:520
86299955,0cyclictest771-21snmpd09:25:432
86299954,1cyclictest421ktimers/211:55:212
86299953,2cyclictest771-21snmpd09:30:192
86299952,2cyclictest586-21rs:main2
86299952,2cyclictest5325-21ssh12:20:522
86299952,2cyclictest31643-21ls09:55:122
86299952,2cyclictest30785-21ssh11:40:062
86299952,2cyclictest24144-21ssh11:32:052
86299952,2cyclictest23940-21ssh12:06:192
86299952,2cyclictest22628-21ssh09:44:432
86299951,3cyclictest5628-21ssh11:47:292
86239952,2cyclictest9669-21ntp_states07:10:181
86239952,2cyclictest4336-21ssh09:22:391
86239952,2cyclictest255-20systemd-journal08:07:391
86239952,2cyclictest24280-21ld07:45:171
86239952,2cyclictest13799-21grep07:20:181
86239951,3cyclictest26688-21sed07:50:191
86179954,1cyclictest771-21snmpd08:35:450
86179954,1cyclictest12942-21cpuspeed_turbos07:20:120
86179953,2cyclictest0-21swapper/010:41:520
86179952,3cyclictest4333-21ntp_states11:45:300
86179952,3cyclictest17619-21sed08:50:160
86179952,2cyclictest30668-21ssh12:14:380
86179952,2cyclictest30066-21cpu10:30:110
86179952,2cyclictest29071-21ssh09:50:500
86179952,2cyclictest17829-21ssh10:50:510
86179952,2cyclictest16179-21kworker/u16:1+nfsiod10:17:090
86179951,3cyclictest16641-21pluginstate07:29:590
86179950,4cyclictest19453-21diskstats08:55:160
86299942,2cyclictest23456-21expr09:05:122
86299941,2cyclictest30880-21open_files09:15:172
86299941,2cyclictest25739-21grep07:50:122
86299940,3cyclictest15746-21ntpq07:25:192
86299940,2cyclictest1523650/usr/sbin/munin08:45:142
86239940,3cyclictest9368-21diskstats08:30:121
86179943,1cyclictest771-21snmpd11:50:280
86179941,3cyclictest25932-21wc07:50:140
86179941,2cyclictest15730-21uname08:45:150
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional