You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-10 - 17:11

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack8slot6s.osadl.org (updated Wed Dec 10, 2025 12:43:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
25650992018,2cyclictest66850irq/125-lan10:25:221
25650992016,4cyclictest66850irq/125-lan12:00:141
25650992016,1cyclictest66850irq/125-lan11:44:491
25650992015,1cyclictest66850irq/125-lan09:30:171
25650991917,2cyclictest66850irq/125-lan11:20:171
25650991917,2cyclictest66850irq/125-lan09:43:331
25650991917,2cyclictest66850irq/125-lan08:00:201
25650991916,3cyclictest66850irq/125-lan11:08:221
25650991916,3cyclictest66850irq/125-lan10:05:371
25650991916,1cyclictest66850irq/125-lan10:31:001
25650991915,1cyclictest66850irq/125-lan08:55:071
25650991818,0cyclictest66850irq/125-lan12:36:511
25650991818,0cyclictest66850irq/125-lan09:54:121
25650991817,1cyclictest66850irq/125-lan12:25:301
25650991817,1cyclictest66850irq/125-lan12:21:321
25650991817,1cyclictest66850irq/125-lan11:35:161
25650991817,1cyclictest66850irq/125-lan11:33:131
25650991817,1cyclictest66850irq/125-lan11:26:301
25650991817,1cyclictest66850irq/125-lan09:13:521
25650991816,2cyclictest66850irq/125-lan10:40:251
25650991816,2cyclictest66850irq/125-lan09:22:221
25650991815,1cyclictest66850irq/125-lan10:04:481
25650991815,1cyclictest66850irq/125-lan09:55:191
25650991815,1cyclictest66850irq/125-lan08:38:471
25650991815,1cyclictest66850irq/125-lan08:30:141
25650991815,0cyclictest66850irq/125-lan09:25:121
25650991717,0cyclictest66850irq/125-lan12:15:151
25650991717,0cyclictest66850irq/125-lan12:07:511
25650991717,0cyclictest66850irq/125-lan11:53:031
25650991717,0cyclictest66850irq/125-lan11:48:121
25650991717,0cyclictest66850irq/125-lan11:12:051
25650991717,0cyclictest66850irq/125-lan10:56:331
25650991717,0cyclictest66850irq/125-lan09:15:201
25650991716,1cyclictest66850irq/125-lan11:15:161
25650991716,1cyclictest66850irq/125-lan11:02:461
25650991716,1cyclictest66850irq/125-lan10:45:231
25650991716,1cyclictest66850irq/125-lan10:20:341
25650991716,1cyclictest66850irq/125-lan09:47:531
25650991716,1cyclictest66850irq/125-lan09:37:451
25650991714,1cyclictest66850irq/125-lan08:19:591
25650991616,0cyclictest66850irq/125-lan12:33:361
25650991616,0cyclictest66850irq/125-lan12:10:161
25650991616,0cyclictest66850irq/125-lan11:55:241
25650991615,1cyclictest66850irq/125-lan10:53:401
25650991615,1cyclictest66850irq/125-lan08:05:131
25650991515,0cyclictest66850irq/125-lan10:37:411
25650991515,0cyclictest66850irq/125-lan10:18:241
25650991514,1cyclictest66850irq/125-lan10:10:131
25650991514,1cyclictest66850irq/125-lan08:45:141
25650991514,1cyclictest66850irq/125-lan08:25:131
25650991514,1cyclictest66850irq/125-lan07:50:231
25658991414,0cyclictest771-21snmpd08:40:303
25658991413,1cyclictest749-21ntpd09:47:513
25650991414,0cyclictest66850irq/125-lan08:50:141
25650991414,0cyclictest66850irq/125-lan07:40:431
25650991414,0cyclictest66850irq/125-lan07:25:161
25650991413,1cyclictest66850irq/125-lan09:05:161
25650991413,1cyclictest66850irq/125-lan09:00:221
25650991413,1cyclictest66850irq/125-lan07:35:151
25650991413,1cyclictest66850irq/125-lan07:30:231
25650991313,0cyclictest66850irq/125-lan08:40:241
25650991313,0cyclictest66850irq/125-lan08:13:011
25650991313,0cyclictest66850irq/125-lan07:46:581
25650991312,1cyclictest66850irq/125-lan07:55:141
25650991312,1cyclictest66850irq/125-lan07:15:181
2564699139,1cyclictest517-21systemd-resolve10:33:070
25658991212,0cyclictest13775-21cat11:15:143
25650991212,0cyclictest66850irq/125-lan07:14:461
2564699128,1cyclictest771-21snmpd09:26:550
25658991111,0cyclictest771-21snmpd09:54:563
25658991010,0cyclictest771-21snmpd11:30:413
25658991010,0cyclictest771-21snmpd08:47:383
25658991010,0cyclictest771-21snmpd08:37:453
256589999,0cyclictest771-21snmpd11:22:383
256589999,0cyclictest771-21snmpd11:12:133
256589999,0cyclictest771-21snmpd10:24:423
256589999,0cyclictest771-21snmpd09:33:213
256589999,0cyclictest771-21snmpd09:06:523
256589999,0cyclictest771-21snmpd09:00:533
256589999,0cyclictest771-21snmpd08:52:153
256589999,0cyclictest771-21snmpd08:27:083
256589999,0cyclictest771-21snmpd08:24:263
256589999,0cyclictest771-21snmpd08:08:473
256589999,0cyclictest771-21snmpd07:56:283
256589999,0cyclictest771-21snmpd07:24:063
256589999,0cyclictest7353-21cat11:45:153
256589998,1cyclictest771-21snmpd12:18:083
256589998,1cyclictest769-21lldpd10:17:593
256589998,1cyclictest769-21lldpd07:19:383
256589996,3cyclictest771-21snmpd12:27:523
256549998,1cyclictest771-21snmpd12:11:482
256549996,3cyclictest771-21snmpd07:12:262
256549996,3cyclictest2340-21cat09:40:152
256509999,0cyclictest66850irq/125-lan07:20:191
256469998,1cyclictest771-21snmpd10:12:060
256469998,1cyclictest771-21snmpd07:38:420
256589988,0cyclictest771-21snmpd12:22:433
256589988,0cyclictest771-21snmpd12:02:413
256589988,0cyclictest771-21snmpd11:43:173
256589988,0cyclictest771-21snmpd11:39:173
256589988,0cyclictest771-21snmpd10:53:163
256589988,0cyclictest771-21snmpd09:42:203
256589988,0cyclictest771-21snmpd08:13:293
256589988,0cyclictest771-21snmpd07:51:523
256589988,0cyclictest771-21snmpd07:46:123
256589988,0cyclictest771-21snmpd07:42:373
256589988,0cyclictest771-21snmpd07:38:283
256589988,0cyclictest771-21snmpd07:12:533
256589988,0cyclictest10976-21cat09:10:143
256589987,1cyclictest771-21snmpd10:47:213
256589987,1cyclictest771-21snmpd10:13:243
256589987,1cyclictest771-21snmpd08:19:523
256589986,2cyclictest749-21ntpd12:35:173
256589986,2cyclictest749-21ntpd10:58:473
256549988,0cyclictest771-21snmpd10:04:072
256549988,0cyclictest771-21snmpd07:17:352
256549988,0cyclictest769-21lldpd09:06:502
256549987,1cyclictest771-21snmpd11:21:262
256549987,1cyclictest771-21snmpd07:28:572
256549987,1cyclictest769-21lldpd09:22:352
256549987,1cyclictest524-21avahi-daemon12:00:002
256549986,2cyclictest771-21snmpd10:29:512
256549986,2cyclictest771-21snmpd10:07:262
256549986,2cyclictest771-21snmpd08:27:262
256469988,0cyclictest769-21lldpd07:31:320
256469987,1cyclictest771-21snmpd11:01:370
256469987,1cyclictest771-21snmpd09:21:240
256469987,1cyclictest771-21snmpd08:52:110
256469987,1cyclictest771-21snmpd08:45:150
256469987,1cyclictest769-21lldpd12:02:030
256469987,1cyclictest255-20systemd-journal10:07:190
256469986,2cyclictest771-21snmpd11:59:210
256469986,2cyclictest771-21snmpd10:00:110
256469986,2cyclictest771-21snmpd07:25:390
256469986,2cyclictest771-21snmpd07:11:270
256469986,2cyclictest749-21ntpd08:40:490
256469986,2cyclictest749-21ntpd08:32:380
256589977,0cyclictest771-21snmpd11:25:503
256589977,0cyclictest771-21snmpd10:30:263
256589977,0cyclictest769-21lldpd11:01:533
256589977,0cyclictest769-21lldpd10:42:103
256589976,1cyclictest771-21snmpd12:33:483
256589976,1cyclictest771-21snmpd08:32:433
256589975,2cyclictest771-21snmpd12:14:393
256589975,2cyclictest771-21snmpd12:05:513
256589975,2cyclictest771-21snmpd10:04:163
256589975,2cyclictest771-21snmpd09:37:053
256549977,0cyclictest771-21snmpd10:50:012
256549977,0cyclictest771-21snmpd08:34:222
256549977,0cyclictest771-21snmpd07:57:192
256549977,0cyclictest771-21snmpd07:33:122
256549977,0cyclictest769-21lldpd11:06:482
256549976,1cyclictest771-21snmpd12:38:102
256549976,1cyclictest771-21snmpd07:54:192
256549976,1cyclictest769-21lldpd10:24:422
256549976,1cyclictest524-21avahi-daemon11:31:012
256549976,1cyclictest524-21avahi-daemon08:21:472
256549976,1cyclictest14592-21cpuspeed_turbos08:00:112
256549975,2cyclictest771-21snmpd11:45:372
256549975,2cyclictest771-21snmpd10:55:552
256549975,2cyclictest771-21snmpd10:16:082
256549975,2cyclictest771-21snmpd09:49:522
256549975,2cyclictest771-21snmpd07:40:552
256549973,3cyclictest255-20systemd-journal11:15:522
256549973,3cyclictest1280-21sed08:45:202
256469977,0cyclictest771-21snmpd12:36:430
256469977,0cyclictest771-21snmpd07:21:300
256469977,0cyclictest769-21lldpd11:18:360
256469977,0cyclictest769-21lldpd08:22:460
256469977,0cyclictest769-21lldpd08:18:230
256469977,0cyclictest769-21lldpd08:11:520
256469976,1cyclictest771-21snmpd09:56:500
256469976,1cyclictest749-21ntpd08:25:290
256469976,1cyclictest524-21avahi-daemon09:13:500
256469976,1cyclictest255-20systemd-journal09:37:550
256469975,2cyclictest771-21snmpd12:29:580
256469975,2cyclictest771-21snmpd10:25:390
256469975,2cyclictest749-21ntpd09:16:250
256469975,2cyclictest749-21ntpd08:35:360
256469975,2cyclictest31090-21cat11:35:140
256469974,2cyclictest255-20systemd-journal09:41:000
256589966,0cyclictest771-21snmpd10:39:033
256589966,0cyclictest769-21lldpd07:26:433
256589965,1cyclictest749-21ntpd11:57:423
256589965,1cyclictest524-21avahi-daemon09:18:293
256589964,2cyclictest749-21ntpd11:54:443
256589964,2cyclictest550-21NetworkManager10:09:263
256589963,3cyclictest19639-21ssh09:20:393
256589963,2cyclictest9218-21ssh10:28:113
256589962,3cyclictest25666-21ssh09:29:533
256549966,0cyclictest771-21snmpd11:53:392
256549966,0cyclictest771-21snmpd09:38:442
256549966,0cyclictest769-21lldpd12:30:392
256549966,0cyclictest769-21lldpd12:21:412
256549966,0cyclictest769-21lldpd11:01:132
256549966,0cyclictest769-21lldpd10:48:212
256549966,0cyclictest769-21lldpd10:32:112
256549965,1cyclictest771-21snmpd08:40:572
256549965,1cyclictest524-21avahi-daemon07:48:592
256549965,1cyclictest30321-21cat07:20:172
256549965,1cyclictest27009-21cpuspeed_turbos10:10:132
256549965,1cyclictest15068-21needreboot09:55:172
256549965,1cyclictest14864-21fschecks_time10:35:142
256549965,1cyclictest14470-21cpuspeed_turbos09:15:132
256549964,2cyclictest9334-21cat12:25:132
256549964,2cyclictest771-21snmpd09:00:562
256549963,3cyclictest550-21NetworkManager11:42:042
256549963,2cyclictest255-20systemd-journal09:11:562
256549962,3cyclictest27527-21ssh12:08:512
256469966,0cyclictest769-21lldpd08:56:520
256469966,0cyclictest769-21lldpd07:48:480
256469966,0cyclictest769-21lldpd07:41:230
256469966,0cyclictest769-21lldpd07:16:040
256469965,1cyclictest771-21snmpd11:53:330
256469965,1cyclictest771-21snmpd09:08:570
256469965,1cyclictest771-21snmpd09:04:240
256469965,1cyclictest749-21ntpd11:05:410
256469965,1cyclictest517-21systemd-resolve11:44:160
256469965,1cyclictest287-21systemd-udevd12:30:210
256469965,1cyclictest23750-21ntpq10:45:190
256469964,2cyclictest771-21snmpd10:21:050
256469964,2cyclictest771-21snmpd09:32:310
256469964,2cyclictest771-21snmpd08:05:560
256469963,2cyclictest31840-21ssh12:14:280
256469963,2cyclictest29095-21ssh10:53:250
256469963,2cyclictest26349-21ssh12:06:380
256469963,2cyclictest11392-21ssh11:12:080
256469962,3cyclictest8386-21ssh11:45:290
256469962,3cyclictest29962-21ssh11:34:240
256469962,3cyclictest18952-21grep11:20:210
256589955,0cyclictest771-21snmpd09:56:533
256589952,3cyclictest550-21NetworkManager07:31:293
256589952,2cyclictest7547-21ssh11:07:363
256589950,4cyclictest5208-21ntpq08:55:203
256549955,0cyclictest769-21lldpd08:16:372
256549954,1cyclictest586-21rs:main2
256549953,2cyclictest771-21snmpd12:15:322
256549952,2cyclictest30976-21tail11:35:142
256549952,2cyclictest3090-21sed08:50:172
256549952,2cyclictest29047-21grep08:35:152
256549952,2cyclictest28904-21ssh09:33:032
256549952,2cyclictest22871-21seq12:03:442
256549952,2cyclictest22671-21ld09:25:152
256549952,2cyclictest16612-21tr08:05:122
256549952,2cyclictest10192-21cat11:10:202
256549951,3cyclictest12705-21sh09:52:212
256549950,4cyclictest5163-21ntpq08:55:202
256549950,4cyclictest22155-21perl11:25:142
256469955,0cyclictest769-21lldpd08:03:220
256469953,2cyclictest771-21snmpd07:59:130
256469953,2cyclictest550-21NetworkManager10:44:210
256469953,1cyclictest4758-21kworker/u16:3+nfsiod09:48:440
256469952,2cyclictest6515-21ssh12:21:260
256469952,2cyclictest32333-21ssh10:15:310
256469952,2cyclictest25273-21kworker/u16:0+nfsiod10:57:390
256469952,2cyclictest12282-21ssh09:51:280
256469952,2cyclictest1224-21cat12:15:210
256469952,2cyclictest11321-21sed07:50:230
256469951,3cyclictest23999-21ssh11:26:310
256589942,2cyclictest771-21snmpd08:01:003
256549941,3cyclictest18696-21df08:10:122
256549941,2cyclictest16633-21kworker/u16:0+nfsiod10:40:192
256469940,4cyclictest14594-21ssh10:35:110
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional