You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-30 - 16:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack2slot7s.osadl.org (updated Mon Mar 30, 2026 12:43:30)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
101690995445,4cyclictest0-21swapper/111:45:341
101690995242,6cyclictest223433-21systemd-run10:55:011
101691995141,6cyclictest548-21gdbus10:04:572
101691995040,6cyclictest3424687-21cups-browsed09:56:402
101690995041,6cyclictest227645-21latency_hist11:00:021
101690994941,4cyclictest0-21swapper/112:00:271
101691994842,3cyclictest0-21swapper/209:10:272
101691994841,3cyclictest0-21swapper/210:55:012
101691994738,6cyclictest421-21dbus-daemon10:35:022
101690994739,5cyclictest1-21systemd10:35:011
101690994712,30cyclictest281813-21ssh12:05:311
101689994629,5cyclictest420-21avahi-daemon09:29:420
101691994537,5cyclictest309316-21systemd-run12:40:012
101691994434,6cyclictest211227-21munin-run10:40:012
101689994421,12cyclictest151ktimers/008:00:260
101691994335,5cyclictest186796-21latency_hist10:10:022
101691994334,6cyclictest261-21systemd-journal11:40:502
101690994333,6cyclictest0-21swapper/112:00:011
101689994334,5cyclictest248002-21kworker/u8:7-rpciod12:20:280
101691994234,5cyclictest273185-21fschecks_count11:55:232
101691994233,6cyclictest261-21systemd-journal11:08:272
101689994222,15cyclictest12350irq/32-eth009:15:300
101690994134,3cyclictest0-21swapper/110:40:011
101689994133,5cyclictest151ktimers/010:30:340
101691994031,6cyclictest109180-21cut07:35:012
101691994030,6cyclictest420-21avahi-daemon11:26:132
101691994030,6cyclictest420-21avahi-daemon11:26:132
101690994031,6cyclictest186742-21unin-run10:10:011
101689994033,5cyclictest0-21swapper/012:30:190
101691993932,4cyclictest158103-21cron09:35:012
101691993931,5cyclictest277276-21fschecks_count12:00:222
101691993929,7cyclictest421-21dbus-daemon09:19:582
101690993932,4cyclictest174490-21systemctl09:55:011
101690993930,6cyclictest1-21systemd07:10:011
101690993930,5cyclictest231748-21latency_hist11:05:021
101690993929,6cyclictest272647-21latency_hist11:55:021
10168999394,30cyclictest285910-21ssh12:10:310
101689993932,4cyclictest301300-21latency_hist12:30:020
101689993912,19cyclictest12350irq/32-eth010:00:290
101691993828,6cyclictest439-21systemd-logind07:20:012
101691993828,6cyclictest1-21systemd07:45:012
101690993832,3cyclictest0-21swapper/111:35:001
101690993829,5cyclictest137667-21munin-plugin-st09:10:011
101690993829,3cyclictest0-21swapper/111:25:261
101690993829,3cyclictest0-21swapper/111:25:261
101689993829,7cyclictest106189-21grep07:25:010
101689993819,12cyclictest12350irq/32-eth009:10:310
101689993817,15cyclictest12350irq/32-eth009:30:250
101691993730,3cyclictest0-21swapper/209:20:312
101691993729,4cyclictest297057-21latency_hist12:25:012
101691993728,5cyclictest1-21systemd09:40:022
101691993727,7cyclictest3424687-21cups-browsed10:21:172
101691993727,6cyclictest305224-21ssh12:35:012
101690993729,5cyclictest548-21gdbus11:40:361
101690993723,3cyclictest171rcu_preempt10:25:021
10169099371,30cyclictest285812-21ssh12:10:281
101690993711,20cyclictest421-21dbus-daemon07:45:281
101690993711,20cyclictest421-21dbus-daemon07:45:281
10168999374,27cyclictest200027-21sshd10:25:270
101689993731,4cyclictest256104-21cron11:35:000
101689993730,5cyclictest0-21swapper/012:00:010
101689993728,6cyclictest151ktimers/012:35:350
101691993630,3cyclictest264015-21kworker/u8:12-rpciod11:55:012
101691993630,3cyclictest0-21swapper/212:15:272
101691993630,3cyclictest0-21swapper/212:15:272
101691993628,4cyclictest0-21swapper/207:25:292
101691993627,6cyclictest133171-21systemd-run08:55:012
101691993625,8cyclictest286303-21timerandwakeup12:10:402
101690993628,5cyclictest235737-21ssh11:10:011
101690993628,5cyclictest142447-21fschecks_count09:15:211
101689993630,4cyclictest420-21avahi-daemon12:05:330
101689993630,3cyclictest0-21swapper/009:49:290
101689993630,3cyclictest0-21swapper/009:49:290
101689993629,5cyclictest175536-21/usr/sbin/munin09:55:270
101689993629,4cyclictest12350irq/32-eth007:40:010
101689993624,6cyclictest12350irq/32-eth010:45:300
10169199358,21cyclictest224577-21ssh10:55:302
101691993527,5cyclictest239787-21cron11:15:012
101691993527,5cyclictest0-21swapper/208:20:012
101691993527,4cyclictest0-21swapper/208:00:012
101691993526,5cyclictest1056-21mta-sts-daemon09:26:342
101691993523,8cyclictest298423-21sendmail_mailtr12:25:392
101691993519,12cyclictest240569-21if_eth011:15:242
10169099353,27cyclictest294054-21ssh12:20:281
101690993527,5cyclictest292908-21idleruntime-cro12:20:001
101690993527,5cyclictest292908-21idleruntime-cro12:20:001
101690993527,5cyclictest163230-21needreboot09:40:251
101690993527,5cyclictest163230-21needreboot09:40:251
101690993527,4cyclictest0-21swapper/109:20:351
101689993528,4cyclictest0-21swapper/010:35:290
101689993526,4cyclictest0-21swapper/010:25:010
101691993427,3cyclictest0-21swapper/211:20:302
101691993426,5cyclictest0-21swapper/207:40:012
101691993426,4cyclictest0-21swapper/210:40:342
101691993426,4cyclictest0-21swapper/210:40:342
101691993426,3cyclictest0-21swapper/209:45:232
101691993426,3cyclictest0-21swapper/209:45:232
101691993425,5cyclictest227960-21aten2.4-expect11:00:172
101691993425,5cyclictest190794-21grep10:15:012
101691993425,4cyclictest0-21swapper/210:15:292
101691993424,6cyclictest420-21avahi-daemon10:46:182
101691993424,6cyclictest261-21systemd-journal07:50:002
101691993424,6cyclictest261-21systemd-journal07:50:002
101691993423,8cyclictest163292-21ntpq09:40:262
101691993423,8cyclictest163292-21ntpq09:40:262
10169099343,26cyclictest159213-21sshd09:35:271
101690993426,4cyclictest0-21swapper/110:15:321
101690993425,6cyclictest516-21in:imuxsock09:00:011
101690993425,6cyclictest421-21dbus-daemon10:45:341
101690993425,6cyclictest3424687-21cups-browsed12:30:301
101690993424,3cyclictest0-21swapper/111:20:271
101689993427,5cyclictest1-21systemd10:15:010
101689993427,4cyclictest119742-21latency_hist08:10:020
101689993425,6cyclictest1056-21mta-sts-daemon12:02:200
101689993424,7cyclictest3424687-21cups-browsed11:40:140
101689993423,8cyclictest292916-21/usr/sbin/munin12:20:010
101689993423,8cyclictest292916-21/usr/sbin/munin12:20:010
10168999342,27cyclictest220463-21ssh10:50:290
10168999341,28cyclictest228756-21ssh11:00:320
10169199333,26cyclictest200183-21ssh10:25:322
101691993326,3cyclictest0-21swapper/211:35:322
101691993324,6cyclictest421-21dbus-daemon09:52:252
101691993324,5cyclictest0-21swapper/209:05:012
101691993324,4cyclictest0-21swapper/212:05:322
101690993326,4cyclictest243940-21latency_hist11:20:021
101690993325,5cyclictest1-21systemd11:15:011
101690993324,5cyclictest188316-21timerwakeupswit10:10:391
101690993324,4cyclictest0-21swapper/110:40:271
101690993324,4cyclictest0-21swapper/110:40:271
101689993328,3cyclictest0-21swapper/010:15:410
101689993327,3cyclictest252043-21cron11:30:000
101689993327,3cyclictest252043-21cron11:30:000
101691993225,3cyclictest0-21swapper/208:40:012
101691993223,6cyclictest421-21dbus-daemon09:00:022
10169199322,18cyclictest253116-21ssh11:30:272
10169199321,26cyclictest3424680-21cupsd11:45:322
10169099328,19cyclictest138828-21ssh09:10:301
101690993224,5cyclictest150726-21/usr/sbin/munin09:25:221
101690993224,5cyclictest104674-21munin-plugin-st07:20:011
101690993223,4cyclictest0-21swapper/109:45:311
101690993223,4cyclictest0-21swapper/109:45:311
101690993222,7cyclictest199876-21latency10:25:241
101689993225,3cyclictest0-21swapper/009:50:330
101691993124,3cyclictest0-21swapper/209:10:012
101691993123,5cyclictest421-21dbus-daemon08:35:012
101690993125,3cyclictest0-21swapper/107:40:011
101690993124,4cyclictest119685-21kworker/u8:12-xprtiod08:20:011
101690993124,3cyclictest101688-21cyclictest11:36:311
101690993123,5cyclictest129044-21aten_r2power_po08:40:171
101690993123,5cyclictest129044-21aten_r2power_po08:40:171
101689993125,3cyclictest1056-21mta-sts-daemon11:10:180
10168999312,25cyclictest212341-21sshd10:40:270
10168999312,25cyclictest212341-21sshd10:40:270
10168999312,23cyclictest659-21snmpd08:20:270
101689993115,5cyclictest439-21systemd-logind08:20:010
101689993113,11cyclictest547-21gmain11:35:340
10168999311,25cyclictest265586-21sh11:45:360
101691993023,4cyclictest85826-21kworker/u8:5-xprtiod07:10:272
101690993025,2cyclictest0-21swapper/108:05:271
101690993024,3cyclictest0-21swapper/110:00:271
101690993023,4cyclictest1055-21mta-sts-daemon08:20:391
101690993022,5cyclictest176248-21unixbench_singl09:55:411
101690993022,5cyclictest136165-21cron09:05:011
101690993022,4cyclictest0-21swapper/109:30:331
10168999309,16cyclictest151ktimers/007:45:260
10168999309,16cyclictest151ktimers/007:45:260
10168999304,22cyclictest1051-21mta-sts-daemon07:10:290
101689993024,4cyclictest101688-21cyclictest10:05:420
101689993023,3cyclictest0-21swapper/009:20:210
101689993019,7cyclictest12350irq/32-eth011:20:280
10169199294,18cyclictest428-21mta-sts-daemon07:50:282
10169199294,18cyclictest428-21mta-sts-daemon07:50:282
101691992920,6cyclictest118692-21fschecks_count08:05:212
101691992920,6cyclictest0-21swapper/208:05:002
101690992921,3cyclictest0-21swapper/112:25:261
101689992925,2cyclictest0-21swapper/011:15:230
101689992923,4cyclictest131564-21tail08:45:400
101689992923,4cyclictest131564-21tail08:45:400
101689992920,7cyclictest135480-21needreboot09:00:240
101689992920,7cyclictest133170-21sh08:55:010
101689992917,7cyclictest159372-21sh09:35:330
101689992910,15cyclictest232815-21ssh11:05:310
101691992822,3cyclictest0-21swapper/208:25:272
101691992820,5cyclictest124069-21sed08:20:392
101691992817,8cyclictest3424687-21cups-browsed08:45:402
101691992817,8cyclictest3424687-21cups-browsed08:45:402
101690992821,4cyclictest1055-21mta-sts-daemon08:30:301
101690992820,5cyclictest116712-21latency_hist08:00:011
101689992821,4cyclictest127563-21aten_r2power_vo08:35:180
101689992819,6cyclictest420-21avahi-daemon10:55:240
10168999281,22cyclictest126693-21ps08:30:370
101689992811,5cyclictest12450irq/33-eth009:40:270
101689992811,5cyclictest12450irq/33-eth009:40:270
101689992810,14cyclictest659-21snmpd11:53:320
10169199273,20cyclictest441-21gpm07:20:312
101690992721,3cyclictest274699-21kworker/u8:5-nfsiod12:40:011
101690992721,3cyclictest0-21swapper/107:45:001
101690992719,5cyclictest427-21polkitd07:24:231
101689992717,6cyclictest1051-21mta-sts-daemon08:40:260
101689992717,6cyclictest1051-21mta-sts-daemon08:40:260
101689992713,10cyclictest421-21dbus-daemon08:25:300
101690992620,3cyclictest0-21swapper/108:50:271
101690992619,5cyclictest130423-21aten_r2power_cu08:45:171
101690992619,5cyclictest130423-21aten_r2power_cu08:45:171
101690992619,4cyclictest1051-21mta-sts-daemon07:30:301
10168999262,21cyclictest104141-21ntpq07:15:340
101689992621,3cyclictest1055-21mta-sts-daemon07:50:230
101689992621,3cyclictest1055-21mta-sts-daemon07:50:230
101690992519,3cyclictest0-21swapper/107:10:271
101690992516,5cyclictest0-21swapper/107:25:191
10168999252,18cyclictest137051-21sshd09:05:270
101689992518,5cyclictest0-21swapper/008:15:010
101689992517,6cyclictest133970-21needreboot08:55:260
101691992418,3cyclictest0-21swapper/208:40:182
101691992418,3cyclictest0-21swapper/208:40:182
10169099242,16cyclictest125150-21ntp_states08:25:311
101690992419,3cyclictest101688-21cyclictest08:35:171
101690992418,4cyclictest101688-21cyclictest07:50:241
101690992418,4cyclictest101688-21cyclictest07:50:241
101690992417,4cyclictest1051-21mta-sts-daemon08:00:261
10169199231,14cyclictest120945-21grep08:10:402
10168999232,16cyclictest111740-21ps07:40:340
101689992313,7cyclictest548-21gdbus07:55:380
101691992216,3cyclictest0-21swapper/207:10:022
101690992211,6cyclictest121157-21sh08:15:011
10168999222,15cyclictest106683-21diskstats07:25:190
10168999212,13cyclictest108553-21ntpq07:30:270
101689991914,3cyclictest94586-21kworker/u8:1+rpciod07:10:010
10169299153,8cyclictest0-21swapper/310:35:273
10169299151,7cyclictest0-21swapper/310:05:313
10169299151,6cyclictest0-21swapper/309:20:273
10169299143,8cyclictest0-21swapper/311:45:343
10169299143,6cyclictest0-21swapper/312:30:333
10169299143,5cyclictest0-21swapper/307:45:283
10169299143,5cyclictest0-21swapper/307:45:283
10169299142,6cyclictest0-21swapper/309:45:333
10169299142,6cyclictest0-21swapper/309:45:333
10169299141,6cyclictest0-21swapper/311:50:303
10169299133,6cyclictest0-21swapper/310:25:303
10169299133,4cyclictest0-21swapper/308:00:313
10169299132,7cyclictest0-21swapper/312:20:273
10169299132,7cyclictest0-21swapper/312:00:273
10169299132,6cyclictest0-21swapper/312:35:273
10169299132,6cyclictest0-21swapper/311:15:273
10169299132,6cyclictest0-21swapper/310:20:013
10169299132,6cyclictest0-21swapper/309:40:273
10169299132,6cyclictest0-21swapper/309:40:273
10169299131,7cyclictest0-21swapper/311:25:263
10169299131,7cyclictest0-21swapper/311:25:263
10169299131,6cyclictest0-21swapper/311:00:273
10169299131,6cyclictest0-21swapper/309:15:173
10169299131,6cyclictest0-21swapper/308:50:273
10169299131,5cyclictest0-21swapper/308:45:263
10169299131,5cyclictest0-21swapper/308:45:263
10169299131,5cyclictest0-21swapper/307:30:293
10169299130,3cyclictest0-21swapper/307:40:283
10169299123,5cyclictest0-21swapper/311:55:293
10169299123,5cyclictest0-21swapper/309:50:293
10169299123,4cyclictest0-21swapper/307:20:293
10169299122,5cyclictest0-21swapper/309:30:263
10169299122,4cyclictest0-21swapper/310:40:163
10169299122,4cyclictest0-21swapper/310:40:163
10169299121,8cyclictest0-21swapper/310:45:173
10169299121,6cyclictest0-21swapper/311:35:323
10169299121,6cyclictest0-21swapper/311:20:163
10169299121,6cyclictest0-21swapper/311:05:293
10169299121,6cyclictest0-21swapper/310:50:303
10169299121,6cyclictest0-21swapper/310:10:273
10169299121,6cyclictest0-21swapper/309:25:333
10169299121,6cyclictest0-21swapper/309:10:223
10169299121,6cyclictest0-21swapper/308:05:313
10169299121,5cyclictest0-21swapper/308:30:303
10169299113,6cyclictest0-21swapper/310:00:273
10169299112,5cyclictest0-21swapper/311:30:163
10169299112,5cyclictest0-21swapper/310:20:163
10169299111,7cyclictest0-21swapper/309:35:333
10169299111,6cyclictest0-21swapper/311:10:193
10169299111,6cyclictest0-21swapper/310:30:173
10169299111,6cyclictest0-21swapper/309:55:273
10169299111,6cyclictest0-21swapper/309:10:023
10169299111,6cyclictest0-21swapper/308:25:303
10169299111,6cyclictest0-21swapper/307:15:353
10169299111,5cyclictest0-21swapper/308:20:303
10169299111,5cyclictest0-21swapper/307:50:303
10169299111,5cyclictest0-21swapper/307:50:303
10169299101,6cyclictest0-21swapper/312:25:293
10169299101,6cyclictest0-21swapper/312:15:213
10169299101,6cyclictest0-21swapper/312:15:213
10169299101,6cyclictest0-21swapper/312:10:033
10169299101,5cyclictest0-21swapper/311:40:333
10169299101,5cyclictest0-21swapper/309:00:253
10169299101,5cyclictest0-21swapper/308:15:273
10169299101,5cyclictest0-21swapper/307:35:273
10169299101,5cyclictest0-21swapper/307:10:273
10169299101,4cyclictest0-21swapper/307:25:173
10169299100,6cyclictest0-21swapper/310:55:283
10169299100,5cyclictest0-21swapper/308:10:283
1016929991,6cyclictest0-21swapper/312:10:313
1016929991,5cyclictest0-21swapper/308:40:303
1016929991,5cyclictest0-21swapper/308:40:303
1016929991,5cyclictest0-21swapper/308:35:253
1016929991,5cyclictest0-21swapper/307:55:303
1016929981,4cyclictest0-21swapper/308:55:183
1016929981,4cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional