You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-06-13 - 17:28

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #2, slot #7

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rack2slot7s.osadl.org (updated Sat Jun 13, 2026 12:43:31)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
791753996859,6cyclictest834096-21idleruntime-cro09:20:012
791753995142,6cyclictest934603-21ssh12:00:012
791753995128,20cyclictest947115-21idleruntime-cro12:20:012
791751995139,8cyclictest151ktimers/007:50:240
791751994939,5cyclictest151ktimers/007:55:250
79175399482,35cyclictest866674-21ssh10:10:302
791751994835,9cyclictest12650irq/32-eth008:26:500
791753994739,4cyclictest0-21swapper/209:50:322
791753994721,19cyclictest4189339-21cups-browsed08:50:242
79175299473,38cyclictest957631-21ssh12:35:291
79175399465,32cyclictest919952-21ssh11:35:262
791753994638,5cyclictest896944-21latency_hist11:00:012
791753994537,5cyclictest796277-21systemd-run07:25:012
791751994532,11cyclictest791774-21latency_hist07:10:020
791751994526,15cyclictest834212-21latency_hist09:20:020
79175399441,16cyclictest948322-21ps12:20:312
791752994438,3cyclictest0-21swapper/110:35:241
791752994435,6cyclictest421-21dbus-daemon09:15:021
79175299443,34cyclictest932557-21ssh11:55:321
791751994434,4cyclictest0-21swapper/011:55:270
79175199443,33cyclictest891780-21ssh10:50:290
791753994335,5cyclictest840431-21systemd-run09:30:022
791753994332,8cyclictest1-21systemd11:05:022
79175399432,13cyclictest792238-21diskstats07:10:172
791753994321,18cyclictest1000-21mta-sts-daemon12:02:272
79175399431,13cyclictest794127-21ntpq07:15:262
791752994336,3cyclictest0-21swapper/107:50:261
791752994333,6cyclictest926886-21users11:45:381
79175299432,6cyclictest171rcu_preempt09:25:311
791751994338,3cyclictest151ktimers/010:05:270
791751994333,7cyclictest151ktimers/011:20:240
791751994333,7cyclictest151ktimers/011:20:240
791753994233,6cyclictest901339-21sendmail_mailqu11:05:322
79175399422,6cyclictest824135-21ntpq08:55:292
79175399422,6cyclictest810655-21ntpq08:10:292
79175399422,6cyclictest809122-21ntpq08:05:252
79175399421,9cyclictest797114-21ntpq07:25:242
79175399421,6cyclictest0-21swapper/207:35:292
79175399421,36cyclictest929360-21ssh11:50:232
791752994234,5cyclictest885945-21unixbench-2d10:40:381
791752994233,6cyclictest421-21dbus-daemon08:30:361
79175299423,29cyclictest916795-21ssh11:30:241
791752994230,8cyclictest904513-21mailstats11:10:341
791751994234,5cyclictest897007-21latency_hist11:00:020
791751994227,8cyclictest151ktimers/007:45:240
791751994227,12cyclictest12650irq/32-eth012:35:270
79175399411,7cyclictest827196-21ntpq09:05:292
79175399411,4cyclictest916875-21ntpq11:30:282
79175399411,10cyclictest924212-21ssh11:41:592
79175299414,28cyclictest894814-21ssh10:55:251
791752994132,4cyclictest0-21swapper/108:25:251
791751994136,3cyclictest1001-21mta-sts-daemon09:05:280
79175399408,29cyclictest857874-21sh09:55:542
791753994034,3cyclictest0-21swapper/208:30:012
791753994031,3cyclictest0-21swapper/209:30:242
791753994030,7cyclictest942234-21xargs12:10:362
791753994023,14cyclictest0-21swapper/212:25:252
79175399401,9cyclictest819638-21ntpq08:40:272
79175399401,4cyclictest879129-21ntpq10:30:252
79175399401,4cyclictest825638-21ntpq09:00:262
79175399401,4cyclictest813742-21ntpq08:20:312
79175399401,13cyclictest938833-21ntpq12:05:322
79175399401,13cyclictest818123-21ntpq08:35:262
79175399401,13cyclictest818123-21ntpq08:35:262
79175399401,11cyclictest911983-21ssh11:22:592
79175399401,11cyclictest911983-21ssh11:22:592
79175399401,11cyclictest835145-21ntpq09:20:302
79175399400,12cyclictest821213-21ntpq08:45:302
791752994033,3cyclictest0-21swapper/110:21:251
791752994032,5cyclictest907130-21kernelversion11:15:201
791752994032,5cyclictest907130-21kernelversion11:15:201
791752994029,7cyclictest420-21avahi-daemon12:10:321
79175299401,7cyclictest171rcu_preempt10:05:321
791751994028,9cyclictest151ktimers/011:25:240
79175399397,29cyclictest883847-21sh10:38:272
79175399393,31cyclictest876110-21ssh10:25:332
79175399392,6cyclictest803192-21ntpq07:45:292
79175399392,5cyclictest954386-21ntpq12:30:252
79175399392,4cyclictest863404-21ntpq10:05:252
79175399391,8cyclictest907481-21ntpq11:15:292
79175399391,8cyclictest907481-21ntpq11:15:292
79175399391,7cyclictest798233-21/usr/sbin/munin07:30:172
79175399391,7cyclictest798233-21/usr/sbin/munin07:30:172
79175399391,5cyclictest807627-21ntpq08:00:292
79175399391,4cyclictest812093-21ntpq08:15:262
79175399391,4cyclictest801709-21ntpq07:40:302
79175399391,14cyclictest828765-21ld09:10:252
79175399391,12cyclictest956733-21ssh12:35:032
79175399391,11cyclictest913684-21ntpq11:25:252
79175299393,25cyclictest879088-21ssh10:30:241
791752993932,4cyclictest0-21swapper/109:15:281
791752993931,5cyclictest925234-21awk11:45:011
791752993931,5cyclictest826270-21systemd-run09:05:011
791752993930,6cyclictest854290-21sh09:50:391
79175299392,31cyclictest866549-21modprobe10:10:251
79175199393,32cyclictest898063-21ssh11:00:290
791751993932,4cyclictest846736-21ssh09:40:010
791751993918,12cyclictest12650irq/32-eth011:30:270
79175399382,32cyclictest428-21mta-sts-daemon11:47:502
79175399381,7cyclictest887946-21aten_r2power_po10:45:152
79175399381,5cyclictest872844-21ntpq10:20:272
79175399381,3cyclictest806120-21ntpq07:55:252
79175399381,12cyclictest860415-21ntp_states10:00:342
79175399381,10cyclictest816673-21ntpq08:30:272
79175299384,7cyclictest171rcu_preempt09:35:231
791752993830,5cyclictest818792-21latency_hist08:40:011
791752993830,5cyclictest818792-21latency_hist08:40:011
791752993829,6cyclictest807254-21fschecks_count08:00:201
791752993826,8cyclictest265-21systemd-journal12:24:261
79175299382,30cyclictest857120-21ssh09:55:241
79175199386,19cyclictest151ktimers/007:10:240
791751993832,4cyclictest875581-21/usr/sbin/munin10:25:200
791751993832,4cyclictest1-21systemd07:20:010
791751993829,4cyclictest151ktimers/010:15:270
791751993828,7cyclictest824783-21latency_hist09:00:020
791751993827,7cyclictest0-21swapper/012:05:280
79175399371,4cyclictest804579-21ntpq07:50:232
79175399371,12cyclictest904203-21ntpq11:10:242
79175399371,12cyclictest891667-21ntpq10:50:252
79175399371,12cyclictest846410-21ssh09:39:072
79175399371,10cyclictest870605-21sshd10:16:252
791752993729,5cyclictest812672-21unixbench_singl08:15:401
791752993727,7cyclictest824733-21munin-run09:00:011
79175199373,27cyclictest885437-21ssh10:40:280
791751993732,2cyclictest0-21swapper/008:50:010
791751993731,4cyclictest1001-21mta-sts-daemon08:20:320
791751993728,6cyclictest953972-21fschecks_count12:30:180
791751993725,3cyclictest0-21swapper/011:05:320
79175199372,28cyclictest879161-21ssh10:30:260
791751993714,19cyclictest12650irq/32-eth009:50:310
791751993711,20cyclictest12650irq/32-eth010:00:340
79175399361,5cyclictest850880-21ntpq09:45:252
79175399361,4cyclictest885387-21ntpq10:40:252
79175399360,11cyclictest849857-21ssh09:44:582
79175299366,13cyclictest171rcu_preempt08:45:271
791751993626,7cyclictest948650-21unixbench-2d12:20:370
791751993626,7cyclictest623-21sshd11:46:060
791751993624,6cyclictest12650irq/32-eth009:45:250
791752993526,3cyclictest0-21swapper/109:30:361
791752993525,6cyclictest860651-21switchtime10:00:381
791752993523,9cyclictest929710-21switchtime11:50:341
791751993529,3cyclictest0-21swapper/009:55:210
791751993525,8cyclictest947167-21ssh12:20:010
791751993522,11cyclictest421-21dbus-daemon12:25:360
79175199351,28cyclictest907444-21ssh11:15:270
79175199351,28cyclictest907444-21ssh11:15:270
79175299349,17cyclictest1002-21mta-sts-daemon11:05:261
79175299343,23cyclictest919916-21ssh11:35:241
791752993426,5cyclictest897338-21aten_r2power_en11:00:151
791752993426,5cyclictest796768-21fschecks_count07:25:191
791752993426,4cyclictest0-21swapper/110:25:271
791752993424,4cyclictest0-21swapper/112:05:351
791752993422,6cyclictest0-21swapper/111:20:241
791752993422,6cyclictest0-21swapper/111:20:241
791751993421,8cyclictest919915-21sh11:35:240
79175299333,23cyclictest954416-21ssh12:30:271
791752993327,3cyclictest0-21swapper/112:25:201
791752993325,5cyclictest890704-21ssh10:50:021
791752993323,6cyclictest827751-21grep09:10:011
79175299332,26cyclictest869694-21sshd10:15:251
79175199333,23cyclictest941872-21sshd12:10:260
791751993324,7cyclictest884561-21latency_hist10:40:030
791751993324,4cyclictest151ktimers/007:30:290
791751993324,4cyclictest151ktimers/007:30:290
79175199332,27cyclictest627-21lldpd11:50:240
79175199332,27cyclictest0-21swapper/007:35:250
79175199332,25cyclictest888572-21ssh10:45:260
79175199332,25cyclictest847891-21ssh09:40:310
791752993224,4cyclictest0-21swapper/109:20:151
79175299321,5cyclictest171rcu_preempt08:50:291
79175199323,24cyclictest4189339-21cups-browsed10:20:340
791751993226,4cyclictest837850-21fschecks_count09:25:180
791751993225,4cyclictest1002-21mta-sts-daemon11:10:290
791751993224,5cyclictest4189339-21cups-browsed12:00:490
79175299316,16cyclictest1000-21mta-sts-daemon08:20:291
791752993124,4cyclictest801266-21fschecks_count07:40:191
791752993123,5cyclictest803848-21latency_hist07:50:031
791752993123,5cyclictest799241-21munin-run07:35:011
791752993123,5cyclictest799241-21munin-run07:35:011
791752993123,4cyclictest0-21swapper/107:40:011
79175199318,16cyclictest151ktimers/007:25:280
791751993123,4cyclictest0-21swapper/010:10:290
79175199312,22cyclictest828851-21ssh09:10:280
79175299304,17cyclictest428-21mta-sts-daemon07:20:301
791752993025,2cyclictest0-21swapper/111:30:001
791752993022,5cyclictest947152-21sendmail-msp12:20:011
79175299302,21cyclictest850901-21sshd09:45:251
79175199309,15cyclictest151ktimers/008:30:300
79175199306,16cyclictest923102-21ssh11:40:260
791751993025,3cyclictest807560-21modprobe08:00:260
791751993017,11cyclictest826143-21unixbench_multi09:00:370
791752992923,3cyclictest0-21swapper/108:45:001
791752992922,4cyclictest934901-21/usr/sbin/munin12:00:191
791752992917,9cyclictest806101-21ntp_kernel_pll_07:55:241
79175299291,6cyclictest171rcu_preempt07:15:291
79175199296,20cyclictest151ktimers/009:30:250
791751992924,2cyclictest0-21swapper/007:25:010
79175399281,5cyclictest791762-21systemctl07:10:012
791752992820,5cyclictest848278-21grep09:40:371
791751992820,6cyclictest823041-21timerwakeupswit08:50:340
791751992820,6cyclictest12650irq/32-eth009:20:300
791752992720,3cyclictest0-21swapper/108:10:381
79175299271,18cyclictest891789-21diskmemload10:50:301
79175199273,16cyclictest1003-21mta-sts-daemon07:40:250
791751992720,5cyclictest567-21gdbus08:18:080
79175199253,16cyclictest665-21snmpd08:05:260
791751992515,3cyclictest0-21swapper/008:10:260
79175299237,5cyclictest787714-21kworker/u8:2+xprtiod07:10:141
79175499222,9cyclictest0-21swapper/311:25:243
791752992216,3cyclictest0-21swapper/108:05:181
791752992215,5cyclictest791762-21systemctl07:10:011
791751992215,5cyclictest1002-21mta-sts-daemon08:37:430
791751992215,5cyclictest1002-21mta-sts-daemon08:37:430
79175199221,18cyclictest819269-21sort08:40:210
79175499203,6cyclictest0-21swapper/311:00:313
79175499194,9cyclictest0-21swapper/309:20:253
79175499192,9cyclictest0-21swapper/311:30:263
79175499192,8cyclictest0-21swapper/308:26:493
79175499191,9cyclictest0-21swapper/310:20:273
79175499183,6cyclictest0-21swapper/312:30:283
79175499182,9cyclictest0-21swapper/311:10:263
79175499174,4cyclictest0-21swapper/309:25:313
79175499173,5cyclictest0-21swapper/308:00:353
79175499172,9cyclictest0-21swapper/308:55:023
79175499172,8cyclictest0-21swapper/311:50:243
79175499172,10cyclictest0-21swapper/312:35:233
79175499171,9cyclictest0-21swapper/311:40:283
79175499171,6cyclictest0-21swapper/308:35:243
79175499171,6cyclictest0-21swapper/308:35:243
79175499171,10cyclictest0-21swapper/311:05:213
79175499163,7cyclictest0-21swapper/312:05:333
79175499163,6cyclictest0-21swapper/310:10:253
79175499161,9cyclictest0-21swapper/310:05:283
79175499161,9cyclictest0-21swapper/309:10:253
79175499161,8cyclictest0-21swapper/310:25:253
79175499161,8cyclictest0-21swapper/309:30:253
79175499161,7cyclictest0-21swapper/311:35:193
79175499161,7cyclictest0-21swapper/309:55:243
79175499161,6cyclictest0-21swapper/308:15:293
79175499161,6cyclictest0-21swapper/307:45:293
79175499153,6cyclictest0-21swapper/310:40:273
79175499152,8cyclictest0-21swapper/309:35:163
79175499152,7cyclictest0-21swapper/310:00:303
79175499151,8cyclictest0-21swapper/312:25:253
79175499151,8cyclictest0-21swapper/311:55:383
79175499151,7cyclictest0-21swapper/312:00:273
79175499151,7cyclictest0-21swapper/311:20:263
79175499151,7cyclictest0-21swapper/311:20:263
79175499151,7cyclictest0-21swapper/310:50:243
79175499151,7cyclictest0-21swapper/309:15:303
79175499151,6cyclictest0-21swapper/308:05:243
79175499151,6cyclictest0-21swapper/307:50:243
79175499143,8cyclictest0-21swapper/310:55:213
79175499143,6cyclictest0-21swapper/312:20:263
79175499143,6cyclictest0-21swapper/311:15:293
79175499143,6cyclictest0-21swapper/311:15:293
79175499142,8cyclictest0-21swapper/308:10:263
79175499142,6cyclictest0-21swapper/310:30:193
79175499141,8cyclictest0-21swapper/310:35:243
79175499141,7cyclictest0-21swapper/307:25:253
79175499141,5cyclictest0-21swapper/309:45:143
79175499141,5cyclictest0-21swapper/307:30:233
79175499141,5cyclictest0-21swapper/307:30:233
79175499135,6cyclictest0-21swapper/310:15:253
79175499134,6cyclictest0-21swapper/309:00:303
79175499132,6cyclictest0-21swapper/309:40:153
79175499132,6cyclictest0-21swapper/307:20:253
79175499132,5cyclictest0-21swapper/311:45:163
79175499131,7cyclictest0-21swapper/312:15:273
79175499131,7cyclictest0-21swapper/312:10:203
79175499131,7cyclictest0-21swapper/309:50:283
79175499131,7cyclictest0-21swapper/307:15:293
79175499131,6cyclictest0-21swapper/308:45:263
79175499123,6cyclictest0-21swapper/307:40:283
79175499122,6cyclictest0-21swapper/310:45:243
79175499122,6cyclictest0-21swapper/308:00:023
79175499121,6cyclictest0-21swapper/308:30:263
79175499121,5cyclictest0-21swapper/308:55:253
79175499111,6cyclictest0-21swapper/309:05:263
79175499111,6cyclictest0-21swapper/308:20:253
79175499111,5cyclictest0-21swapper/307:10:243
79175499111,4cyclictest0-21swapper/308:45:023
79175499110,6cyclictest0-21swapper/307:35:253
7917549981,4cyclictest0-21swapper/307:10:023
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional