You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-28 - 05:41

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #e, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackeslot5s.osadl.org (updated Tue Jul 28, 2026 00:44:22)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
20792992920,4cyclictest151rcu_preempt22:25:452
2079299280,27cyclictest14830-21diskmemload22:15:512
20792992720,6cyclictest14301-21awk00:30:002
2079299270,1cyclictest0-21swapper/223:13:172
20794992624,1cyclictest0-21swapper/321:15:003
20792992619,6cyclictest0-21swapper/223:28:182
2079299260,25cyclictest14830-21diskmemload22:32:592
2079299260,25cyclictest0-21swapper/223:05:402
2079299260,25cyclictest0-21swapper/221:23:492
20784992625,1cyclictest62550irq/127-eno121:15:000
20792992522,3cyclictest0-21swapper/223:23:342
20792992521,4cyclictest0-21swapper/200:00:332
20792992520,4cyclictest19776-21ssh00:34:502
20792992520,4cyclictest0-21swapper/223:50:032
20792992520,4cyclictest0-21swapper/222:22:292
2079299250,24cyclictest14830-21diskmemload21:10:372
2079299250,24cyclictest0-21swapper/222:46:532
2079299250,0cyclictest0-21swapper/223:16:222
2079299250,0cyclictest0-21swapper/223:00:482
2079299250,0cyclictest0-21swapper/200:12:572
20787992524,1cyclictest0-21swapper/122:20:431
20787992523,1cyclictest15300-21apt-get00:03:171
20787992523,1cyclictest0-21swapper/121:38:171
20787992510,14cyclictest0-21swapper/121:18:171
2078799250,24cyclictest6077-21ssh23:25:111
2078799250,24cyclictest0-21swapper/122:40:161
2078799250,1cyclictest0-21swapper/121:32:141
20784992523,1cyclictest14830-21diskmemload23:48:090
2078499250,24cyclictest0-21swapper/000:25:140
2078499250,1cyclictest0-21swapper/022:15:320
20794992421,2cyclictest22200-21dump-pmu-power21:45:013
2079499240,23cyclictest14830-21diskmemload22:38:333
20792992421,3cyclictest0-21swapper/223:37:532
20792992420,3cyclictest14830-21diskmemload22:14:282
20792992420,3cyclictest0-21swapper/221:49:442
2079299240,23cyclictest9504-21ssh22:03:162
2079299240,23cyclictest10406-21awk19:55:012
2079299240,23cyclictest0-21swapper/221:33:272
2079299240,0cyclictest0-21swapper/223:59:272
2079299240,0cyclictest0-21swapper/223:45:192
2079299240,0cyclictest0-21swapper/222:57:592
2079299240,0cyclictest0-21swapper/222:08:132
2079299240,0cyclictest0-21swapper/221:43:352
2079299240,0cyclictest0-21swapper/221:18:502
2079299240,0cyclictest0-21swapper/200:39:302
2079299240,0cyclictest0-21swapper/200:05:382
20787992423,1cyclictest14830-21diskmemload00:10:451
20787992421,2cyclictest7455-21sh22:29:051
2078799240,24cyclictest14830-21diskmemload21:54:591
2078799240,23cyclictest23712-21ssh00:09:081
2078799240,23cyclictest22958-21apt00:38:171
2078799240,23cyclictest0-21swapper/122:19:341
2078799240,1cyclictest606-21dbus-daemon22:35:001
20784992423,1cyclictest14830-21diskmemload23:55:500
20784992423,1cyclictest0-21swapper/022:10:250
20784992422,1cyclictest62550irq/127-eno100:05:450
2078499240,24cyclictest0-21swapper/023:37:410
2078499240,24cyclictest0-21swapper/023:15:030
2078499240,24cyclictest0-21swapper/022:44:150
2078499240,24cyclictest0-21swapper/021:37:490
2078499240,22cyclictest9053-21sh22:30:510
2078499240,1cyclictest0-21swapper/023:06:540
20794992323,0cyclictest14830-21diskmemload22:41:443
20794992323,0cyclictest0-21swapper/323:36:573
20794992323,0cyclictest0-21swapper/323:33:513
20794992323,0cyclictest0-21swapper/321:37:493
20794992323,0cyclictest0-21swapper/300:01:243
20794992322,1cyclictest0-21swapper/321:46:033
20794992321,1cyclictest442-21ssh22:52:253
20794992321,1cyclictest1358-21grep23:50:013
20794992321,1cyclictest0-21swapper/323:57:543
20794992321,1cyclictest0-21swapper/300:11:213
20794992320,2cyclictest5315-21sensors_fan21:58:273
2079499231,1cyclictest12531-21munin-run22:05:003
2079499230,2cyclictest7929-21sh00:23:573
2079499230,23cyclictest0-21swapper/323:52:473
2079499230,23cyclictest0-21swapper/323:12:013
2079499230,23cyclictest0-21swapper/323:08:573
2079499230,23cyclictest0-21swapper/321:33:083
2079499230,22cyclictest6392-21sh22:57:413
2079499230,22cyclictest28430-21sh21:22:313
2079499230,22cyclictest22249-21ssh00:37:173
2079499230,22cyclictest19231-21ssh22:11:143
2079499230,22cyclictest16987-21sh22:08:313
2079499230,1cyclictest0-21swapper/323:22:043
2079499230,0cyclictest0-21swapper/323:42:193
2079499230,0cyclictest0-21swapper/322:27:063
2079499230,0cyclictest0-21swapper/322:15:323
2079499230,0cyclictest0-21swapper/300:25:563
20792992322,1cyclictest14830-21diskmemload21:58:122
20792992319,4cyclictest14830-21diskmemload22:40:492
2079299230,2cyclictest313-21systemd-journal21:00:012
2079299230,23cyclictest0-21swapper/223:41:032
2079299230,22cyclictest3808-21sh00:20:392
2079299230,22cyclictest1137-21ssh22:53:152
2079299230,0cyclictest0-21swapper/223:33:532
2079299230,0cyclictest0-21swapper/221:36:222
20787992323,0cyclictest0-21swapper/123:53:081
20787992323,0cyclictest0-21swapper/123:18:071
20787992323,0cyclictest0-21swapper/122:03:161
20787992323,0cyclictest0-21swapper/100:20:471
20787992321,1cyclictest21796-21sh22:13:201
20787992321,1cyclictest0-21swapper/100:28:181
20787992320,2cyclictest23317-21sh23:40:401
2078799230,2cyclictest5342-21ssh22:56:141
2078799230,2cyclictest376-21ssh21:25:471
2078799230,2cyclictest11094-21ssh23:01:241
2078799230,23cyclictest14830-21diskmemload00:17:351
2078799230,22cyclictest27587-21ssh22:47:461
2078799230,22cyclictest21899-21sh23:10:311
2078799230,22cyclictest18136-21ssh23:36:171
2078799230,22cyclictest18087-21cron22:10:001
2078799230,22cyclictest14830-21diskmemload22:38:171
2078799230,1cyclictest31382-21ssh22:50:151
20784992323,0cyclictest0-21swapper/023:10:100
20784992323,0cyclictest0-21swapper/022:23:560
20784992323,0cyclictest0-21swapper/021:16:270
20784992323,0cyclictest0-21swapper/000:00:120
20784992322,1cyclictest14830-21diskmemload22:55:290
20784992321,1cyclictest27980-21sh20:30:000
20784992321,1cyclictest2016-21ssh23:50:330
20784992321,1cyclictest0-21swapper/000:21:000
20784992320,3cyclictest30431-21rm00:15:190
20784992320,2cyclictest1850-21ssh23:22:050
20784992320,2cyclictest16249-21ssh00:32:200
20784992320,2cyclictest0-21swapper/022:35:320
20784992320,2cyclictest0-21swapper/000:10:150
2078499230,2cyclictest5119-21ssh21:58:260
2078499230,2cyclictest25766-21ssh22:45:090
2078499230,23cyclictest0-21swapper/021:46:030
2078499230,23cyclictest0-21swapper/021:40:240
2078499230,23cyclictest0-21swapper/021:25:160
2078499230,22cyclictest10717-21ssh23:29:120
2078499230,22cyclictest10291-21ssh23:00:160
2078499230,22cyclictest0-21swapper/023:31:320
2078499230,0cyclictest14830-21diskmemload22:25:520
20794992222,0cyclictest0-21swapper/321:25:163
20794992222,0cyclictest0-21swapper/300:16:053
20794992220,1cyclictest5209-21munin-plugin-st20:50:013
20794992220,1cyclictest0-21swapper/322:30:173
20794992220,1cyclictest0-21swapper/320:38:173
20794992219,2cyclictest23144-21cron19:15:013
2079499220,21cyclictest29653-21ssh22:20:023
2079499220,21cyclictest14856-21munin-run21:10:003
2079499220,21cyclictest0-21swapper/323:15:043
2079499220,1cyclictest20428-21ssh00:07:043
2079499220,1cyclictest1649-21cron20:00:013
2079499220,1cyclictest14571-21ssh00:30:043
2079499220,1cyclictest11154-21diskmemload23:01:293
2079499220,1cyclictest0-21swapper/321:53:273
2079499220,0cyclictest0-21swapper/323:25:543
2079499220,0cyclictest0-21swapper/321:16:333
20792992220,2cyclictest0-21swapper/221:50:132
20792992217,4cyclictest0-21swapper/220:28:172
2079299220,2cyclictest30755-21ssh00:15:532
2079299220,0cyclictest0-21swapper/220:13:172
20787992222,0cyclictest14830-21diskmemload00:31:051
20787992221,1cyclictest29107-21sh23:46:041
20787992220,1cyclictest15479-21ssh23:05:031
20787992220,1cyclictest10048-21sendmail-msp21:00:011
2078799220,22cyclictest871-21ssh23:20:441
2078799220,22cyclictest3401-21ssh21:57:481
2078799220,22cyclictest0-21swapper/121:20:251
2078799220,22cyclictest0-21swapper/121:11:301
2078799220,21cyclictest26116-21apt-get20:28:171
2078799220,1cyclictest13218-21munin-run20:00:011
2078799220,0cyclictest0-21swapper/123:56:561
2078799220,0cyclictest0-21swapper/121:43:571
20784992221,1cyclictest5193-21perf20:50:010
20784992221,1cyclictest0-21swapper/021:20:290
20784992220,1cyclictest22778-21sendmail20:20:000
2078499221,21cyclictest0-21swapper/022:02:440
2078499220,21cyclictest14830-21diskmemload21:30:240
2078499220,21cyclictest14830-21diskmemload00:35:260
2078499220,21cyclictest0-21swapper/021:54:120
2078499220,1cyclictest313-21systemd-journal21:10:000
2078499220,1cyclictest21269-21apt-get19:13:170
2078499220,1cyclictest0-21swapper/022:50:010
2078499220,0cyclictest0-21swapper/023:40:150
20794992121,0cyclictest0-21swapper/319:18:473
20794992119,1cyclictest622-21gdbus20:30:003
20794992119,1cyclictest0-21swapper/319:45:003
20794992118,2cyclictest22782-21sh20:20:003
2079499210,20cyclictest0-21swapper/320:03:173
2079499210,1cyclictest25755-21ssh22:45:093
20792992121,0cyclictest0-21swapper/220:53:162
2079299210,21cyclictest0-21swapper/219:38:162
2079299210,0cyclictest0-21swapper/219:23:152
20787992121,0cyclictest0-21swapper/121:03:181
20787992121,0cyclictest0-21swapper/119:50:021
2078799210,21cyclictest0-21swapper/123:30:041
20784992120,1cyclictest0-21swapper/019:45:000
20784992119,1cyclictest10400-21apt-get19:55:020
2078499210,21cyclictest0-21swapper/019:18:470
2079499200,20cyclictest0-21swapper/319:53:163
20792992019,1cyclictest0-21swapper/220:23:162
20792992018,1cyclictest0-21swapper/219:55:022
20787992020,0cyclictest30910-21apt-get20:38:171
20787992020,0cyclictest28474-21apt-get19:28:161
20787992020,0cyclictest0-21swapper/120:18:161
20787992018,1cyclictest14830-21diskmemload21:10:001
20784992020,0cyclictest0-21swapper/019:48:160
20784992018,1cyclictest23325-21apt-get20:23:160
2078499200,20cyclictest0-21swapper/020:38:170
2079499190,18cyclictest28510-21apt-get20:33:163
20792991919,0cyclictest0-21swapper/221:05:002
20792991919,0cyclictest0-21swapper/220:43:162
20792991918,1cyclictest13718-21apt-get20:03:172
20787991919,0cyclictest903-21apt-get20:43:161
20787991919,0cyclictest0-21swapper/119:33:161
20784991917,1cyclictest607-21in:imuxsock19:40:000
20794991818,0cyclictest0-21swapper/319:48:163
20792991818,0cyclictest30876-21apt-get19:33:162
20792991817,1cyclictest12967-21apt-get21:08:182
20792991815,2cyclictest22789-21cron20:20:002
20792991811,1cyclictest5154-21sh19:45:002
20787991818,0cyclictest26077-21apt-get19:23:151
20787991816,1cyclictest15593-21cron20:05:011
20784991818,0cyclictest0-21swapper/019:33:160
20784991815,2cyclictest30419-21grep20:35:000
20794991715,1cyclictest2742-21sh19:40:003
20792991717,0cyclictest0-21swapper/220:48:182
20787991717,0cyclictest23703-21apt-get19:18:471
20787991715,1cyclictest606-21dbus-daemon19:15:011
20784991715,1cyclictest8458-21apt-get19:53:150
20784991714,1cyclictest0-21swapper/021:00:010
20794991616,0cyclictest0-21swapper/320:23:163
20794991614,1cyclictest0-21swapper/319:33:163
20794991613,2cyclictest0-21swapper/320:53:163
20792991616,0cyclictest0-21swapper/220:08:162
20792991615,1cyclictest21269-21apt-get19:13:172
20792991612,3cyclictest30395-21cron20:35:002
2079299160,16cyclictest0-21swapper/219:26:162
20787991616,0cyclictest0-21swapper/120:13:171
20787991616,0cyclictest0-21swapper/119:43:171
20787991613,2cyclictest30396-21awk20:35:001
2078799160,1cyclictest0-21swapper/120:10:011
20784991615,0cyclictest0-21swapper/019:28:160
20784991614,1cyclictest0-21swapper/020:15:000
2079499150,1cyclictest2411-21cat20:43:243
2079299150,14cyclictest0-21swapper/220:37:372
2078799150,1cyclictest0-21swapper/119:38:191
2078499150,15cyclictest27574-21sed19:23:240
2079499140,14cyclictest0-21swapper/321:00:073
2079499140,14cyclictest0-21swapper/320:10:143
2079499140,14cyclictest0-21swapper/319:25:523
2079499140,14cyclictest0-21swapper/319:20:303
2079499140,0cyclictest0-21swapper/320:55:043
2079499140,0cyclictest0-21swapper/320:05:493
2079299140,14cyclictest0-21swapper/219:16:052
2078799140,14cyclictest0-21swapper/120:45:511
20784991414,0cyclictest0-21swapper/020:50:450
20784991414,0cyclictest0-21swapper/020:40:050
20784991414,0cyclictest0-21swapper/020:01:190
2078499140,14cyclictest0-21swapper/020:05:330
2078499140,0cyclictest0-21swapper/021:00:550
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional