You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-04-27 - 08:06

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rackbslot5s.osadl.org (updated Mon Apr 27, 2026 00:44:51)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1656683995343,7cyclictest1692979-21grep20:50:272
1656674995042,5cyclictest1726275-21idleruntime-cro22:30:010
1656687994937,7cyclictest53-21kcompactd023:20:003
1656674994836,8cyclictest1727962-21cron22:35:000
1656683994740,4cyclictest1694043-21fschecks_count20:55:172
1656674994737,6cyclictest1701766-21grep21:15:280
1656674994231,6cyclictest1665952-21grep19:35:000
1656674994230,8cyclictest1717098-21grep22:00:260
1656674994229,9cyclictest438-21cron20:50:000
1656674994229,9cyclictest438-21cron20:50:000
1656683994132,6cyclictest1713689-21unixbench_singl21:50:282
1656683994132,6cyclictest1713689-21unixbench_singl21:50:272
1656678994133,4cyclictest0-21swapper/121:00:011
1656674994131,7cyclictest121ktimers/020:05:130
1656678994030,6cyclictest0-21swapper/100:40:001
1656674994027,9cyclictest121ktimers/019:15:130
1656674994027,9cyclictest121ktimers/019:15:130
1656683993929,6cyclictest0-21swapper/223:35:252
1656678993929,5cyclictest0-21swapper/120:55:001
1656683993830,4cyclictest0-21swapper/221:26:552
1656674993830,4cyclictest1736731-21sendmail23:00:010
1656687993729,5cyclictest1769125-21munin-plugin-st00:35:003
1656678993727,7cyclictest1726271-21sh22:30:001
1656683993627,6cyclictest0-21swapper/219:15:012
1656683993626,6cyclictest0-21swapper/222:30:242
1656683993626,6cyclictest0-21swapper/222:15:262
1656678993614,4cyclictest131rcu_preempt21:00:131
1656674993627,4cyclictest0-21swapper/023:17:150
1656687993527,5cyclictest0-21swapper/319:35:003
1656683993526,6cyclictest0-21swapper/221:05:022
1656683993525,6cyclictest0-21swapper/200:10:242
1656683993524,7cyclictest0-21swapper/219:55:262
1656678993528,4cyclictest0-21swapper/119:15:051
1656678993528,4cyclictest0-21swapper/119:15:051
1656674993524,7cyclictest1758421-21grep00:00:280
1656674993524,7cyclictest1758421-21grep00:00:280
1656687993425,7cyclictest1750735-21fschecks_count23:40:163
1656683993426,4cyclictest0-21swapper/222:05:172
1656683993426,4cyclictest0-21swapper/200:40:002
1656678993428,3cyclictest0-21swapper/122:15:011
1656678993426,4cyclictest0-21swapper/119:40:271
1656678993424,6cyclictest0-21swapper/123:25:261
1656678993422,8cyclictest1767013-21grep00:25:271
1656674993427,4cyclictest0-21swapper/021:40:250
1656674993425,6cyclictest1676175-21sh20:05:020
1656687993326,4cyclictest1735016-21munin-plugin-st22:55:013
1656687993326,4cyclictest1667177-21unixbench_multi19:35:253
1656687993317,4cyclictest0-21swapper/323:55:253
1656683993325,5cyclictest1755461-21cron23:55:002
1656683993324,6cyclictest0-21swapper/223:05:002
1656683993324,6cyclictest0-21swapper/220:40:002
1656683993324,6cyclictest0-21swapper/220:15:022
1656683993323,6cyclictest0-21swapper/223:30:242
1656683993323,6cyclictest0-21swapper/223:20:272
1656683993323,6cyclictest0-21swapper/200:30:262
1656683993323,5cyclictest0-21swapper/200:25:282
1656678993326,5cyclictest1664104-21kworker/u8:2+events_unbound19:31:351
1656678993325,5cyclictest1743527-21auditctl23:20:011
1656678993325,5cyclictest0-21swapper/122:40:261
1656687993223,4cyclictest0-21swapper/300:10:243
1656687993222,7cyclictest1746529-21grep23:25:263
1656683993225,3cyclictest0-21swapper/223:10:162
1656683993223,6cyclictest0-21swapper/219:25:012
1656683993223,6cyclictest0-21swapper/219:25:002
1656683993220,7cyclictest0-21swapper/221:10:242
1656678993225,4cyclictest1736730-21idleruntime-cro23:00:011
1656678993221,8cyclictest1738424-21auditctl23:05:001
1656674993224,4cyclictest0-21swapper/021:55:160
1656674993224,4cyclictest0-21swapper/021:55:160
165667499321,28cyclictest0-21swapper/023:50:120
1656687993125,4cyclictest1750364-21awk23:40:003
1656687993124,3cyclictest0-21swapper/322:05:263
1656687993123,5cyclictest0-21swapper/321:20:003
1656687993123,4cyclictest1684243-21grep20:25:263
1656687993123,4cyclictest0-21swapper/320:50:273
1656687993122,4cyclictest0-21swapper/322:30:263
1656687993120,7cyclictest0-21swapper/319:40:273
1656683993125,3cyclictest0-21swapper/222:40:272
1656683993123,5cyclictest0-21swapper/200:05:252
1656683993121,6cyclictest0-21swapper/219:40:272
1656678993125,3cyclictest0-21swapper/120:25:011
1656678993124,5cyclictest1664104-21kworker/u8:2+events_unbound19:36:371
1656678993124,4cyclictest0-21swapper/121:55:271
1656678993124,4cyclictest0-21swapper/121:55:261
1656678993122,6cyclictest231ktimers/100:15:141
165667499319,5cyclictest0-21swapper/019:45:240
1656674993124,4cyclictest0-21swapper/020:50:280
1656674993121,6cyclictest0-21swapper/022:35:250
1656687993021,5cyclictest1722848-21sh22:20:003
1656683993023,4cyclictest0-21swapper/223:25:222
1656683993022,5cyclictest0-21swapper/221:25:002
1656683993022,5cyclictest0-21swapper/200:05:012
1656683993022,5cyclictest0-21swapper/200:05:002
1656683993021,6cyclictest0-21swapper/221:50:002
1656683993021,6cyclictest0-21swapper/219:55:012
1656683993021,6cyclictest0-21swapper/200:20:002
1656683993020,6cyclictest0-21swapper/221:55:262
1656683993020,6cyclictest0-21swapper/221:55:262
1656683993014,13cyclictest1679818-21seq20:15:142
1656678993022,4cyclictest0-21swapper/123:10:261
1656678993020,6cyclictest0-21swapper/120:25:271
165667499309,6cyclictest0-21swapper/023:35:240
165667499308,6cyclictest0-21swapper/000:20:220
165667499308,4cyclictest11-21ksoftirqd/019:30:010
1656674993022,4cyclictest0-21swapper/023:00:250
1656674993015,10cyclictest11-21ksoftirqd/021:31:080
1656687992922,3cyclictest0-21swapper/323:10:193
1656687992921,5cyclictest0-21swapper/321:10:153
1656687992921,4cyclictest0-21swapper/323:20:273
1656687992919,7cyclictest1697081-21cut21:05:013
1656683992921,5cyclictest0-21swapper/223:00:002
1656683992921,5cyclictest0-21swapper/221:20:002
1656683992921,5cyclictest0-21swapper/220:45:002
1656683992921,4cyclictest0-21swapper/222:47:082
1656683992921,4cyclictest0-21swapper/219:15:262
1656683992921,4cyclictest0-21swapper/219:15:262
1656683992920,6cyclictest0-21swapper/221:35:002
1656683992919,5cyclictest0-21swapper/222:00:162
1656678992922,4cyclictest1722377-21unixbench_multi22:15:251
1656678992922,4cyclictest0-21swapper/123:05:261
1656678992921,4cyclictest1763951-21kworker/u8:1+events_unbound00:33:451
1656678992921,4cyclictest0-21swapper/119:45:241
165667499298,6cyclictest0-21swapper/023:20:190
1656674992918,5cyclictest131rcu_preempt22:08:420
1656674992916,9cyclictest0-21swapper/019:15:010
1656674992912,4cyclictest1682261-21sendmail_mailtr20:20:250
1656674992910,6cyclictest11-21ksoftirqd/023:55:210
1656674992910,15cyclictest0-21swapper/021:00:130
1656687992821,3cyclictest0-21swapper/320:20:013
1656687992818,5cyclictest1725837-21grep22:25:263
165668799281,13cyclictest0-21swapper/321:40:223
1656683992822,3cyclictest0-21swapper/200:20:252
1656683992820,4cyclictest0-21swapper/219:30:272
1656683992819,5cyclictest0-21swapper/220:25:262
1656683992818,7cyclictest1698285-21grep21:05:252
1656683992818,7cyclictest1675728-21unixbench_multi20:00:242
1656678992822,4cyclictest1708699-21kworker/u8:3+events_unbound22:32:081
1656678992822,3cyclictest0-21swapper/121:10:231
1656678992821,4cyclictest0-21swapper/121:05:161
1656678992820,5cyclictest0-21swapper/121:20:001
1656678992820,4cyclictest1672304-21grep19:50:271
1656678992820,4cyclictest0-21swapper/123:30:241
165667499289,6cyclictest11-21ksoftirqd/023:05:160
165667499289,5cyclictest11-21ksoftirqd/022:20:220
165667499289,5cyclictest11-21ksoftirqd/022:20:220
165667499284,6cyclictest11-21ksoftirqd/000:35:140
1656674992821,3cyclictest0-21swapper/019:55:260
1656674992820,5cyclictest121ktimers/021:21:100
1656674992817,7cyclictest0-21swapper/022:10:250
1656674992816,8cyclictest0-21swapper/021:50:270
1656674992816,8cyclictest0-21swapper/021:50:270
1656674992812,8cyclictest131rcu_preempt22:46:350
165667499280,20cyclictest0-21swapper/023:25:120
1656687992721,4cyclictest1770138-21switchtime00:35:253
1656687992721,3cyclictest0-21swapper/323:00:253
1656687992721,3cyclictest0-21swapper/320:20:173
1656687992720,5cyclictest1667543-21kworker/u8:0+events_unbound19:56:393
1656687992720,4cyclictest1729904-21sendmail22:40:003
1656687992719,4cyclictest0-21swapper/320:05:253
1656687992718,7cyclictest1695356-21cut21:00:013
1656687992718,6cyclictest0-21swapper/300:20:003
1656687992717,7cyclictest1658919-21ntp_offset19:15:033
1656687992717,7cyclictest1658919-21ntp_offset19:15:023
1656687992715,8cyclictest1691253-21grep20:45:253
1656687992715,8cyclictest1691253-21grep20:45:253
1656683992718,6cyclictest0-21swapper/219:45:252
165668399271,4cyclictest0-21swapper/221:37:052
165667899276,4cyclictest1686617-21sh20:35:001
1656678992720,4cyclictest0-21swapper/122:35:251
1656678992719,6cyclictest1700307-21kworker/u8:1+events_unbound21:30:201
1656678992718,6cyclictest1705590-21cron21:30:001
1656678992716,9cyclictest24-21ksoftirqd/119:25:131
165667499279,12cyclictest204-21dbus-daemon23:47:080
165667499277,6cyclictest0-21swapper/020:25:210
1656674992713,3cyclictest131rcu_preempt23:10:230
1656674992710,10cyclictest11-21ksoftirqd/000:10:200
1656687992620,4cyclictest1693874-21kworker/u8:0+events_unbound21:26:573
1656687992620,3cyclictest0-21swapper/321:45:183
1656687992619,4cyclictest0-21swapper/323:45:243
1656687992617,5cyclictest0-21swapper/323:50:163
165668799260,14cyclictest0-21swapper/319:10:163
1656683992620,3cyclictest0-21swapper/222:40:002
1656683992619,4cyclictest0-21swapper/223:45:242
1656683992619,3cyclictest0-21swapper/223:40:162
1656683992618,5cyclictest0-21swapper/223:15:252
1656683992618,5cyclictest0-21swapper/220:50:002
1656683992618,5cyclictest0-21swapper/220:50:002
1656678992618,4cyclictest0-21swapper/122:45:161
1656678992616,6cyclictest0-21swapper/100:05:001
1656678992616,6cyclictest0-21swapper/100:05:001
1656678992615,7cyclictest0-21swapper/120:05:171
165667499266,7cyclictest0-21swapper/019:40:250
165667499266,3cyclictest0-21swapper/020:10:260
165667499263,5cyclictest11-21ksoftirqd/022:41:560
165667499262,6cyclictest1685596-21meminfo20:30:190
165667499262,13cyclictest1698774-21cron21:10:010
1656674992616,7cyclictest1722864-21run-parts22:20:000
1656687992519,3cyclictest0-21swapper/322:55:133
1656687992519,3cyclictest0-21swapper/321:55:223
1656687992519,3cyclictest0-21swapper/321:55:223
1656687992518,3cyclictest0-21swapper/321:50:233
1656687992518,3cyclictest0-21swapper/321:50:233
1656687992517,4cyclictest0-21swapper/322:45:163
1656687992517,4cyclictest0-21swapper/322:20:223
1656687992517,4cyclictest0-21swapper/322:20:223
1656687992516,6cyclictest1679575-21sh20:15:013
1656683992519,4cyclictest0-21swapper/222:10:252
1656683992519,3cyclictest0-21swapper/220:20:172
1656683992518,4cyclictest0-21swapper/221:40:252
1656683992518,3cyclictest0-21swapper/222:20:172
1656683992518,3cyclictest0-21swapper/222:20:172
1656678992520,3cyclictest1739881-21kworker/u8:3+events_unbound23:48:411
1656678992519,3cyclictest0-21swapper/122:00:161
1656678992517,6cyclictest231ktimers/121:45:131
1656678992517,4cyclictest0-21swapper/120:10:261
1656678992514,7cyclictest1760169-21grep00:05:251
1656678992514,7cyclictest0-21swapper/123:40:201
165667499259,7cyclictest1661520-21meminfo19:20:210
165667499259,7cyclictest1661520-21meminfo19:20:210
165667499259,6cyclictest11-21ksoftirqd/021:10:180
165667499257,5cyclictest131rcu_preempt21:29:540
165667499253,3cyclictest1762629-21df00:15:150
1656674992520,3cyclictest0-21swapper/000:30:130
1656674992518,4cyclictest1748182-21unixbench_multi23:30:240
1656674992518,4cyclictest0-21swapper/019:35:260
1656674992518,3cyclictest0-21swapper/020:40:050
1656674992512,4cyclictest131rcu_preempt21:48:290
1656674992510,8cyclictest0-21swapper/000:26:450
1656687992418,3cyclictest0-21swapper/322:00:233
1656687992418,3cyclictest0-21swapper/321:20:163
1656687992418,3cyclictest0-21swapper/320:35:203
1656687992417,3cyclictest0-21swapper/320:00:263
1656687992416,4cyclictest0-21swapper/319:50:173
1656687992416,4cyclictest0-21swapper/319:20:173
1656687992416,4cyclictest0-21swapper/319:20:173
1656687992413,8cyclictest1663677-21date19:25:263
1656683992417,4cyclictest0-21swapper/222:25:252
1656683992416,5cyclictest0-21swapper/222:50:252
165667899248,4cyclictest131rcu_preempt23:55:251
1656678992416,5cyclictest1718816-21unixbench_singl22:05:261
165667899241,3cyclictest0-21swapper/123:23:561
1656678992413,8cyclictest1712734-21awk21:50:151
1656678992413,8cyclictest1712734-21awk21:50:151
1656674992416,5cyclictest1708992-21cron21:40:000
165667499240,20cyclictest0-21swapper/019:54:430
1656687992317,3cyclictest1738816-21fschecks_count23:05:163
165668799231,5cyclictest1707974-21/usr/sbin/munin21:35:183
1656687992315,5cyclictest0-21swapper/300:05:233
1656687992315,3cyclictest0-21swapper/322:12:043
1656683992315,5cyclictest1664345-21latency_hist19:30:012
165667899239,10cyclictest204-21dbus-daemon23:37:191
1656678992318,3cyclictest0-21swapper/122:50:251
1656678992317,3cyclictest0-21swapper/121:40:151
1656678992315,4cyclictest231ktimers/123:50:201
1656678992315,4cyclictest1724134-21head22:20:271
1656678992315,4cyclictest1724134-21head22:20:261
165667499238,5cyclictest131rcu_preempt22:51:350
165667499238,4cyclictest131rcu_preempt20:15:010
165667499238,3cyclictest131rcu_preempt23:40:200
1656687992216,4cyclictest391ktimers/322:40:163
1656687992215,3cyclictest0-21swapper/300:25:173
1656687992214,6cyclictest1650924-21kworker/u8:1+events_unbound19:46:393
1656687992214,5cyclictest0-21swapper/300:20:153
1656687992214,4cyclictest0-21swapper/323:30:153
1656687992211,8cyclictest1697438-21grep21:05:153
1656687992211,8cyclictest1681219-21kworker/u8:1+events_unbound20:40:563
1656683992214,5cyclictest0-21swapper/223:55:162
1656683992213,5cyclictest0-21swapper/220:30:262
1656678992213,6cyclictest1690955-21grep20:45:241
1656678992213,6cyclictest1690955-21grep20:45:231
1656678992213,6cyclictest0-21swapper/100:10:151
1656678992212,7cyclictest1675786-21users20:00:251
1656687992116,2cyclictest0-21swapper/300:00:153
1656687992116,2cyclictest0-21swapper/300:00:153
165668799210,13cyclictest0-21swapper/320:32:443
1656683992115,3cyclictest0-21swapper/220:05:262
1656683992113,6cyclictest1740153-21ls23:10:012
165667899216,5cyclictest6250watchdogd00:23:131
1656678992115,3cyclictest1681279-21cron20:20:001
1656678992110,8cyclictest1688568-21apt-get20:40:121
1656678992014,4cyclictest1656666-21cyclictest19:20:131
1656678992014,4cyclictest1656666-21cyclictest19:20:131
1656678992014,3cyclictest0-21swapper/121:40:011
1656678992011,7cyclictest1674632-21sed20:00:011
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional