You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-14 - 10:40

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackbslot5s.osadl.org (updated Thu May 14, 2026 00:44:52)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
792808996636,26cyclictest833001-21cron21:05:000
792812995544,7cyclictest846395-21grep21:40:241
792812995340,9cyclictest231ktimers/120:05:131
792812995340,9cyclictest231ktimers/120:05:121
792808995222,25cyclictest0-21swapper/000:00:250
792821995145,4cyclictest792317-21kworker/u8:4+events_unbound20:01:583
792808995122,25cyclictest0-21swapper/023:40:240
792812995041,5cyclictest886283-21cron23:40:011
792812994938,5cyclictest889722-21idleruntime-cro23:50:001
792812994835,10cyclictest231ktimers/122:50:111
792812994834,10cyclictest231ktimers/120:00:141
792812994738,5cyclictest807188-21cron19:50:011
792808994619,4cyclictest0-21swapper/021:20:270
792808994619,4cyclictest0-21swapper/021:20:260
792808994616,6cyclictest0-21swapper/022:30:260
792808994616,6cyclictest0-21swapper/022:30:250
792821994531,11cyclictest391ktimers/322:30:133
792821994531,11cyclictest391ktimers/322:30:123
792808994517,3cyclictest0-21swapper/000:30:000
792817994434,7cyclictest881188-21cron23:25:002
792812994335,4cyclictest834712-21cron21:10:001
792812994332,7cyclictest853214-21grep22:00:251
792808994331,7cyclictest0-21swapper/023:05:000
792821994229,8cyclictest391ktimers/322:15:123
792808994233,6cyclictest890946-21grep23:50:250
792808994233,6cyclictest890946-21grep23:50:250
792821994132,5cyclictest845140-21cron21:40:003
792812994130,7cyclictest829810-21kworker/u8:3-ext4-rsv-conversion21:00:011
792808994121,16cyclictest0-21swapper/020:10:260
792808994121,16cyclictest0-21swapper/020:10:250
792808994115,5cyclictest0-21swapper/020:55:200
792821994031,4cyclictest0-21swapper/322:22:213
792821994031,4cyclictest0-21swapper/322:22:213
792808994033,4cyclictest845151-21latency_hist21:40:000
792812993928,8cyclictest840045-21auditctl21:25:001
792812993928,8cyclictest840045-21auditctl21:25:001
792808993931,4cyclictest796962-21apt-key19:20:010
792817993832,3cyclictest865848-21sendmail22:40:002
792817993828,6cyclictest0-21swapper/200:05:002
792812993827,8cyclictest891009-21unixbench_singl23:50:261
792812993827,8cyclictest891009-21unixbench_singl23:50:261
792821993729,4cyclictest0-21swapper/321:05:153
792821993728,6cyclictest879045-21unixbench_singl23:15:263
792817993729,4cyclictest0-21swapper/223:55:012
792817993729,4cyclictest0-21swapper/223:55:002
792812993725,8cyclictest0-21swapper/121:05:001
792808993730,4cyclictest838117-21kthreadd21:20:000
792808993716,5cyclictest0-21swapper/022:15:250
792821993627,5cyclictest0-21swapper/323:05:243
792821993614,13cyclictest792801-21cyclictest22:10:143
792817993626,6cyclictest825755-21grep20:40:252
792808993626,6cyclictest0-21swapper/022:00:240
792808993626,6cyclictest0-21swapper/019:15:000
792821993527,4cyclictest872652-21cron23:00:013
792821993527,4cyclictest0-21swapper/323:35:253
792821993523,6cyclictest131rcu_preempt19:54:463
792817993526,6cyclictest311ktimers/222:00:122
792812993526,4cyclictest0-21swapper/120:55:011
792812993525,7cyclictest231ktimers/122:10:111
792812993523,8cyclictest858800-21sendmail22:20:001
792817993427,3cyclictest0-21swapper/219:35:012
792817993426,4cyclictest0-21swapper/223:30:252
792817993426,4cyclictest0-21swapper/222:20:252
792817993426,4cyclictest0-21swapper/222:20:242
792817993426,4cyclictest0-21swapper/220:25:152
792817993426,4cyclictest0-21swapper/220:25:152
792817993424,6cyclictest869658-21grep22:50:142
792817993424,6cyclictest0-21swapper/223:20:002
792812993427,5cyclictest145-21jbd2/mmcblk1p2-800:10:281
792812993423,7cyclictest906739-21grep00:35:241
792808993426,4cyclictest0-21swapper/020:45:270
792808993423,7cyclictest0-21swapper/019:25:260
792821993325,4cyclictest0-21swapper/322:35:263
792821993324,6cyclictest817632-21sh20:20:013
792821993323,7cyclictest381rcuc/323:45:123
792821993323,4cyclictest131rcu_preempt00:18:283
792821993319,9cyclictest0-21swapper/319:45:003
792821993315,6cyclictest792801-21cyclictest19:15:133
792817993326,4cyclictest0-21swapper/200:15:152
792817993324,4cyclictest0-21swapper/221:27:112
792812993325,5cyclictest0-21swapper/119:40:241
792812993325,4cyclictest0-21swapper/121:10:281
792812993324,5cyclictest803788-21munin-plugin-st19:40:001
79282199326,7cyclictest40-21ksoftirqd/300:10:013
792821993226,4cyclictest794564-21latency_hist19:15:013
792821993222,7cyclictest381rcuc/322:28:483
792817993226,3cyclictest0-21swapper/220:40:022
792817993225,4cyclictest834711-21munin-plugin-st21:10:012
792817993225,4cyclictest822748-21cron20:35:002
792817993225,4cyclictest0-21swapper/223:00:002
792817993224,5cyclictest858791-21cron22:20:002
792817993223,4cyclictest0-21swapper/219:20:162
792812993224,4cyclictest0-21swapper/120:10:251
792812993224,4cyclictest0-21swapper/120:10:251
792808993225,3cyclictest0-21swapper/022:15:010
792808993225,3cyclictest0-21swapper/020:20:010
792808993222,6cyclictest0-21swapper/020:50:160
79282199318,14cyclictest0-21swapper/300:35:013
79282199317,5cyclictest40-21ksoftirqd/320:15:013
79282199317,5cyclictest40-21ksoftirqd/320:15:003
792821993123,4cyclictest0-21swapper/322:40:243
792821993123,4cyclictest0-21swapper/320:25:153
792821993123,4cyclictest0-21swapper/320:25:153
792821993123,4cyclictest0-21swapper/300:10:243
792821993121,7cyclictest840460-21fschecks_time21:25:153
792821993121,7cyclictest825760-21grep20:40:253
792821993120,8cyclictest391ktimers/321:52:373
792821993113,5cyclictest131rcu_preempt23:30:203
792821993113,11cyclictest131rcu_preempt19:20:253
792821993111,5cyclictest131rcu_preempt22:00:183
792817993125,4cyclictest898520-21latency_hist00:15:002
792817993125,3cyclictest0-21swapper/200:40:002
792817993123,4cyclictest0-21swapper/220:10:152
792817993123,4cyclictest0-21swapper/220:10:152
792817993123,4cyclictest0-21swapper/219:35:262
792812993123,4cyclictest0-21swapper/119:20:011
792812993122,4cyclictest0-21swapper/100:20:161
792812993120,8cyclictest231ktimers/123:05:121
792808993123,4cyclictest803779-21sh19:40:000
79282199308,6cyclictest40-21ksoftirqd/323:25:183
79282199304,7cyclictest40-21ksoftirqd/322:50:013
79282199304,6cyclictest40-21ksoftirqd/321:00:203
792821993024,4cyclictest894994-21latency_hist00:05:003
792821993020,6cyclictest0-21swapper/323:00:163
792821993019,8cyclictest381rcuc/320:09:193
792821993019,8cyclictest381rcuc/320:09:193
792821993014,9cyclictest131rcu_preempt21:23:233
792821993014,9cyclictest131rcu_preempt21:23:233
792817993024,4cyclictest902321-21fschecks_time00:25:162
792817993023,4cyclictest831749-21fschecks_time21:00:162
792817993020,6cyclictest0-21swapper/222:10:242
792817993020,6cyclictest0-21swapper/221:35:242
792817993019,7cyclictest862020-21grep22:25:252
792812993022,4cyclictest0-21swapper/123:55:261
792812993022,4cyclictest0-21swapper/120:40:011
792812993019,7cyclictest818941-21grep20:20:241
792808993024,3cyclictest0-21swapper/022:45:000
792808993020,6cyclictest0-21swapper/023:05:240
792808993020,6cyclictest0-21swapper/022:25:250
792808993020,6cyclictest0-21swapper/021:25:240
792808993020,6cyclictest0-21swapper/019:50:000
792808993019,6cyclictest0-21swapper/020:20:240
79282199298,6cyclictest40-21ksoftirqd/321:45:193
79282199298,6cyclictest40-21ksoftirqd/320:20:153
79282199297,12cyclictest40-21ksoftirqd/322:05:133
79282199293,7cyclictest40-21ksoftirqd/320:55:193
792821992922,3cyclictest0-21swapper/300:20:243
792821992921,4cyclictest0-21swapper/321:55:243
792821992919,7cyclictest391ktimers/319:30:133
79282199291,8cyclictest40-21ksoftirqd/320:50:133
792821992911,5cyclictest131rcu_preempt19:45:173
792817992922,3cyclictest0-21swapper/221:50:162
792817992921,4cyclictest0-21swapper/219:15:012
792812992921,4cyclictest0-21swapper/123:15:261
792812992918,7cyclictest801612-21grep19:30:241
792812992916,9cyclictest794540-21munin-node19:15:011
792808992922,3cyclictest0-21swapper/023:20:000
792808992922,3cyclictest0-21swapper/022:20:150
792808992922,3cyclictest0-21swapper/022:20:150
792808992921,5cyclictest0-21swapper/022:55:270
792808992919,6cyclictest0-21swapper/000:35:010
792808992919,6cyclictest0-21swapper/000:10:240
79282199286,6cyclictest40-21ksoftirqd/321:35:003
79282199284,9cyclictest40-21ksoftirqd/321:15:213
79282199284,6cyclictest381rcuc/323:54:263
79282199284,6cyclictest381rcuc/323:54:263
79282199283,5cyclictest40-21ksoftirqd/300:25:163
792821992823,3cyclictest391ktimers/319:28:093
792821992820,6cyclictest391ktimers/322:50:193
792821992814,4cyclictest824083-21kworker/u8:0-events_power_efficient20:47:203
792817992821,3cyclictest0-21swapper/220:45:182
792812992820,5cyclictest801775-21kworker/u8:1+events_unbound19:50:131
792812992820,4cyclictest0-21swapper/100:30:011
792812992819,5cyclictest0-21swapper/121:20:001
792808992822,3cyclictest0-21swapper/000:20:250
792808992820,4cyclictest0-21swapper/021:10:000
792808992819,5cyclictest0-21swapper/000:40:000
792808992818,6cyclictest0-21swapper/023:35:250
792808992818,5cyclictest0-21swapper/023:30:000
79282199277,6cyclictest880154-21cat23:20:203
79282199276,7cyclictest40-21ksoftirqd/320:35:223
79282199275,5cyclictest40-21ksoftirqd/323:40:103
792821992718,7cyclictest873980-21kworker/u8:2+events_unbound23:11:433
792821992718,6cyclictest391ktimers/300:40:013
79282199271,7cyclictest40-21ksoftirqd/319:55:023
792821992716,4cyclictest131rcu_preempt21:40:203
792821992715,4cyclictest131rcu_preempt23:55:223
792817992719,4cyclictest0-21swapper/222:00:012
792817992719,4cyclictest0-21swapper/221:10:272
792812992721,3cyclictest0-21swapper/100:05:191
792812992717,6cyclictest863660-21grep22:30:251
792812992717,6cyclictest863660-21grep22:30:251
792808992720,3cyclictest0-21swapper/019:55:010
792808992716,7cyclictest884177-21grep23:30:240
79280899271,5cyclictest826364-21latency_hist20:45:010
79280899271,5cyclictest796745-21apt-get19:20:030
792808992713,10cyclictest121ktimers/019:40:110
79280899271,23cyclictest847013-21latency_hist21:45:010
79282199261,8cyclictest40-21ksoftirqd/320:35:033
792821992610,9cyclictest131rcu_preempt19:35:123
792817992619,4cyclictest0-21swapper/200:35:002
792817992616,7cyclictest884940-21diskstats23:35:152
792817992616,6cyclictest830756-21cat20:55:232
792817992616,6cyclictest0-21swapper/223:45:262
792817992614,9cyclictest881421-21apt-get23:25:102
792812992618,4cyclictest0-21swapper/121:35:251
792812992616,6cyclictest865363-21grep22:35:261
792812992615,7cyclictest900174-21sendmail00:20:001
792808992619,3cyclictest0-21swapper/021:47:130
792808992618,5cyclictest0-21swapper/000:00:000
792808992615,7cyclictest819967-21cat20:25:190
792808992615,7cyclictest819967-21cat20:25:180
792817992519,3cyclictest0-21swapper/223:05:202
792817992519,3cyclictest0-21swapper/221:45:232
792817992518,4cyclictest0-21swapper/221:20:162
792817992518,4cyclictest0-21swapper/221:20:162
792817992518,4cyclictest0-21swapper/219:25:252
792817992518,3cyclictest0-21swapper/221:40:152
792817992517,5cyclictest0-21swapper/220:20:022
792812992518,5cyclictest860331-21kworker/u8:2+events_unbound22:55:021
792812992517,6cyclictest231ktimers/122:20:061
792812992517,6cyclictest231ktimers/122:20:061
792812992517,5cyclictest824083-21kworker/u8:0+events_unbound20:47:311
792812992517,5cyclictest0-21swapper/122:40:241
792812992517,4cyclictest0-21swapper/121:50:241
792812992513,8cyclictest0-21swapper/123:15:011
792808992517,4cyclictest438-21cron19:35:010
792808992515,6cyclictest0-21swapper/022:05:250
79280899251,4cyclictest8965072sleep000:07:170
792817992418,3cyclictest0-21swapper/219:40:242
792817992417,4cyclictest0-21swapper/222:30:252
792817992417,4cyclictest0-21swapper/222:30:252
79281299245,5cyclictest131rcu_preempt23:25:111
792812992417,5cyclictest882609-21kworker/u8:1+events_unbound23:41:001
792812992417,3cyclictest0-21swapper/122:30:011
792812992416,5cyclictest854921-21grep22:05:251
792812992416,5cyclictest0-21swapper/123:20:261
792812992416,5cyclictest0-21swapper/121:45:161
792808992415,6cyclictest0-21swapper/023:20:170
792808992413,8cyclictest850709-21grep21:55:150
79280899241,19cyclictest0-21swapper/021:31:180
792817992317,3cyclictest0-21swapper/223:55:172
792817992315,5cyclictest811846-21unixbench_multi20:00:272
792817992315,5cyclictest0-21swapper/219:50:242
792817992313,6cyclictest0-21swapper/221:15:272
792817992312,8cyclictest809241-21df_inode19:55:142
792817992312,7cyclictest0-21swapper/220:20:232
792812992316,4cyclictest904817-21grep00:30:241
792812992316,4cyclictest815613-21kworker/u8:3+events_unbound20:25:141
792812992316,4cyclictest815613-21kworker/u8:3+events_unbound20:25:131
792812992315,5cyclictest800067-21kworker/u8:0+events_unbound19:28:001
79281299231,11cyclictest0-21swapper/123:30:231
792808992316,4cyclictest8698082sleep022:50:160
792808992316,4cyclictest813592-21unixbench_singl20:05:250
792808992316,4cyclictest813592-21unixbench_singl20:05:250
792808992316,3cyclictest0-21swapper/021:12:320
792808992316,3cyclictest0-21swapper/019:58:060
792808992316,3cyclictest0-21swapper/000:20:000
792808992314,6cyclictest0-21swapper/023:45:270
79280899231,18cyclictest0-21swapper/020:02:140
79280899230,21cyclictest0-21swapper/022:39:350
792817992216,3cyclictest0-21swapper/219:15:012
792817992215,4cyclictest311ktimers/220:53:222
792817992213,6cyclictest887600-21unixbench_singl23:40:242
792817992212,7cyclictest805842-21df_inode19:45:152
792817992212,6cyclictest0-21swapper/200:20:242
792817992211,8cyclictest895378-21df00:05:132
792817992211,7cyclictest0-21swapper/222:05:252
792812992216,3cyclictest0-21swapper/120:30:211
792812992216,3cyclictest0-21swapper/120:15:171
792812992215,4cyclictest842961-21grep21:30:261
792812992211,7cyclictest894854-21http00:05:001
792812992210,2cyclictest131rcu_preempt22:47:361
79280899221,19cyclictest8226992sleep020:34:240
79280899220,20cyclictest0-21swapper/023:12:010
79280899220,18cyclictest0-21swapper/020:35:040
792817992114,4cyclictest8730022sleep223:00:152
79281799211,17cyclictest876675-21grep23:10:172
792817992111,6cyclictest1-21systemd22:47:272
792812992114,5cyclictest844939-21kworker/u8:0+events_unbound21:55:541
792812992113,6cyclictest829810-21kworker/u8:3+events_unbound21:27:461
792812992110,7cyclictest0-21swapper/119:55:171
79281299210,3cyclictest131rcu_preempt19:20:051
79280899211,18cyclictest0-21swapper/022:45:350
792817992014,3cyclictest0-21swapper/220:05:162
792817992014,3cyclictest0-21swapper/220:05:152
792812992013,5cyclictest869025-21kworker/u8:1+events_unbound23:00:291
792812992012,5cyclictest0-21swapper/120:45:011
79280899201,3cyclictest0-21swapper/021:50:020
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional