You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-15 - 08:12

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Mon Sep 15, 2025 00:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
34852320305,4sleep20-21swapper/219:08:382
35412319311,5sleep30-21swapper/319:09:193
35292316310,4sleep10-21swapper/119:09:131
32532316303,10sleep00-21swapper/019:05:400
3860992960,295cyclictest4321-21kworker/u16:2+efi_rts_wq00:10:163
3860992950,294cyclictest28744-21kworker/u16:0+efi_rts_wq21:54:453
3858992950,294cyclictest17035-21kworker/u16:2+efi_rts_wq19:10:141
3857992950,294cyclictest11960-21kworker/u16:0+efi_rts_wq00:05:150
3860992920,291cyclictest12731-21kworker/u16:0+efi_rts_wq19:45:143
3860992890,287cyclictest24097-21kworker/u16:3+efi_rts_wq21:25:143
3858992880,287cyclictest28744-21kworker/u16:0+efi_rts_wq22:29:501
3860992860,285cyclictest24097-21kworker/u16:3+efi_rts_wq20:35:123
3859992860,284cyclictest28744-21kworker/u16:0+efi_rts_wq22:30:142
3858992860,285cyclictest6242-21kworker/u16:1+efi_rts_wq21:49:441
3860992850,284cyclictest14272-21kworker/u16:4+efi_rts_wq23:25:003
3857992850,284cyclictest24097-21kworker/u16:3+efi_rts_wq19:50:150
3860992840,283cyclictest24097-21kworker/u16:3+efi_rts_wq20:55:143
3858992840,283cyclictest17035-21kworker/u16:2+efi_rts_wq19:24:171
3857992840,283cyclictest24097-21kworker/u16:3+efi_rts_wq19:15:140
3860992830,282cyclictest15545-21kworker/u16:4+efi_rts_wq22:20:133
3857992810,280cyclictest28744-21kworker/u16:0+efi_rts_wq21:59:460
3860992800,279cyclictest28744-21kworker/u16:0+efi_rts_wq21:55:133
3859992790,278cyclictest11960-21kworker/u16:0+efi_rts_wq00:25:142
3859992790,278cyclictest11960-21kworker/u16:0+efi_rts_wq00:00:152
3860992780,277cyclictest22328-21kworker/u16:2+efi_rts_wq23:10:153
3859992780,277cyclictest11960-21kworker/u16:0+efi_rts_wq23:50:152
3858992770,276cyclictest21067-21kworker/u16:2+efi_rts_wq20:09:231
3860992760,275cyclictest11960-21kworker/u16:0+efi_rts_wq23:15:153
3857992760,275cyclictest6242-21kworker/u16:1+efi_rts_wq21:40:120
3857992750,274cyclictest6242-21kworker/u16:1+efi_rts_wq21:09:360
3857992740,273cyclictest11960-21kworker/u16:0+efi_rts_wq23:40:040
3860992730,271cyclictest24097-21kworker/u16:3+efi_rts_wq20:30:143
3859992730,272cyclictest28744-21kworker/u16:0+efi_rts_wq22:14:472
3857992730,272cyclictest22328-21kworker/u16:2+efi_rts_wq23:09:580
3857992720,271cyclictest11960-21kworker/u16:0+efi_rts_wq23:25:140
3859992700,269cyclictest11960-21kworker/u16:0+efi_rts_wq23:30:132
3858992700,268cyclictest24097-21kworker/u16:3+efi_rts_wq19:54:221
3859992690,268cyclictest6242-21kworker/u16:1+efi_rts_wq20:45:082
3858992680,267cyclictest8919-21kworker/u16:1+efi_rts_wq19:40:141
3857992680,267cyclictest24097-21kworker/u16:3+efi_rts_wq20:34:290
3860992670,266cyclictest22328-21kworker/u16:2+efi_rts_wq22:59:563
3858992660,265cyclictest6242-21kworker/u16:1+efi_rts_wq20:50:131
3857992640,263cyclictest8919-21kworker/u16:1+efi_rts_wq19:40:130
3860992620,261cyclictest11960-21kworker/u16:0+efi_rts_wq23:35:123
3858992620,261cyclictest6242-21kworker/u16:1+efi_rts_wq20:59:331
3858992620,261cyclictest11960-21kworker/u16:0+efi_rts_wq23:40:131
3860992610,260cyclictest15545-21kworker/u16:4+efi_rts_wq22:15:123
3858992610,260cyclictest12731-21kworker/u16:0+efi_rts_wq19:55:111
3858992600,258cyclictest22328-21kworker/u16:2+efi_rts_wq23:10:151
3857992570,256cyclictest11960-21kworker/u16:0+efi_rts_wq00:20:140
3858992540,253cyclictest22328-21kworker/u16:2+efi_rts_wq22:50:151
3857992540,253cyclictest24097-21kworker/u16:3+efi_rts_wq19:29:160
3858992520,251cyclictest21067-21kworker/u16:2+efi_rts_wq20:04:231
3859992510,250cyclictest22328-21kworker/u16:2+efi_rts_wq23:05:132
3860992500,249cyclictest12731-21kworker/u16:0+efi_rts_wq19:55:133
3857992500,249cyclictest24097-21kworker/u16:3+efi_rts_wq21:00:140
3857992480,247cyclictest22328-21kworker/u16:2+efi_rts_wq22:45:130
3858992470,246cyclictest11960-21kworker/u16:0+efi_rts_wq00:30:121
3857992450,244cyclictest14272-21kworker/u16:4+efi_rts_wq23:55:140
3860992440,243cyclictest11960-21kworker/u16:0+efi_rts_wq23:20:003
3860992440,241cyclictest6242-21kworker/u16:1+efi_rts_wq21:45:133
3859992420,241cyclictest11960-21kworker/u16:0+efi_rts_wq00:05:152
3857992420,241cyclictest24097-21kworker/u16:3+efi_rts_wq20:10:160
3857992410,240cyclictest28744-21kworker/u16:0+efi_rts_wq22:25:130
3859992400,239cyclictest6242-21kworker/u16:1+efi_rts_wq21:14:372
3857992400,239cyclictest6242-21kworker/u16:1+efi_rts_wq21:20:120
3860992390,238cyclictest28744-21kworker/u16:0+efi_rts_wq22:30:133
3860992380,237cyclictest11960-21kworker/u16:0+efi_rts_wq23:30:023
3857992370,236cyclictest28744-21kworker/u16:0+efi_rts_wq22:00:130
3860992360,235cyclictest24097-21kworker/u16:3+efi_rts_wq20:15:133
3860992360,235cyclictest17035-21kworker/u16:2+efi_rts_wq19:25:143
3859992360,235cyclictest24097-21kworker/u16:3+efi_rts_wq19:14:152
3860992350,234cyclictest13475-21kworker/u16:3+efi_rts_wq23:00:143
3858992350,234cyclictest24097-21kworker/u16:3+efi_rts_wq20:20:141
3857992340,233cyclictest24097-21kworker/u16:3+efi_rts_wq20:05:130
3858992330,232cyclictest6242-21kworker/u16:1+efi_rts_wq21:29:391
3858992330,232cyclictest12731-21kworker/u16:0+efi_rts_wq19:30:141
3857992330,232cyclictest24097-21kworker/u16:3+efi_rts_wq20:20:140
3860992320,231cyclictest6242-21kworker/u16:1+efi_rts_wq21:15:143
3860992320,231cyclictest11960-21kworker/u16:0+efi_rts_wq23:51:193
3860992320,230cyclictest22328-21kworker/u16:2+efi_rts_wq23:05:133
3858992290,228cyclictest11960-21kworker/u16:0+efi_rts_wq00:25:141
3857992290,228cyclictest28744-21kworker/u16:0+efi_rts_wq21:50:140
3859992280,227cyclictest24097-21kworker/u16:3+efi_rts_wq21:05:132
3859992270,226cyclictest11960-21kworker/u16:0+efi_rts_wq23:35:122
3857992240,223cyclictest28744-21kworker/u16:0+efi_rts_wq22:24:500
3858992230,222cyclictest24097-21kworker/u16:3+efi_rts_wq21:00:151
3860992190,218cyclictest13475-21kworker/u16:3+efi_rts_wq22:49:553
3858992180,217cyclictest24097-21kworker/u16:3+efi_rts_wq20:19:251
3858992170,216cyclictest6242-21kworker/u16:1+efi_rts_wq21:24:391
3857992170,216cyclictest12731-21kworker/u16:0+efi_rts_wq19:30:140
3857992160,215cyclictest12731-21kworker/u16:0+efi_rts_wq19:49:200
3860992150,214cyclictest6440-21kworker/u16:3+efi_rts_wq00:31:273
3859992150,214cyclictest24097-21kworker/u16:3+efi_rts_wq20:24:272
3858992150,214cyclictest11960-21kworker/u16:0+efi_rts_wq23:35:021
3857992150,214cyclictest4321-21kworker/u16:2+efi_rts_wq00:10:150
3859992140,213cyclictest6242-21kworker/u16:1+efi_rts_wq21:15:142
3858992140,213cyclictest12731-21kworker/u16:0+efi_rts_wq19:39:191
3860992130,212cyclictest6242-21kworker/u16:1+efi_rts_wq21:10:163
3860992130,212cyclictest28744-21kworker/u16:0+efi_rts_wq21:35:133
3859992120,211cyclictest6242-21kworker/u16:1+efi_rts_wq22:04:472
3859992120,211cyclictest21067-21kworker/u16:2+efi_rts_wq20:14:252
3859992100,209cyclictest24097-21kworker/u16:3+efi_rts_wq20:25:132
3858992100,209cyclictest11960-21kworker/u16:0+efi_rts_wq23:20:151
3857992090,208cyclictest6242-21kworker/u16:1+efi_rts_wq21:39:420
3858992070,206cyclictest28744-21kworker/u16:0+efi_rts_wq22:05:141
3858992070,206cyclictest28744-21kworker/u16:0+efi_rts_wq22:05:131
3858992070,206cyclictest28744-21kworker/u16:0+efi_rts_wq21:34:411
3858992060,205cyclictest11960-21kworker/u16:0+efi_rts_wq23:25:131
3858992050,204cyclictest15545-21kworker/u16:4+efi_rts_wq22:15:111
3857992050,203cyclictest31386-21kworker/u16:1+efi_rts_wq22:55:130
3859992030,202cyclictest28744-21kworker/u16:0+efi_rts_wq21:30:152
3858992020,201cyclictest22328-21kworker/u16:2+efi_rts_wq22:44:541
3857992020,201cyclictest11960-21kworker/u16:0+efi_rts_wq00:35:150
3858992010,199cyclictest11960-21kworker/u16:0+efi_rts_wq00:20:141
3860992000,199cyclictest11960-21kworker/u16:0+efi_rts_wq00:16:233
3858991980,197cyclictest15545-21kworker/u16:4+efi_rts_wq22:20:141
3859991970,196cyclictest15545-21kworker/u16:4+efi_rts_wq22:15:122
3858991950,194cyclictest12731-21kworker/u16:0+efi_rts_wq19:45:131
3858991940,193cyclictest13475-21kworker/u16:3+efi_rts_wq23:00:141
3859991900,189cyclictest24097-21kworker/u16:3+efi_rts_wq20:05:142
3859991890,188cyclictest22328-21kworker/u16:2+efi_rts_wq22:35:122
3858991890,188cyclictest6242-21kworker/u16:1+efi_rts_wq20:49:311
3860991870,186cyclictest11960-21kworker/u16:0+efi_rts_wq00:35:143
3858991840,183cyclictest28744-21kworker/u16:0+efi_rts_wq22:30:141
3858991830,182cyclictest11960-21kworker/u16:0+efi_rts_wq23:56:191
3857991810,180cyclictest11960-21kworker/u16:0+efi_rts_wq23:46:180
3860991780,177cyclictest14272-21kworker/u16:4+efi_rts_wq23:55:133
3860991780,177cyclictest11960-21kworker/u16:0+efi_rts_wq23:45:143
3858991780,177cyclictest6242-21kworker/u16:1+efi_rts_wq20:39:291
3859991760,175cyclictest11960-21kworker/u16:0+efi_rts_wq00:30:132
3857991710,170cyclictest6242-21kworker/u16:1+efi_rts_wq22:10:160
3859991680,167cyclictest11960-21kworker/u16:0+efi_rts_wq00:15:142
3860991620,161cyclictest13475-21kworker/u16:3+efi_rts_wq22:40:143
3857991620,161cyclictest14272-21kworker/u16:4+efi_rts_wq00:01:190
3858991580,157cyclictest14272-21kworker/u16:4+efi_rts_wq23:45:051
3857991530,152cyclictest24097-21kworker/u16:3+efi_rts_wq21:25:140
3860991510,150cyclictest28744-21kworker/u16:0+efi_rts_wq22:05:143
3860991510,150cyclictest28744-21kworker/u16:0+efi_rts_wq22:05:133
3860991510,150cyclictest24097-21kworker/u16:3+efi_rts_wq20:00:133
3860991480,147cyclictest28744-21kworker/u16:0+efi_rts_wq22:00:143
3858991460,145cyclictest6242-21kworker/u16:1+efi_rts_wq21:40:131
3860991440,143cyclictest22328-21kworker/u16:2+efi_rts_wq22:35:133
3857991350,134cyclictest6242-21kworker/u16:1+efi_rts_wq21:10:150
3857991350,133cyclictest11960-21kworker/u16:0+efi_rts_wq23:50:140
3857991320,131cyclictest22328-21kworker/u16:2+efi_rts_wq22:34:520
3857991310,130cyclictest24097-21kworker/u16:3+efi_rts_wq20:15:130
3860991300,129cyclictest6242-21kworker/u16:1+efi_rts_wq21:20:133
3860991300,129cyclictest12731-21kworker/u16:0+efi_rts_wq19:35:163
3859991240,121cyclictest11960-21kworker/u16:0+efi_rts_wq23:15:152
3860991210,120cyclictest24097-21kworker/u16:3+efi_rts_wq20:29:273
3857991200,119cyclictest24097-21kworker/u16:3+efi_rts_wq20:00:130
3860991190,118cyclictest11960-21kworker/u16:0+efi_rts_wq00:21:253
3858991190,118cyclictest6242-21kworker/u16:1+efi_rts_wq20:44:311
3858991160,115cyclictest6440-21kworker/u16:3+efi_rts_wq00:36:271
3857991150,114cyclictest6242-21kworker/u16:1+efi_rts_wq20:50:130
3857991130,112cyclictest24097-21kworker/u16:3+efi_rts_wq20:55:150
3858991090,108cyclictest28744-21kworker/u16:0+efi_rts_wq21:35:131
3857991050,104cyclictest22328-21kworker/u16:2+efi_rts_wq23:10:150
3859993229,2cyclictest799-21snmpd22:43:102
3860993130,1cyclictest799-21snmpd22:53:073
3860993129,2cyclictest799-21snmpd23:42:153
3860993129,2cyclictest799-21snmpd22:10:133
3860993129,2cyclictest799-21snmpd20:13:113
3860993129,2cyclictest799-21snmpd19:40:063
3860993129,2cyclictest28223-21cat20:05:173
3859993130,1cyclictest799-21snmpd19:59:252
3859993129,2cyclictest799-21snmpd21:36:212
3859993129,2cyclictest18535-21cat22:20:162
3859993129,1cyclictest8974-21kworker/2:2+events23:29:442
3858993130,1cyclictest799-21snmpd00:06:521
3858993129,2cyclictest799-21snmpd21:12:011
3858993129,2cyclictest6486-21cat20:30:161
3857993130,1cyclictest799-21snmpd00:19:280
3857993129,2cyclictest799-21snmpd23:19:050
3857993129,2cyclictest799-21snmpd21:19:040
3857993129,2cyclictest799-21snmpd20:42:240
3860993029,1cyclictest799-21snmpd22:26:513
3860993029,1cyclictest799-21snmpd21:04:523
3860993029,1cyclictest799-21snmpd19:13:123
3860993028,2cyclictest799-21snmpd19:16:523
3860993028,2cyclictest11609-21cat00:25:153
3859993030,0cyclictest8974-21kworker/2:2+events23:23:412
3859993030,0cyclictest3884-21kworker/2:1+events23:03:252
3859993030,0cyclictest23133-21kworker/2:1+events20:55:162
3859993029,1cyclictest799-21snmpd22:25:332
3859993029,1cyclictest799-21snmpd21:58:432
3859993029,1cyclictest32224-21kworker/2:2+events22:51:332
3859993029,1cyclictest21035-21kworker/2:1+events23:55:282
3859993029,1cyclictest21035-21kworker/2:1+events23:46:042
3859993028,2cyclictest799-21snmpd23:10:472
3859993028,2cyclictest799-21snmpd19:49:472
3859993028,1cyclictest799-21snmpd19:25:402
3858993029,1cyclictest799-21snmpd22:39:481
3858993029,1cyclictest799-21snmpd22:02:131
3858993028,2cyclictest799-21snmpd00:14:301
3857993029,1cyclictest799-21snmpd23:04:490
3857993029,1cyclictest799-21snmpd22:42:160
3857993029,1cyclictest799-21snmpd22:17:560
3857993029,1cyclictest799-21snmpd20:36:080
3857993029,1cyclictest799-21snmpd19:35:120
3857993028,2cyclictest4529-21cat19:10:170
3857993026,3cyclictest799-21snmpd23:37:210
3860992928,1cyclictest799-21snmpd20:45:293
3860992928,1cyclictest799-21snmpd19:34:483
3860992928,1cyclictest799-21snmpd00:02:483
3860992927,2cyclictest799-21snmpd21:09:093
3859992929,0cyclictest6056-21kworker/2:5+events19:50:252
3859992929,0cyclictest6053-21kworker/2:1+events19:35:212
3859992929,0cyclictest26890-21kworker/2:0+events22:55:282
3859992929,0cyclictest26890-21kworker/2:0+events22:46:002
3859992929,0cyclictest23377-21kworker/2:0+events23:40:292
3859992929,0cyclictest23133-21kworker/2:1+events20:36:002
3859992929,0cyclictest23133-21kworker/2:1+events20:30:172
3859992929,0cyclictest2201-21kworker/2:0+events00:37:152
3859992929,0cyclictest21035-21kworker/2:1+events00:20:232
3859992929,0cyclictest20688-21kworker/2:0+events21:28:022
3859992928,1cyclictest799-21snmpd21:46:072
3859992928,1cyclictest799-21snmpd21:00:092
3859992928,1cyclictest799-21snmpd20:00:502
3859992926,2cyclictest799-21snmpd19:43:302
3858992929,0cyclictest799-21snmpd23:54:361
3858992929,0cyclictest799-21snmpd22:57:481
3858992929,0cyclictest6242-21kworker/u16:1+atlantic21:09:141
3858992927,2cyclictest799-21snmpd00:15:281
3857992928,1cyclictest799-21snmpd20:46:230
3857992927,2cyclictest799-21snmpd20:26:320
3857992927,2cyclictest799-21snmpd00:31:330
3860992827,1cyclictest799-21snmpd20:24:123
3859992828,0cyclictest3355-21kworker/2:2+events21:50:212
3859992828,0cyclictest23133-21kworker/2:1+events20:50:172
3859992828,0cyclictest23133-21kworker/2:1+events20:40:052
3859992828,0cyclictest23133-21kworker/2:1+events20:16:002
3859992828,0cyclictest21035-21kworker/2:1+events00:12:452
3859992828,0cyclictest20688-21kworker/2:0+events21:40:212
3859992828,0cyclictest20688-21kworker/2:0+events21:20:132
3859992826,2cyclictest799-21snmpd19:24:422
3858992828,0cyclictest73950irq/137-enp1s023:08:221
3858992828,0cyclictest14272-21kworker/u16:4+atlantic00:04:111
3858992827,1cyclictest799-21snmpd21:50:441
3857992827,1cyclictest799-21snmpd23:22:310
3857992827,1cyclictest799-21snmpd19:58:430
3860992726,1cyclictest799-21snmpd21:33:433
3860992726,1cyclictest799-21snmpd20:41:513
3859992727,0cyclictest6053-21kworker/2:1+events19:15:332
3859992727,0cyclictest3355-21kworker/2:2+events22:05:212
3859992727,0cyclictest3355-21kworker/2:2+events22:05:202
3858992727,0cyclictest799-21snmpd21:16:421
3858992726,1cyclictest799-21snmpd23:33:351
3858992726,1cyclictest799-21snmpd19:27:391
3858992726,1cyclictest799-21snmpd19:16:341
3858992725,2cyclictest799-21snmpd21:58:321
3858992725,2cyclictest799-21snmpd20:25:351
3857992726,1cyclictest799-21snmpd19:24:340
3859992626,0cyclictest6053-21kworker/2:1+events19:30:242
3858992625,1cyclictest799-21snmpd22:46:571
3860992524,1cyclictest799-21snmpd19:54:523
3857992422,2cyclictest799-21snmpd00:29:280
3857992422,1cyclictest799-21snmpd23:32:130
3857992421,2cyclictest799-21snmpd22:53:430
3857992321,2cyclictest799-21snmpd22:36:320
3860992221,1cyclictest799-21snmpd19:20:123
3858992221,1cyclictest799-21snmpd22:10:451
3858992020,0cyclictest31386-21kworker/u16:1+atlantic23:16:301
3860991918,1cyclictest799-21snmpd20:50:033
3860991916,2cyclictest3279-21cat00:05:163
3860991715,2cyclictest799-21snmpd21:43:593
3858991616,0cyclictest24097-21kworker/u16:3+atlantic20:11:391
3857991514,1cyclictest799-21snmpd21:45:140
3857991312,1cyclictest799-21snmpd22:06:290
3857991312,1cyclictest799-21snmpd22:06:280
3857991111,0cyclictest28744-21kworker/u16:0+atlantic21:30:090
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional