You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-05-02 - 11:54

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Fri May 02, 2025 00:43:53)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
16042321299,5sleep30-21swapper/319:08:433
15702316303,4sleep10-21swapper/119:08:161
14942316309,5sleep20-21swapper/219:07:172
15022315308,4sleep00-21swapper/019:07:230
1968993110,310cyclictest22734-21kworker/u16:2+efi_rts_wq23:55:131
1970993090,308cyclictest17505-21kworker/u16:0+efi_rts_wq19:30:143
1968993080,307cyclictest13486-21kworker/u16:2+efi_rts_wq22:30:141
1968993080,307cyclictest1029-21kworker/u16:3+efi_rts_wq23:40:131
1968993080,306cyclictest17505-21kworker/u16:0+efi_rts_wq21:00:181
1968993070,306cyclictest17505-21kworker/u16:0+efi_rts_wq19:35:121
1967993070,306cyclictest3594-21kworker/u16:2+efi_rts_wq23:10:130
1970993060,303cyclictest17505-21kworker/u16:0+efi_rts_wq21:40:153
1968993060,305cyclictest22734-21kworker/u16:2+efi_rts_wq00:20:151
1968993060,305cyclictest17505-21kworker/u16:0+efi_rts_wq21:10:171
1967993060,305cyclictest17972-21kworker/u16:1+efi_rts_wq00:00:130
1969993050,304cyclictest22734-21kworker/u16:2+efi_rts_wq23:45:162
1969993050,304cyclictest17505-21kworker/u16:0+efi_rts_wq21:35:162
1970993040,303cyclictest17505-21kworker/u16:0+efi_rts_wq20:20:163
1968993030,302cyclictest13486-21kworker/u16:2+efi_rts_wq21:15:131
1967993030,301cyclictest13486-21kworker/u16:2+efi_rts_wq19:25:130
1969993020,301cyclictest17972-21kworker/u16:1+efi_rts_wq00:00:132
1969993020,301cyclictest17505-21kworker/u16:0+efi_rts_wq20:55:182
1969993020,301cyclictest13486-21kworker/u16:2+efi_rts_wq20:15:162
1969993000,299cyclictest1029-21kworker/u16:3+efi_rts_wq23:00:152
1968992990,298cyclictest1029-21kworker/u16:3+efi_rts_wq23:35:141
1970992980,297cyclictest13486-21kworker/u16:2+efi_rts_wq22:10:123
1967992980,297cyclictest17505-21kworker/u16:0+efi_rts_wq21:10:170
1967992960,295cyclictest17505-21kworker/u16:0+efi_rts_wq22:50:150
1969992950,294cyclictest13486-21kworker/u16:2+efi_rts_wq21:30:182
1968992930,292cyclictest13486-21kworker/u16:2+efi_rts_wq20:30:131
1968992930,292cyclictest13486-21kworker/u16:2+efi_rts_wq19:10:151
1968992920,291cyclictest13486-21kworker/u16:2+efi_rts_wq21:20:191
1967992890,288cyclictest17505-21kworker/u16:0+efi_rts_wq20:25:160
1970992880,287cyclictest13486-21kworker/u16:2+efi_rts_wq21:20:183
1969992870,283cyclictest17505-21kworker/u16:0+efi_rts_wq21:40:162
1968992870,286cyclictest17505-21kworker/u16:0+efi_rts_wq20:40:191
1970992860,285cyclictest17505-21kworker/u16:0+efi_rts_wq21:50:143
1968992860,285cyclictest17505-21kworker/u16:0+efi_rts_wq21:45:151
1969992850,283cyclictest22734-21kworker/u16:2+efi_rts_wq00:05:142
1967992830,282cyclictest13486-21kworker/u16:2+efi_rts_wq22:20:140
1969992810,280cyclictest3594-21kworker/u16:2+efi_rts_wq23:20:142
1969992810,280cyclictest13486-21kworker/u16:2+efi_rts_wq21:05:142
1970992800,279cyclictest17505-21kworker/u16:0+efi_rts_wq22:00:143
1968992770,276cyclictest17505-21kworker/u16:0+efi_rts_wq19:50:141
1970992730,272cyclictest22734-21kworker/u16:2+efi_rts_wq00:35:143
1970992730,272cyclictest17505-21kworker/u16:0+efi_rts_wq21:25:173
1969992730,272cyclictest21662-21kworker/u16:1+efi_rts_wq22:40:132
1970992710,270cyclictest17505-21kworker/u16:0+efi_rts_wq19:40:213
1967992710,270cyclictest13486-21kworker/u16:2+efi_rts_wq19:45:180
1969992690,268cyclictest22734-21kworker/u16:2+efi_rts_wq00:30:132
1969992690,268cyclictest21662-21kworker/u16:1+efi_rts_wq22:45:142
1969992650,264cyclictest13486-21kworker/u16:2+efi_rts_wq19:10:152
1968992640,263cyclictest21662-21kworker/u16:1+efi_rts_wq22:45:141
1969992620,261cyclictest17505-21kworker/u16:0+efi_rts_wq20:40:192
1969992610,260cyclictest22734-21kworker/u16:2+efi_rts_wq00:25:132
1969992610,260cyclictest13486-21kworker/u16:2+efi_rts_wq19:55:162
1968992610,260cyclictest17505-21kworker/u16:0+efi_rts_wq20:50:161
1969992580,257cyclictest17505-21kworker/u16:0+efi_rts_wq20:25:152
1969992570,256cyclictest17972-21kworker/u16:1+efi_rts_wq23:50:162
1967992550,254cyclictest17505-21kworker/u16:0+efi_rts_wq20:05:170
1968992540,253cyclictest17505-21kworker/u16:0+efi_rts_wq21:55:141
1970992520,251cyclictest17505-21kworker/u16:0+efi_rts_wq19:35:123
1968992520,251cyclictest17505-21kworker/u16:0+efi_rts_wq20:05:161
1968992520,251cyclictest17505-21kworker/u16:0+efi_rts_wq19:40:211
1969992510,250cyclictest3594-21kworker/u16:2+efi_rts_wq23:25:132
1969992510,250cyclictest17505-21kworker/u16:0+efi_rts_wq20:20:162
1967992510,250cyclictest17972-21kworker/u16:1+efi_rts_wq23:50:160
1969992480,247cyclictest13486-21kworker/u16:2+efi_rts_wq19:20:132
1968992480,247cyclictest13486-21kworker/u16:2+efi_rts_wq19:55:161
1970992450,244cyclictest13486-21kworker/u16:2+efi_rts_wq19:20:133
1970992440,243cyclictest22734-21kworker/u16:2+efi_rts_wq00:15:143
1968992440,243cyclictest3594-21kworker/u16:2+efi_rts_wq23:05:141
1968992410,240cyclictest17505-21kworker/u16:0+efi_rts_wq19:15:141
1967992410,240cyclictest1029-21kworker/u16:3+efi_rts_wq23:30:150
1968992300,229cyclictest13486-21kworker/u16:2+efi_rts_wq22:35:141
1969992260,225cyclictest1029-21kworker/u16:3+efi_rts_wq23:15:142
1969992260,225cyclictest1029-21kworker/u16:3+efi_rts_wq23:15:142
1967992260,225cyclictest17505-21kworker/u16:0+efi_rts_wq21:45:150
1970992250,224cyclictest17505-21kworker/u16:0+efi_rts_wq22:25:153
1970992230,222cyclictest17505-21kworker/u16:0+efi_rts_wq21:35:163
1970992230,222cyclictest13486-21kworker/u16:2+efi_rts_wq22:35:133
1967992230,222cyclictest13486-21kworker/u16:2+efi_rts_wq20:10:160
1967992220,221cyclictest17505-21kworker/u16:0+efi_rts_wq20:00:150
1969992210,218cyclictest13486-21kworker/u16:2+efi_rts_wq22:20:132
1970992200,219cyclictest17505-21kworker/u16:0+efi_rts_wq22:15:143
1967992200,219cyclictest21662-21kworker/u16:1+efi_rts_wq22:55:130
1970992180,217cyclictest21662-21kworker/u16:1+efi_rts_wq22:55:143
1970992160,215cyclictest22734-21kworker/u16:2+efi_rts_wq00:25:143
1968992160,215cyclictest13486-21kworker/u16:2+efi_rts_wq22:05:161
1970992120,211cyclictest13486-21kworker/u16:2+efi_rts_wq22:05:163
1968992110,210cyclictest17505-21kworker/u16:0+efi_rts_wq22:25:151
1967992080,207cyclictest13486-21kworker/u16:2+efi_rts_wq20:35:140
1967992050,204cyclictest13486-21kworker/u16:2+efi_rts_wq20:45:180
1969992040,203cyclictest17505-21kworker/u16:0+efi_rts_wq21:25:172
1968992020,201cyclictest1029-21kworker/u16:3+efi_rts_wq23:00:141
1970991980,197cyclictest22734-21kworker/u16:2+efi_rts_wq00:10:133
1968991980,197cyclictest3594-21kworker/u16:2+efi_rts_wq23:25:141
1969991920,191cyclictest13486-21kworker/u16:2+efi_rts_wq19:15:002
1969991890,188cyclictest22734-21kworker/u16:2+efi_rts_wq00:10:132
1967991850,184cyclictest22734-21kworker/u16:2+efi_rts_wq00:30:140
1968991830,182cyclictest22734-21kworker/u16:2+efi_rts_wq00:35:141
1967991780,177cyclictest3594-21kworker/u16:2+efi_rts_wq23:20:140
1968991760,175cyclictest17505-21kworker/u16:0+efi_rts_wq20:00:151
1970991710,170cyclictest1029-21kworker/u16:3+efi_rts_wq23:15:153
1970991710,170cyclictest1029-21kworker/u16:3+efi_rts_wq23:15:143
1969991700,169cyclictest22734-21kworker/u16:2+efi_rts_wq00:15:142
1969991550,154cyclictest17505-21kworker/u16:0+efi_rts_wq20:50:162
1969991550,154cyclictest13486-21kworker/u16:2+efi_rts_wq19:45:182
1969991500,149cyclictest17505-21kworker/u16:0+efi_rts_wq22:15:142
1970991440,143cyclictest22734-21kworker/u16:2+efi_rts_wq23:55:123
1967991380,137cyclictest13486-21kworker/u16:2+efi_rts_wq20:15:170
1969991310,130cyclictest13486-21kworker/u16:2+efi_rts_wq20:30:132
1968991280,127cyclictest13486-21kworker/u16:2+efi_rts_wq21:30:191
1967991250,124cyclictest21662-21kworker/u16:1+efi_rts_wq22:40:130
1969991240,123cyclictest3594-21kworker/u16:2+efi_rts_wq23:05:152
1969991240,123cyclictest17505-21kworker/u16:0+efi_rts_wq21:10:162
1967991240,123cyclictest17505-21kworker/u16:0+efi_rts_wq21:55:140
1968991220,121cyclictest17505-21kworker/u16:0+efi_rts_wq20:55:171
1969991180,117cyclictest17505-21kworker/u16:0+efi_rts_wq21:50:152
1970993229,3cyclictest808-21snmpd23:23:563
1970993229,2cyclictest808-21snmpd20:49:013
1967993230,2cyclictest808-21snmpd21:25:550
1970993130,1cyclictest808-21snmpd21:05:043
1970993130,1cyclictest808-21snmpd20:03:363
1970993129,2cyclictest808-21snmpd23:25:323
1970993129,2cyclictest808-21snmpd20:40:093
1970993129,2cyclictest808-21snmpd20:13:273
1970993129,2cyclictest808-21snmpd00:24:133
1970993128,2cyclictest808-21snmpd21:48:113
1969993130,1cyclictest808-21snmpd20:37:252
1969993129,2cyclictest808-21snmpd22:54:222
1969993129,2cyclictest808-21snmpd22:31:462
1968993130,1cyclictest808-21snmpd23:51:391
1968993130,1cyclictest808-21snmpd22:41:491
1968993129,2cyclictest808-21snmpd21:38:381
1967993130,1cyclictest808-21snmpd23:17:060
1967993130,1cyclictest808-21snmpd23:17:050
1967993130,1cyclictest808-21snmpd00:27:520
1967993129,2cyclictest808-21snmpd23:08:530
1967993129,2cyclictest808-21snmpd21:51:320
1967993129,2cyclictest808-21snmpd19:22:340
1970993029,1cyclictest808-21snmpd23:32:483
1970993029,1cyclictest808-21snmpd22:52:523
1970993029,1cyclictest808-21snmpd22:47:463
1970993029,1cyclictest808-21snmpd21:02:513
1970993028,2cyclictest808-21snmpd23:42:483
1970993028,2cyclictest808-21snmpd23:35:183
1970993028,2cyclictest808-21snmpd23:14:473
1970993028,2cyclictest808-21snmpd20:27:083
1970993028,2cyclictest21820-21cat19:55:183
1970993027,3cyclictest808-21snmpd23:08:063
1969993029,1cyclictest808-21snmpd23:40:032
1969993029,1cyclictest808-21snmpd23:38:312
1969993028,2cyclictest808-21snmpd20:46:012
1968993030,0cyclictest686-21kworker/1:1+events22:56:261
1968993029,1cyclictest808-21snmpd23:21:081
1968993029,1cyclictest808-21snmpd20:25:391
1968993029,1cyclictest808-21snmpd19:33:501
1968993029,1cyclictest808-21snmpd00:30:081
1968993029,1cyclictest808-21snmpd00:13:311
1968993028,2cyclictest808-21snmpd22:14:181
1968993028,2cyclictest808-21snmpd20:11:411
1968993028,2cyclictest808-21snmpd19:25:211
1968993028,2cyclictest808-21snmpd19:24:311
1967993029,1cyclictest808-21snmpd22:49:200
1967993029,1cyclictest808-21snmpd21:40:570
1967993029,1cyclictest808-21snmpd21:35:110
1967993029,1cyclictest808-21snmpd20:31:410
1967993028,2cyclictest808-21snmpd19:30:190
1967993028,2cyclictest25960-21cat23:45:170
1970992928,1cyclictest808-21snmpd22:20:373
1970992928,1cyclictest808-21snmpd21:19:083
1970992928,1cyclictest808-21snmpd21:13:523
1970992928,1cyclictest808-21snmpd19:45:223
1970992928,1cyclictest808-21snmpd19:12:063
1970992927,2cyclictest808-21snmpd23:53:183
1970992927,2cyclictest808-21snmpd22:34:403
1970992927,2cyclictest808-21snmpd20:32:233
1970992927,2cyclictest808-21snmpd19:29:403
1969992929,0cyclictest808-21snmpd22:37:102
1969992928,1cyclictest808-21snmpd22:55:502
1969992928,1cyclictest808-21snmpd21:22:222
1968992929,0cyclictest4041-21kworker/1:2+events21:40:021
1968992929,0cyclictest4041-21kworker/1:2+events20:35:151
1968992929,0cyclictest4041-21kworker/1:2+events19:49:341
1968992929,0cyclictest29056-21kworker/1:2+events22:50:251
1968992929,0cyclictest27308-21kworker/1:0+events00:01:571
1968992929,0cyclictest24876-21kworker/1:2+events23:45:381
1968992928,1cyclictest808-21snmpd23:31:411
1968992928,1cyclictest808-21snmpd22:16:091
1968992928,1cyclictest808-21snmpd22:02:191
1968992928,1cyclictest808-21snmpd20:15:021
1968992927,1cyclictest686-21kworker/1:1+events23:11:191
1967992928,1cyclictest808-21snmpd23:37:250
1967992928,1cyclictest808-21snmpd20:54:540
1967992928,1cyclictest808-21snmpd19:42:310
1967992928,1cyclictest808-21snmpd00:23:340
1967992928,1cyclictest808-21snmpd00:18:040
1967992927,2cyclictest11960-21cat22:05:180
1967992926,2cyclictest808-21snmpd00:07:160
1970992827,1cyclictest808-21snmpd20:19:383
1970992827,1cyclictest808-21snmpd19:19:363
1970992825,2cyclictest808-21snmpd00:06:233
1969992828,0cyclictest22734-21kworker/u16:2+atlantic00:35:092
1969992828,0cyclictest17505-21kworker/u16:0+atlantic22:05:502
1969992827,1cyclictest808-21snmpd21:56:202
1968992827,1cyclictest808-21snmpd20:24:531
1968992826,2cyclictest808-21snmpd23:15:531
1968992826,2cyclictest808-21snmpd23:15:531
1968992826,2cyclictest808-21snmpd00:25:431
1967992828,0cyclictest3594-21kworker/u16:2+atlantic23:02:410
1967992828,0cyclictest22734-21kworker/u16:2+atlantic23:41:050
1967992828,0cyclictest17505-21kworker/u16:0+atlantic22:25:030
1967992827,1cyclictest808-21snmpd22:13:060
1967992827,1cyclictest808-21snmpd00:12:460
1967992826,2cyclictest808-21snmpd23:25:360
1967992826,2cyclictest808-21snmpd20:20:230
1967992826,2cyclictest808-21snmpd19:18:330
1970992726,1cyclictest808-21snmpd23:00:133
1970992726,1cyclictest808-21snmpd00:00:403
1969992726,1cyclictest808-21snmpd22:02:462
1969992726,1cyclictest808-21snmpd21:00:182
1969992725,2cyclictest808-21snmpd20:06:112
1968992727,0cyclictest4041-21kworker/1:2+events21:29:421
1968992727,0cyclictest4041-21kworker/1:2+events20:48:591
1968992726,1cyclictest808-21snmpd21:06:071
1968992726,1cyclictest808-21snmpd00:15:401
1967992727,0cyclictest13486-21kworker/u16:2+atlantic21:30:590
1970992625,1cyclictest808-21snmpd20:55:523
1970992625,1cyclictest808-21snmpd20:50:303
1970992624,2cyclictest808-21snmpd23:47:303
1970992624,2cyclictest808-21snmpd20:09:023
1969992626,0cyclictest17505-21kworker/u16:0+atlantic19:34:232
1969992626,0cyclictest13486-21kworker/u16:2+atlantic20:12:462
1969992625,1cyclictest808-21snmpd23:59:532
1969992625,1cyclictest808-21snmpd23:14:502
1969992625,1cyclictest808-21snmpd00:23:552
1968992626,0cyclictest4041-21kworker/1:2+events22:22:331
1968992626,0cyclictest4041-21kworker/1:2+events21:54:341
1967992625,1cyclictest808-21snmpd20:58:300
1967992624,2cyclictest808-21snmpd19:10:400
1970992524,1cyclictest808-21snmpd21:59:533
1970992523,2cyclictest808-21snmpd19:51:413
1969992525,0cyclictest17505-21kworker/u16:0+atlantic22:13:382
1969992524,1cyclictest808-21snmpd20:02:442
1967992524,1cyclictest808-21snmpd19:56:500
1969992423,1cyclictest808-21snmpd22:25:092
1969992422,2cyclictest808-21snmpd21:47:082
1968992424,0cyclictest1391-21kworker/1:3+events00:05:331
1967992423,1cyclictest808-21snmpd19:39:430
1967992422,2cyclictest808-21snmpd21:09:370
1969992321,2cyclictest808-21snmpd21:19:552
1967992321,2cyclictest808-21snmpd19:53:280
1969992221,1cyclictest808-21snmpd23:30:412
1967992221,1cyclictest808-21snmpd23:58:150
1970992120,1cyclictest21662-21kworker/u16:1+atlantic22:42:063
1967992121,0cyclictest17505-21kworker/u16:0+atlantic22:35:400
1967992120,1cyclictest808-21snmpd22:19:490
1969991918,1cyclictest808-21snmpd19:44:352
1967991818,0cyclictest13486-21kworker/u16:2+atlantic21:18:540
1967991817,1cyclictest808-21snmpd22:30:340
1970991715,2cyclictest5946-21cat20:35:153
1967991715,2cyclictest808-21snmpd00:35:020
1969991312,1cyclictest17965-21kworker/2:0+events_freezable_pwr_efficient19:50:132
1969991312,1cyclictest17965-21kworker/2:0+events_freezable_pwr_efficient19:28:142
1967991313,0cyclictest808-21snmpd22:01:020
1967991311,2cyclictest808-21snmpd21:00:570
1970991211,1cyclictest808-21snmpd00:31:323
1969991110,1cyclictest17965-21kworker/2:0+events_freezable_pwr_efficient19:39:132
19679988,0cyclictest13486-21kworker/u16:2+atlantic21:21:030
19709965,1cyclictest28956-21expr21:30:173
19679954,1cyclictest8204-21sort20:40:230
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional