You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-09-14 - 00:38

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rackcslot3s.osadl.org (updated Sat Sep 13, 2025 12:43:54)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
33392315307,5sleep20-21swapper/207:06:002
33482314307,5sleep10-21swapper/107:06:071
33172313305,5sleep00-21swapper/007:05:420
32982313306,4sleep30-21swapper/307:05:283
3918993010,299cyclictest5064-21kworker/u16:4+efi_rts_wq11:00:181
3918993000,297cyclictest15765-21kworker/u16:3+efi_rts_wq07:15:011
3919992950,294cyclictest5064-21kworker/u16:4+efi_rts_wq11:10:122
3919992940,293cyclictest15765-21kworker/u16:3+efi_rts_wq08:15:142
3918992930,292cyclictest5064-21kworker/u16:4+efi_rts_wq10:05:151
3918992930,292cyclictest5064-21kworker/u16:4+efi_rts_wq08:55:171
3920992920,291cyclictest5064-21kworker/u16:4+efi_rts_wq08:30:143
3918992920,291cyclictest15765-21kworker/u16:3+efi_rts_wq08:27:511
3917992910,290cyclictest15765-21kworker/u16:3+efi_rts_wq07:45:150
3920992900,289cyclictest5064-21kworker/u16:4+efi_rts_wq10:35:153
3917992900,289cyclictest2950-21kworker/u16:1+efi_rts_wq09:45:170
3918992880,287cyclictest2950-21kworker/u16:1+efi_rts_wq10:28:141
3918992880,287cyclictest15765-21kworker/u16:3+efi_rts_wq08:15:141
3919992870,286cyclictest5064-21kworker/u16:4+efi_rts_wq08:55:152
3919992860,285cyclictest2950-21kworker/u16:1+efi_rts_wq09:30:132
3920992850,282cyclictest2950-21kworker/u16:1+efi_rts_wq10:30:153
3917992850,284cyclictest24234-21kworker/u16:1+efi_rts_wq07:10:130
3919992840,283cyclictest24234-21kworker/u16:1+efi_rts_wq07:40:152
3920992830,282cyclictest24234-21kworker/u16:1+efi_rts_wq07:35:143
3918992820,281cyclictest17666-21kworker/u16:3+efi_rts_wq11:45:141
3919992810,280cyclictest15765-21kworker/u16:3+efi_rts_wq08:05:142
3918992800,279cyclictest17666-21kworker/u16:3+efi_rts_wq12:30:141
3917992800,279cyclictest17666-21kworker/u16:3+efi_rts_wq11:45:140
3919992790,278cyclictest24234-21kworker/u16:1+efi_rts_wq07:20:152
3918992790,278cyclictest17666-21kworker/u16:3+efi_rts_wq11:53:291
3919992780,277cyclictest2950-21kworker/u16:1+efi_rts_wq10:48:172
3919992770,276cyclictest2950-21kworker/u16:1+efi_rts_wq09:00:162
3919992760,275cyclictest17666-21kworker/u16:3+efi_rts_wq11:30:142
3918992760,275cyclictest5064-21kworker/u16:4+efi_rts_wq09:20:141
3917992760,275cyclictest2950-21kworker/u16:1+efi_rts_wq09:10:150
3917992760,275cyclictest2950-21kworker/u16:1+efi_rts_wq08:50:140
3920992750,274cyclictest9983-21kworker/u16:0+efi_rts_wq11:20:133
3918992750,274cyclictest2950-21kworker/u16:1+efi_rts_wq10:45:141
3918992750,274cyclictest17666-21kworker/u16:3+efi_rts_wq12:35:141
3920992740,273cyclictest7429-21kworker/u16:2+efi_rts_wq12:25:133
3920992740,273cyclictest17666-21kworker/u16:3+efi_rts_wq11:55:143
3918992740,273cyclictest17666-21kworker/u16:3+efi_rts_wq12:23:361
3920992720,270cyclictest9983-21kworker/u16:0+efi_rts_wq11:15:163
3917992710,270cyclictest17666-21kworker/u16:3+efi_rts_wq12:35:140
3920992680,267cyclictest7429-21kworker/u16:2+efi_rts_wq11:25:153
3918992670,266cyclictest17666-21kworker/u16:3+efi_rts_wq12:00:131
3917992670,266cyclictest2950-21kworker/u16:1+efi_rts_wq10:38:150
3917992670,266cyclictest18794-21kworker/u16:2+efi_rts_wq07:50:130
3918992660,265cyclictest2950-21kworker/u16:1+efi_rts_wq08:40:161
3920992650,264cyclictest5064-21kworker/u16:4+efi_rts_wq09:55:143
3918992650,264cyclictest7429-21kworker/u16:2+efi_rts_wq11:58:291
3917992650,264cyclictest2950-21kworker/u16:1+efi_rts_wq10:30:160
3919992640,263cyclictest7429-21kworker/u16:2+efi_rts_wq11:35:142
3917992620,261cyclictest7429-21kworker/u16:2+efi_rts_wq11:25:140
3920992610,260cyclictest7429-21kworker/u16:2+efi_rts_wq11:40:153
3919992610,260cyclictest5064-21kworker/u16:4+efi_rts_wq09:40:152
3920992580,257cyclictest2950-21kworker/u16:1+efi_rts_wq10:40:133
3917992580,257cyclictest2950-21kworker/u16:1+efi_rts_wq08:42:540
3918992570,256cyclictest5064-21kworker/u16:4+efi_rts_wq10:20:141
3918992570,255cyclictest5064-21kworker/u16:4+efi_rts_wq10:53:191
3917992570,256cyclictest2950-21kworker/u16:1+efi_rts_wq10:25:130
3917992570,256cyclictest15765-21kworker/u16:3+efi_rts_wq08:15:150
3919992560,255cyclictest5064-21kworker/u16:4+efi_rts_wq10:20:142
3920992550,254cyclictest2950-21kworker/u16:1+efi_rts_wq09:30:143
3919992520,251cyclictest7429-21kworker/u16:2+efi_rts_wq12:10:152
3918992520,251cyclictest15765-21kworker/u16:3+efi_rts_wq07:30:121
3917992520,251cyclictest15765-21kworker/u16:3+efi_rts_wq08:25:150
3918992510,250cyclictest18794-21kworker/u16:2+efi_rts_wq08:20:141
3920992500,249cyclictest24234-21kworker/u16:1+efi_rts_wq07:12:383
3919992500,249cyclictest5064-21kworker/u16:4+efi_rts_wq08:45:122
3919992490,248cyclictest24234-21kworker/u16:1+efi_rts_wq07:25:142
3920992480,247cyclictest7429-21kworker/u16:2+efi_rts_wq11:35:143
3919992450,244cyclictest7429-21kworker/u16:2+efi_rts_wq12:15:152
3917992450,244cyclictest5064-21kworker/u16:4+efi_rts_wq08:47:560
3918992440,242cyclictest2950-21kworker/u16:1+efi_rts_wq08:50:151
3919992430,242cyclictest2950-21kworker/u16:1+efi_rts_wq09:05:142
3918992430,242cyclictest2950-21kworker/u16:1+efi_rts_wq10:43:161
3918992430,242cyclictest2950-21kworker/u16:1+efi_rts_wq10:00:131
3917992430,242cyclictest2950-21kworker/u16:1+efi_rts_wq10:15:140
3920992410,240cyclictest5064-21kworker/u16:4+efi_rts_wq10:10:123
3917992410,240cyclictest7429-21kworker/u16:2+efi_rts_wq12:15:160
3920992390,238cyclictest7429-21kworker/u16:2+efi_rts_wq12:10:153
3919992390,238cyclictest7429-21kworker/u16:2+efi_rts_wq12:25:122
3919992390,238cyclictest2950-21kworker/u16:1+efi_rts_wq09:45:172
3918992390,238cyclictest2950-21kworker/u16:1+efi_rts_wq08:32:531
3920992360,235cyclictest18794-21kworker/u16:2+efi_rts_wq08:00:143
3919992360,235cyclictest5064-21kworker/u16:4+efi_rts_wq10:55:172
3918992360,233cyclictest5064-21kworker/u16:4+efi_rts_wq09:25:131
3918992350,234cyclictest24234-21kworker/u16:1+efi_rts_wq07:27:411
3917992350,234cyclictest5064-21kworker/u16:4+efi_rts_wq10:23:140
3917992330,232cyclictest18794-21kworker/u16:2+efi_rts_wq08:02:470
3918992320,231cyclictest18794-21kworker/u16:2+efi_rts_wq08:00:141
3918992310,230cyclictest5064-21kworker/u16:4+efi_rts_wq11:05:131
3918992240,223cyclictest2950-21kworker/u16:1+efi_rts_wq09:15:161
3917992240,223cyclictest5064-21kworker/u16:4+efi_rts_wq09:25:120
3917992240,223cyclictest17666-21kworker/u16:3+efi_rts_wq11:55:140
3917992230,222cyclictest5064-21kworker/u16:4+efi_rts_wq08:35:130
3920992220,221cyclictest5064-21kworker/u16:4+efi_rts_wq08:45:123
3919992220,221cyclictest5064-21kworker/u16:4+efi_rts_wq10:10:122
3919992220,221cyclictest2950-21kworker/u16:1+efi_rts_wq10:40:122
3918992210,220cyclictest7429-21kworker/u16:2+efi_rts_wq11:35:131
3919992200,219cyclictest17666-21kworker/u16:3+efi_rts_wq12:05:132
3917992200,219cyclictest7429-21kworker/u16:2+efi_rts_wq11:50:130
3917992190,218cyclictest15765-21kworker/u16:3+efi_rts_wq07:37:430
3920992160,215cyclictest15765-21kworker/u16:3+efi_rts_wq07:55:133
3920992160,215cyclictest15765-21kworker/u16:3+efi_rts_wq07:55:133
3918992140,213cyclictest15765-21kworker/u16:3+efi_rts_wq07:45:151
3918992130,212cyclictest5064-21kworker/u16:4+efi_rts_wq10:55:161
3918992120,211cyclictest2950-21kworker/u16:1+efi_rts_wq09:38:051
3917992110,210cyclictest15765-21kworker/u16:3+efi_rts_wq07:30:130
3917992100,209cyclictest5064-21kworker/u16:4+efi_rts_wq10:55:160
3920992030,202cyclictest15765-21kworker/u16:3+efi_rts_wq08:17:493
3920992020,201cyclictest5064-21kworker/u16:4+efi_rts_wq08:35:123
3918992020,201cyclictest7429-21kworker/u16:2+efi_rts_wq12:25:131
3920991990,198cyclictest17666-21kworker/u16:3+efi_rts_wq12:00:133
3917991980,197cyclictest24234-21kworker/u16:1+efi_rts_wq07:40:140
3919991960,195cyclictest9983-21kworker/u16:0+efi_rts_wq11:20:132
3918991960,195cyclictest2950-21kworker/u16:1+efi_rts_wq09:03:001
3919991940,193cyclictest2950-21kworker/u16:1+efi_rts_wq09:50:142
3918991920,191cyclictest17666-21kworker/u16:3+efi_rts_wq12:08:321
3920991910,190cyclictest5064-21kworker/u16:4+efi_rts_wq08:57:583
3920991910,190cyclictest15765-21kworker/u16:3+efi_rts_wq07:47:443
3917991910,190cyclictest5064-21kworker/u16:4+efi_rts_wq09:58:090
3917991910,190cyclictest18794-21kworker/u16:2+efi_rts_wq08:12:490
3920991890,188cyclictest17666-21kworker/u16:3+efi_rts_wq12:38:383
3918991870,186cyclictest9983-21kworker/u16:0+efi_rts_wq11:13:211
3917991870,186cyclictest2950-21kworker/u16:1+efi_rts_wq10:03:100
3919991860,185cyclictest15765-21kworker/u16:3+efi_rts_wq07:55:132
3919991860,185cyclictest15765-21kworker/u16:3+efi_rts_wq07:55:122
3917991860,185cyclictest2950-21kworker/u16:1+efi_rts_wq09:50:140
3917991850,184cyclictest17666-21kworker/u16:3+efi_rts_wq12:20:140
3918991810,180cyclictest24234-21kworker/u16:1+efi_rts_wq07:42:421
3917991780,177cyclictest5064-21kworker/u16:4+efi_rts_wq11:10:120
3919991760,175cyclictest5064-21kworker/u16:4+efi_rts_wq09:28:032
3920991750,174cyclictest5064-21kworker/u16:4+efi_rts_wq11:05:143
3917991660,165cyclictest7429-21kworker/u16:2+efi_rts_wq11:23:230
3917991630,162cyclictest7429-21kworker/u16:2+efi_rts_wq11:03:200
3919991610,159cyclictest18794-21kworker/u16:2+efi_rts_wq08:20:142
3918991600,159cyclictest5064-21kworker/u16:4+efi_rts_wq09:33:031
3918991600,159cyclictest18794-21kworker/u16:2+efi_rts_wq07:52:441
3917991560,155cyclictest2950-21kworker/u16:1+efi_rts_wq09:08:010
3920991540,153cyclictest15765-21kworker/u16:3+efi_rts_wq07:32:423
3917991520,151cyclictest2950-21kworker/u16:1+efi_rts_wq09:35:140
3920991510,150cyclictest15765-21kworker/u16:3+efi_rts_wq07:17:383
3920991500,149cyclictest5064-21kworker/u16:4+efi_rts_wq09:40:163
3919991500,149cyclictest18794-21kworker/u16:2+efi_rts_wq08:10:132
3917991500,149cyclictest15765-21kworker/u16:3+efi_rts_wq08:07:470
3918991490,148cyclictest17666-21kworker/u16:3+efi_rts_wq11:30:141
3919991430,142cyclictest15765-21kworker/u16:3+efi_rts_wq07:15:142
3917991430,142cyclictest17666-21kworker/u16:3+efi_rts_wq12:13:340
3918991370,136cyclictest18794-21kworker/u16:2+efi_rts_wq08:10:131
3917991370,136cyclictest5064-21kworker/u16:4+efi_rts_wq09:20:140
3919991320,131cyclictest2950-21kworker/u16:1+efi_rts_wq10:18:132
3918991270,126cyclictest2950-21kworker/u16:1+efi_rts_wq10:15:141
3918991260,125cyclictest15765-21kworker/u16:3+efi_rts_wq07:57:461
3918991260,125cyclictest15765-21kworker/u16:3+efi_rts_wq07:57:451
3919991250,124cyclictest5064-21kworker/u16:4+efi_rts_wq11:08:212
3917991240,122cyclictest5064-21kworker/u16:4+efi_rts_wq11:05:130
3920991230,122cyclictest2950-21kworker/u16:1+efi_rts_wq09:00:173
3917991220,121cyclictest7429-21kworker/u16:2+efi_rts_wq11:18:210
3918991210,120cyclictest5064-21kworker/u16:4+efi_rts_wq09:43:051
3919991180,117cyclictest5064-21kworker/u16:4+efi_rts_wq10:05:142
3917991160,115cyclictest5064-21kworker/u16:4+efi_rts_wq10:08:110
3918991120,111cyclictest2950-21kworker/u16:1+efi_rts_wq09:10:151
3920991050,104cyclictest2950-21kworker/u16:1+efi_rts_wq09:05:133
3918991030,102cyclictest5064-21kworker/u16:4+efi_rts_wq10:35:151
3918991030,102cyclictest24234-21kworker/u16:1+efi_rts_wq07:22:391
3920991020,101cyclictest2950-21kworker/u16:1+efi_rts_wq08:40:163
391799980,97cyclictest5064-21kworker/u16:4+efi_rts_wq10:13:120
3920993229,2cyclictest799-21snmpd12:24:553
3919993230,2cyclictest799-21snmpd09:14:222
3919993229,2cyclictest799-21snmpd09:18:052
3917993228,2cyclictest799-21snmpd12:02:000
3920993129,2cyclictest799-21snmpd08:53:493
3920993129,2cyclictest799-21snmpd08:13:383
3919993130,1cyclictest799-21snmpd09:37:082
3919993130,1cyclictest799-21snmpd08:52:372
3919993129,2cyclictest799-21snmpd12:35:572
3919993129,2cyclictest799-21snmpd08:00:202
3918993129,2cyclictest799-21snmpd12:19:271
3918993129,2cyclictest799-21snmpd07:37:131
3917993129,2cyclictest799-21snmpd12:26:460
3920993029,1cyclictest799-21snmpd07:54:053
3920993029,1cyclictest12344-21kworker/3:2+events11:13:403
3920993028,2cyclictest799-21snmpd11:47:483
3920993028,1cyclictest799-21snmpd09:47:353
3919993028,2cyclictest799-21snmpd09:22:172
3919993028,2cyclictest799-21snmpd07:53:522
3918993029,1cyclictest799-21snmpd12:12:401
3918993029,1cyclictest799-21snmpd10:14:351
3918993029,1cyclictest799-21snmpd07:12:061
3918993027,2cyclictest799-21snmpd09:54:041
3917993029,1cyclictest799-21snmpd10:50:340
3917993029,1cyclictest21011-21cat11:30:160
3917993028,2cyclictest799-21snmpd08:31:480
3917993028,2cyclictest799-21snmpd08:21:480
3920992928,1cyclictest799-21snmpd10:54:543
3920992928,1cyclictest799-21snmpd10:46:313
3920992928,1cyclictest799-21snmpd10:25:243
3920992928,1cyclictest799-21snmpd09:51:443
3920992928,1cyclictest799-21snmpd07:44:313
3920992928,1cyclictest799-21snmpd07:23:253
3920992927,2cyclictest799-21snmpd12:32:583
3920992927,2cyclictest799-21snmpd08:09:473
3920992927,2cyclictest6501-21cat11:00:193
3920992927,2cyclictest13689-21cat10:05:163
3920992927,1cyclictest799-21snmpd12:17:393
3919992928,1cyclictest799-21snmpd12:34:192
3919992928,1cyclictest799-21snmpd11:47:232
3919992928,1cyclictest799-21snmpd11:25:102
3919992928,1cyclictest799-21snmpd11:01:042
3919992928,1cyclictest799-21snmpd08:42:482
3919992928,1cyclictest799-21snmpd07:10:512
3919992927,2cyclictest799-21snmpd11:53:092
3919992927,2cyclictest799-21snmpd07:47:562
3919992927,2cyclictest799-21snmpd07:30:372
3919992927,2cyclictest464-21cat11:55:162
3918992928,1cyclictest799-21snmpd08:05:551
3917992928,1cyclictest799-21snmpd12:05:390
3917992927,2cyclictest799-21snmpd11:35:580
3920992828,0cyclictest799-21snmpd10:56:343
3920992827,1cyclictest799-21snmpd10:21:503
3920992827,1cyclictest799-21snmpd10:02:383
3920992827,1cyclictest799-21snmpd09:12:133
3919992828,0cyclictest799-21snmpd10:30:562
3919992827,1cyclictest799-21snmpd10:38:042
3919992827,1cyclictest799-21snmpd10:29:422
3919992827,1cyclictest799-21snmpd09:58:112
3918992827,1cyclictest799-21snmpd11:28:371
3917992827,1cyclictest799-21snmpd11:43:510
3917992827,1cyclictest799-21snmpd09:19:170
3917992827,1cyclictest799-21snmpd07:20:330
3920992726,1cyclictest799-21snmpd10:18:333
3919992726,1cyclictest799-21snmpd10:00:192
3919992724,2cyclictest799-21snmpd11:41:202
3920992625,1cyclictest799-21snmpd11:31:263
3920992625,1cyclictest30663-21cat11:50:153
3919992625,1cyclictest799-21snmpd12:01:332
3919992625,1cyclictest799-21snmpd08:31:362
3918992625,1cyclictest799-21snmpd08:48:341
3918992624,2cyclictest799-21snmpd11:16:341
3920992524,1cyclictest799-21snmpd09:27:233
3919992524,1cyclictest799-21snmpd12:20:372
3919992524,1cyclictest799-21snmpd11:19:522
3918992524,1cyclictest799-21snmpd11:43:271
3917992524,1cyclictest799-21snmpd12:31:430
3917992524,1cyclictest799-21snmpd10:40:490
3917992524,1cyclictest799-21snmpd07:19:550
3920992423,1cyclictest799-21snmpd09:18:103
3920992422,2cyclictest799-21snmpd09:37:323
3919992423,1cyclictest799-21snmpd10:53:222
3919992422,2cyclictest799-21snmpd07:37:372
3918992423,1cyclictest799-21snmpd09:08:581
3917992423,1cyclictest799-21snmpd09:03:210
3920992322,1cyclictest799-21snmpd08:20:213
3917992322,1cyclictest799-21snmpd07:59:170
3917992322,1cyclictest799-21snmpd07:59:160
3918992222,0cyclictest73850irq/136-enp1s011:22:421
3918992221,1cyclictest799-21snmpd10:34:241
3919992119,2cyclictest799-21snmpd08:39:322
3919992119,2cyclictest799-21snmpd08:28:352
3917992119,2cyclictest799-21snmpd07:27:130
3918991917,2cyclictest799-21snmpd09:48:021
3920991817,1cyclictest799-21snmpd08:28:113
3917991615,1cyclictest799-21snmpd10:45:330
3920991514,1cyclictest808-21lldpd12:05:333
3920991212,0cyclictest21920-21kworker/3:0+events09:20:143
391799109,1cyclictest31575-21cat09:30:150
391799108,2cyclictest799-21snmpd09:44:070
39189988,0cyclictest5064-21kworker/u16:4+atlantic09:56:361
39209965,1cyclictest12376-21taskset07:27:233
39189965,1cyclictest9499-21seq08:38:181
39179965,1cyclictest18103-21cat09:00:000
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional