You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-07-15 - 14:38

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #c, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackcslot3s.osadl.org (updated Tue Jul 15, 2025 00:43:55)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
238902318303,5sleep00-21swapper/019:08:550
237782318303,5sleep20-21swapper/219:07:292
238162317309,5sleep30-21swapper/319:07:583
236162314307,5sleep10-21swapper/119:05:241
24237992960,295cyclictest13525-21kworker/u16:3+efi_rts_wq22:40:130
24240992940,293cyclictest6334-21kworker/u16:0+efi_rts_wq22:25:173
24240992940,293cyclictest6334-21kworker/u16:0+efi_rts_wq19:15:013
24237992940,293cyclictest23735-21kworker/u16:3+efi_rts_wq00:00:130
24239992920,291cyclictest6334-21kworker/u16:0+efi_rts_wq20:20:132
24238992920,291cyclictest25171-21kworker/u16:2+efi_rts_wq23:50:131
24240992910,290cyclictest11440-21kworker/u16:2+efi_rts_wq19:40:143
24239992910,290cyclictest25171-21kworker/u16:2+efi_rts_wq23:45:532
24238992910,290cyclictest25171-21kworker/u16:2+efi_rts_wq23:35:141
24238992890,288cyclictest11440-21kworker/u16:2+efi_rts_wq21:30:151
24238992890,287cyclictest11440-21kworker/u16:2+efi_rts_wq19:15:161
24240992880,287cyclictest6334-21kworker/u16:0+efi_rts_wq19:50:153
24239992880,287cyclictest6334-21kworker/u16:0+efi_rts_wq20:10:162
24238992880,287cyclictest11440-21kworker/u16:2+efi_rts_wq19:35:101
24240992860,285cyclictest6334-21kworker/u16:0+efi_rts_wq22:00:143
24238992850,284cyclictest6334-21kworker/u16:0+efi_rts_wq22:25:391
24237992840,283cyclictest11440-21kworker/u16:2+efi_rts_wq19:20:150
24239992830,282cyclictest6334-21kworker/u16:0+efi_rts_wq22:00:132
24237992830,282cyclictest25171-21kworker/u16:2+efi_rts_wq23:25:490
24237992830,282cyclictest23735-21kworker/u16:3+efi_rts_wq00:30:140
24240992820,281cyclictest6334-21kworker/u16:0+efi_rts_wq00:20:143
24237992820,281cyclictest6334-21kworker/u16:0+efi_rts_wq19:30:140
24238992810,280cyclictest23735-21kworker/u16:3+efi_rts_wq00:05:131
24240992800,279cyclictest13525-21kworker/u16:3+efi_rts_wq22:45:413
24237992800,279cyclictest11440-21kworker/u16:2+efi_rts_wq21:00:150
24240992790,278cyclictest23735-21kworker/u16:3+efi_rts_wq00:05:563
24238992790,278cyclictest6334-21kworker/u16:0+efi_rts_wq22:10:131
24238992780,277cyclictest11440-21kworker/u16:2+efi_rts_wq19:10:131
24238992770,276cyclictest25171-21kworker/u16:2+efi_rts_wq23:15:151
24240992760,275cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:593
24240992760,275cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:593
24240992750,274cyclictest25171-21kworker/u16:2+efi_rts_wq23:05:463
24238992740,273cyclictest11440-21kworker/u16:2+efi_rts_wq20:45:221
24237992740,273cyclictest11440-21kworker/u16:2+efi_rts_wq22:30:130
24238992730,272cyclictest6334-21kworker/u16:0+efi_rts_wq21:20:141
24238992730,272cyclictest6334-21kworker/u16:0+efi_rts_wq20:30:131
24238992710,270cyclictest6334-21kworker/u16:0+efi_rts_wq23:40:521
24238992710,270cyclictest6334-21kworker/u16:0+efi_rts_wq00:10:571
24238992670,266cyclictest11440-21kworker/u16:2+efi_rts_wq21:55:141
24237992670,266cyclictest11440-21kworker/u16:2+efi_rts_wq20:25:140
24238992660,265cyclictest11440-21kworker/u16:2+efi_rts_wq19:45:121
24240992650,264cyclictest11440-21kworker/u16:2+efi_rts_wq21:50:163
24239992640,263cyclictest6334-21kworker/u16:0+efi_rts_wq20:50:162
24239992620,261cyclictest11440-21kworker/u16:2+efi_rts_wq20:55:132
24239992610,260cyclictest13525-21kworker/u16:3+efi_rts_wq22:45:132
24238992610,260cyclictest11440-21kworker/u16:2+efi_rts_wq21:40:111
24239992590,258cyclictest11440-21kworker/u16:2+efi_rts_wq20:45:152
24240992580,257cyclictest6334-21kworker/u16:0+efi_rts_wq21:45:143
24238992570,255cyclictest11440-21kworker/u16:2+efi_rts_wq22:05:141
24240992560,255cyclictest6334-21kworker/u16:0+efi_rts_wq20:40:153
24238992540,253cyclictest6334-21kworker/u16:0+efi_rts_wq22:55:151
24237992540,253cyclictest25171-21kworker/u16:2+efi_rts_wq23:35:140
24238992530,252cyclictest6334-21kworker/u16:0+efi_rts_wq22:50:131
24237992530,252cyclictest11440-21kworker/u16:2+efi_rts_wq21:10:160
24238992520,251cyclictest6334-21kworker/u16:0+efi_rts_wq00:20:141
24237992520,251cyclictest6334-21kworker/u16:0+efi_rts_wq22:35:140
24239992510,250cyclictest23735-21kworker/u16:3+efi_rts_wq00:15:142
24237992510,250cyclictest11440-21kworker/u16:2+efi_rts_wq19:15:160
24237992490,248cyclictest6334-21kworker/u16:0+efi_rts_wq20:00:160
24237992490,248cyclictest25171-21kworker/u16:2+efi_rts_wq23:45:130
24237992490,248cyclictest11440-21kworker/u16:2+efi_rts_wq20:35:200
24238992460,245cyclictest11440-21kworker/u16:2+efi_rts_wq21:00:231
24238992460,245cyclictest11440-21kworker/u16:2+efi_rts_wq19:25:071
24240992430,242cyclictest25171-21kworker/u16:2+efi_rts_wq23:20:153
24238992430,242cyclictest6334-21kworker/u16:0+efi_rts_wq19:30:161
24237992430,242cyclictest23735-21kworker/u16:3+efi_rts_wq00:36:010
24237992430,242cyclictest11440-21kworker/u16:2+efi_rts_wq21:55:140
24240992420,241cyclictest25171-21kworker/u16:2+efi_rts_wq23:30:123
24238992420,241cyclictest6334-21kworker/u16:0+efi_rts_wq21:45:311
24240992410,240cyclictest6334-21kworker/u16:0+efi_rts_wq23:55:183
24237992360,235cyclictest6334-21kworker/u16:0+efi_rts_wq19:55:130
24239992350,234cyclictest6334-21kworker/u16:0+efi_rts_wq22:10:372
24239992340,233cyclictest25171-21kworker/u16:2+efi_rts_wq23:50:142
24238992330,232cyclictest11440-21kworker/u16:2+efi_rts_wq20:25:141
24238992320,231cyclictest6334-21kworker/u16:0+efi_rts_wq20:35:161
24238992320,231cyclictest6334-21kworker/u16:0+efi_rts_wq20:05:131
24238992310,230cyclictest6334-21kworker/u16:0+efi_rts_wq00:35:151
24237992310,230cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:180
24237992310,230cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:180
24239992300,229cyclictest6334-21kworker/u16:0+efi_rts_wq19:25:142
24237992280,227cyclictest11440-21kworker/u16:2+efi_rts_wq21:40:300
24240992270,226cyclictest6334-21kworker/u16:0+efi_rts_wq00:35:143
24239992260,225cyclictest11440-21kworker/u16:2+efi_rts_wq20:25:192
24237992260,225cyclictest25171-21kworker/u16:2+efi_rts_wq23:10:150
24240992240,223cyclictest6334-21kworker/u16:0+efi_rts_wq22:20:143
24238992240,223cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:181
24238992240,223cyclictest6334-21kworker/u16:0+efi_rts_wq00:25:181
24240992230,222cyclictest6334-21kworker/u16:0+efi_rts_wq23:40:133
24240992230,222cyclictest6334-21kworker/u16:0+efi_rts_wq21:05:133
24237992230,222cyclictest11440-21kworker/u16:2+efi_rts_wq20:55:230
24237992220,221cyclictest25171-21kworker/u16:2+efi_rts_wq23:00:440
24239992210,220cyclictest6334-21kworker/u16:0+efi_rts_wq20:00:162
24238992190,218cyclictest11440-21kworker/u16:2+efi_rts_wq21:10:251
24240992180,216cyclictest6334-21kworker/u16:0+efi_rts_wq20:10:163
24237992180,217cyclictest11440-21kworker/u16:2+efi_rts_wq19:45:130
24238992170,216cyclictest25171-21kworker/u16:2+efi_rts_wq23:30:121
24237992140,213cyclictest13525-21kworker/u16:3+efi_rts_wq22:50:420
24240992130,212cyclictest6334-21kworker/u16:0+efi_rts_wq20:05:133
24240992130,212cyclictest11440-21kworker/u16:2+efi_rts_wq21:15:113
24237992130,212cyclictest11440-21kworker/u16:2+efi_rts_wq20:45:150
24239992070,205cyclictest25171-21kworker/u16:2+efi_rts_wq23:00:122
24237992070,205cyclictest13525-21kworker/u16:3+efi_rts_wq22:45:130
24239992060,205cyclictest6334-21kworker/u16:0+efi_rts_wq19:35:132
24237992060,205cyclictest6334-21kworker/u16:0+efi_rts_wq21:35:140
24238992040,203cyclictest11440-21kworker/u16:2+efi_rts_wq20:15:141
24238992030,202cyclictest23735-21kworker/u16:3+efi_rts_wq00:30:141
24237992030,202cyclictest6334-21kworker/u16:0+efi_rts_wq00:20:580
24239992020,201cyclictest6334-21kworker/u16:0+efi_rts_wq19:55:132
24240992010,200cyclictest11440-21kworker/u16:2+efi_rts_wq21:40:123
24237991960,195cyclictest6334-21kworker/u16:0+efi_rts_wq20:40:150
24238991930,192cyclictest11440-21kworker/u16:2+efi_rts_wq22:15:171
24237991900,189cyclictest6334-21kworker/u16:0+efi_rts_wq21:45:140
24240991890,188cyclictest25171-21kworker/u16:2+efi_rts_wq23:00:123
24240991880,187cyclictest25171-21kworker/u16:2+efi_rts_wq23:15:153
24238991860,185cyclictest6334-21kworker/u16:0+efi_rts_wq21:05:131
24237991850,184cyclictest6334-21kworker/u16:0+efi_rts_wq23:05:150
24237991830,182cyclictest6334-21kworker/u16:0+efi_rts_wq19:25:140
24237991830,182cyclictest11440-21kworker/u16:2+efi_rts_wq21:30:150
24240991810,180cyclictest25171-21kworker/u16:2+efi_rts_wq23:10:153
24238991810,180cyclictest6334-21kworker/u16:0+efi_rts_wq23:55:181
24237991810,180cyclictest6334-21kworker/u16:0+efi_rts_wq21:25:280
24238991800,179cyclictest6334-21kworker/u16:0+efi_rts_wq19:40:111
24240991790,178cyclictest11440-21kworker/u16:2+efi_rts_wq21:00:153
24239991780,177cyclictest6334-21kworker/u16:0+efi_rts_wq21:25:182
24240991760,175cyclictest11440-21kworker/u16:2+efi_rts_wq22:05:363
24239991760,175cyclictest25171-21kworker/u16:2+efi_rts_wq23:15:482
24237991760,175cyclictest6334-21kworker/u16:0+efi_rts_wq21:20:270
24239991740,173cyclictest11440-21kworker/u16:2+efi_rts_wq21:40:122
24238991700,169cyclictest6334-21kworker/u16:0+efi_rts_wq20:50:161
24240991680,166cyclictest6334-21kworker/u16:0+efi_rts_wq22:55:153
24237991670,166cyclictest11440-21kworker/u16:2+efi_rts_wq22:15:370
24238991660,165cyclictest11440-21kworker/u16:2+efi_rts_wq21:50:331
24239991640,163cyclictest6334-21kworker/u16:0+efi_rts_wq22:20:382
24238991640,163cyclictest11440-21kworker/u16:2+efi_rts_wq19:20:151
24237991620,161cyclictest6334-21kworker/u16:0+efi_rts_wq00:10:130
24239991580,157cyclictest11440-21kworker/u16:2+efi_rts_wq22:30:402
24240991560,155cyclictest23735-21kworker/u16:3+efi_rts_wq00:15:583
24238991550,154cyclictest6334-21kworker/u16:0+efi_rts_wq20:40:211
24239991510,150cyclictest25171-21kworker/u16:2+efi_rts_wq23:10:472
24239991500,149cyclictest13525-21kworker/u16:3+efi_rts_wq22:40:402
24238991490,148cyclictest25171-21kworker/u16:2+efi_rts_wq23:00:121
24237991480,147cyclictest6334-21kworker/u16:0+efi_rts_wq19:50:160
24237991420,141cyclictest11440-21kworker/u16:2+efi_rts_wq20:15:140
24239991400,139cyclictest6334-21kworker/u16:0+efi_rts_wq23:20:492
24238991400,139cyclictest11440-21kworker/u16:2+efi_rts_wq20:00:141
24237991400,139cyclictest6334-21kworker/u16:0+efi_rts_wq20:20:180
24240991360,135cyclictest6334-21kworker/u16:0+efi_rts_wq22:10:133
24240991360,135cyclictest11440-21kworker/u16:2+efi_rts_wq22:15:173
24237991360,135cyclictest6334-21kworker/u16:0+efi_rts_wq22:20:140
24239991340,133cyclictest23735-21kworker/u16:3+efi_rts_wq00:00:562
24240991330,130cyclictest6334-21kworker/u16:0+efi_rts_wq00:10:133
24240991280,128cyclictest6334-21kworker/u16:0+efi_rts_wq23:35:513
24240991260,125cyclictest6334-21kworker/u16:0+efi_rts_wq19:20:063
24239991260,125cyclictest6334-21kworker/u16:0+efi_rts_wq20:35:162
24240991250,124cyclictest6334-21kworker/u16:0+efi_rts_wq21:35:293
24239991230,122cyclictest6334-21kworker/u16:0+efi_rts_wq23:40:132
24238991170,116cyclictest6334-21kworker/u16:0+efi_rts_wq19:50:151
24239991130,112cyclictest11440-21kworker/u16:2+efi_rts_wq21:15:112
24240991120,111cyclictest11440-21kworker/u16:2+efi_rts_wq19:10:133
24237991090,107cyclictest6334-21kworker/u16:0+efi_rts_wq20:30:140
24237991040,103cyclictest25171-21kworker/u16:2+efi_rts_wq23:20:140
24239993230,2cyclictest799-21snmpd19:12:392
24239993229,2cyclictest799-21snmpd20:19:022
24238993230,2cyclictest799-21snmpd23:13:551
24240993129,2cyclictest799-21snmpd23:48:363
24240993129,2cyclictest799-21snmpd22:36:183
24239993130,1cyclictest799-21snmpd21:56:372
24238993129,2cyclictest799-21snmpd22:38:271
24237993129,2cyclictest799-21snmpd20:05:080
24237993129,2cyclictest799-21snmpd19:14:540
24237993128,2cyclictest799-21snmpd20:14:020
24240993029,1cyclictest799-21snmpd22:31:243
24240993029,1cyclictest799-21snmpd21:24:313
24240993029,1cyclictest799-21snmpd20:55:183
24240993029,1cyclictest799-21snmpd20:51:483
24240993029,1cyclictest26434-21kworker/3:0+events20:15:143
24240993029,1cyclictest13654-21kworker/3:0+events22:41:513
24240993028,1cyclictest799-21snmpd23:27:563
24240993027,2cyclictest799-21snmpd23:51:333
24240993027,2cyclictest799-21snmpd21:59:113
24240993026,3cyclictest799-21snmpd22:52:253
24239993030,0cyclictest6334-21kworker/u16:0+atlantic23:55:252
24239993029,1cyclictest799-21snmpd21:51:412
24239993029,1cyclictest799-21snmpd20:09:292
24239993029,1cyclictest799-21snmpd19:46:432
24239993029,1cyclictest799-21snmpd19:41:222
24239993029,1cyclictest799-21snmpd19:32:252
24239993029,1cyclictest799-21snmpd00:36:072
24239993028,2cyclictest799-21snmpd23:36:202
24239993028,2cyclictest799-21snmpd23:09:312
24239993028,2cyclictest799-21snmpd22:35:332
24239993028,2cyclictest799-21snmpd00:14:372
24238993029,1cyclictest799-21snmpd22:24:001
24238993029,1cyclictest799-21snmpd21:36:251
24238993029,1cyclictest799-21snmpd21:26:311
24238993029,1cyclictest799-21snmpd00:00:211
24237993029,1cyclictest799-21snmpd23:59:150
24237993029,1cyclictest799-21snmpd00:17:490
24237993028,2cyclictest799-21snmpd19:35:370
24240992928,1cyclictest799-21snmpd21:13:193
24240992928,1cyclictest799-21snmpd19:48:493
24239992928,1cyclictest8542-21cat23:25:152
24239992928,1cyclictest799-21snmpd21:22:042
24239992928,1cyclictest799-21snmpd20:30:572
24239992927,2cyclictest799-21snmpd21:31:162
24239992927,2cyclictest799-21snmpd20:41:362
24239992927,2cyclictest799-21snmpd00:21:242
24239992926,3cyclictest799-21snmpd23:32:022
24238992929,0cyclictest13525-21kworker/u16:3+atlantic22:45:031
24238992928,1cyclictest799-21snmpd22:00:591
24238992928,1cyclictest799-21snmpd20:24:081
24238992927,2cyclictest799-21snmpd23:25:351
24237992928,1cyclictest799-21snmpd22:58:490
24237992928,1cyclictest799-21snmpd22:09:230
24237992928,1cyclictest799-21snmpd21:06:070
24237992927,2cyclictest799-21snmpd21:15:370
24240992827,1cyclictest799-21snmpd20:34:303
24240992827,1cyclictest799-21snmpd20:28:293
24240992825,2cyclictest799-21snmpd20:22:473
24239992827,1cyclictest799-21snmpd21:38:172
24239992827,1cyclictest799-21snmpd21:11:252
24239992827,1cyclictest799-21snmpd00:07:392
24239992826,2cyclictest799-21snmpd00:32:222
24238992827,1cyclictest799-21snmpd23:08:401
24238992827,1cyclictest799-21snmpd22:44:541
24238992827,1cyclictest799-21snmpd22:31:541
24238992827,1cyclictest799-21snmpd19:56:161
24237992827,1cyclictest799-21snmpd23:17:320
24237992826,2cyclictest799-21snmpd19:43:130
24240992726,1cyclictest799-21snmpd19:57:013
24239992725,2cyclictest799-21snmpd22:19:182
24239992725,2cyclictest799-21snmpd21:46:292
24238992726,1cyclictest799-21snmpd00:19:431
24237992726,1cyclictest799-21snmpd23:41:020
24237992726,1cyclictest799-21snmpd23:32:260
24237992726,1cyclictest799-21snmpd22:13:510
24240992624,2cyclictest799-21snmpd20:35:363
24239992625,1cyclictest799-21snmpd19:18:302
24239992625,1cyclictest799-21snmpd00:27:102
24239992625,1cyclictest799-21snmpd00:27:102
24238992624,2cyclictest17911-21cat23:45:151
24237992625,1cyclictest799-21snmpd21:53:380
24240992525,0cyclictest19115-21kworker/3:2+events00:01:333
24240992523,2cyclictest799-21snmpd19:36:073
24240992422,2cyclictest799-21snmpd20:45:303
24239992423,1cyclictest799-21snmpd21:09:552
24239992423,1cyclictest799-21snmpd19:21:182
24238992423,1cyclictest799-21snmpd20:55:391
24239992322,1cyclictest799-21snmpd22:53:132
24240992221,1cyclictest799-21snmpd20:02:233
24238992221,1cyclictest799-21snmpd23:23:321
24237992221,1cyclictest799-21snmpd23:54:570
24238992120,1cyclictest799-21snmpd21:17:251
24240992018,2cyclictest799-21snmpd19:29:423
24240992018,2cyclictest799-21snmpd00:30:133
24239992020,0cyclictest74050irq/138-enp1s022:55:172
24240991917,2cyclictest799-21snmpd21:25:193
24237991918,1cyclictest799-21snmpd22:28:060
24237991917,2cyclictest799-21snmpd00:05:300
24237991716,1cyclictest799-21snmpd20:50:120
24239991614,2cyclictest799-21snmpd19:54:012
24239991312,1cyclictest799-21snmpd21:03:522
24238991313,0cyclictest10650irq/125-ahci[0000:00:17.0]20:10:171
24237991212,0cyclictest799-21snmpd22:02:080
242399998,1cyclictest799-21snmpd22:05:112
242409988,0cyclictest0-21swapper/319:30:213
242409965,1cyclictest20235-21expr21:30:153
242399965,1cyclictest13310-21latency_hist22:30:002
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional