You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-11-17 - 14:02

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #2

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack8slot2s.osadl.org (updated Tue Nov 17, 2026 00:43:40)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
791488996022,26cyclictest875966-21kworker/u16:9+rpciod22:40:100
791488995918,36cyclictest940584-21ntpq00:05:520
791490995839,13cyclictest0-21swapper/200:10:062
791488995620,27cyclictest952111-21ssh00:25:100
791488995616,34cyclictest950104-21ssh00:20:530
791488995616,34cyclictest950104-21ssh00:20:530
791489995527,25cyclictest0-21swapper/122:00:421
791488995524,23cyclictest0-21swapper/023:20:090
791488995429,21cyclictest933059-21ssh23:54:360
791488995418,30cyclictest0-21swapper/023:40:230
791490995321,6cyclictest936619-21ssh00:00:162
791488995327,20cyclictest63-21kcompactd020:50:380
791488995327,20cyclictest63-21kcompactd020:50:380
791488995318,26cyclictest889601-21sshd-auth22:45:120
791488995318,26cyclictest889601-21sshd-auth22:45:120
791488995316,23cyclictest935378-21kworker/u16:8+xprtiod00:10:040
791488995315,14cyclictest836669-21fschecks_count21:20:250
79149099523,26cyclictest63-21kcompactd022:00:212
791488995227,21cyclictest819396-21ntpq20:35:380
791488995227,21cyclictest819396-21ntpq20:35:380
791488995225,15cyclictest816302-21awk20:25:370
791488995224,24cyclictest0-21swapper/021:40:590
791488995222,25cyclictest861668-21ssh22:00:060
791488995219,13cyclictest88342250ssh22:35:010
791488995218,30cyclictest852457-21cut21:45:220
791488995217,10cyclictest802003-21ld19:40:470
791488995215,16cyclictest813918-21sshd-auth20:20:120
79148999513,42cyclictest939624-21ssh00:05:071
791488995134,13cyclictest846162-21/usr/sbin/munin21:35:230
791488995122,26cyclictest0-21swapper/020:00:140
791488995121,26cyclictest875243-21ssh22:21:010
791488995121,25cyclictest900030-21ntpq23:00:470
791488995121,25cyclictest900030-21ntpq23:00:470
791488995118,11cyclictest833518-21ssh21:15:340
791488995114,16cyclictest796193-21unixbench_singl19:21:020
791488995114,16cyclictest796193-21unixbench_singl19:21:020
79149099502,22cyclictest849017-21ssh21:40:072
791488995031,15cyclictest879721-21ssh22:28:510
791488995022,24cyclictest0-21swapper/000:00:340
791488995020,26cyclictest807353-21latency_hist19:59:530
791488995020,26cyclictest807353-21latency_hist19:59:530
791490994930,13cyclictest0-21swapper/200:05:072
791489994918,18cyclictest93537850kworker/u16:8+xprtiod00:10:131
791489994913,31cyclictest0-21swapper/122:55:331
791489994913,31cyclictest0-21swapper/122:55:331
791488994929,17cyclictest956125-21ntpq00:30:340
791488994925,12cyclictest863059-21kworker/u16:15+xprtiod22:05:060
791488994924,21cyclictest0-21swapper/020:40:450
791488994922,6cyclictest803816-21switchtime19:45:470
791488994921,26cyclictest649-21CodeMeterLin20:55:590
791488994921,25cyclictest859351-21ntpq21:55:350
791488994921,25cyclictest859351-21ntpq21:55:350
791488994921,23cyclictest794841-21ls19:19:550
791488994920,26cyclictest827461-21ldconfig21:00:500
791488994919,27cyclictest871959-21ntp_kernel_pll_22:15:380
791488994915,13cyclictest918754-21ntpq23:30:420
791488994912,34cyclictest0-21swapper/023:35:570
791488994912,33cyclictest797224-21ntpq19:25:360
791488994912,33cyclictest797224-21ntpq19:25:360
791489994825,20cyclictest0-21swapper/122:05:521
791489994823,21cyclictest0-21swapper/122:20:331
791488994830,13cyclictest799612-21/usr/sbin/munin19:35:520
791488994826,14cyclictest181ktimers/023:55:160
791488994825,20cyclictest959307-21ntpq00:35:350
791488994825,20cyclictest829549-21users21:05:500
791488994825,20cyclictest829549-21users21:05:500
791488994823,22cyclictest915027-21tune2fs23:25:230
791488994823,22cyclictest915027-21tune2fs23:25:230
791488994823,17cyclictest880292-21ssh22:30:000
791488994823,17cyclictest880292-21ssh22:30:000
791488994819,6cyclictest908916-21fschecks_time23:15:230
791488994817,28cyclictest0-21swapper/022:50:360
791488994816,25cyclictest0-21swapper/000:15:220
791488994816,25cyclictest0-21swapper/000:15:220
791488994815,12cyclictest905293-21ssh23:10:030
791490994719,6cyclictest899373-21/usr/sbin/munin23:00:212
791490994719,6cyclictest899373-21/usr/sbin/munin23:00:212
79148999471,40cyclictest872131-21ssh22:15:491
791488994734,10cyclictest844677-21ssh21:32:210
791488994726,17cyclictest840379-21ntpq21:25:400
791488994726,17cyclictest840379-21ntpq21:25:400
791488994725,17cyclictest0-21swapper/020:10:380
791488994722,23cyclictest0-21swapper/022:10:390
791488994722,20cyclictest823188-21sshd-auth20:47:300
791488994722,20cyclictest823188-21sshd-auth20:47:300
791488994713,29cyclictest0-21swapper/022:59:540
791488994713,29cyclictest0-21swapper/022:59:540
79149099462,22cyclictest836189-21ssh21:19:552
791489994632,9cyclictest0-21swapper/100:15:341
791489994632,9cyclictest0-21swapper/100:15:341
79148999462,23cyclictest836655-21ssh21:20:231
79148999462,21cyclictest791990-21fschecks_count19:10:221
791489994618,24cyclictest829920-21rm21:10:111
79148999461,40cyclictest63-21kcompactd022:40:091
791488994632,10cyclictest798814-21ntpq19:30:360
791488994632,10cyclictest798814-21ntpq19:30:360
791488994631,11cyclictest902106-21ssh23:05:020
791488994626,16cyclictest832093-21ssh21:12:470
791488994624,19cyclictest813085-21ntpq20:15:400
791488994617,25cyclictest928691-21awk23:45:550
79149099452,37cyclictest946187-21sort00:15:192
79149099452,37cyclictest946187-21sort00:15:192
79149099452,21cyclictest874504-21ssh22:20:262
791489994524,16cyclictest949940-21ssh00:20:391
791489994524,16cyclictest949940-21ssh00:20:391
79148999451,18cyclictest881353-21ntp_states22:30:461
79148999451,18cyclictest881353-21ntp_states22:30:461
791489994511,13cyclictest931077-21tail23:50:331
791488994531,11cyclictest804380-21apt-get19:50:050
791488994523,20cyclictest810474-21users20:05:560
791488994521,19cyclictest792449-21/usr/sbin/munin19:10:340
791488994517,8cyclictest0-21swapper/021:50:540
791490994428,13cyclictest0-21swapper/221:21:042
791490994426,12cyclictest0-21swapper/221:00:202
791490994421,19cyclictest0-21swapper/220:40:392
791490994418,22cyclictest893036-21diskstats22:50:212
79148999447,30cyclictest833083-21apt21:15:041
791489994430,10cyclictest0-21swapper/121:40:041
791489994423,18cyclictest0-21swapper/123:25:441
791489994423,18cyclictest0-21swapper/123:25:441
791489994423,18cyclictest0-21swapper/122:45:131
791489994423,18cyclictest0-21swapper/122:45:131
791489994420,18cyclictest912566-21ntpq23:20:431
791489994419,21cyclictest959262-21ntpq00:35:321
79148999441,22cyclictest846892-21ntpq21:35:491
791490994329,9cyclictest0-21swapper/222:15:222
79149099432,36cyclictest832797-21apt-get21:14:542
79149099432,16cyclictest924422-21/usr/sbin/munin23:40:212
791490994319,19cyclictest889867-21df22:45:182
791490994319,19cyclictest889867-21df22:45:182
791490994318,20cyclictest41-21rcuc/221:05:312
791490994318,20cyclictest41-21rcuc/221:05:312
79149099431,25cyclictest815248-21kworker/u16:16+rpciod20:50:022
79149099431,25cyclictest815248-21kworker/u16:16+rpciod20:50:022
791489994332,8cyclictest0-21swapper/123:41:051
791489994329,11cyclictest0-21swapper/119:40:421
79148999432,35cyclictest934497-21ntpq23:55:511
791489994323,15cyclictest878193-21ntpq22:25:431
79148999432,13cyclictest840072-21latency21:25:261
79148999432,13cyclictest840072-21latency21:25:261
79148999431,31cyclictest796476-21modprobe19:25:111
79148999431,31cyclictest796476-21modprobe19:25:111
79148999431,14cyclictest906504-21/usr/sbin/munin23:10:501
791489994310,20cyclictest824912-21latency_hist20:54:541
791489994310,20cyclictest824912-21latency_hist20:54:541
791488994319,18cyclictest818071-21mailstats20:30:490
79149099423,28cyclictest824813-21apt-get20:54:572
791490994229,9cyclictest0-21swapper/222:05:292
791490994226,13cyclictest0-21swapper/223:20:462
791490994226,12cyclictest0-21swapper/221:55:512
791490994226,12cyclictest0-21swapper/221:55:512
791490994223,9cyclictest0-21swapper/200:35:202
79149099422,35cyclictest917928-21aten_r8power_fr23:30:192
791490994222,18cyclictest0-21swapper/200:25:272
791490994220,18cyclictest792248-21/usr/sbin/munin19:10:262
791490994220,18cyclictest0-21swapper/222:29:542
791490994220,17cyclictest843516-21ssh21:30:342
791490994218,19cyclictest884440-21ntpq22:35:422
791490994217,20cyclictest0-21swapper/220:20:282
791489994231,7cyclictest0-21swapper/123:00:261
791489994231,7cyclictest0-21swapper/123:00:261
791489994228,10cyclictest0-21swapper/100:00:381
791489994226,12cyclictest808366-21ntpq20:00:471
791489994225,11cyclictest953009-21sh00:25:401
791489994222,17cyclictest0-21swapper/121:55:071
791489994222,17cyclictest0-21swapper/121:55:071
791489994220,18cyclictest798797-21ntpq19:30:351
791489994220,18cyclictest798797-21ntpq19:30:351
791489994219,19cyclictest909636-21/usr/sbin/munin23:15:501
791489994218,19cyclictest811383-21missed_timers20:10:261
79148999421,35cyclictest928187-21ntpq23:45:481
791491994130,5cyclictest0-21swapper/322:20:163
79149099416,25cyclictest794000-21ntpq19:15:312
791490994128,10cyclictest0-21swapper/221:35:262
791490994126,9cyclictest0-21swapper/220:00:512
791490994125,12cyclictest0-21swapper/221:50:242
791490994124,11cyclictest0-21swapper/223:49:542
79149099412,18cyclictest906361-21ssh23:10:462
79149099412,18cyclictest839806-21/usr/sbin/munin21:25:232
79149099412,18cyclictest839806-21/usr/sbin/munin21:25:232
791490994119,13cyclictest815676-21aten_r8power_vo20:25:182
791490994116,23cyclictest0-21swapper/219:30:342
791490994116,23cyclictest0-21swapper/219:30:342
791489994127,10cyclictest0-21swapper/121:00:051
791489994127,10cyclictest0-21swapper/120:05:561
791489994125,13cyclictest0-21swapper/123:35:261
791489994125,12cyclictest0-21swapper/121:30:341
79148999412,33cyclictest893768-21ntpq22:50:471
79148999412,19cyclictest856306-21ntpq21:50:451
791489994120,18cyclictest0-21swapper/123:30:461
791489994118,18cyclictest884295-21ntpq22:35:311
791489994117,20cyclictest902170-21ssh23:05:121
791489994113,23cyclictest820384-21cut20:40:221
79148999411,18cyclictest956105-21ld00:30:321
79148999411,16cyclictest825333-21fschecks_count20:55:251
791490994031,5cyclictest886331-21sendmail-msp22:41:232
791490994025,11cyclictest0-21swapper/223:25:202
791490994025,11cyclictest0-21swapper/223:25:202
791490994024,12cyclictest0-21swapper/222:10:192
791490994024,12cyclictest0-21swapper/200:20:142
791490994024,12cyclictest0-21swapper/200:20:142
791490994020,16cyclictest955581-21/usr/sbin/munin00:30:222
791490994018,17cyclictest896078-21aten_r8power_po22:55:202
791490994018,17cyclictest896078-21aten_r8power_po22:55:202
791490994017,19cyclictest930340-21ssh23:50:172
79148999402,33cyclictest813705-21sendmail-msp20:20:231
79148999402,32cyclictest799954-21fschecks_time19:35:211
791489994019,16cyclictest868495-21kernelversion22:10:261
791489994015,16cyclictest794675-21sendmail-msp19:20:121
791489994015,16cyclictest794675-21sendmail-msp19:20:121
791490993926,9cyclictest0-21swapper/219:55:512
791490993926,9cyclictest0-21swapper/219:55:512
791490993924,11cyclictest0-21swapper/220:45:232
791490993924,11cyclictest0-21swapper/220:45:232
791490993924,10cyclictest0-21swapper/219:40:282
79149099392,29cyclictest908478-21ssh23:15:062
79149099392,17cyclictest903040-21ntpq23:05:342
791490993918,17cyclictest921259-21ssh23:35:222
791490993916,19cyclictest810814-21/usr/sbin/munin20:10:172
791490993916,17cyclictest1-21systemd19:21:182
791490993916,17cyclictest1-21systemd19:21:182
79149099391,34cyclictest933440-21ssh23:55:072
79148999392,33cyclictest804689-21fschecks_count19:50:221
79148999392,32cyclictest817920-21ntpq20:30:431
791489993915,20cyclictest813665-21sshd20:18:111
79149099382,32cyclictest881628-21threads22:30:552
79149099382,32cyclictest881628-21threads22:30:552
791490993822,9cyclictest0-21swapper/219:25:362
791490993822,9cyclictest0-21swapper/219:25:362
79148999383,15cyclictest852705-21irqstats21:45:241
791489993819,15cyclictest794037-21ntpq19:15:351
791489993818,16cyclictest803641-21ntpq19:45:401
791489993817,16cyclictest828477-21df_inode21:05:181
791489993817,16cyclictest828477-21df_inode21:05:181
791489993816,18cyclictest822699-21ntpq20:45:471
791489993816,18cyclictest822699-21ntpq20:45:471
791491993726,8cyclictest0-21swapper/321:41:033
791490993725,8cyclictest421ktimers/220:15:112
79149099372,32cyclictest805126-21ld19:50:332
79149099371,32cyclictest817800-21ntpq20:30:312
79149099371,14cyclictest818687-21aten_r8power_cu20:35:172
79149099371,14cyclictest818687-21aten_r8power_cu20:35:172
791491993629,4cyclictest0-21swapper/322:40:163
791491993626,6cyclictest0-21swapper/323:40:373
791490993623,8cyclictest0-21swapper/219:45:162
791490993623,10cyclictest0-21swapper/221:45:182
791489993624,8cyclictest0-21swapper/119:55:231
791489993624,8cyclictest0-21swapper/119:55:231
791489993616,16cyclictest816256-21ntpq20:25:331
79148999361,17cyclictest820206-21latency_hist20:39:551
79148999361,17cyclictest820206-21latency_hist20:39:551
791491993524,7cyclictest0-21swapper/320:50:123
791491993524,7cyclictest0-21swapper/320:50:123
791490993520,11cyclictest0-21swapper/219:35:212
791491993427,4cyclictest0-21swapper/319:40:113
791491993425,4cyclictest0-21swapper/322:00:333
791488993420,10cyclictest791496-21latency_hist19:09:530
791491993327,3cyclictest0-21swapper/323:22:113
791491993327,3cyclictest0-21swapper/323:00:393
791491993327,3cyclictest0-21swapper/323:00:393
791491993324,5cyclictest0-21swapper/320:20:123
791491993324,5cyclictest0-21swapper/300:20:573
791491993324,5cyclictest0-21swapper/300:20:573
791490993322,7cyclictest0-21swapper/219:09:552
791490993318,11cyclictest809146-21/usr/sbin/munin20:05:332
791491993226,3cyclictest0-21swapper/321:50:203
791491993226,3cyclictest0-21swapper/321:00:083
791491993226,3cyclictest0-21swapper/319:20:423
791491993226,3cyclictest0-21swapper/319:20:423
791491993225,4cyclictest0-21swapper/323:55:313
791491993225,4cyclictest0-21swapper/300:00:433
791491993224,5cyclictest0-21swapper/323:45:423
791491993224,5cyclictest0-21swapper/321:20:393
791491993223,6cyclictest0-21swapper/319:35:163
791491993222,7cyclictest0-21swapper/300:15:073
791491993222,7cyclictest0-21swapper/300:15:073
791489993217,12cyclictest791469-21latency_hist19:09:541
791491993125,3cyclictest0-21swapper/322:55:303
791491993125,3cyclictest0-21swapper/322:55:303
791491993125,3cyclictest0-21swapper/322:10:413
791491993125,3cyclictest0-21swapper/321:15:183
791491993125,3cyclictest0-21swapper/320:49:533
791491993125,3cyclictest0-21swapper/320:49:533
791491993125,3cyclictest0-21swapper/300:05:013
791491993124,4cyclictest0-21swapper/300:35:223
791491993123,4cyclictest0-21swapper/323:30:153
791491993123,4cyclictest0-21swapper/322:30:213
791491993123,4cyclictest0-21swapper/322:30:213
791491993123,4cyclictest0-21swapper/320:40:533
791491993122,5cyclictest0-21swapper/323:25:173
791491993122,5cyclictest0-21swapper/323:25:173
791491993122,4cyclictest0-21swapper/321:39:563
791491993119,7cyclictest0-21swapper/323:05:393
791491993024,3cyclictest0-21swapper/323:10:193
791491993024,3cyclictest0-21swapper/322:05:573
791491993024,3cyclictest0-21swapper/321:55:533
791491993024,3cyclictest0-21swapper/321:55:533
791491993024,3cyclictest0-21swapper/300:10:263
791491993023,4cyclictest0-21swapper/323:15:163
791491993023,4cyclictest0-21swapper/320:01:033
791491993022,5cyclictest0-21swapper/321:14:543
791491993022,5cyclictest0-21swapper/321:05:483
791491993022,5cyclictest0-21swapper/321:05:483
791491993022,4cyclictest0-21swapper/320:55:293
791491993021,4cyclictest0-21swapper/323:35:443
791491992923,3cyclictest0-21swapper/322:50:043
791491992923,3cyclictest0-21swapper/322:25:093
791491992923,3cyclictest0-21swapper/321:45:153
791491992923,3cyclictest0-21swapper/300:30:073
791491992921,4cyclictest0-21swapper/319:15:113
791491992919,3cyclictest0-21swapper/322:35:123
791491992822,3cyclictest0-21swapper/323:54:543
791491992822,3cyclictest0-21swapper/322:15:313
791491992822,3cyclictest0-21swapper/320:38:113
791491992822,3cyclictest0-21swapper/320:38:113
791491992822,3cyclictest0-21swapper/319:45:413
791491992822,3cyclictest0-21swapper/319:30:083
791491992822,3cyclictest0-21swapper/319:30:083
791491992822,3cyclictest0-21swapper/319:10:223
791491992821,4cyclictest0-21swapper/321:30:383
791491992821,4cyclictest0-21swapper/320:15:163
791491992821,4cyclictest0-21swapper/319:59:533
791491992821,4cyclictest0-21swapper/319:59:533
791491992819,4cyclictest0-21swapper/322:45:323
791491992819,4cyclictest0-21swapper/322:45:323
791491992721,3cyclictest0-21swapper/320:30:483
791491992720,4cyclictest0-21swapper/300:25:133
791491992719,5cyclictest0-21swapper/320:05:173
791491992719,3cyclictest0-21swapper/321:25:073
791491992719,3cyclictest0-21swapper/321:25:073
791491992620,3cyclictest0-21swapper/320:25:133
791491992620,3cyclictest0-21swapper/320:12:123
791491992519,3cyclictest0-21swapper/319:25:163
791491992519,3cyclictest0-21swapper/319:25:163
791491992419,3cyclictest0-21swapper/319:50:453
791491991913,3cyclictest0-21swapper/319:09:533
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional