You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-07-21 - 09:44

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #2

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack8slot2s.osadl.org (updated Tue Jul 21, 2026 00:43:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
759129997768,5cyclictest86-21hwrng19:51:253
759129997669,5cyclictest86-21hwrng23:03:553
759129997669,5cyclictest86-21hwrng23:03:553
759126997665,7cyclictest86-21hwrng19:29:540
759129997564,9cyclictest86-21hwrng23:18:153
759126997564,8cyclictest86-21hwrng22:38:190
759126997564,8cyclictest86-21hwrng22:38:190
759128997467,4cyclictest0-21swapper/219:35:022
759126997466,5cyclictest86-21hwrng19:40:090
759127997367,3cyclictest0-21swapper/121:00:011
759127997366,4cyclictest0-21swapper/122:39:211
759127997366,4cyclictest0-21swapper/122:39:211
759126997366,4cyclictest86-21hwrng20:52:510
759129997264,5cyclictest86-21hwrng21:26:383
759128997266,4cyclictest0-21swapper/222:51:382
759128997266,4cyclictest0-21swapper/222:51:382
759127997267,3cyclictest0-21swapper/122:44:281
759127997266,3cyclictest0-21swapper/120:00:371
759127997266,3cyclictest0-21swapper/100:06:231
759126997266,4cyclictest86-21hwrng21:30:440
759126997262,7cyclictest86-21hwrng21:40:590
759128997165,4cyclictest0-21swapper/220:42:372
759128997165,3cyclictest0-21swapper/222:33:122
759127997166,3cyclictest0-21swapper/122:21:561
759126997164,4cyclictest86-21hwrng00:02:170
759126997164,4cyclictest86-21hwrng00:02:170
759126997161,7cyclictest86-21hwrng20:56:570
759126997161,7cyclictest86-21hwrng20:56:570
759129997062,5cyclictest86-21hwrng21:50:123
759128997065,3cyclictest0-21swapper/200:15:362
759128997063,4cyclictest0-21swapper/222:40:222
759127997064,3cyclictest0-21swapper/120:26:131
759126997062,5cyclictest86-21hwrng00:25:500
759126997059,7cyclictest86-21hwrng22:13:450
759129996963,4cyclictest86-21hwrng20:41:353
759128996963,4cyclictest0-21swapper/200:36:052
759128996963,3cyclictest0-21swapper/220:48:452
759127996963,3cyclictest0-21swapper/120:49:471
759126996963,4cyclictest86-21hwrng21:38:560
759126996960,6cyclictest86-21hwrng22:45:290
759126996957,9cyclictest86-21hwrng22:26:020
759127996862,4cyclictest0-21swapper/100:21:451
759127996862,4cyclictest0-21swapper/100:21:451
759127996861,4cyclictest0-21swapper/121:46:061
759127996861,4cyclictest0-21swapper/121:46:061
759126996860,5cyclictest86-21hwrng23:57:100
759126996860,5cyclictest86-21hwrng23:57:100
759128996762,3cyclictest0-21swapper/219:42:122
759129996659,4cyclictest86-21hwrng19:46:173
759128996660,3cyclictest0-21swapper/222:04:322
759128996660,3cyclictest0-21swapper/221:06:102
759128996560,3cyclictest0-21swapper/219:57:332
759126996557,5cyclictest86-21hwrng00:14:350
759129996457,5cyclictest86-21hwrng20:21:063
759129996357,4cyclictest86-21hwrng20:19:033
759129996357,4cyclictest86-21hwrng20:19:033
759128996358,3cyclictest0-21swapper/223:23:232
759128996357,3cyclictest0-21swapper/219:22:442
759128996357,3cyclictest0-21swapper/219:22:442
759127996358,3cyclictest0-21swapper/100:34:021
759128996256,3cyclictest0-21swapper/220:04:432
759128996256,3cyclictest0-21swapper/200:33:002
759126996252,7cyclictest86-21hwrng22:42:250
759129996154,5cyclictest86-21hwrng23:33:373
759129996154,5cyclictest86-21hwrng23:33:373
759128996155,3cyclictest0-21swapper/200:12:322
759127996156,3cyclictest0-21swapper/100:18:401
759127996156,3cyclictest0-21swapper/100:04:201
759127996156,3cyclictest0-21swapper/100:04:201
759129996052,5cyclictest86-21hwrng20:08:493
759128996055,3cyclictest0-21swapper/222:12:432
759128996055,3cyclictest0-21swapper/200:07:242
759128996053,4cyclictest0-21swapper/221:04:072
759126996051,5cyclictest86-21hwrng21:12:180
759126996050,6cyclictest86-21hwrng00:22:460
759126996050,6cyclictest86-21hwrng00:22:460
759128995954,3cyclictest0-21swapper/220:30:192
759128995954,3cyclictest0-21swapper/220:30:192
759128995853,3cyclictest0-21swapper/223:53:042
759128995853,3cyclictest0-21swapper/223:53:042
759128995852,3cyclictest0-21swapper/223:26:272
759127995851,4cyclictest0-21swapper/119:35:021
759126995849,5cyclictest86-21hwrng19:45:160
759129995650,4cyclictest86-21hwrng22:56:453
759129995650,4cyclictest86-21hwrng22:56:453
759128995550,3cyclictest0-21swapper/219:12:302
759128995549,3cyclictest0-21swapper/220:57:582
759128995549,3cyclictest0-21swapper/220:57:582
759128995549,3cyclictest0-21swapper/220:15:592
759128995549,3cyclictest0-21swapper/220:15:592
759127995549,3cyclictest0-21swapper/122:51:381
759127995549,3cyclictest0-21swapper/122:51:381
759127995549,3cyclictest0-21swapper/120:42:371
759126995546,5cyclictest86-21hwrng22:14:460
759126995546,5cyclictest86-21hwrng22:14:460
759128995448,3cyclictest0-21swapper/220:37:292
759128995448,3cyclictest0-21swapper/220:12:552
759127995448,3cyclictest0-21swapper/122:33:121
759129995342,8cyclictest0-21swapper/300:35:213
759128995348,3cyclictest0-21swapper/223:56:092
759128995348,3cyclictest0-21swapper/223:56:092
759128995348,3cyclictest0-21swapper/222:28:052
759128995347,3cyclictest0-21swapper/222:20:552
759127995347,3cyclictest0-21swapper/100:36:051
759126995342,7cyclictest86-21hwrng20:35:260
75912999522,30cyclictest886432-21apt-get23:39:463
759129995220,12cyclictest0-21swapper/322:45:233
759129995219,26cyclictest907358-21/usr/sbin/munin00:15:413
759128995247,3cyclictest0-21swapper/221:48:092
759128995247,3cyclictest0-21swapper/221:48:092
759127995246,3cyclictest0-21swapper/119:42:121
759126995246,4cyclictest86-21hwrng23:54:060
759126995246,4cyclictest86-21hwrng23:54:060
759129995145,4cyclictest86-21hwrng21:21:313
759128995146,3cyclictest0-21swapper/219:28:532
759128995145,4cyclictest0-21swapper/219:31:572
759128995145,3cyclictest0-21swapper/222:17:502
759128995145,3cyclictest0-21swapper/222:17:502
759127995146,2cyclictest0-21swapper/120:48:451
759126995142,6cyclictest86-21hwrng22:23:590
759129995021,26cyclictest0-21swapper/319:29:483
759129995019,23cyclictest856694-21ssh22:50:073
759129995019,23cyclictest856694-21ssh22:50:073
759128995045,3cyclictest0-21swapper/220:28:162
759127995044,3cyclictest0-21swapper/119:57:331
759129994942,5cyclictest86-21hwrng20:01:393
75912999492,32cyclictest784255-21apt-get20:29:473
75912999492,32cyclictest784255-21apt-get20:29:473
75912999492,24cyclictest899405-21ssh00:00:423
75912999492,24cyclictest899405-21ssh00:00:423
759129994922,24cyclictest0-21swapper/322:15:413
759129994922,24cyclictest0-21swapper/322:15:413
759129994920,25cyclictest0-21swapper/321:15:423
759129994920,16cyclictest895569-21aten_r8power_po23:55:003
759129994920,16cyclictest895569-21aten_r8power_po23:55:003
759129994919,25cyclictest890282-21ssh23:45:223
75912999491,19cyclictest903196-21ssh00:06:413
759128994943,4cyclictest0-21swapper/221:18:272
759127994943,3cyclictest0-21swapper/122:04:321
759127994943,3cyclictest0-21swapper/121:06:101
759126994942,4cyclictest86-21hwrng23:25:250
75912999484,33cyclictest883905-21ssh23:35:263
75912999484,33cyclictest883905-21ssh23:35:263
759129994823,20cyclictest810005-21ssh21:30:233
759129994822,23cyclictest0-21swapper/319:55:053
75912999482,21cyclictest875517-21ssh23:20:453
75912999481,41cyclictest852303-21ssh22:41:043
759128994843,3cyclictest0-21swapper/221:44:032
759126994819,19cyclictest857543-21ntpq22:50:380
759126994819,19cyclictest857543-21ntpq22:50:380
75912999474,26cyclictest841794-21apt-get22:25:013
75912999473,39cyclictest893287-21ssh23:50:233
75912999473,39cyclictest893287-21ssh23:50:233
759129994725,19cyclictest0-21swapper/321:55:053
759129994725,19cyclictest0-21swapper/321:55:053
759127994742,2cyclictest0-21swapper/123:23:231
75912699471,42cyclictest868613-21ssh23:09:560
759129994625,7cyclictest0-21swapper/321:10:223
759129994624,19cyclictest0-21swapper/320:45:223
75912999462,38cyclictest852583-21kworker/u16:12+rpciod23:05:013
759129994620,23cyclictest0-21swapper/321:35:093
759128994640,3cyclictest0-21swapper/219:16:362
759128994640,3cyclictest0-21swapper/219:16:362
759128994639,4cyclictest0-21swapper/223:30:332
759128994639,4cyclictest0-21swapper/223:30:332
759127994641,2cyclictest0-21swapper/119:22:441
759127994641,2cyclictest0-21swapper/119:22:441
759127994640,3cyclictest0-21swapper/120:04:431
75912699461,40cyclictest902215-21ssh00:05:190
75912999453,36cyclictest768553-21sendmail-msp19:40:053
75912999453,19cyclictest838968-21ssh22:20:073
75912999452,38cyclictest826766-21sendmail-msp22:01:243
759129994523,19cyclictest0-21swapper/319:35:223
759129994516,25cyclictest848056-21diskstats22:35:053
759129994516,25cyclictest848056-21diskstats22:35:053
759127994539,3cyclictest0-21swapper/122:12:431
759129994425,17cyclictest0-21swapper/320:55:163
759129994425,17cyclictest0-21swapper/320:55:163
759129994421,19cyclictest828897-21kworker/u16:8+rpciod22:30:243
759129994420,19cyclictest817998-21/usr/sbin/munin21:45:213
759129994420,19cyclictest817998-21/usr/sbin/munin21:45:213
759129994418,20cyclictest904701-21ssh00:10:083
759127994438,3cyclictest0-21swapper/100:12:321
759126994436,5cyclictest86-21hwrng21:19:280
759126994419,20cyclictest880497-21ssh23:29:560
759126994419,20cyclictest880497-21ssh23:29:560
759129994319,20cyclictest869490-21ssh23:10:293
759129994317,21cyclictest815850-21/usr/sbin/munin21:40:263
75912999431,38cyclictest833808-21ntpq22:10:253
759126994336,4cyclictest86-21hwrng22:32:110
75912699431,36cyclictest781133-21sendmail-msp20:20:320
75912699431,30cyclictest918438-21ssh00:32:370
75912999425,28cyclictest779665-21latency_hist20:14:383
75912999422,35cyclictest914229-21ssh00:25:263
75912999422,34cyclictest877454-21ssh23:24:483
759129994223,15cyclictest911137-21ssh00:20:243
759129994223,15cyclictest911137-21ssh00:20:243
759129994222,17cyclictest0-21swapper/319:15:123
759129994222,17cyclictest0-21swapper/319:15:123
759129994217,22cyclictest0-21swapper/322:05:063
759129994216,21cyclictest917151-21ntpq00:30:213
75912999421,36cyclictest794824-21/usr/sbin/munin21:00:413
759127994237,2cyclictest0-21swapper/123:53:041
759127994237,2cyclictest0-21swapper/123:53:041
759127994237,2cyclictest0-21swapper/120:30:191
759127994237,2cyclictest0-21swapper/120:30:191
759126994219,19cyclictest761725-21ntpq19:15:270
759126994219,19cyclictest761725-21ntpq19:15:270
759126994218,20cyclictest862644-21ssh22:59:550
759126994218,20cyclictest862644-21ssh22:59:550
759126994217,19cyclictest874277-21sendmail-msp23:19:560
759126994217,13cyclictest776375-21kworker/u16:8+rpciod20:14:390
75912699421,19cyclictest787647-21apt-get20:39:520
75912699421,18cyclictest830977-21ntpq22:05:360
75912699420,21cyclictest860476-21ssh22:55:190
75912699420,21cyclictest860476-21ssh22:55:190
75912999416,31cyclictest762280-21sendmail-msp19:20:273
75912999416,31cyclictest762280-21sendmail-msp19:20:273
759129994131,8cyclictest0-21swapper/320:50:283
759129994122,17cyclictest0-21swapper/319:25:063
759129994117,20cyclictest796385-21/usr/sbin/munin21:05:273
75912999411,17cyclictest760553-21unixbench_multi19:10:333
759128994136,3cyclictest0-21swapper/221:32:472
759128994134,4cyclictest0-21swapper/223:40:152
759127994135,3cyclictest0-21swapper/123:26:271
759126994120,16cyclictest827064-21ssh22:00:000
759126994118,19cyclictest785835-21http20:34:360
759126994118,19cyclictest785835-21http20:34:360
759126994117,19cyclictest763297-21ntpq19:20:390
759126994117,19cyclictest763297-21ntpq19:20:390
759126994116,20cyclictest908403-21ssh00:15:320
759126994115,13cyclictest804111-21ssh21:20:330
75912699411,36cyclictest871887-21ssh23:15:080
75912699411,35cyclictest825044-21ntpq21:55:350
75912699411,35cyclictest825044-21ntpq21:55:350
75912699411,28cyclictest794769-21/usr/sbin/munin21:00:330
75912699411,17cyclictest866221-21grep23:05:150
759129994022,16cyclictest0-21swapper/320:25:153
759129994018,18cyclictest786881-21ntpq20:35:273
75912699401,34cyclictest883529-21ssh23:35:120
75912699401,34cyclictest883529-21ssh23:35:120
75912699401,17cyclictest890226-21ssh23:45:170
75912999391,16cyclictest759212-21cat19:09:373
759128993934,3cyclictest0-21swapper/222:49:352
759127993934,2cyclictest0-21swapper/119:12:301
759126993924,9cyclictest776377-21kworker/u16:12+rpciod20:14:480
759126993924,9cyclictest776377-21kworker/u16:12+rpciod20:14:480
759126993919,15cyclictest920251-21ssh00:35:240
759126993918,17cyclictest807116-21ntpq21:25:350
759126993917,17cyclictest818854-21ssh21:45:170
759126993917,17cyclictest818854-21ssh21:45:170
75912699391,34cyclictest822082-21ntpq21:50:360
759127993832,3cyclictest0-21swapper/120:37:291
759127993832,3cyclictest0-21swapper/120:12:551
75912699381,33cyclictest796284-21ntpq21:05:160
75912699381,33cyclictest783704-21ntpq20:25:220
75912699381,32cyclictest775021-21/usr/sbin/munin20:00:070
75912699381,16cyclictest886904-21perl23:40:180
75912699381,16cyclictest767934-21ntpq19:35:170
759128993730,4cyclictest0-21swapper/200:25:332
759127993732,2cyclictest0-21swapper/123:56:091
759127993732,2cyclictest0-21swapper/123:56:091
759127993732,2cyclictest0-21swapper/120:57:581
759127993732,2cyclictest0-21swapper/120:57:581
759127993732,2cyclictest0-21swapper/120:15:591
759127993732,2cyclictest0-21swapper/120:15:591
759127993731,3cyclictest0-21swapper/121:19:571
759126993716,11cyclictest790602-21latency_hist20:49:370
75912699371,32cyclictest764803-21ntpq19:25:180
759128993631,3cyclictest0-21swapper/220:50:482
759128993631,3cyclictest0-21swapper/220:03:422
759128993629,4cyclictest0-21swapper/223:00:132
759128993629,4cyclictest0-21swapper/223:00:132
759127993631,2cyclictest0-21swapper/122:28:051
759126993616,16cyclictest777938-21sshd-session20:06:500
75912699361,31cyclictest760145-21ntpq19:10:230
75912699361,30cyclictest773242-21munin-run19:54:360
759128993530,3cyclictest0-21swapper/220:22:082
759127993529,3cyclictest0-21swapper/119:28:531
759128993427,4cyclictest0-21swapper/221:14:382
759128993426,5cyclictest0-21swapper/221:35:102
759127993429,2cyclictest0-21swapper/122:17:501
759127993429,2cyclictest0-21swapper/122:17:501
759127993428,3cyclictest0-21swapper/119:31:571
759126993414,16cyclictest774177-21ntpq19:55:130
759128993325,5cyclictest0-21swapper/200:00:332
759128993325,5cyclictest0-21swapper/200:00:332
759128993226,3cyclictest0-21swapper/223:45:382
759128993224,5cyclictest0-21swapper/222:54:532
759128993224,5cyclictest0-21swapper/222:54:532
759128993223,5cyclictest0-21swapper/223:35:142
759128993223,5cyclictest0-21swapper/223:35:142
759128993222,6cyclictest0-21swapper/221:25:372
759127993227,2cyclictest0-21swapper/121:44:031
759127993226,3cyclictest0-21swapper/122:59:371
759127993226,3cyclictest0-21swapper/122:59:371
759127993226,3cyclictest0-21swapper/121:18:271
759128993124,4cyclictest0-21swapper/221:20:532
759127993125,3cyclictest0-21swapper/123:10:301
759127993124,4cyclictest0-21swapper/123:35:391
759127993124,4cyclictest0-21swapper/123:35:391
759126993111,9cyclictest742543-21kworker/u16:6+xprtiod19:09:380
759128993023,5cyclictest0-21swapper/200:20:532
759128993023,5cyclictest0-21swapper/200:20:532
759127993024,4cyclictest0-21swapper/123:41:111
759127993024,3cyclictest0-21swapper/122:59:541
759127993024,3cyclictest0-21swapper/122:59:541
759127993024,3cyclictest0-21swapper/122:06:151
759127993024,3cyclictest0-21swapper/120:20:001
759128992921,5cyclictest0-21swapper/223:06:272
759128992921,5cyclictest0-21swapper/222:05:112
759128992921,4cyclictest0-21swapper/221:59:362
759128992921,4cyclictest0-21swapper/221:59:362
759128992920,4cyclictest0-21swapper/219:54:362
759128992918,7cyclictest0-21swapper/222:35:262
759128992918,7cyclictest0-21swapper/222:35:262
759127992923,3cyclictest0-21swapper/123:30:331
759127992923,3cyclictest0-21swapper/123:30:331
759127992923,3cyclictest0-21swapper/119:16:361
759127992923,3cyclictest0-21swapper/119:16:361
759127992923,3cyclictest0-21swapper/100:25:191
759128992823,3cyclictest0-21swapper/223:14:512
759127992822,3cyclictest0-21swapper/123:45:321
759127992822,3cyclictest0-21swapper/121:50:381
759127992822,3cyclictest0-21swapper/121:34:391
759127992821,4cyclictest0-21swapper/121:25:111
759128992722,3cyclictest0-21swapper/219:45:422
759128992721,4cyclictest0-21swapper/223:09:562
759128992720,4cyclictest0-21swapper/221:49:402
759127992722,3cyclictest0-21swapper/123:18:101
759127992722,3cyclictest0-21swapper/123:05:331
759127992722,3cyclictest0-21swapper/121:55:321
759127992722,3cyclictest0-21swapper/121:55:321
759127992722,3cyclictest0-21swapper/121:10:131
759127992721,3cyclictest0-21swapper/122:49:391
759127992520,3cyclictest0-21swapper/121:35:201
759127992520,3cyclictest0-21swapper/119:44:501
759127992516,3cyclictest0-21swapper/119:49:521
759127992317,3cyclictest0-21swapper/119:09:371
759128991911,5cyclictest0-21swapper/219:09:382
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional