You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-03-27 - 05:10

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #3

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot3s.osadl.org (updated Fri Mar 27, 2026 00:43:38)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2515021670,5sleep31795899cyclictest00:25:203
17955991156,58cyclictest0-21swapper/019:30:230
17955991156,58cyclictest0-21swapper/019:30:230
17955991103,91cyclictest0-21swapper/019:10:130
1872821040,2sleep11795699cyclictest23:00:111
1795599917,66cyclictest0-21swapper/020:35:240
99272890,2sleep10-21swapper/122:09:021
245622870,2sleep20-21swapper/223:05:402
257412840,2sleep00-21swapper/023:46:000
315822820,2sleep10-21swapper/100:32:231
1795599814,66cyclictest2150-21fschecks_time22:40:270
69902800,5sleep11795699cyclictest00:03:161
1795599807,25cyclictest0-21swapper/019:45:230
1795599785,11cyclictest4234-21ssh00:00:210
185142750,3sleep121-21rcuc/119:10:301
35252700,5sleep11795699cyclictest23:59:301
35252700,5sleep11795699cyclictest23:59:301
305782700,1sleep00-21swapper/019:45:100
189582700,2sleep20-21swapper/222:21:312
218532680,7sleep2301ktimersoftd/222:25:302
1795599681,50cyclictest29665-21fschecks_time00:30:290
327492670,2sleep20-21swapper/219:50:282
267212650,2sleep00-21swapper/023:09:240
1795599657,55cyclictest0-21swapper/020:10:220
17957996139,16cyclictest7950irq/56-dwc_otg_00:15:242
17955996135,4cyclictest28797-21unixbench_singl23:10:380
17955996028,2cyclictest0-21swapper/022:00:220
17955996021,21cyclictest5205-21/usr/sbin/munin21:20:370
17955996021,21cyclictest5205-21/usr/sbin/munin21:20:370
1795799592,30cyclictest7750irq/56-dwc_otg20:20:232
1795799592,30cyclictest7750irq/56-dwc_otg20:20:232
17955995913,26cyclictest8793-21timerwakeupswit23:25:360
17955995913,26cyclictest8793-21timerwakeupswit23:25:360
1795599587,5cyclictest0-21swapper/021:00:280
17955995818,13cyclictest7850irq/56-dwc_otg_22:55:380
17955995738,6cyclictest13431-21apt-get21:30:090
17955995729,3cyclictest16790-21modprobe22:20:100
1795599571,31cyclictest29661-21grep23:50:380
17955995634,4cyclictest2131-21grep21:15:370
197742550,2sleep00-21swapper/023:00:350
1795799553,11cyclictest7750irq/56-dwc_otg19:40:202
17957995515,22cyclictest20909-21ls20:45:392
1795599551,49cyclictest0-21swapper/019:50:380
17955995514,21cyclictest15584-21unixbench_singl20:30:410
126322550,4sleep20-21swapper/200:10:222
17955995430,5cyclictest7850irq/56-dwc_otg_22:35:250
17955995427,7cyclictest7850irq/56-dwc_otg_22:45:340
17955995427,5cyclictest4744-21unixbench_multi23:20:380
17955995425,5cyclictest21468-21latency_hist19:20:100
1795599542,27cyclictest0-21swapper/023:15:370
17957995310,27cyclictest2421-21rm21:15:552
1795599535,29cyclictest0-21swapper/020:05:270
17955995235,4cyclictest7750irq/56-dwc_otg22:30:220
17955995231,5cyclictest7950irq/56-dwc_otg_20:40:350
17955995229,7cyclictest7950irq/56-dwc_otg_23:30:370
17955995225,8cyclictest1156-21wget00:35:250
17955995225,12cyclictest7950irq/56-dwc_otg_19:55:370
1795599522,31cyclictest22082-21apt21:40:100
17955995219,22cyclictest0-21swapper/020:50:330
1795599521,48cyclictest30093-21switchtime21:10:350
1795599521,28cyclictest14198-21munin-run20:30:090
1795599521,23cyclictest0-21swapper/022:07:410
17957995126,13cyclictest21911-21fschecks_time19:20:252
17957995112,14cyclictest9113-21cut20:15:272
17957995111,24cyclictest27642-21ssh22:31:462
17957995111,20cyclictest1752-21/usr/sbin/munin22:40:352
1795599513,32cyclictest0-21swapper/023:40:280
1795599513,27cyclictest0-21swapper/021:45:100
1795599513,25cyclictest32603-21aten_rbpower_cu23:55:260
1795599513,25cyclictest32603-21aten_rbpower_cu23:55:260
17955995118,26cyclictest0-21swapper/022:00:110
17955995118,26cyclictest0-21swapper/022:00:110
17955995115,5cyclictest0-21swapper/000:05:240
1795599511,27cyclictest27435-21fschecks_count21:05:260
17957995015,12cyclictest11768-21ssh22:11:522
17955995029,7cyclictest7850irq/56-dwc_otg_22:50:350
1795599502,26cyclictest0-21swapper/023:35:360
1795599501,36cyclictest28746-21diskmemload00:15:110
1795599501,34cyclictest3202-21kworker/u8:122:14:240
1795599501,22cyclictest0-21swapper/000:25:340
1795599501,19cyclictest18426-21ssh22:20:420
17957994925,18cyclictest0-21swapper/219:10:122
17957994912,13cyclictest32265-21latency_hist23:55:112
17957994818,10cyclictest13431-21apt-get21:30:142
17957994812,19cyclictest7950irq/56-dwc_otg_23:00:112
1795599482,32cyclictest0-21swapper/019:38:360
17955994819,4cyclictest24416-21timerwakeupswit19:25:360
17955994819,13cyclictest61-21kswapd000:15:170
1795599481,4cyclictest15110-21grep21:30:390
173882482,37sleep00-21swapper/019:06:210
1795799479,24cyclictest23522-21ssh23:44:302
1795799478,12cyclictest7096-21taskset00:03:272
17957994716,14cyclictest0-21swapper/221:10:202
17955994729,5cyclictest7950irq/56-dwc_otg_20:55:320
1795599471,30cyclictest0-21swapper/022:29:480
1795799469,13cyclictest29318-21/usr/sbin/munin00:30:412
1795799468,27cyclictest15524-21ssh22:17:592
17957994611,24cyclictest32423-21modprobe23:55:112
17957994611,24cyclictest32423-21modprobe23:55:112
17957994610,21cyclictest7507-21ssh22:45:532
1795599461,5cyclictest29454-21apt21:50:100
1795799455,25cyclictest7950irq/56-dwc_otg_21:21:322
1795799455,25cyclictest7950irq/56-dwc_otg_21:21:322
17957994515,18cyclictest12276-21ssh22:51:452
17957994513,12cyclictest18606-21ssh21:35:292
17957994511,10cyclictest7850irq/56-dwc_otg_23:30:242
17957994510,23cyclictest28746-21diskmemload00:36:342
1795699456,28cyclictest0-21swapper/120:15:251
1795599451,21cyclictest0-21swapper/020:45:320
12712450,18sleep17950irq/56-dwc_otg_22:39:541
1795799444,13cyclictest6490-21sh22:03:272
1795799444,10cyclictest7950irq/56-dwc_otg_23:10:582
1795799442,27cyclictest7750irq/56-dwc_otg23:16:312
17957994413,12cyclictest7257-21ssh23:25:042
17957994410,13cyclictest11521-21ssh00:08:582
1795699441,32cyclictest0-21swapper/122:40:231
17956994410,6cyclictest23-21ksoftirqd/122:00:291
8172430,2sleep10-21swapper/121:56:021
8172430,2sleep10-21swapper/121:56:021
1795899437,24cyclictest0-21swapper/321:30:153
1795899437,24cyclictest0-21swapper/320:15:253
1795899431,5cyclictest0-21swapper/322:45:233
1795799438,20cyclictest7950irq/56-dwc_otg_23:49:422
1795799438,18cyclictest17398-21ssh23:35:552
1795799437,25cyclictest0-21swapper/221:00:232
17957994313,12cyclictest28983-21chrt21:49:232
1795799431,29cyclictest0-21swapper/220:56:242
17957994312,16cyclictest20955-21ssh00:20:142
17957994311,11cyclictest11653-21ssh21:27:052
17957994311,10cyclictest7850irq/56-dwc_otg_00:25:232
17957994310,19cyclictest32435-21ssh21:54:592
1795699436,23cyclictest0-21swapper/121:05:221
1795699432,5cyclictest7950irq/56-dwc_otg_20:10:201
17956994322,5cyclictest11608-21grep22:50:381
1795599431,38cyclictest42812sleep020:00:320
1795899426,19cyclictest7850irq/56-dwc_otg_19:10:133
17958994219,5cyclictest39-21ksoftirqd/323:05:103
1795899421,5cyclictest0-21swapper/300:15:243
1795799422,5cyclictest0-21swapper/222:35:222
1795599429,14cyclictest0-21swapper/021:53:110
17955994214,20cyclictest0-21swapper/020:21:120
17955994214,20cyclictest0-21swapper/020:21:120
177782427,21sleep217907-21cat19:10:122
214462410,3sleep321429-21munin-run20:50:103
1795799418,12cyclictest0-21swapper/220:11:362
1795799413,15cyclictest19982-21/usr/sbin/munin19:15:242
1795799412,10cyclictest7654-21ssh23:25:212
1795799412,10cyclictest7654-21ssh23:25:212
1795699411,4cyclictest0-21swapper/100:15:221
1795599412,9cyclictest22299-21ssh00:20:390
17955994119,14cyclictest0-21swapper/020:17:550
32072400,25sleep37950irq/56-dwc_otg_22:40:493
17958994019,7cyclictest30185-21proc_pri00:30:373
1795799408,13cyclictest21388-21ssh23:02:332
17957994010,13cyclictest14078-21taskset20:28:502
1795699406,12cyclictest0-21swapper/123:43:361
1795699403,18cyclictest7950irq/56-dwc_otg_23:30:111
1795699403,18cyclictest7950irq/56-dwc_otg_23:30:111
1795899393,12cyclictest11793-21ssh23:30:213
1795899391,27cyclictest29566-21ls21:50:113
1795799399,12cyclictest2050-21sh21:58:102
1795799399,12cyclictest2050-21sh21:58:102
1795799397,23cyclictest0-21swapper/220:50:152
1795799396,17cyclictest7950irq/56-dwc_otg_22:06:212
1795799394,13cyclictest7850irq/56-dwc_otg_19:58:392
17957993912,4cyclictest0-21swapper/221:40:212
1795699397,23cyclictest0-21swapper/121:30:151
17956993924,5cyclictest221ktimersoftd/119:25:301
1795699391,28cyclictest21660-21apt-key20:50:111
17956993910,18cyclictest0-21swapper/120:20:251
17956993910,18cyclictest0-21swapper/120:20:251
17955993914,7cyclictest0-21swapper/019:20:350
17958993817,5cyclictest39-21ksoftirqd/300:00:343
17958993817,5cyclictest16131-21sh22:56:023
1795899381,24cyclictest25542-21ls21:00:243
1795699386,23cyclictest0-21swapper/119:45:231
1795699386,13cyclictest7950irq/56-dwc_otg_21:00:391
1795699384,4cyclictest0-21swapper/123:15:211
17956993817,4cyclictest17790-21/usr/sbin/munin22:20:341
1795699381,27cyclictest26467-21ls21:45:101
1795899374,25cyclictest7950irq/56-dwc_otg_23:40:213
1795899373,9cyclictest7750irq/56-dwc_otg21:10:203
17958993721,5cyclictest7304-21cron23:25:103
1795799376,11cyclictest7850irq/56-dwc_otg_19:28:362
1795699377,15cyclictest7950irq/56-dwc_otg_00:25:101
1795699375,15cyclictest7950irq/56-dwc_otg_23:35:101
17956993718,4cyclictest24397-21sensors20:55:361
17956993711,16cyclictest7950irq/56-dwc_otg_19:36:341
17956993710,17cyclictest23-21ksoftirqd/123:05:341
147812370,1sleep30-21swapper/320:30:303
10792370,1sleep30-21swapper/321:56:283
10792370,1sleep30-21swapper/321:56:283
1795799367,21cyclictest0-21swapper/220:40:222
1795799367,12cyclictest28500-21chrt19:39:292
1795699369,6cyclictest9147-21ssh21:25:101
1795699369,6cyclictest9147-21ssh21:25:101
1795699367,14cyclictest7950irq/56-dwc_otg_19:25:101
17956993621,4cyclictest4212-21sh00:39:041
17956993614,8cyclictest19816-21latency_hist23:40:101
1795699361,23cyclictest31636-21latency_hist23:15:111
17956993612,11cyclictest0-21swapper/121:35:261
17956993610,13cyclictest7950irq/56-dwc_otg_20:40:101
1795899352,15cyclictest0-21swapper/320:06:103
1795899351,16cyclictest0-21swapper/322:25:093
17958993510,8cyclictest0-21swapper/323:55:303
17958993510,8cyclictest0-21swapper/323:55:303
17958993510,12cyclictest0-21swapper/322:28:523
1795799353,12cyclictest7850irq/56-dwc_otg_20:09:382
1795799351,28cyclictest5296-21ls20:05:112
1795699358,7cyclictest149-21systemd-journal22:15:101
1795699357,7cyclictest3619-21aten_rbpower_cu20:00:231
1795699355,7cyclictest7950irq/56-dwc_otg_00:10:261
1795699355,7cyclictest1551-21chrt19:55:101
1795699353,15cyclictest28708-21ssh23:50:271
1795699352,14cyclictest22888-21unixbench_multi20:50:381
17956993519,9cyclictest28327-21ssh21:48:151
17956993516,6cyclictest12487-21sh21:28:321
1795699351,18cyclictest0-21swapper/121:16:141
161552355,18sleep116247-21cut19:05:251
1795899349,10cyclictest39-21ksoftirqd/322:40:103
1795899346,6cyclictest16559-21runrttasks00:15:113
1795899344,17cyclictest0-21swapper/321:25:563
1795899343,11cyclictest7750irq/56-dwc_otg23:05:363
17958993414,9cyclictest37-21rcuc/319:28:483
17958993412,6cyclictest921150ssh22:07:483
1795799344,15cyclictest0-21swapper/219:31:162
1795799344,15cyclictest0-21swapper/219:31:162
1795699347,12cyclictest7950irq/56-dwc_otg_23:45:261
17956993410,4cyclictest0-21swapper/122:45:221
120742340,1sleep30-21swapper/300:09:593
1795899337,6cyclictest39-21ksoftirqd/320:35:283
1795899334,14cyclictest0-21swapper/323:13:553
1795899332,9cyclictest7950irq/56-dwc_otg_23:45:253
1795899332,17cyclictest7950irq/56-dwc_otg_20:00:103
17958993317,4cyclictest39-21ksoftirqd/322:00:323
1795799335,12cyclictest15704-21taskset20:31:332
17957993317,13cyclictest16993-21wc20:35:352
1795799331,20cyclictest27690-21latency21:05:292
1795699336,7cyclictest20714-21timerandwakeup19:15:431
1795699331,20cyclictest8924-21ssh00:05:321
17956993311,10cyclictest0-21swapper/121:54:581
1795899328,6cyclictest39-21ksoftirqd/319:20:213
1795899328,5cyclictest7950irq/56-dwc_otg_00:35:383
1795899328,13cyclictest0-21swapper/321:42:453
1795899327,4cyclictest0-21swapper/321:20:213
1795899327,4cyclictest0-21swapper/321:20:213
1795899324,6cyclictest7850irq/56-dwc_otg_19:45:233
17958993225,4cyclictest381ktimersoftd/320:55:233
1795899322,4cyclictest37-21rcuc/321:55:103
17958993224,6cyclictest26795-21latency_hist19:35:103
17958993224,6cyclictest26795-21latency_hist19:35:103
17958993221,4cyclictest7950irq/56-dwc_otg_23:25:363
17958993221,4cyclictest7950irq/56-dwc_otg_23:25:363
17958993213,6cyclictest39-21ksoftirqd/321:35:243
17958993213,10cyclictest37-21rcuc/320:45:103
17958993213,10cyclictest14196-21ssh22:15:423
17958993210,12cyclictest149-21systemd-journal23:51:593
1795699329,4cyclictest0-21swapper/100:26:081
1795699325,4cyclictest22607-21unixbench-2d22:25:401
1795699323,7cyclictest505-21rs:main1
1795699321,7cyclictest28842-21aten_rbpower_cu19:40:231
1795699321,13cyclictest7750irq/56-dwc_otg23:05:111
1795899318,7cyclictest7850irq/56-dwc_otg_22:51:413
1795899316,17cyclictest39-21ksoftirqd/323:36:083
1795899315,12cyclictest39-21ksoftirqd/319:45:103
1795899312,18cyclictest0-21swapper/320:01:473
1795899311,19cyclictest27340-21ls21:05:233
1795699319,4cyclictest0-21swapper/121:13:441
1795699319,11cyclictest7950irq/56-dwc_otg_19:30:341
1795699319,11cyclictest7950irq/56-dwc_otg_19:30:341
1795699319,10cyclictest0-21swapper/122:15:561
1795699311,16cyclictest7850irq/56-dwc_otg_22:30:291
1795899307,12cyclictest0-21swapper/323:19:213
1795899307,10cyclictest0-21swapper/320:11:153
1795899305,4cyclictest0-21swapper/322:13:393
1795899302,19cyclictest0-21swapper/320:27:033
17958993020,8cyclictest7950irq/56-dwc_otg_00:25:023
1795899301,15cyclictest0-21swapper/320:54:363
1795699309,6cyclictest18287-21fschecks_count20:40:261
1795699304,8cyclictest13750-21grep20:25:391
1795899296,5cyclictest39-21ksoftirqd/320:20:283
1795899296,5cyclictest39-21ksoftirqd/320:20:283
1795899295,4cyclictest7750irq/56-dwc_otg22:30:313
1795899292,6cyclictest7850irq/56-dwc_otg_21:18:353
1795899291,14cyclictest0-21swapper/319:55:113
1795699291,7cyclictest0-21swapper/120:05:351
1795699291,17cyclictest2362-21ls19:55:301
17957992813,12cyclictest30735-21grep19:45:242
1795699282,5cyclictest7750irq/56-dwc_otg20:30:311
175862272,16sleep30-21swapper/319:08:553
1795899265,5cyclictest7750irq/56-dwc_otg19:35:313
1795899246,8cyclictest7750irq/56-dwc_otg19:15:243
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional