You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-27 - 10:31

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #4, slot #1

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack4slot1s.osadl.org (updated Wed May 27, 2026 00:44:16)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2317121250,3sleep123174-21grep22:07:501
2317121250,3sleep123174-21grep22:07:501
2317121250,3sleep123174-21grep22:07:501
236282910,3sleep30-21swapper/322:07:563
236282910,3sleep30-21swapper/322:07:563
236282910,3sleep30-21swapper/322:07:563
171652880,3sleep30-21swapper/323:17:553
171652880,3sleep30-21swapper/323:17:553
94412830,3sleep20-21swapper/221:32:462
94412830,3sleep20-21swapper/221:32:462
94412830,3sleep20-21swapper/221:32:462
291162640,3sleep30-21swapper/319:32:393
291162640,3sleep30-21swapper/319:32:393
2195299601,26cyclictest14262memory00:02:550
2195299601,26cyclictest14262memory00:02:550
2195299601,26cyclictest14262memory00:02:550
183082590,3sleep30-21swapper/323:22:473
183082590,3sleep30-21swapper/323:22:473
183082590,3sleep30-21swapper/323:22:473
133762590,3sleep30-21swapper/321:42:483
133762590,3sleep30-21swapper/321:42:483
133762590,3sleep30-21swapper/321:42:483
133762590,3sleep30-21swapper/321:42:483
77072540,3sleep20-21swapper/200:18:002
77072540,3sleep20-21swapper/200:18:002
146352540,3chrt0-21swapper/323:12:493
146352540,3chrt0-21swapper/323:12:493
21952995238,7cyclictest0-21swapper/000:02:400
21952995238,7cyclictest0-21swapper/000:02:400
106422510,5sleep010645-21needreboot20:07:530
106422510,5sleep010645-21needreboot20:07:530
106422510,5sleep010645-21needreboot20:07:530
49972490,3sleep30-21swapper/300:12:513
49972490,3sleep30-21swapper/300:12:513
49972490,3sleep30-21swapper/300:12:513
268952490,3sleep20-21swapper/219:23:532
318152470,3sleep30-21swapper/319:37:533
318152470,3sleep30-21swapper/319:37:533
21964994026,6cyclictest7112sleep300:02:433
21964994026,6cyclictest7112sleep300:02:433
229042380,3sleep30-21swapper/322:07:483
21892380,3sleep30-21swapper/300:03:543
21892380,3sleep30-21swapper/300:03:543
21892380,3sleep30-21swapper/300:03:543
101432380,3sleep10-21swapper/100:27:441
101432380,3sleep10-21swapper/100:27:441
256802370,3sleep30-21swapper/323:42:443
256802370,3sleep30-21swapper/323:42:443
256802370,3sleep30-21swapper/323:42:443
21958993731,3cyclictest6862sleep200:02:412
21958993731,3cyclictest6862sleep200:02:412
21952993730,6cyclictest6547-21gltestperf19:57:480
21952993730,6cyclictest6547-21gltestperf19:57:480
94082360,1sleep10-21swapper/122:57:521
94082360,1sleep10-21swapper/122:57:521
21953993629,6cyclictest6770-21threads21:22:591
21953993629,6cyclictest6770-21threads21:22:591
21953993629,6cyclictest6770-21threads21:22:591
21953993528,5cyclictest26564-21cut22:17:481
21953993528,5cyclictest26564-21cut22:17:481
21953993528,5cyclictest10726-21kernelversion00:27:501
21953993527,6cyclictest560-21latency_hist00:02:491
21953993527,6cyclictest560-21latency_hist00:02:491
55552340,3sleep20-21swapper/200:12:582
55552340,3sleep20-21swapper/200:12:582
55552340,3sleep20-21swapper/200:12:582
21953993429,3cyclictest7855-21sendmail20:02:361
21953993429,3cyclictest7855-21sendmail20:02:361
21953993426,6cyclictest1691-21latency_hist21:12:481
2195399341,26cyclictest1837-21sed00:03:011
2195399341,26cyclictest1837-21sed00:03:011
2195399341,26cyclictest1837-21sed00:03:011
21952993425,7cyclictest21951-21cyclictest23:32:480
21952993425,7cyclictest21951-21cyclictest23:32:480
72512330,2sleep30-21swapper/300:17:583
72512330,2sleep30-21swapper/300:17:583
47712330,3sleep20-21swapper/221:17:582
47712330,3sleep20-21swapper/221:17:582
235152330,3sleep30-21swapper/320:42:513
235152330,3sleep30-21swapper/320:42:513
235152330,3sleep30-21swapper/320:42:513
21953993326,5cyclictest2979-21sshd22:41:541
21953993326,5cyclictest2979-21sshd22:41:541
21952993325,6cyclictest15808-21fschecks_count20:22:500
21952993325,6cyclictest15808-21fschecks_count20:22:500
21953993227,3cyclictest21951-21cyclictest21:17:361
21952993227,4cyclictest18089-21latency_hist23:22:360
21952993227,4cyclictest18089-21latency_hist23:22:360
21952993226,4cyclictest20508-21latency_hist22:02:370
21952993225,5cyclictest7404-21latency_hist21:27:360
21952993225,5cyclictest7404-21latency_hist21:27:360
21952993225,5cyclictest7404-21latency_hist21:27:360
61672310,2sleep30-21swapper/319:57:433
61672310,2sleep30-21swapper/319:57:433
21953993126,3cyclictest25871-21gltestperf19:22:501
21953993126,2cyclictest0-21swapper/119:42:361
21953993126,2cyclictest0-21swapper/119:42:361
21953993125,5cyclictest10683-21netstat20:07:551
21953993125,5cyclictest10683-21netstat20:07:551
21953993125,5cyclictest10683-21netstat20:07:551
21953993123,6cyclictest6996-21/usr/sbin/munin22:52:561
21953993123,6cyclictest6996-21/usr/sbin/munin22:52:561
198032310,2sleep119943-21timerwakeupswit21:57:581
21964993019,8cyclictest5303-21chrt21:19:563
21964993019,8cyclictest5303-21chrt21:19:563
21964993019,8cyclictest15562-21chrt00:41:533
21964993019,8cyclictest15562-21chrt00:41:533
21964993017,9cyclictest31546-21chrt22:30:113
21964993017,9cyclictest31546-21chrt22:30:113
21964993017,8cyclictest11526-21chrt20:11:303
21964993017,8cyclictest11526-21chrt20:11:303
21964993017,8cyclictest11526-21chrt20:11:303
21964993012,15cyclictest17893-21chrt20:27:503
21964993012,15cyclictest17893-21chrt20:27:503
2195899301,21cyclictest0-21swapper/221:16:392
21953993024,5cyclictest21951-21cyclictest23:37:541
21953993024,5cyclictest21951-21cyclictest23:37:541
21953993024,5cyclictest21951-21cyclictest23:37:541
21953993024,4cyclictest19948-21latency_hist23:27:491
21953993023,5cyclictest5661-21kernelversion22:47:511
21953993023,5cyclictest5661-21kernelversion22:47:511
21952993024,5cyclictest1137-21latency19:42:510
21952993024,5cyclictest1137-21latency19:42:510
21952993022,6cyclictest6233-21cat22:47:580
21952993022,6cyclictest6233-21cat22:47:580
21952993021,7cyclictest26514-21tr23:42:540
21952993021,7cyclictest26514-21tr23:42:540
19482300,3sleep20-21swapper/221:12:482
19482300,3sleep20-21swapper/221:12:482
237322290,2sleep123733-21cut20:42:521
237322290,2sleep123733-21cut20:42:521
237322290,2sleep123733-21cut20:42:521
21964992919,7cyclictest29054-21chrt23:49:433
21964992919,7cyclictest29054-21chrt23:49:433
21964992918,8cyclictest4854-21chrt22:46:483
21964992918,8cyclictest4854-21chrt22:46:483
21964992918,8cyclictest4854-21chrt22:46:483
21964992917,8cyclictest9734-21chrt00:24:043
21964992917,8cyclictest9734-21chrt00:24:043
21964992917,8cyclictest7753-21chrt20:01:293
21964992917,8cyclictest7753-21chrt20:01:293
21964992917,8cyclictest28288-21chrt20:54:523
21964992917,8cyclictest28288-21chrt20:54:523
21964992917,7cyclictest14748-21chrt21:45:253
21964992917,7cyclictest14748-21chrt21:45:253
21964992917,7cyclictest14748-21chrt21:45:253
2195899291,23cyclictest28344-21chrt20:55:352
2195899291,23cyclictest28344-21chrt20:55:352
2195899291,22cyclictest0-21swapper/219:44:032
2195899291,22cyclictest0-21swapper/219:44:032
21953992924,3cyclictest4866-21latency19:52:521
21953992924,3cyclictest4866-21latency19:52:521
21953992923,4cyclictest749-21runrttasks21:52:521
21953992923,4cyclictest749-21runrttasks21:52:521
21953992922,5cyclictest27120-21fschecks_time20:52:501
21953992922,5cyclictest27120-21fschecks_time20:52:501
21953992922,5cyclictest21951-21cyclictest19:47:541
21953992922,5cyclictest21951-21cyclictest19:47:541
21952992921,6cyclictest12759-21needreboot00:32:540
21952992920,7cyclictest25907-21grep20:47:570
21952992920,7cyclictest25907-21grep20:47:570
21952992919,7cyclictest0-21swapper/022:42:470
283112280,3chrt0-21swapper/223:47:532
283112280,3chrt0-21swapper/223:47:532
21964992817,8cyclictest9176-21chrt21:31:143
21964992817,8cyclictest9176-21chrt21:31:143
21964992817,8cyclictest9176-21chrt21:31:143
21964992817,7cyclictest27394-21chrt23:47:183
21964992817,7cyclictest27394-21chrt23:47:183
21964992817,7cyclictest12369-21chrt23:06:423
21964992817,7cyclictest12369-21chrt23:06:423
21964992817,7cyclictest12369-21chrt23:06:423
21964992817,6cyclictest20916-21chrt20:36:103
21964992817,6cyclictest20916-21chrt20:36:103
21964992816,9cyclictest13394-21chrt00:33:173
21964992816,8cyclictest14163-21chrt23:10:283
21964992816,8cyclictest14163-21chrt23:10:283
21964992816,7cyclictest10969-21chrt21:35:203
21964992816,7cyclictest10969-21chrt21:35:203
2195899281,22cyclictest9408-21chrt20:03:092
2195899281,22cyclictest9408-21chrt20:03:092
2195899281,22cyclictest9408-21chrt20:03:092
2195899281,22cyclictest10806-21chrt21:33:142
2195899281,22cyclictest10806-21chrt21:33:142
2195899281,21cyclictest8575-21chrt22:56:232
2195899281,21cyclictest8575-21chrt22:56:232
21953992824,3cyclictest13546-21tail21:42:491
21953992824,3cyclictest13546-21tail21:42:491
21953992824,3cyclictest13546-21tail21:42:491
21953992822,4cyclictest21951-21cyclictest23:16:241
21953992822,4cyclictest21951-21cyclictest23:16:241
21953992822,4cyclictest0-21swapper/120:42:371
21953992821,5cyclictest20980-21processes23:27:571
21953992821,5cyclictest20980-21processes23:27:571
21953992821,5cyclictest20980-21processes23:27:571
21952992823,3cyclictest0-21swapper/023:42:370
21952992823,3cyclictest0-21swapper/023:42:370
21952992823,3cyclictest0-21swapper/023:42:370
21952992822,5cyclictest22733-21fschecks_count22:07:470
21952992822,5cyclictest22733-21fschecks_count22:07:470
21952992822,4cyclictest29638-21gltestperf19:32:490
21952992822,4cyclictest29638-21gltestperf19:32:490
21952992821,5cyclictest17736-21fschecks_time20:27:490
21952992821,5cyclictest17736-21fschecks_time20:27:490
21952992820,6cyclictest21473-21fschecks_time20:37:500
21952992819,7cyclictest0-21swapper/022:57:490
21964992718,6cyclictest1541-21chrt21:10:483
21964992718,6cyclictest1541-21chrt21:10:483
21964992718,6cyclictest13221-21chrt20:14:203
21964992718,6cyclictest13221-21chrt20:14:203
21964992718,6cyclictest13221-21chrt20:14:203
21964992717,8cyclictest27797-21chrt22:20:103
21964992717,8cyclictest27797-21chrt22:20:103
21964992717,8cyclictest27797-21chrt22:20:103
21964992717,7cyclictest6721-21chrt22:51:303
21964992717,7cyclictest6721-21chrt22:51:303
21964992717,7cyclictest3757-21chrt19:48:193
21964992717,7cyclictest3757-21chrt19:48:193
21964992717,7cyclictest30896-21chrt19:37:293
21964992717,7cyclictest30896-21chrt19:37:293
21964992717,7cyclictest30813-21chrt23:53:213
21964992717,7cyclictest30813-21chrt23:53:213
21964992717,7cyclictest29529-21chrt22:23:123
21964992717,7cyclictest29529-21chrt22:23:123
21964992717,7cyclictest17120-21chrt20:25:133
21964992717,7cyclictest17120-21chrt20:25:133
21964992717,6cyclictest30357-21chrt21:02:323
21964992717,6cyclictest30357-21chrt21:02:323
21964992716,8cyclictest31908-21chrt21:03:123
21964992716,8cyclictest31908-21chrt21:03:123
21964992716,7cyclictest970-21chrt22:35:063
21964992716,7cyclictest970-21chrt22:35:063
21964992716,7cyclictest26075-21chrt22:17:053
21964992716,7cyclictest26075-21chrt22:17:053
21964992716,7cyclictest26075-21chrt22:17:053
21964992716,7cyclictest23446-21chrt23:34:403
21964992716,7cyclictest23446-21chrt23:34:403
21964992716,7cyclictest23446-21chrt23:34:403
21964992716,6cyclictest18437-21chrt21:54:583
21964992716,6cyclictest18437-21chrt21:54:583
21964992716,6cyclictest11626-21chrt00:29:313
21964992715,9cyclictest22356-21chrt22:07:083
2195899271,21cyclictest25494-21taskset20:47:512
2195899271,21cyclictest25494-21taskset20:47:512
2195899271,21cyclictest14001-21chrt23:08:212
2195899271,21cyclictest14001-21chrt23:08:212
2195899271,21cyclictest1245-21chrt00:02:532
2195899271,21cyclictest1245-21chrt00:02:532
2195899271,21cyclictest1245-21chrt00:02:532
2195899271,20cyclictest6601-21chrt22:49:562
2195899271,20cyclictest6601-21chrt22:49:562
21953992723,2cyclictest0-21swapper/123:07:541
21953992723,2cyclictest0-21swapper/123:07:541
21953992722,3cyclictest0-21swapper/121:52:361
21953992722,3cyclictest0-21swapper/121:52:361
21953992721,5cyclictest21035-21latency_hist20:37:361
21953992721,5cyclictest21035-21latency_hist20:37:361
21953992721,3cyclictest0-21swapper/122:22:371
21953992721,3cyclictest0-21swapper/122:22:371
21953992721,3cyclictest0-21swapper/122:22:371
21953992720,5cyclictest15120-21sshd20:18:521
21953992720,5cyclictest15120-21sshd20:18:521
21953992720,5cyclictest0-21swapper/120:57:491
21953992720,5cyclictest0-21swapper/120:57:491
21953992719,6cyclictest23156-21sort23:32:581
21953992719,6cyclictest23156-21sort23:32:581
21953992719,6cyclictest23156-21sort23:32:581
21953992718,7cyclictest25110-21sort22:12:521
21952992721,4cyclictest28518-21latency_hist20:57:360
21952992721,4cyclictest28518-21latency_hist20:57:360
21952992721,4cyclictest21951-21cyclictest19:52:530
21952992721,4cyclictest21951-21cyclictest19:52:530
21952992718,7cyclictest4049-21fschecks_time21:17:490
21952992718,7cyclictest4049-21fschecks_time21:17:490
76402260,4sleep20-21swapper/221:27:472
76402260,4sleep20-21swapper/221:27:472
76402260,4sleep20-21swapper/221:27:472
21964992619,4cyclictest97882sleep322:57:573
21964992619,4cyclictest97882sleep322:57:573
21964992617,6cyclictest20466-21chrt22:02:093
21964992617,6cyclictest1923-21chrt19:43:403
21964992617,6cyclictest1923-21chrt19:43:403
21964992617,6cyclictest15134-21chrt20:19:023
21964992617,6cyclictest15134-21chrt20:19:023
21964992617,5cyclictest26559-21chrt20:51:343
21964992617,5cyclictest26559-21chrt20:51:343
21964992616,7cyclictest25545-21chrt19:22:463
21964992616,6cyclictest9561-21chrt20:05:073
21964992616,6cyclictest9561-21chrt20:05:073
21964992616,6cyclictest9561-21chrt20:05:073
21964992616,6cyclictest7185-21chrt21:24:553
21964992616,6cyclictest7185-21chrt21:24:553
21964992616,6cyclictest7185-21chrt21:24:553
21964992616,6cyclictest3272-21chrt21:13:133
21964992616,5cyclictest16466-21chrt21:48:353
21964992616,5cyclictest16466-21chrt21:48:353
21964992614,9cyclictest22585-21chrt20:38:363
2195899261,22cyclictest4704-21chrt22:44:502
2195899261,22cyclictest4704-21chrt22:44:502
2195899261,22cyclictest4704-21chrt22:44:502
2195899261,21cyclictest22168-21chrt22:04:422
2195899261,21cyclictest22168-21chrt22:04:422
2195899261,21cyclictest11292-21chrt23:02:512
2195899261,21cyclictest11292-21chrt23:02:512
2195899261,21cyclictest11292-21chrt23:02:512
2195899261,20cyclictest7492-21chrt19:58:062
2195899261,20cyclictest7492-21chrt19:58:062
2195899261,20cyclictest30653-21chrt19:34:192
2195899261,20cyclictest30653-21chrt19:34:192
2195899261,20cyclictest27719-21chrt22:19:172
2195899261,20cyclictest27719-21chrt22:19:172
2195899261,20cyclictest27719-21chrt22:19:172
2195899261,20cyclictest24727-21chrt20:46:552
2195899261,20cyclictest24727-21chrt20:46:552
2195899261,20cyclictest24727-21chrt20:46:552
2195899261,20cyclictest21184-21chrt20:37:422
2195899261,20cyclictest21184-21chrt20:37:422
2195899261,20cyclictest16663-21chrt21:51:072
2195899261,20cyclictest16663-21chrt21:51:072
2195899261,20cyclictest153222sleep200:38:472
2195899261,20cyclictest153222sleep200:38:472
2195899261,20cyclictest11857-21chrt21:37:522
2195899261,20cyclictest11857-21chrt21:37:522
2195899261,20cyclictest11857-21chrt21:37:522
2195899261,20cyclictest11857-21chrt21:37:522
2195899261,20cyclictest0-21swapper/219:31:372
2195899261,20cyclictest0-21swapper/219:31:372
21953992622,2cyclictest0-21swapper/120:28:001
21953992622,2cyclictest0-21swapper/120:28:001
21953992621,3cyclictest0-21swapper/121:42:481
21953992621,3cyclictest0-21swapper/121:18:011
21953992621,3cyclictest0-21swapper/121:18:011
21953992621,3cyclictest0-21swapper/120:07:481
21953992621,3cyclictest0-21swapper/120:07:481
21953992620,3cyclictest0-21swapper/119:47:471
21953992618,6cyclictest31280-21needreboot21:02:541
21953992618,6cyclictest31280-21needreboot21:02:541
21953992612,3cyclictest181rcu_preempt19:36:331
21953992612,3cyclictest181rcu_preempt19:36:331
21952992621,3cyclictest30457-21sed22:27:500
21952992621,3cyclictest30457-21sed22:27:500
21952992620,5cyclictest21599-21sshd23:29:540
21952992620,4cyclictest30684-21sed23:53:000
21952992620,4cyclictest30684-21sed23:53:000
21952992620,4cyclictest14277-21head00:37:510
21952992620,4cyclictest14277-21head00:37:510
21952992619,6cyclictest25772-21kworker/u9:3+xprtiod22:22:370
21952992619,6cyclictest25772-21kworker/u9:3+xprtiod22:22:370
21952992619,6cyclictest25772-21kworker/u9:3+xprtiod22:22:370
21952992619,5cyclictest32741-21fschecks_time21:07:500
21952992619,5cyclictest32741-21fschecks_time21:07:500
21952992619,5cyclictest26586-21fschecks_time22:17:490
21952992618,6cyclictest4503-21latency_hist00:12:450
21952992618,6cyclictest4503-21latency_hist00:12:450
21952992617,7cyclictest8946-21rt-features20:02:570
21952992617,7cyclictest8946-21rt-features20:02:570
21952992617,7cyclictest8946-21rt-features20:02:570
21952992617,7cyclictest3489-21fschecks_time22:42:480
21952992617,7cyclictest3489-21fschecks_time22:42:480
21952992617,7cyclictest3489-21fschecks_time22:42:480
219262260,2sleep20-21swapper/220:37:542
144562260,6sleep014334-21latency_hist23:12:430
144562260,6sleep014334-21latency_hist23:12:430
21964992516,6cyclictest8596-21chrt22:56:413
21964992516,6cyclictest8596-21chrt22:56:413
21958992515,7cyclictest12778-21chrt20:12:582
21958992515,7cyclictest12778-21chrt20:12:582
21958992515,7cyclictest12778-21chrt20:12:582
2195899251,20cyclictest30979-21chrt23:55:292
2195899251,20cyclictest30979-21chrt23:55:292
2195899251,20cyclictest27139-21chrt23:43:592
2195899251,20cyclictest27139-21chrt23:43:592
2195899251,20cyclictest19656-21chrt23:23:532
2195899251,20cyclictest19656-21chrt23:23:532
2195899251,20cyclictest19656-21chrt23:23:532
2195899251,20cyclictest13388-21chrt00:33:122
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional