You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2022-12-02 - 17:14

x86 Intel Xeon E5-2650Lv2 @1700 MHz, Linux 4.18.7-rt5 (Profile)

Latency plot of system in rack #6, slot #0
Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Command line: cyclictest -l100000000 -m -Up99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the 376 highest latencies:
System rack6slot0.osadl.org (updated Thu Oct 27, 2022 14:46:36)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2686299272241,20cyclictest37732-21sh09:50:4331
2686299272241,20cyclictest37732-21sh09:50:4331
2686299259237,16cyclictest0-21swapper/3711:25:2731
2686299259237,16cyclictest0-21swapper/3711:25:2731
2686299259237,16cyclictest0-21swapper/3711:25:2631
2686299258244,10cyclictest14500-21run-parts11:43:4631
2686299258244,10cyclictest14500-21run-parts11:43:4531
2686299250238,6cyclictest0-21swapper/3711:34:2731
2686299250238,6cyclictest0-21swapper/3711:34:2731
2686299248231,11cyclictest32141-21systemd-cgroups10:45:3731
2686299248231,11cyclictest32141-21systemd-cgroups10:45:3631
2686299243229,8cyclictest19426-21CPU31
2686299243229,8cyclictest19426-21CPU31
2686299243225,10cyclictest138450irq/36-eno1-TxR10:33:5331
2686299243225,10cyclictest138450irq/36-eno1-TxR10:33:5331
2686299242229,9cyclictest19425-21CPU31
2686299242229,9cyclictest19425-21CPU31
2686299241229,7cyclictest1354-21ModemManager10:53:3231
2686299241229,7cyclictest1354-21ModemManager10:53:3231
2686299241229,7cyclictest0-21swapper/3710:10:1131
2686299241229,7cyclictest0-21swapper/3710:10:1031
2686299241226,11cyclictest0-21swapper/3710:00:2731
2686299241226,11cyclictest0-21swapper/3710:00:2731
2686299240231,6cyclictest12253-21sshd10:40:4431
2686299240231,6cyclictest12253-21sshd10:40:4331
2686299240230,7cyclictest35767-21sshd11:12:1131
2686299240230,7cyclictest35767-21sshd11:12:1131
2686299240226,8cyclictest19429-21CPU31
2686299240226,8cyclictest19429-21CPU31
2686299238230,6cyclictest31956-21sshd10:26:1231
2686299238230,6cyclictest31956-21sshd10:26:1131
2686299237224,8cyclictest19428-21CPU31
2686299237224,8cyclictest19428-21CPU31
2686299236225,7cyclictest0-21swapper/3712:20:0131
2686299236225,7cyclictest0-21swapper/3712:20:0031
2686299235228,4cyclictest10482-21sshd12:32:2531
2686299235228,4cyclictest10482-21sshd12:32:2531
2686299235226,6cyclictest5963-21latency_hist07:35:0331
2686299235226,6cyclictest5963-21latency_hist07:35:0231
2686299235226,6cyclictest12682-21gdbus11:45:0931
2686299235226,6cyclictest12682-21gdbus11:45:0831
2686299235226,6cyclictest0-21swapper/3712:03:3531
2686299235226,6cyclictest0-21swapper/3712:03:3531
2686299235225,7cyclictest4292-21qemu-system-x8609:46:3131
2686299235225,7cyclictest4292-21qemu-system-x8609:46:3031
2686299235225,7cyclictest0-21swapper/3710:55:4231
2686299235225,7cyclictest0-21swapper/3710:55:4131
2686299235225,6cyclictest0-21swapper/3709:30:3331
2686299235225,6cyclictest0-21swapper/3709:30:3331
2686299234225,6cyclictest0-21swapper/3712:07:2331
2686299234225,6cyclictest0-21swapper/3712:07:2331
2686299234224,7cyclictest0-21swapper/3709:28:5331
2686299234224,7cyclictest0-21swapper/3709:28:5231
2686299234220,11cyclictest0-21swapper/3710:07:3131
2686299234220,11cyclictest0-21swapper/3710:07:3131
2686299234220,11cyclictest0-21swapper/3710:07:3131
2686299234220,10cyclictest0-21swapper/3709:11:2431
2686299234220,10cyclictest0-21swapper/3709:11:2431
2686299233225,6cyclictest0-21swapper/3710:36:4131
2686299233225,6cyclictest0-21swapper/3710:36:4031
2686299233224,4cyclictest19426-21CPU31
2686299233224,4cyclictest19426-21CPU31
2686299232221,6cyclictest4296-21CPU31
2686299232221,6cyclictest4296-21CPU31
2686299231224,5cyclictest0-21swapper/3712:25:2131
2686299231224,5cyclictest0-21swapper/3712:25:2131
2686299231224,5cyclictest0-21swapper/3707:50:2731
2686299231224,5cyclictest0-21swapper/3707:50:2631
2686299231222,6cyclictest12649-21sshd09:15:5231
2686299231222,6cyclictest12649-21sshd09:15:5131
2686299231222,5cyclictest0-21swapper/3708:32:5931
2686299231222,5cyclictest0-21swapper/3708:32:5931
2686299231220,6cyclictest19430-21CPU31
2686299231220,6cyclictest19430-21CPU31
2686299231218,8cyclictest26418-21gdbus11:16:2431
2686299231218,8cyclictest26418-21gdbus11:16:2431
2686299230223,5cyclictest0-21swapper/3711:04:2731
2686299230223,5cyclictest0-21swapper/3711:04:2731
2686299230222,5cyclictest0-21swapper/3711:35:5431
2686299230222,5cyclictest0-21swapper/3711:35:5331
2686299230221,6cyclictest0-21swapper/3710:20:0531
2686299230221,6cyclictest0-21swapper/3710:20:0531
2686299230220,6cyclictest0-21swapper/3712:20:4831
2686299230220,6cyclictest0-21swapper/3712:20:4831
2686299230213,11cyclictest0-21swapper/3711:50:2031
2686299230213,11cyclictest0-21swapper/3711:50:1931
2686299229214,9cyclictest0-21swapper/3710:23:2431
2686299229214,9cyclictest0-21swapper/3710:23:2331
2686299229213,9cyclictest0-21swapper/3711:09:5031
2686299229213,9cyclictest0-21swapper/3711:09:4931
2686299229213,9cyclictest0-21swapper/3711:09:4931
2686299228221,3cyclictest19424-21CPU31
2686299228221,3cyclictest19424-21CPU31
2686299228220,4cyclictest19430-21CPU31
2686299228220,4cyclictest19430-21CPU31
2686299228218,6cyclictest4296-21CPU31
2686299228218,6cyclictest4296-21CPU31
2686299227221,4cyclictest0-21swapper/3708:55:0331
2686299227221,4cyclictest0-21swapper/3708:55:0231
2686299227217,7cyclictest0-21swapper/3708:05:2331
2686299226217,5cyclictest19429-21CPU31
2686299226217,5cyclictest19429-21CPU31
2686299226216,7cyclictest0-21swapper/3708:20:2431
2686299226216,7cyclictest0-21swapper/3708:20:2431
2686299225219,4cyclictest0-21swapper/3709:01:5731
2686299225219,4cyclictest0-21swapper/3709:01:5631
2686299225219,4cyclictest0-21swapper/3708:40:0631
2686299225219,4cyclictest0-21swapper/3708:29:4431
2686299225219,4cyclictest0-21swapper/3708:29:4331
2686299225216,6cyclictest0-21swapper/3707:40:0431
2686299225216,6cyclictest0-21swapper/3707:40:0431
2686299225216,5cyclictest4300-21CPU31
2686299224217,4cyclictest0-21swapper/3708:57:3731
2686299224217,4cyclictest0-21swapper/3708:57:3631
2686299223215,5cyclictest19419-21qemu-system-x8608:38:0231
2686299223215,5cyclictest19419-21qemu-system-x8608:38:0131
2686299223207,9cyclictest4193-21qemu-system-x8608:49:5231
2686299222216,4cyclictest0-21swapper/3707:25:0231
2686299221215,4cyclictest0-21swapper/3707:59:2431
2686299221215,4cyclictest0-21swapper/3707:40:0531
2686299221215,4cyclictest0-21swapper/3707:40:0531
2686299220213,5cyclictest0-21swapper/3708:15:0531
2686299220213,5cyclictest0-21swapper/3708:15:0531
2686299220211,5cyclictest19426-21CPU31
2686299220211,5cyclictest19426-21CPU31
2685399220213,3cyclictest4297-21CPU24
2685399220213,3cyclictest4297-21CPU24
26864992180,123cyclictest0-21swapper/3812:04:4332
26864992180,123cyclictest0-21swapper/3812:04:4332
26861992170,2cyclictest0-21swapper/3607:15:2630
26861992121,208cyclictest0-21swapper/3610:23:3830
26861992121,208cyclictest0-21swapper/3610:23:3730
2683099209205,2cyclictest0-21swapper/1208:00:164
26861992061,199cyclictest0-21swapper/3610:16:2130
26861992061,199cyclictest0-21swapper/3610:16:2130
26864992050,107cyclictest0-21swapper/3811:28:0532
26864992050,107cyclictest0-21swapper/3811:28:0432
26864992050,107cyclictest0-21swapper/3811:28:0432
26861992051,86cyclictest0-21swapper/3610:50:0430
26861992051,86cyclictest0-21swapper/3610:50:0430
26861992051,2cyclictest0-21swapper/3609:50:2430
26861992051,2cyclictest0-21swapper/3609:50:2430
2683099204197,4cyclictest19429-21CPU4
2683099204197,4cyclictest19429-21CPU4
26864992020,199cyclictest0-21swapper/3812:15:2132
26864992020,199cyclictest0-21swapper/3812:15:2032
26864992011,197cyclictest0-21swapper/3807:55:1732
26864992010,142cyclictest0-21swapper/3812:39:2332
26864992010,142cyclictest0-21swapper/3812:39:2332
26864992000,124cyclictest0-21swapper/3809:37:3532
26864992000,124cyclictest0-21swapper/3809:37:3432
26861991991,126cyclictest0-21swapper/3611:44:3630
26861991991,126cyclictest0-21swapper/3611:44:3530
26829991991,3cyclictest0-21swapper/1110:40:333
26829991991,3cyclictest0-21swapper/1110:40:323
26864991980,196cyclictest0-21swapper/3808:20:0532
26864991980,165cyclictest0-21swapper/3812:05:3232
26864991980,165cyclictest0-21swapper/3812:05:3232
26864991980,120cyclictest0-21swapper/3808:54:5832
26864991980,120cyclictest0-21swapper/3808:54:5732
26861991981,2cyclictest0-21swapper/3611:35:0830
26861991981,2cyclictest0-21swapper/3611:35:0730
26829991981,3cyclictest0-21swapper/1109:24:513
26829991981,3cyclictest0-21swapper/1109:24:513
26829991981,162cyclictest13226-21sshd10:15:073
26829991981,162cyclictest13226-21sshd10:15:063
26864991971,192cyclictest0-21swapper/3810:20:0132
26864991971,192cyclictest0-21swapper/3810:20:0132
268619919781,90cyclictest1819-21sshd11:34:2130
268619919781,90cyclictest1819-21sshd11:34:2130
26861991971,123cyclictest0-21swapper/3611:45:1830
26861991971,123cyclictest0-21swapper/3611:45:1830
26864991960,194cyclictest0-21swapper/3808:05:2132
26864991960,193cyclictest0-21swapper/3811:36:1032
26864991960,193cyclictest0-21swapper/3811:36:1032
26829991961,3cyclictest0-21swapper/1110:45:173
26829991961,3cyclictest0-21swapper/1110:45:173
26864991951,191cyclictest0-21swapper/3812:20:5732
26864991951,191cyclictest0-21swapper/3812:20:5732
26864991950,173cyclictest0-21swapper/3810:05:3132
26864991950,173cyclictest0-21swapper/3810:05:3032
26864991950,173cyclictest0-21swapper/3810:05:3032
26861991952,165cyclictest4303-21CPU30
26861991952,165cyclictest4303-21CPU30
26861991951,191cyclictest0-21swapper/3612:30:2630
26861991951,191cyclictest0-21swapper/3612:30:2530
26861991951,191cyclictest0-21swapper/3612:15:1930
26861991951,191cyclictest0-21swapper/3612:15:1830
2685799195191,2cyclictest0-21swapper/3211:40:3126
2685799195191,2cyclictest0-21swapper/3211:40:3126
26864991940,192cyclictest0-21swapper/3810:14:4032
26864991940,192cyclictest0-21swapper/3810:14:3932
26864991940,122cyclictest0-21swapper/3810:21:1732
26864991940,122cyclictest0-21swapper/3810:21:1632
26861991941,190cyclictest0-21swapper/3610:00:2730
26861991941,190cyclictest0-21swapper/3610:00:2730
26861991941,188cyclictest0-21swapper/3610:55:2530
26861991941,188cyclictest0-21swapper/3610:55:2430
26861991941,186cyclictest0-21swapper/3610:10:0130
26861991941,186cyclictest0-21swapper/3610:10:0130
26861991941,186cyclictest0-21swapper/3610:10:0030
26864991930,190cyclictest0-21swapper/3810:39:3432
26864991930,190cyclictest0-21swapper/3810:39:3332
26861991930,2cyclictest0-21swapper/3610:26:2430
26861991930,2cyclictest0-21swapper/3610:26:2330
26864991921,103cyclictest19423-21CPU32
26864991921,103cyclictest19423-21CPU32
26864991920,186cyclictest0-21swapper/3810:00:2032
26864991920,186cyclictest0-21swapper/3810:00:2032
26829991924,136cyclictest0-21swapper/1109:55:123
26829991924,136cyclictest0-21swapper/1109:55:123
26864991911,187cyclictest19425-21CPU32
26864991911,187cyclictest19425-21CPU32
26864991911,148cyclictest1354-21ModemManager09:19:0132
26864991911,148cyclictest1354-21ModemManager09:19:0032
26864991910,189cyclictest0-21swapper/3807:35:2232
26864991910,189cyclictest0-21swapper/3807:35:2132
26864991910,121cyclictest0-21swapper/3811:44:5532
26864991910,121cyclictest0-21swapper/3811:44:5432
26861991914,180cyclictest19426-21CPU30
26861991914,180cyclictest19426-21CPU30
26864991901,148cyclictest0-21swapper/3811:17:0232
26864991901,148cyclictest0-21swapper/3811:17:0232
26864991900,187cyclictest0-21swapper/3809:34:2332
26864991900,187cyclictest0-21swapper/3809:34:2232
26861991900,1cyclictest0-21swapper/3608:02:4430
26829991901,3cyclictest0-21swapper/1110:05:313
26829991901,3cyclictest0-21swapper/1110:05:303
26829991901,3cyclictest0-21swapper/1110:05:303
26829991901,2cyclictest0-21swapper/1109:36:483
26829991901,2cyclictest0-21swapper/1109:36:483
26864991890,187cyclictest0-21swapper/3812:28:0532
26864991890,187cyclictest0-21swapper/3812:28:0532
26864991880,151cyclictest0-21swapper/3809:26:1532
26864991880,151cyclictest0-21swapper/3809:26:1432
26864991880,126cyclictest0-21swapper/3811:45:2732
26864991880,126cyclictest0-21swapper/3811:45:2632
26861991881,4cyclictest22870-21sshd09:10:1730
26861991881,4cyclictest22870-21sshd09:10:1630
26861991881,2cyclictest0-21swapper/3608:05:3730
2683299188176,4cyclictest0-21swapper/1411:39:276
2683299188176,4cyclictest0-21swapper/1411:39:266
26864991871,116cyclictest0-21swapper/3809:45:2132
26864991871,116cyclictest0-21swapper/3809:45:2132
26864991870,149cyclictest0-21swapper/3808:25:0432
26864991870,149cyclictest0-21swapper/3808:25:0332
26829991871,3cyclictest0-21swapper/1111:40:223
26829991871,3cyclictest0-21swapper/1111:40:213
26829991871,2cyclictest0-21swapper/1110:11:503
26829991871,2cyclictest0-21swapper/1110:11:493
26864991861,178cyclictest0-21swapper/3812:10:4332
26864991861,178cyclictest0-21swapper/3812:10:4232
26864991861,177cyclictest0-21swapper/3810:55:1432
26864991861,177cyclictest0-21swapper/3810:55:1432
26864991860,184cyclictest0-21swapper/3812:30:2332
26864991860,184cyclictest0-21swapper/3812:30:2232
26864991860,183cyclictest0-21swapper/3811:56:3332
26864991860,183cyclictest0-21swapper/3811:56:3332
26864991860,183cyclictest0-21swapper/3809:52:4932
26864991860,183cyclictest0-21swapper/3809:52:4932
26864991860,148cyclictest0-21swapper/3811:06:5632
26864991860,148cyclictest0-21swapper/3811:06:5632
26864991860,148cyclictest0-21swapper/3811:06:5532
26864991860,134cyclictest0-21swapper/3810:25:3232
26864991860,134cyclictest0-21swapper/3810:25:3232
26861991861,2cyclictest0-21swapper/3607:55:3430
26861991861,179cyclictest0-21swapper/3608:49:4130
1167121860,3sleep162683499cyclictest10:57:008
1167121860,3sleep162683499cyclictest10:56:598
26864991851,182cyclictest0-21swapper/3809:55:2432
26864991851,182cyclictest0-21swapper/3809:55:2432
26864991851,179cyclictest0-21swapper/3809:40:2232
26864991851,179cyclictest0-21swapper/3809:40:2232
26864991850,182cyclictest0-21swapper/3811:03:2932
26864991850,182cyclictest0-21swapper/3811:03:2932
26861991851,148cyclictest0-21swapper/3611:11:4430
26861991851,148cyclictest0-21swapper/3611:11:4430
26864991841,180cyclictest0-21swapper/3811:31:5432
26864991841,180cyclictest0-21swapper/3811:31:5332
26864991840,181cyclictest0-21swapper/3811:14:0132
26864991840,181cyclictest0-21swapper/3811:14:0132
26829991842,4cyclictest19425-21CPU3
26829991842,4cyclictest19425-21CPU3
26829991841,4cyclictest753-21systemd-journal11:59:443
26829991841,4cyclictest753-21systemd-journal11:59:443
26829991841,3cyclictest4296-21CPU3
26829991841,3cyclictest4296-21CPU3
26829991841,3cyclictest0-21swapper/1112:01:493
26829991841,3cyclictest0-21swapper/1112:01:493
26829991841,180cyclictest3701-21sshd11:49:323
26829991841,180cyclictest3701-21sshd11:49:313
26864991831,176cyclictest0-21swapper/3810:50:0432
26864991831,176cyclictest0-21swapper/3810:50:0332
26864991831,159cyclictest0-21swapper/3807:12:4332
26864991831,159cyclictest0-21swapper/3807:12:4232
26864991830,180cyclictest0-21swapper/3810:44:3432
26864991830,180cyclictest0-21swapper/3810:44:3332
26861991831,156cyclictest0-21swapper/3611:19:4130
26861991831,156cyclictest0-21swapper/3611:19:4130
26833991833,177cyclictest5171-21sshd11:59:247
26833991833,177cyclictest5171-21sshd11:59:237
26864991820,179cyclictest0-21swapper/3811:21:2832
26864991820,179cyclictest0-21swapper/3811:21:2832
26864991820,177cyclictest0-21swapper/3809:20:4032
26864991820,177cyclictest0-21swapper/3809:20:4032
26864991820,153cyclictest0-21swapper/3807:30:2632
26864991820,153cyclictest0-21swapper/3807:30:2632
26861991821,178cyclictest0-21swapper/3607:55:0230
26861991821,178cyclictest0-21swapper/3607:55:0130
26861991821,176cyclictest0-21swapper/3609:19:3930
26861991821,176cyclictest0-21swapper/3609:19:3930
26861991821,146cyclictest0-21swapper/3609:58:0230
26861991821,146cyclictest0-21swapper/3609:58:0230
268339918283,91cyclictest0-21swapper/1509:55:177
268339918283,91cyclictest0-21swapper/1509:55:177
268339918245,131cyclictest0-21swapper/1511:45:227
268339918245,131cyclictest0-21swapper/1511:45:227
2683299182178,2cyclictest0-21swapper/1410:57:536
2683299182178,2cyclictest0-21swapper/1410:57:526
26829991822,4cyclictest19430-21CPU3
26829991822,4cyclictest19430-21CPU3
1206021820,4sleep332685899cyclictest09:42:1127
1206021820,4sleep332685899cyclictest09:42:1027
26864991810,176cyclictest0-21swapper/3811:51:4632
26864991810,176cyclictest0-21swapper/3811:51:4632
26864991810,175cyclictest0-21swapper/3809:10:1932
26864991810,175cyclictest0-21swapper/3809:10:1932
26861991811,111cyclictest0-21swapper/3611:08:4830
26861991811,111cyclictest0-21swapper/3611:08:4830
26861991811,111cyclictest0-21swapper/3611:08:4830
2684299181177,2cyclictest0-21swapper/2107:25:3214
2684299181177,2cyclictest0-21swapper/2107:25:3114
2683899181173,4cyclictest0-21swapper/1910:10:2911
2683899181173,4cyclictest0-21swapper/1910:10:2811
268339918148,56cyclictest1865-21nfsd10:25:017
268339918148,56cyclictest1865-21nfsd10:25:007
26829991811,5cyclictest10094-21uname10:01:343
26829991811,5cyclictest10094-21uname10:01:343
26829991811,3cyclictest0-21swapper/1112:12:203
26829991811,3cyclictest0-21swapper/1112:12:193
26864991801,174cyclictest0-21swapper/3808:45:1132
26864991800,177cyclictest0-21swapper/3810:32:3532
26864991800,177cyclictest0-21swapper/3810:32:3532
2685799180176,2cyclictest0-21swapper/3212:30:3026
2685799180176,2cyclictest0-21swapper/3212:30:2926
268339918044,61cyclictest0-21swapper/1511:35:167
268339918044,61cyclictest0-21swapper/1511:35:167
26864991790,174cyclictest0-21swapper/3809:09:0632
26864991790,174cyclictest0-21swapper/3809:09:0532
26861991791,152cyclictest0-21swapper/3607:20:2530
26861991791,149cyclictest0-21swapper/3611:23:5230
26861991791,149cyclictest0-21swapper/3611:23:5230
26861991790,2cyclictest0-21swapper/3607:10:3530
26861991790,2cyclictest0-21swapper/3607:10:3430
2684099179170,5cyclictest19325-21CPU13
2684099179170,5cyclictest19325-21CPU13
26829991792,4cyclictest9570-21CPU3
26829991792,4cyclictest9570-21CPU3
26829991792,4cyclictest4300-21CPU3
26829991792,4cyclictest4300-21CPU3
26864991780,175cyclictest0-21swapper/3808:00:1632
26861991783,171cyclictest4292-21qemu-system-x8608:24:4730
26861991783,171cyclictest4292-21qemu-system-x8608:24:4630
26861991781,3cyclictest1819-21sshd12:21:0530
26861991781,3cyclictest1819-21sshd12:21:0430
26861991781,151cyclictest0-21swapper/3612:01:1330
26861991781,151cyclictest0-21swapper/3612:01:1330
26861991781,131cyclictest0-21swapper/3610:34:2330
26861991781,131cyclictest0-21swapper/3610:34:2330
268339917838,36cyclictest0-21swapper/1509:40:177
268339917838,36cyclictest0-21swapper/1509:40:167
26829991781,3cyclictest0-21swapper/1112:30:313
26829991781,3cyclictest0-21swapper/1112:30:313
26816991780,174cyclictest20887-21sshd09:36:171
26816991780,174cyclictest20887-21sshd09:36:161
456421770,4sleep322685799cyclictest09:12:0026
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional