You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2023-09-24 - 03:12
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack0slot2.osadl.org (updated Sun Sep 24, 2023 00:43:35)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2698544991613,3cyclictest0-21swapper/621:52:366
32171652140,0sleep60-21swapper/623:14:566
2698547991313,0cyclictest0-21swapper/723:44:417
2698547991311,1cyclictest3029928-21ssh21:52:357
2698544991313,0cyclictest0-21swapper/623:52:166
269854499130,13cyclictest0-21swapper/621:18:196
269854399132,2cyclictest0-21swapper/521:46:125
269854399130,2cyclictest0-21swapper/519:35:235
269854399130,0cyclictest0-21swapper/520:43:085
2698547991212,0cyclictest0-21swapper/722:50:087
269854799120,11cyclictest1053-21snmpd20:43:307
2698544991212,0cyclictest0-21swapper/600:18:076
269854499120,0cyclictest0-21swapper/621:46:376
269854399120,12cyclictest0-21swapper/500:16:195
269854299120,12cyclictest0-21swapper/421:49:324
2698547991111,0cyclictest0-21swapper/720:49:037
269854799110,10cyclictest1053-21snmpd21:15:557
2698544991111,0cyclictest0-21swapper/622:50:286
269854399112,0cyclictest0-21swapper/522:52:125
2698543991111,0cyclictest0-21swapper/523:46:505
269854399110,1cyclictest0-21swapper/520:00:005
269854399110,0cyclictest0-21swapper/523:51:485
269854399110,0cyclictest0-21swapper/522:17:045
269854299110,11cyclictest0-21swapper/423:51:334
269854299110,11cyclictest0-21swapper/421:53:384
269854299110,11cyclictest0-21swapper/420:47:164
269854799100,9cyclictest2797004-21cat19:59:567
269854799100,9cyclictest1053-21snmpd23:15:407
269854799100,9cyclictest1053-21snmpd22:16:337
269854799100,9cyclictest1053-21snmpd20:06:127
269854799100,9cyclictest1053-21snmpd00:17:247
269854799100,7cyclictest831-21lldpd19:37:117
269854399101,2cyclictest0-21swapper/520:49:165
2698543991010,0cyclictest0-21swapper/521:50:295
2698543991010,0cyclictest0-21swapper/520:05:485
269854399100,0cyclictest0-21swapper/521:19:045
2698542991010,0cyclictest0-21swapper/421:17:514
2698542991010,0cyclictest0-21swapper/420:41:074
2698542991010,0cyclictest0-21swapper/419:36:294
26985479999,0cyclictest0-21swapper/723:52:347
26985449999,0cyclictest0-21swapper/620:03:596
26985449990,9cyclictest0-21swapper/623:47:066
26985449990,9cyclictest0-21swapper/620:45:246
26985449990,9cyclictest0-21swapper/619:35:166
26985449990,8cyclictest0-21swapper/622:14:376
26985439990,2cyclictest0-21swapper/523:15:195
26985429999,0cyclictest0-21swapper/423:45:244
26985429999,0cyclictest0-21swapper/422:51:014
26985479980,2cyclictest2918022-21munin-plugin-st21:04:357
26985449980,8cyclictest0-21swapper/600:24:346
26985449980,8cyclictest0-21swapper/600:24:346
26985449980,5cyclictest0-21swapper/620:42:376
26985479970,6cyclictest26314-21pool-gsd-smartc21:45:267
26985479970,4cyclictest3382767-21systemd-journal00:39:347
26985429977,0cyclictest0-21swapper/420:00:454
26985479960,5cyclictest3123695-21grep22:34:357
26985479960,4cyclictest2767697-21grep19:44:357
26985479960,3cyclictest3342830-21cut00:09:357
26985479960,3cyclictest3319749-40ogrotate23:59:357
26985439960,5cyclictest0-21swapper/523:34:345
26985479951,3cyclictest3389842-21cat00:34:357
26985479950,4cyclictest756-21dbus-daemon23:09:357
26985479950,4cyclictest756-21dbus-daemon21:59:357
26985479950,4cyclictest756-21dbus-daemon21:59:357
26985479950,4cyclictest756-21dbus-daemon20:29:357
26985479950,4cyclictest3369176-21sed00:24:357
26985479950,4cyclictest3369176-21sed00:24:357
26985479950,4cyclictest3354408-21latency_hist00:14:357
26985479950,4cyclictest3331512-21cut00:04:357
26985479950,4cyclictest3285246-21cat23:44:357
26985479950,4cyclictest3262105-21cat23:34:357
26985479950,4cyclictest3250768-21sed23:29:357
26985479950,4cyclictest3239003-21latency_hist23:24:357
26985479950,4cyclictest3239003-21latency_hist23:24:357
26985479950,4cyclictest3215953-21basename23:14:357
26985479950,4cyclictest3193287-21date23:04:357
26985479950,4cyclictest3181554-21date22:59:357
26985479950,4cyclictest3146937-21cat22:44:357
26985479950,4cyclictest3135312-21cat22:39:357
26985479950,4cyclictest3112340-21cat22:29:357
26985479950,4cyclictest3100648-21cat22:24:357
26985479950,4cyclictest3077691-21latency_hist22:14:357
26985479950,4cyclictest3065915-21crond22:09:357
26985479950,4cyclictest3008287-21date21:44:367
26985479950,4cyclictest2996701-21sed21:39:357
26985479950,4cyclictest2985394-21latency_hist21:34:357
26985479950,4cyclictest2962390-21cat21:24:357
26985479950,4cyclictest2962390-21cat21:24:357
26985479950,4cyclictest2939038-21date21:14:357
26985479950,4cyclictest2899308-21cat20:54:357
26985479950,4cyclictest2871072-21date20:39:367
26985479950,4cyclictest2842907-21basename20:24:357
26985479950,4cyclictest2824281-21ls20:14:357
26985479950,4cyclictest2796028-21sed19:59:367
26985479950,4cyclictest2786592-21cat19:54:367
26985479950,4cyclictest2777311-21cut19:49:357
26985479950,4cyclictest2749047-21date19:34:357
26985479950,4cyclictest2730202-21wc19:24:367
26985479950,4cyclictest2721028-21cat19:19:367
26985479950,4cyclictest2708208-21sed19:14:367
26985479950,3cyclictest2927421-21munin-plugin-st21:09:357
26985449950,5cyclictest0-21swapper/623:59:346
26985449950,5cyclictest0-21swapper/623:44:356
26985449950,5cyclictest0-21swapper/623:39:356
26985449950,5cyclictest0-21swapper/623:34:346
26985449950,5cyclictest0-21swapper/623:24:346
26985449950,5cyclictest0-21swapper/623:24:346
26985449950,5cyclictest0-21swapper/623:14:356
26985449950,5cyclictest0-21swapper/623:09:356
26985449950,5cyclictest0-21swapper/623:04:356
26985449950,5cyclictest0-21swapper/622:59:356
26985449950,5cyclictest0-21swapper/622:49:356
26985449950,5cyclictest0-21swapper/622:44:356
26985449950,5cyclictest0-21swapper/622:39:356
26985449950,5cyclictest0-21swapper/622:34:346
26985449950,5cyclictest0-21swapper/622:29:356
26985449950,5cyclictest0-21swapper/622:24:356
26985449950,5cyclictest0-21swapper/622:14:356
26985449950,5cyclictest0-21swapper/622:09:346
26985449950,5cyclictest0-21swapper/622:04:356
26985449950,5cyclictest0-21swapper/621:59:356
26985449950,5cyclictest0-21swapper/621:59:356
26985449950,5cyclictest0-21swapper/621:44:366
26985449950,5cyclictest0-21swapper/621:39:356
26985449950,5cyclictest0-21swapper/621:34:356
26985449950,5cyclictest0-21swapper/621:14:356
26985449950,5cyclictest0-21swapper/621:09:356
26985449950,5cyclictest0-21swapper/621:04:356
26985449950,5cyclictest0-21swapper/620:59:356
26985449950,5cyclictest0-21swapper/620:54:356
26985449950,5cyclictest0-21swapper/620:39:366
26985449950,5cyclictest0-21swapper/620:34:356
26985449950,5cyclictest0-21swapper/620:29:356
26985449950,5cyclictest0-21swapper/620:24:356
26985449950,5cyclictest0-21swapper/620:19:356
26985449950,5cyclictest0-21swapper/620:14:356
26985449950,5cyclictest0-21swapper/620:04:356
26985449950,5cyclictest0-21swapper/619:59:356
26985449950,5cyclictest0-21swapper/619:54:366
26985449950,5cyclictest0-21swapper/619:49:356
26985449950,5cyclictest0-21swapper/619:44:356
26985449950,5cyclictest0-21swapper/619:34:356
26985449950,5cyclictest0-21swapper/619:29:366
26985449950,5cyclictest0-21swapper/619:24:356
26985449950,5cyclictest0-21swapper/619:19:356
26985449950,5cyclictest0-21swapper/619:14:366
26985449950,5cyclictest0-21swapper/619:09:366
26985449950,5cyclictest0-21swapper/600:39:346
26985449950,5cyclictest0-21swapper/600:34:356
26985449950,5cyclictest0-21swapper/600:29:356
26985449950,5cyclictest0-21swapper/600:14:346
26985449950,5cyclictest0-21swapper/600:09:346
26985449950,5cyclictest0-21swapper/600:04:356
26985439950,5cyclictest0-21swapper/521:14:355
26985439950,5cyclictest0-21swapper/500:14:355
26985439950,3cyclictest532-21systemd-journal19:19:355
26985429955,0cyclictest0-21swapper/422:16:584
26985429955,0cyclictest0-21swapper/400:15:034
26985429950,5cyclictest0-21swapper/423:15:244
26985429950,5cyclictest0-21swapper/420:04:394
26985479940,3cyclictest3372246-21wc00:29:357
26985479940,3cyclictest3273548-21sendmail23:39:357
26985479940,3cyclictest3157939-21latency_hist22:49:357
26985479940,3cyclictest3054407-21cut22:04:357
26985479940,3cyclictest2973959-21latency_hist21:29:357
26985479940,3cyclictest2908723-21sendmail20:59:357
26985479940,3cyclictest2861654-21grep20:34:357
26985479940,3cyclictest2833627-21wc20:19:357
26985479940,3cyclictest2739506-21perf19:29:367
26985479940,3cyclictest2698549-21cat19:09:357
26985439940,4cyclictest0-21swapper/523:59:355
26985439940,4cyclictest0-21swapper/523:39:355
26985439940,4cyclictest0-21swapper/523:29:355
26985439940,4cyclictest0-21swapper/523:24:355
26985439940,4cyclictest0-21swapper/523:24:355
26985439940,4cyclictest0-21swapper/522:59:355
26985439940,4cyclictest0-21swapper/522:39:355
26985439940,4cyclictest0-21swapper/522:34:355
26985439940,4cyclictest0-21swapper/522:24:355
26985439940,4cyclictest0-21swapper/522:14:355
26985439940,4cyclictest0-21swapper/522:09:355
26985439940,4cyclictest0-21swapper/521:39:355
26985439940,4cyclictest0-21swapper/521:34:355
26985439940,4cyclictest0-21swapper/521:24:355
26985439940,4cyclictest0-21swapper/521:24:355
26985439940,4cyclictest0-21swapper/521:09:355
26985439940,4cyclictest0-21swapper/521:04:355
26985439940,4cyclictest0-21swapper/520:54:355
26985439940,4cyclictest0-21swapper/520:34:355
26985439940,4cyclictest0-21swapper/520:29:355
26985439940,4cyclictest0-21swapper/520:24:355
26985439940,4cyclictest0-21swapper/520:19:355
26985439940,4cyclictest0-21swapper/519:44:355
26985439940,4cyclictest0-21swapper/519:34:355
26985439940,4cyclictest0-21swapper/519:14:365
26985439940,4cyclictest0-21swapper/519:09:365
26985439940,4cyclictest0-21swapper/500:39:355
26985439940,4cyclictest0-21swapper/500:29:365
26985439940,4cyclictest0-21swapper/500:09:345
26985439940,4cyclictest0-21swapper/500:04:355
26985439940,2cyclictest0-21swapper/521:59:355
26985439940,2cyclictest0-21swapper/521:59:355
26985449930,0cyclictest0-21swapper/621:24:356
26985449930,0cyclictest0-21swapper/621:24:356
26985439930,3cyclictest0-21swapper/523:44:355
26985439930,3cyclictest0-21swapper/523:14:355
26985439930,3cyclictest0-21swapper/523:09:345
26985439930,3cyclictest0-21swapper/523:04:355
26985439930,3cyclictest0-21swapper/522:44:355
26985439930,3cyclictest0-21swapper/522:29:355
26985439930,3cyclictest0-21swapper/522:04:355
26985439930,3cyclictest0-21swapper/521:44:365
26985439930,3cyclictest0-21swapper/520:59:355
26985439930,3cyclictest0-21swapper/520:39:365
26985439930,3cyclictest0-21swapper/520:14:355
26985439930,3cyclictest0-21swapper/519:59:355
26985439930,3cyclictest0-21swapper/519:49:355
26985439930,3cyclictest0-21swapper/519:29:365
26985439930,3cyclictest0-21swapper/519:24:365
26985439930,3cyclictest0-21swapper/500:34:355
26985439930,3cyclictest0-21swapper/500:24:355
26985439930,3cyclictest0-21swapper/500:24:355
26985429930,1cyclictest0-21swapper/423:09:354
26985429930,1cyclictest0-21swapper/422:09:354
26985429930,1cyclictest0-21swapper/421:14:354
26985429930,1cyclictest0-21swapper/400:09:354
26985439920,2cyclictest0-21swapper/519:54:365
26985429921,1cyclictest447-21jbd2/sda3-822:59:354
26985429921,1cyclictest3353847-21kworker/u16:300:14:354
26985429921,1cyclictest2795816-21turbostat19:59:354
26985429920,1cyclictest3077488-21turbostat22:14:354
26985429920,1cyclictest2852241-21turbostat20:29:354
26985429920,1cyclictest0-21swapper/423:59:354
26985429920,1cyclictest0-21swapper/421:04:354
26985449910,1cyclictest0-21swapper/623:29:356
26985449910,1cyclictest0-21swapper/621:29:356
26985439910,1cyclictest0-21swapper/522:49:355
26985439910,1cyclictest0-21swapper/521:29:355
26985429910,1cyclictest72-21rcuop/723:44:354
26985429910,1cyclictest72-21rcuop/723:29:354
26985429910,1cyclictest72-21rcuop/722:44:354
26985429910,1cyclictest72-21rcuop/722:29:354
26985429910,1cyclictest72-21rcuop/719:09:364
26985429910,1cyclictest72-21rcuop/700:24:344
26985429910,1cyclictest72-21rcuop/700:24:344
26985429910,1cyclictest72-21rcuop/700:04:354
26985429910,1cyclictest447-21jbd2/sda3-822:49:354
26985429910,1cyclictest447-21jbd2/sda3-822:04:354
26985429910,1cyclictest3400575-21turbostat00:39:344
26985429910,1cyclictest3226502-21kworker/4:023:24:344
26985429910,1cyclictest3226502-21kworker/4:023:24:344
26985429910,1cyclictest3076068-21kworker/4:022:24:354
26985429910,1cyclictest2871022-21kworker/4:320:59:354
26985429910,1cyclictest2871022-21kworker/4:320:54:354
26985429910,1cyclictest2795319-21kworker/u16:020:19:354
26985429910,1cyclictest2707805-21kworker/4:319:54:364
26985429910,1cyclictest2707805-21kworker/4:319:14:364
26985429910,1cyclictest0-21swapper/423:39:354
26985429910,1cyclictest0-21swapper/423:34:344
26985429910,1cyclictest0-21swapper/423:14:354
26985429910,1cyclictest0-21swapper/422:39:354
26985429910,1cyclictest0-21swapper/422:34:344
26985429910,1cyclictest0-21swapper/421:59:354
26985429910,1cyclictest0-21swapper/421:59:354
26985429910,1cyclictest0-21swapper/421:44:364
26985429910,1cyclictest0-21swapper/421:39:354
26985429910,1cyclictest0-21swapper/421:34:354
26985429910,1cyclictest0-21swapper/421:24:354
26985429910,1cyclictest0-21swapper/421:24:354
26985429910,1cyclictest0-21swapper/421:09:354
26985429910,1cyclictest0-21swapper/420:39:364
26985429910,1cyclictest0-21swapper/420:34:354
26985429910,1cyclictest0-21swapper/420:24:354
26985429910,1cyclictest0-21swapper/419:49:354
26985429910,1cyclictest0-21swapper/419:44:354
26985429910,1cyclictest0-21swapper/419:29:364
26985429910,1cyclictest0-21swapper/419:24:354
26985429910,1cyclictest0-21swapper/419:19:354
26985429910,1cyclictest0-21swapper/400:29:354
26985429900,0cyclictest0-21swapper/423:04:354
26985429900,0cyclictest0-21swapper/421:29:354
26985429900,0cyclictest0-21swapper/420:14:354
26985429900,0cyclictest0-21swapper/419:34:354
26985429900,0cyclictest0-21swapper/400:34:354
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional