You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-29 - 14:01
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack2slot7.osadl.org (updated Sat Nov 29, 2025 12:43:24)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
60120899475,11cyclictest0-21swapper/210:16:052
60120699455,23cyclictest739224-21ssh11:14:390
60120699454,37cyclictest151ktimers/012:31:120
60120699401,7cyclictest0-21swapper/007:16:040
601206993814,4cyclictest11050irq/107-eth%d12:23:110
60120699380,36cyclictest731867-21sendmail-msp11:10:330
60120899379,22cyclictest967-21snmpd07:56:372
60120699372,4cyclictest0-21swapper/010:23:040
60120699361,30cyclictest0-21swapper/012:08:120
601206993422,9cyclictest703468-21cat10:31:040
60120699341,29cyclictest0-21swapper/010:07:570
60120699340,7cyclictest712663-21aten_r2power_en10:43:020
60120899331,10cyclictest171rcu_preempt12:08:122
60120799333,15cyclictest1008-21mta-sts-daemon12:31:051
60120699332,22cyclictest648004-21grep09:23:040
601207993223,6cyclictest1008-21mta-sts-daemon10:03:081
60120699324,21cyclictest687224-21ssh10:11:390
601206993122,3cyclictest0-21swapper/009:15:070
601208992914,7cyclictest111788-21systemd-journal11:08:102
601207992912,13cyclictest111788-21systemd-journal08:32:221
60120699291,26cyclictest720901-21/usr/sbin/munin10:53:110
601207992819,5cyclictest0-21swapper/112:15:051
601207992819,5cyclictest0-21swapper/112:15:051
601206992819,7cyclictest0-21swapper/009:28:140
601207992719,5cyclictest731867-21sendmail-msp11:14:391
60120899266,5cyclictest0-21swapper/208:33:092
60120799263,18cyclictest764878-21sendmail-msp11:48:181
60120699263,5cyclictest770453-21tune2fs11:53:040
60120699263,5cyclictest770453-21tune2fs11:53:040
60120899253,12cyclictest654416-21latency_hist09:31:062
60120799256,16cyclictest742019-21ntpq11:18:101
60120799253,13cyclictest816435-21ssh12:41:051
601207992510,10cyclictest1006-21mta-sts-daemon11:51:471
601207992510,10cyclictest1006-21mta-sts-daemon11:51:471
60120699254,16cyclictest767069-21ntpq11:48:180
60120699252,13cyclictest748502-21apt-config11:26:050
601206992521,3cyclictest0-21swapper/012:38:080
601206992520,4cyclictest725418-21gltestperf10:58:050
601206992515,1cyclictest0-21swapper/010:02:070
60120699250,20cyclictest618380-21sendmail-msp08:08:130
60120899246,6cyclictest11050irq/107-eth%d09:38:092
60120899243,3cyclictest171rcu_preempt10:09:502
60120799245,15cyclictest111788-21systemd-journal10:13:471
601207992412,8cyclictest611562-21apt-key07:46:051
60120699243,19cyclictest650258-21sendmail-msp09:35:270
60120699243,16cyclictest781994-21sendmail-msp12:13:120
60120699243,16cyclictest781994-21sendmail-msp12:13:120
60120699242,15cyclictest0-21swapper/009:43:390
60120899235,15cyclictest676236-21ntpq09:58:122
60120899232,15cyclictest762-21in:imuxsock12:13:122
60120899232,15cyclictest762-21in:imuxsock12:13:122
60120799236,14cyclictest967-21snmpd09:33:161
60120799235,13cyclictest699112-21sendmail-msp10:30:141
60120799234,12cyclictest111788-21systemd-journal09:26:181
60120799233,16cyclictest649392-21diskmemload09:24:221
60120799233,15cyclictest715609-21sendmail-msp10:46:241
601207992312,9cyclictest800926-21sendmail-msp12:31:081
60120699233,14cyclictest616215-21/usr/sbin/munin07:58:090
60120699232,15cyclictest791962-21diskmemload12:16:090
601206992312,3cyclictest0-21swapper/012:30:210
60120899225,13cyclictest712603-21/usr/sbin/munin10:43:042
60120899223,6cyclictest696511-21df10:23:042
60120899223,6cyclictest171rcu_preempt11:26:492
60120899222,13cyclictest611097-21sendmail-msp07:51:072
60120799223,15cyclictest111788-21systemd-journal12:16:091
60120699220,21cyclictest709069-21grep10:38:070
60120899214,14cyclictest967-21snmpd10:32:092
601208992117,3cyclictest813060-21fschecks_time12:38:042
601208992116,4cyclictest793553-21gltestperf12:18:052
601208992115,4cyclictest671132-21aten_r2power_cu09:53:022
601208992112,7cyclictest622046-21apt-config08:16:052
60120799212,11cyclictest111788-21systemd-journal07:54:321
60120699212,5cyclictest0-21swapper/007:46:090
60120699212,15cyclictest628010-21ntpq08:33:090
601206992114,4cyclictest0-21swapper/011:43:100
60120699210,3cyclictest111788-21systemd-journal11:26:050
60120899209,2cyclictest11050irq/107-eth%d11:06:042
60120899203,3cyclictest11050irq/107-eth%d10:11:392
60120899203,16cyclictest633051-21/usr/sbin/munin08:48:172
60120799206,11cyclictest748023-21sendmail-msp11:27:481
60120799204,13cyclictest641277-21ntpq09:13:111
60120799203,15cyclictest11050irq/107-eth%d08:48:171
60120799203,13cyclictest1005-21mta-sts-daemon07:16:041
60120799203,12cyclictest663418-21/usr/sbin/munin09:43:021
60120799203,12cyclictest625331-21sendmail-msp08:30:451
60120799202,13cyclictest746202-21/usr/sbin/munin11:23:141
60120799202,12cyclictest122792-21ntpd11:38:091
601206992010,5cyclictest762-21in:imuxsock07:51:070
112699200,2rtkit-daemon0-21swapper/207:13:582
60120999193,7cyclictest0-21swapper/308:33:093
60120899199,8cyclictest351ktimers/210:28:122
60120899197,8cyclictest0-21swapper/211:36:002
60120799194,13cyclictest654949-1kworker/1:1H+kblockd11:06:061
60120799192,9cyclictest705326-21sh10:33:091
601207991912,6cyclictest654949-1kworker/1:1H-kblockd09:55:551
601207991911,5cyclictest0-21swapper/111:58:081
601206991916,2cyclictest0-21swapper/010:18:090
601206991915,3cyclictest741755-21sh11:18:070
601206991911,5cyclictest0-21swapper/008:27:010
112699190,1rtkit-daemon0-21swapper/211:22:342
60120899185,5cyclictest716834-21/usr/sbin/munin10:48:132
60120899185,11cyclictest664090-21ntpq09:43:072
60120899183,12cyclictest1008-21mta-sts-daemon10:52:312
60120899182,2cyclictest171rcu_preempt12:31:112
601208991812,5cyclictest351ktimers/209:48:092
60120799184,11cyclictest780949-21ssh12:03:331
601207991811,6cyclictest259-21jbd2/mmcblk0p2-810:53:111
601207991810,4cyclictest0-21swapper/110:58:421
60120699189,6cyclictest0-21swapper/008:48:170
60120699182,16cyclictest0-21swapper/012:03:330
601206991815,2cyclictest0-21swapper/011:33:120
601206991814,2cyclictest659755-21head09:38:050
601206991814,2cyclictest0-21swapper/011:03:030
601206991812,1cyclictest0-21swapper/012:43:090
60120999173,10cyclictest0-21swapper/310:29:423
60120899172,8cyclictest625331-21sendmail-msp08:28:122
601208991714,2cyclictest648951-21unixbench-2d09:23:142
601208991712,4cyclictest612242-21/usr/sbin/munin07:48:062
60120699178,6cyclictest598654-1kworker/0:0H-mmc_complete09:51:050
60120699174,3cyclictest761006-21latency_hist11:41:050
60120699171,4cyclictest636195-21/usr/sbin/munin08:58:070
601206991714,2cyclictest0-21swapper/008:03:140
60120999164,7cyclictest0-21swapper/311:26:083
60120999163,8cyclictest0-21swapper/308:28:113
60120999162,8cyclictest0-21swapper/310:48:133
60120999162,6cyclictest0-21swapper/312:06:113
60120899164,10cyclictest800926-21sendmail-msp12:26:122
60120899164,10cyclictest731867-21sendmail-msp11:12:252
60120899163,10cyclictest764878-21sendmail-msp11:50:422
601208991613,2cyclictest604440-21unixbench_singl07:23:152
60120899161,11cyclictest632086-21latency_hist08:46:052
60120799166,8cyclictest762-21in:imuxsock11:33:121
60120799162,9cyclictest636146-21/usr/sbin/munin08:58:061
60120799162,11cyclictest611176-21awk07:46:041
601207991613,2cyclictest763511-21unixbench_singl11:43:171
601207991611,4cyclictest644483-21unixbench_multi09:18:141
60120699168,1cyclictest705339-21ntpq10:33:100
60120699164,8cyclictest671988-21ntpq09:53:100
601206991610,2cyclictest0-21swapper/009:58:090
112699160,1rtkit-daemon0-21swapper/110:43:381
60120999153,7cyclictest0-21swapper/309:35:273
60120999153,6cyclictest0-21swapper/309:23:083
60120999153,6cyclictest0-21swapper/307:58:093
60120999153,6cyclictest0-21swapper/307:38:163
60120999151,6cyclictest0-21swapper/310:55:173
60120899156,6cyclictest0-21swapper/209:18:142
60120899152,9cyclictest618355-21idleruntime-cro08:06:042
601208991511,3cyclictest742443-21unixbench_multi11:18:142
601208991511,2cyclictest0-21swapper/208:38:032
60120899151,10cyclictest797977-21/usr/sbin/munin12:23:042
60120799156,7cyclictest618380-21sendmail-msp08:08:111
60120799154,6cyclictest784237-21/usr/sbin/munin12:08:121
60120799152,8cyclictest697966-21ssh10:23:421
60120799152,8cyclictest111788-21systemd-journal09:49:451
60120799152,8cyclictest11050irq/107-eth%d09:38:091
601207991512,2cyclictest814209-21unixbench_singl12:38:141
60120699158,5cyclictest717319-21grep10:48:070
60120699155,6cyclictest646187-21latency_hist09:21:050
60120699153,9cyclictest1007-21mta-sts-daemon08:16:080
60120699152,9cyclictest611062-21munin-plugin-st07:46:040
60120699151,4cyclictest630308-21cat08:41:050
601206991510,2cyclictest0-21swapper/008:16:050
112699150,2rtkit-daemon1125-21rtkit-daemon07:37:461
112699150,1rtkit-daemon0-21swapper/112:26:021
60120999144,5cyclictest0-21swapper/309:53:103
60120999143,8cyclictest0-21swapper/307:51:073
60120999143,7cyclictest0-21swapper/311:18:103
60120999143,4cyclictest0-21swapper/310:11:393
60120999142,6cyclictest0-21swapper/308:16:403
60120899144,8cyclictest637726-21/usr/sbin/munin09:03:072
60120899144,8cyclictest637726-21/usr/sbin/munin09:03:072
60120899144,8cyclictest0-21swapper/209:33:142
60120899144,7cyclictest771080-21/usr/sbin/munin11:53:102
60120899144,7cyclictest771080-21/usr/sbin/munin11:53:102
60120899144,5cyclictest725021-21/usr/sbin/munin10:58:022
60120899142,9cyclictest609992-21fschecks_time07:43:042
60120899142,8cyclictest818113-21cut12:43:042
60120899142,8cyclictest763074-21/usr/sbin/munin11:43:132
60120899142,10cyclictest762-21in:imuxsock08:08:122
601208991411,2cyclictest0-21swapper/208:23:032
60120799143,9cyclictest111788-21systemd-journal07:28:071
60120799143,8cyclictest692131-21/usr/sbin/munin10:18:031
60120799143,8cyclictest619-21mta-sts-daemon10:10:501
60120799142,9cyclictest637441-21tune2fs09:03:051
60120799142,9cyclictest637441-21tune2fs09:03:051
60120799142,9cyclictest619-21mta-sts-daemon07:18:081
60120799142,5cyclictest11050irq/107-eth%d11:03:321
601207991411,2cyclictest1007-21mta-sts-daemon09:57:201
60120799141,10cyclictest622228-21apt-get08:16:071
60120799140,13cyclictest640028-21grep09:08:171
60120699146,3cyclictest603937-21ntpq07:23:100
60120699142,8cyclictest638630-21grep09:06:050
60120699142,8cyclictest638630-21grep09:06:050
60120699141,11cyclictest635138-21grep08:53:160
60120699141,10cyclictest775792-21/usr/sbin/munin11:58:140
60120699140,10cyclictest608379-21fschecks_time07:38:070
60120999133,7cyclictest0-21swapper/311:06:063
60120999133,6cyclictest0-21swapper/312:26:543
60120999133,5cyclictest0-21swapper/309:43:083
60120999133,4cyclictest0-21swapper/309:51:053
60120999132,7cyclictest0-21swapper/307:28:073
60120999132,6cyclictest0-21swapper/312:31:103
60120999132,6cyclictest0-21swapper/311:38:103
60120999132,6cyclictest0-21swapper/310:18:043
60120999132,5cyclictest0-21swapper/307:33:053
60120999131,7cyclictest0-21swapper/309:28:123
60120899139,3cyclictest601898-21gltestperf07:18:042
60120899139,3cyclictest0-21swapper/207:33:152
60120899134,8cyclictest762-21in:imuxsock08:16:052
60120899133,7cyclictest680582-21/usr/sbin/munin10:03:102
60120899131,9cyclictest608965-21wc07:38:132
601208991312,1cyclictest1006-21mta-sts-daemon07:28:102
60120899131,10cyclictest634750-21/usr/sbin/munin08:53:122
601207991310,2cyclictest1006-21mta-sts-daemon08:38:101
60120799130,10cyclictest709396-21needreboot10:38:091
60120699134,7cyclictest762-21in:imuxsock09:08:050
60120699132,7cyclictest601739-21fschecks_count07:18:030
60120699130,2cyclictest605830-21sed07:28:140
60120999124,6cyclictest0-21swapper/308:23:093
60120999123,7cyclictest0-21swapper/311:51:473
60120999123,7cyclictest0-21swapper/311:51:473
60120999123,4cyclictest0-21swapper/309:38:093
60120999122,7cyclictest0-21swapper/311:49:433
60120999122,7cyclictest0-21swapper/307:46:093
60120999122,6cyclictest0-21swapper/311:13:133
60120999122,6cyclictest0-21swapper/310:07:203
60120999121,6cyclictest0-21swapper/311:23:143
60120999121,6cyclictest0-21swapper/311:03:073
60120999121,6cyclictest0-21swapper/309:18:153
60120999121,6cyclictest0-21swapper/309:13:093
60120899129,1cyclictest638495-21sendmail-msp09:13:012
60120899126,5cyclictest0-21swapper/211:58:062
60120899126,4cyclictest759243-21grep11:38:142
60120899123,8cyclictest779887-21/usr/sbin/munin12:03:062
60120899120,9cyclictest635485-21aten_r2power_en08:58:012
60120899120,10cyclictest639092-21cut09:08:072
60120799122,8cyclictest624191-21fschecks_count08:23:031
60120799122,8cyclictest621662-21basename08:16:051
60120799122,5cyclictest111788-21systemd-journal08:53:081
60120799121,9cyclictest1007-21mta-sts-daemon07:33:091
60120799121,8cyclictest604067-21/usr/sbin/munin07:23:121
60120799121,6cyclictest615973-21/usr/sbin/munin07:58:061
60120799121,5cyclictest630744-21/usr/sbin/munin08:43:041
60120699123,8cyclictest607310-21/usr/sbin/munin07:33:100
60120699122,9cyclictest630843-21cut08:43:040
60120699121,4cyclictest624007-21/usr/sbin/munin08:23:010
60120999114,4cyclictest0-21swapper/308:48:173
60120999114,3cyclictest0-21swapper/311:32:213
60120999113,5cyclictest0-21swapper/312:12:253
60120999113,5cyclictest0-21swapper/312:12:253
60120999113,5cyclictest0-21swapper/308:13:173
60120999113,4cyclictest0-21swapper/312:16:093
60120999113,4cyclictest0-21swapper/311:43:053
60120999113,4cyclictest0-21swapper/310:58:033
60120999113,4cyclictest0-21swapper/309:58:053
60120999112,5cyclictest0-21swapper/307:23:093
60120999112,5cyclictest0-21swapper/307:18:053
60120899111,9cyclictest709508-21/usr/sbin/munin10:38:112
60120799113,6cyclictest617457-21/usr/sbin/munin08:03:061
60120999103,5cyclictest0-21swapper/310:38:123
60120999103,4cyclictest0-21swapper/312:03:053
60120999103,4cyclictest0-21swapper/310:43:103
60120999103,4cyclictest0-21swapper/308:53:033
60120999102,5cyclictest0-21swapper/312:38:023
60120999102,5cyclictest0-21swapper/307:46:043
60120999101,5cyclictest0-21swapper/308:58:013
6012099993,5cyclictest0-21swapper/308:43:033
6012099993,4cyclictest0-21swapper/310:23:033
6012099993,3cyclictest0-21swapper/310:33:003
6012099993,3cyclictest0-21swapper/309:08:123
6012099992,4cyclictest0-21swapper/312:41:053
6012099992,4cyclictest0-21swapper/308:06:043
6012099992,3cyclictest0-21swapper/312:21:323
6012099992,3cyclictest0-21swapper/309:03:023
6012099992,3cyclictest0-21swapper/309:03:023
6012099992,3cyclictest0-21swapper/308:07:373
6012099992,2cyclictest0-21swapper/310:01:183
6012099982,4cyclictest0-21swapper/308:38:063
6012099981,4cyclictest0-21swapper/311:58:043
6012099953,1cyclictest0-21swapper/307:16:043
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional