You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2022-01-23 - 19:11

Intel(R) Xeon(R) CPU E31220L @ 2.20GHz, Linux 3.18.43-rt46-fulldebug (Profile)

Latency plot of system in rack #b, slot #0
Note that this system runs a non-optimized debug kernel.
Data to construct the above plot have been generated using the RT test utility cyclictest.
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: ondemand
Characteristics of all highest latencies:
System rackbslot0.osadl.org (updated Sun Jan 23, 2022 12:43:28)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
337027644,11sleep00-21swapper/010:14:380
208026935,10sleep30-21swapper/310:13:363
284902680,1sleep3361ktimersoftd/313:38:003
284902680,1sleep3361ktimersoftd/313:38:003
353326734,11sleep10-21swapper/110:16:311
361926247,10sleep20-21swapper/210:17:242
320302570,1sleep00-21swapper/012:39:110
242799570,3rtkit-daemon2426-21rtkit-daemon11:38:372
3875995232,17cyclictest1292-21rsyslogd13:33:490
389299511,38cyclictest26317-21sshd13:29:392
3875995020,25cyclictest29867-21modprobe14:28:470
3892994815,27cyclictest1115-21sshd14:00:092
242799480,2rtkit-daemon2426-21rtkit-daemon14:35:020
390399471,44cyclictest16729-21sshd15:29:473
389299475,37cyclictest20941-21modprobe12:26:222
389299474,39cyclictest28995-21modprobe15:07:102
3892994732,7cyclictest5032-21sshd12:46:202
389299473,36cyclictest2878-21modprobe15:41:352
3892994725,10cyclictest1-21systemd12:21:132
389299462,40cyclictest17272-21id14:07:442
3892994531,9cyclictest4965-21sshd14:53:462
3892994527,6cyclictest31631-21modprobe12:35:022
167182450,1sleep00-21swapper/012:55:000
389299445,33cyclictest1195-21dbus-daemon15:19:262
3892994427,12cyclictest3026-21modprobe14:40:002
3892994426,6cyclictest5473-21modprobe14:15:262
389299442,39cyclictest5580-21systemd-cgroups13:23:192
3875994430,6cyclictest23561-21modprobe12:21:460
242799440,2rtkit-daemon2426-21rtkit-daemon14:14:503
3892994324,17cyclictest25454-21bash12:52:412
242799430,4rtkit-daemon18395-21sshd13:08:431
242799430,2rtkit-daemon2426-21rtkit-daemon14:01:143
389299425,33cyclictest4610-21sshd12:57:142
3892994227,9cyclictest22893-21sshd15:24:362
3892994225,10cyclictest11594-21sshd13:05:442
389299422,37cyclictest20687-21kworker/u8:114:48:222
3875994228,8cyclictest41ktimersoftd/013:43:240
242799420,4rtkit-daemon0-21swapper/312:13:511
242799420,2rtkit-daemon2426-21rtkit-daemon13:02:413
3892994128,9cyclictest26329-21modprobe14:23:132
3892994128,9cyclictest26329-21modprobe14:23:132
3892994123,6cyclictest26756-21sshd15:43:552
3892994122,13cyclictest7813-21modprobe12:32:422
242799410,4rtkit-daemon0-21swapper/310:20:491
242799410,3rtkit-daemon2426-21rtkit-daemon12:30:211
242799410,2rtkit-daemon2016-21sshd14:09:471
242799410,2rtkit-daemon0-21swapper/315:27:341
3892994025,11cyclictest26466-21modprobe13:35:082
3892994023,12cyclictest20851-21rm13:52:472
242799400,5rtkit-daemon0-21swapper/311:40:550
242799400,4rtkit-daemon0-21swapper/312:20:091
242799400,3rtkit-daemon2426-21rtkit-daemon11:20:460
242799400,3rtkit-daemon0-21swapper/310:24:411
242799400,2rtkit-daemon6602-21sshd13:05:311
242799400,18rtkit-daemon0-21swapper/014:44:310
389299394,32cyclictest23523-21modprobe12:43:012
3892993925,8cyclictest21495-21kworker/u8:014:43:302
36732390,2sleep33674-21sshd14:48:153
242799390,3rtkit-daemon4026-21sshd15:34:451
242799390,3rtkit-daemon2426-21rtkit-daemon12:13:021
242799390,3rtkit-daemon1507-21nfsd15:28:560
3892993828,8cyclictest23406-21modprobe14:10:422
3875993821,9cyclictest15882-21sshd12:37:080
242799380,3rtkit-daemon2426-21rtkit-daemon10:55:002
242799380,3rtkit-daemon2426-21rtkit-daemon10:51:022
242799380,2rtkit-daemon1333-21sshd14:43:253
242799380,2rtkit-daemon0-21swapper/313:59:451
242799380,2rtkit-daemon0-21swapper/214:58:360
3892993723,8cyclictest8-21rcu_preempt13:39:242
3892993723,8cyclictest8-21rcu_preempt13:39:242
3892993723,6cyclictest24129-21sshd13:02:112
242799370,3rtkit-daemon2426-21rtkit-daemon14:34:092
242799370,3rtkit-daemon2426-21rtkit-daemon12:08:192
242799370,3rtkit-daemon0-21swapper/314:24:301
242799370,3rtkit-daemon0-21swapper/314:24:301
242799370,3rtkit-daemon0-21swapper/011:29:582
242799370,2rtkit-daemon9580-21sshd10:27:020
242799370,2rtkit-daemon29679-21modprobe15:23:303
3892993627,6cyclictest31314-21sshd14:22:032
3892993626,6cyclictest11825-21sshd15:10:312
3892993624,6cyclictest19351-21bash13:54:012
387599365,23cyclictest0-21swapper/011:54:460
3875993614,19cyclictest3-21ksoftirqd/014:27:140
3875993614,19cyclictest3-21ksoftirqd/014:27:140
242799360,3rtkit-daemon2426-21rtkit-daemon12:58:050
242799360,2rtkit-daemon29295-21sshd15:39:561
242799360,2rtkit-daemon21258-21modprobe13:19:501
242799360,2rtkit-daemon16451-21modprobe13:25:080
242799360,1rtkit-daemon15255-21modprobe13:52:333
3892993521,7cyclictest26662-21sshd15:16:382
3875993513,19cyclictest41ktimersoftd/014:10:050
242799350,4rtkit-daemon2259-21lldpd10:20:213
242799350,3rtkit-daemon0-21swapper/110:26:483
242799350,2rtkit-daemon1359-21modprobe13:32:451
242799350,2rtkit-daemon0-21swapper/312:26:161
390399346,25cyclictest0-21swapper/314:36:113
3892993424,4cyclictest13808-21kworker/u8:013:44:122
3892993415,8cyclictest20501-21modprobe14:59:552
387599344,27cyclictest0-21swapper/015:06:390
387599341,30cyclictest30696-21kworker/0:211:14:230
242799340,3rtkit-daemon2426-21rtkit-daemon15:33:233
242799340,2rtkit-daemon28893-21sshd13:48:571
242799340,2rtkit-daemon2426-21rtkit-daemon15:20:171
242799340,2rtkit-daemon2426-21rtkit-daemon13:38:420
242799340,2rtkit-daemon2426-21rtkit-daemon13:38:420
242799340,2rtkit-daemon15936-21sshd14:21:231
242799340,10rtkit-daemon2426-21rtkit-daemon14:22:230
242799340,1rtkit-daemon0-21swapper/312:28:303
3892993321,8cyclictest31132-21modprobe15:29:012
3875993317,10cyclictest3221-21sshd13:19:030
387599331,23cyclictest23272-21kworker/0:315:32:550
242799330,3rtkit-daemon2426-21rtkit-daemon11:59:260
242799330,3rtkit-daemon2426-21rtkit-daemon11:30:050
242799330,3rtkit-daemon2426-21rtkit-daemon11:05:470
242799330,3rtkit-daemon2426-21rtkit-daemon10:34:330
242799330,2rtkit-daemon2426-21rtkit-daemon15:44:021
242799330,1rtkit-daemon0-21swapper/314:12:591
242799330,1rtkit-daemon0-21swapper/313:55:321
3892993220,6cyclictest2886-21modprobe14:31:492
388399321,27cyclictest0-21swapper/112:04:061
388399321,27cyclictest0-21swapper/112:04:061
387599323,26cyclictest0-21swapper/010:20:000
3875993225,4cyclictest21480-21sshd15:10:550
387599321,27cyclictest18086-21kworker/0:313:52:330
387599321,23cyclictest7563-21kworker/0:415:23:210
387599320,11cyclictest16452-21sshd14:02:120
242799320,4rtkit-daemon2259-21lldpd12:13:303
242799320,3rtkit-daemon2426-21rtkit-daemon14:51:180
242799320,3rtkit-daemon2426-21rtkit-daemon12:46:530
242799320,3rtkit-daemon2426-21rtkit-daemon12:03:050
242799320,3rtkit-daemon2426-21rtkit-daemon12:03:050
242799320,3rtkit-daemon2426-21rtkit-daemon11:48:400
242799320,3rtkit-daemon2426-21rtkit-daemon11:45:310
242799320,3rtkit-daemon2426-21rtkit-daemon11:33:280
242799320,3rtkit-daemon2426-21rtkit-daemon11:24:180
242799320,3rtkit-daemon2426-21rtkit-daemon10:58:120
242799320,3rtkit-daemon2426-21rtkit-daemon10:44:090
242799320,3rtkit-daemon2426-21rtkit-daemon10:39:380
242799320,3rtkit-daemon2426-21rtkit-daemon10:29:230
242799320,2rtkit-daemon2426-21rtkit-daemon13:16:301
389299315,24cyclictest0-21swapper/210:33:372
3892993120,6cyclictest16874-21modprobe15:33:552
3892993119,9cyclictest16582-21modprobe13:15:312
3892993117,7cyclictest26390-21modprobe13:09:042
388399311,27cyclictest0-21swapper/112:02:061
388399311,27cyclictest0-21swapper/110:58:581
387599311,27cyclictest18810-21kworker/0:114:03:200
387599311,14cyclictest3-21ksoftirqd/013:56:000
387599310,3cyclictest10567-21sshd14:38:560
293722310,1sleep329698-21consoletype13:46:163
242799310,3rtkit-daemon2426-21rtkit-daemon11:39:353
242799310,3rtkit-daemon2426-21rtkit-daemon11:08:170
242799310,3rtkit-daemon2426-21rtkit-daemon10:53:400
242799310,3rtkit-daemon2426-21rtkit-daemon10:48:090
242799310,2rtkit-daemon0-21swapper/114:20:543
242799310,1rtkit-daemon31738-21sshd13:31:163
242799310,1rtkit-daemon18075-21modprobe14:26:593
242799310,1rtkit-daemon18075-21modprobe14:26:593
388399302,24cyclictest0-21swapper/113:35:011
388399301,26cyclictest4258-21kworker/1:013:39:501
388399301,26cyclictest4258-21kworker/1:013:39:501
387599301,26cyclictest30536-21kworker/0:013:11:300
387599301,26cyclictest22103-21kworker/0:112:25:250
387599301,19cyclictest5319-21kworker/0:215:19:450
387599301,19cyclictest12990-21kworker/0:213:15:540
387599300,10cyclictest30196-21sshd13:29:480
308402300,2sleep330842-21modprobe13:18:503
250032301,6sleep20-21swapper/211:45:182
242799300,7rtkit-daemon2426-21rtkit-daemon14:54:460
242799300,3rtkit-daemon2426-21rtkit-daemon12:19:253
242799300,2rtkit-daemon2426-21rtkit-daemon15:16:130
192302301,6sleep20-21swapper/211:37:352
71632291,6sleep10-21swapper/111:16:221
3903992910,16cyclictest0-21swapper/312:55:493
3903992910,16cyclictest0-21swapper/312:40:013
389299294,22cyclictest0-21swapper/213:22:132
388399291,25cyclictest0-21swapper/111:08:481
388399291,25cyclictest0-21swapper/110:55:181
387599291,18cyclictest20309-21kworker/0:115:47:410
387599290,10cyclictest20481-21sshd14:14:410
305082291,6sleep30-21swapper/311:02:063
273492291,6sleep30-21swapper/310:55:083
242799290,3rtkit-daemon2426-21rtkit-daemon13:00:051
186302291,6sleep30-21swapper/310:42:513
160592291,6sleep30-21swapper/311:30:383
100602291,6sleep30-21swapper/311:20:183
3903992810,15cyclictest0-21swapper/312:49:013
389299285,20cyclictest0-21swapper/212:04:122
389299285,20cyclictest0-21swapper/212:04:122
389299285,18cyclictest0-21swapper/211:24:222
389299284,17cyclictest0-21swapper/211:53:082
389299284,15cyclictest0-21swapper/212:00:192
389299282,23cyclictest0-21swapper/211:03:252
389299282,23cyclictest0-21swapper/211:00:582
389299282,23cyclictest0-21swapper/210:41:442
3892992813,8cyclictest8555-21expr10:23:402
389299281,23cyclictest0-21swapper/210:28:192
388399282,23cyclictest0-21swapper/111:52:471
388399281,24cyclictest0-21swapper/111:29:081
388399281,24cyclictest0-21swapper/111:20:091
388399281,24cyclictest0-21swapper/110:45:111
388399281,24cyclictest0-21swapper/110:42:311
388399281,24cyclictest0-21swapper/110:36:311
387599283,22cyclictest0-21swapper/012:10:450
3875992813,12cyclictest20309-21kworker/0:115:38:220
387599281,24cyclictest0-21swapper/012:15:540
189042281,6sleep10-21swapper/111:33:571
165732281,6sleep30-21swapper/311:33:103
130882281,6sleep10-21swapper/111:25:541
390399279,15cyclictest0-21swapper/313:07:053
390399272,15cyclictest0-21swapper/315:02:553
390399271,22cyclictest0-21swapper/311:03:543
389299275,19cyclictest0-21swapper/211:13:422
389299274,17cyclictest0-21swapper/210:21:572
388399271,23cyclictest0-21swapper/111:54:311
388399271,23cyclictest0-21swapper/111:43:511
388399271,23cyclictest0-21swapper/111:38:501
388399271,23cyclictest0-21swapper/110:31:121
387599271,23cyclictest0-21swapper/012:28:030
28422271,6sleep20-21swapper/211:08:322
390399269,14cyclictest0-21swapper/315:12:363
390399267,16cyclictest0-21swapper/311:08:273
390399262,20cyclictest0-21swapper/312:02:193
3903992611,4cyclictest24032-21kworker/3:113:33:363
3903992611,4cyclictest12787-21kworker/3:312:34:583
389299264,14cyclictest0-21swapper/212:15:032
388399262,21cyclictest0-21swapper/114:07:411
388399261,22cyclictest0-21swapper/111:04:011
388399261,22cyclictest0-21swapper/110:49:091
388399261,21cyclictest18582-21kworker/1:314:43:001
387599268,8cyclictest0-21swapper/012:49:240
390399259,12cyclictest0-21swapper/315:20:333
390399256,9cyclictest0-21swapper/312:08:033
390399256,9cyclictest0-21swapper/312:08:033
390399256,8cyclictest0-21swapper/314:30:293
390399256,16cyclictest0-21swapper/314:58:303
390399256,16cyclictest0-21swapper/311:23:273
390399252,20cyclictest0-21swapper/314:06:183
390399252,19cyclictest0-21swapper/312:25:493
390399252,13cyclictest0-21swapper/313:54:493
3903992511,11cyclictest27163-21modprobe14:41:033
3903992510,4cyclictest23116-21sshd15:39:403
390399251,14cyclictest0-21swapper/315:47:203
389299254,15cyclictest0-21swapper/211:52:482
389299252,18cyclictest0-21swapper/210:45:522
389299251,20cyclictest0-21swapper/211:18:262
388399252,21cyclictest0-21swapper/114:48:211
388399252,19cyclictest0-21swapper/112:44:221
387599251,13cyclictest9898-21kworker/0:413:05:440
242799250,2rtkit-daemon2426-21rtkit-daemon14:09:103
242799250,2rtkit-daemon2426-21rtkit-daemon13:27:343
390399249,4cyclictest18698-21kworker/3:015:16:323
390399249,12cyclictest0-21swapper/314:53:363
390399247,7cyclictest0-21swapper/313:09:383
390399247,14cyclictest0-21swapper/312:45:133
390399241,12cyclictest23911-21kworker/3:413:15:143
388399242,18cyclictest0-21swapper/112:49:251
388399241,21cyclictest0-21swapper/113:24:461
388399241,20cyclictest14548-21sshd14:59:401
388399241,20cyclictest0-21swapper/115:04:331
388399241,20cyclictest0-21swapper/114:56:461
204622241,4sleep120872-21modprobe15:16:231
79012231,4sleep30-21swapper/312:12:303
390399239,4cyclictest0-21swapper/310:48:463
390399238,4cyclictest0-21swapper/311:16:083
390399234,16cyclictest0-21swapper/311:44:173
390399232,17cyclictest0-21swapper/311:48:393
390399231,19cyclictest0-21swapper/311:53:493
388399236,14cyclictest0-21swapper/115:09:001
388399232,18cyclictest0-21swapper/114:40:081
388399232,18cyclictest0-21swapper/114:34:571
388399231,20cyclictest0-21swapper/113:43:161
388399231,18cyclictest21264-21kworker/1:212:38:231
388399231,12cyclictest2982-21modprobe12:55:471
388399231,12cyclictest21264-21kworker/1:212:35:421
256552231,17sleep10-21swapper/115:30:111
390399226,13cyclictest0-21swapper/310:33:243
390399221,18cyclictest0-21swapper/310:31:323
390399221,17cyclictest0-21swapper/310:43:263
388399221,17cyclictest0-21swapper/114:27:591
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional