You are here: Home / Projects / QA Farm Realtime / Latency plots / 
2022-01-17 - 02:19

Intel(R) Xeon(R) CPU E31220L @ 2.20GHz, Linux 3.18.43-rt46-fulldebug (Profile)

Latency plot of system in rack #b, slot #0
Note that this system runs a non-optimized debug kernel.
Data to construct the above plot have been generated using the RT test utility cyclictest.
Command line: cyclictest -l100000000 -m -Sp99 -i200 -h400 -q
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: ondemand
Characteristics of the alll highest latencies:
System rackbslot0.osadl.org (updated Sun Jan 16, 2022 12:43:28)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1593027743,11sleep20-21swapper/210:27:352
1563727239,10sleep30-21swapper/310:24:153
1564027039,26sleep10-21swapper/110:24:171
242799630,4rtkit-daemon0-21swapper/211:17:020
1593326136,20sleep00-21swapper/010:27:370
242799570,4rtkit-daemon0-21swapper/211:38:201
242799560,4rtkit-daemon0-21swapper/211:00:000
242799530,2rtkit-daemon2426-21rtkit-daemon11:09:060
242799520,3rtkit-daemon2426-21rtkit-daemon15:42:463
242799520,3rtkit-daemon2259-21lldpd11:23:460
242799510,3rtkit-daemon2426-21rtkit-daemon12:24:023
242799510,3rtkit-daemon2426-21rtkit-daemon12:12:003
242799510,22rtkit-daemon2426-21rtkit-daemon12:18:163
242799510,2rtkit-daemon0-21swapper/010:28:160
242799500,3rtkit-daemon2426-21rtkit-daemon15:50:273
242799500,3rtkit-daemon2426-21rtkit-daemon12:30:343
242799500,2rtkit-daemon2426-21rtkit-daemon10:39:130
242799480,4rtkit-daemon0-21swapper/211:22:290
242799480,3rtkit-daemon2426-21rtkit-daemon13:17:233
242799480,2rtkit-daemon2426-21rtkit-daemon12:40:453
242799480,2rtkit-daemon2426-21rtkit-daemon10:35:020
16175994826,9cyclictest25417-21sshd14:43:161
242799460,3rtkit-daemon2426-21rtkit-daemon11:40:003
242799460,2rtkit-daemon2426-21rtkit-daemon14:48:303
16183994429,11cyclictest23049-21sshd14:37:412
242799420,17rtkit-daemon2426-21rtkit-daemon13:01:081
16175994230,6cyclictest27570-21idleruntime-cro15:17:521
242799410,8rtkit-daemon0-21swapper/112:00:241
16183994122,16cyclictest28096-21sshd13:37:192
16183994122,16cyclictest28096-21sshd13:37:192
1617599418,28cyclictest0-21swapper/110:33:281
16165994126,7cyclictest16035-21sshd13:25:500
1618399406,29cyclictest0-21swapper/213:53:162
1619399392,31cyclictest23052-21kworker/3:312:52:183
16183993920,16cyclictest29347-21bash15:15:102
1616599390,35cyclictest15482-21sshd14:31:480
242799380,4rtkit-daemon2404-21gnome-settings-11:02:492
242799380,3rtkit-daemon2426-21rtkit-daemon13:28:591
242799380,15rtkit-daemon2426-21rtkit-daemon14:06:301
1619399382,32cyclictest0-21swapper/310:53:373
1619399382,32cyclictest0-21swapper/310:53:373
16183993829,5cyclictest14398-21modprobe15:47:272
16183993821,9cyclictest3343-21munin-node13:03:132
1617599384,28cyclictest0-21swapper/113:33:201
1617599384,28cyclictest0-21swapper/113:33:201
1616599382,30cyclictest122750irq/25-em114:48:230
242799370,3rtkit-daemon2426-21rtkit-daemon11:45:341
1619399371,32cyclictest0-21swapper/314:10:333
1616599379,20cyclictest0-21swapper/013:58:160
319292360,1sleep232311-21rm15:41:232
242799360,3rtkit-daemon2426-21rtkit-daemon12:22:521
242799360,2rtkit-daemon0-21swapper/211:28:240
1618399361,12cyclictest0-21swapper/213:21:092
16175993627,6cyclictest3000-21sshd13:14:131
16165993616,17cyclictest6850irq/24-0000:00:13:29:200
242799350,3rtkit-daemon2426-21rtkit-daemon12:49:111
242799350,2rtkit-daemon2426-21rtkit-daemon13:49:201
16193993522,7cyclictest9320-21sshd13:36:323
16193993522,7cyclictest9320-21sshd13:36:323
16193993521,9cyclictest597-21bash15:16:433
16193993521,6cyclictest24735-21modprobe12:47:363
16165993527,5cyclictest18594-21kworker/u8:015:54:230
16165993517,14cyclictest5794-21sshd13:03:180
242799340,3rtkit-daemon8877-21sshd13:19:593
16193993417,14cyclictest35-21rcuc/313:29:023
1618399344,26cyclictest0-21swapper/212:18:382
1617599345,21cyclictest0-21swapper/112:23:221
1617599341,7cyclictest0-21swapper/113:20:081
1616599340,4cyclictest6765-21sshd14:18:590
1616599340,4cyclictest6765-21sshd14:18:590
242799330,7rtkit-daemon0-21swapper/010:47:140
242799330,3rtkit-daemon17925-21modprobe12:54:081
1619399331,29cyclictest0-21swapper/313:00:173
1618399335,26cyclictest0-21swapper/211:08:082
16183993323,7cyclictest12057-21modprobe15:48:402
16175993315,14cyclictest5546-21sshd15:08:311
1616599338,21cyclictest122750irq/25-em114:11:340
242799320,3rtkit-daemon27708-21sshd13:04:123
242799320,3rtkit-daemon2426-21rtkit-daemon15:00:281
242799320,3rtkit-daemon2426-21rtkit-daemon14:35:331
242799320,3rtkit-daemon2426-21rtkit-daemon14:24:021
242799320,3rtkit-daemon2426-21rtkit-daemon12:34:231
242799320,3rtkit-daemon2426-21rtkit-daemon12:28:141
242799320,3rtkit-daemon2426-21rtkit-daemon12:13:251
242799320,3rtkit-daemon2426-21rtkit-daemon12:09:171
242799320,3rtkit-daemon2426-21rtkit-daemon12:03:281
242799320,3rtkit-daemon2426-21rtkit-daemon12:00:033
242799320,3rtkit-daemon2426-21rtkit-daemon11:53:521
242799320,3rtkit-daemon2426-21rtkit-daemon11:53:521
242799320,3rtkit-daemon2426-21rtkit-daemon11:49:461
242799320,3rtkit-daemon2426-21rtkit-daemon11:46:373
242799320,3rtkit-daemon2426-21rtkit-daemon11:03:182
242799320,3rtkit-daemon2426-21rtkit-daemon10:53:472
242799320,3rtkit-daemon2426-21rtkit-daemon10:53:472
242799320,3rtkit-daemon2426-21rtkit-daemon10:52:342
242799320,2rtkit-daemon2426-21rtkit-daemon15:56:141
242799320,2rtkit-daemon2426-21rtkit-daemon15:06:451
242799320,2rtkit-daemon2426-21rtkit-daemon15:06:451
1619399325,23cyclictest0-21swapper/311:37:493
16165993224,4cyclictest23141-21kworker/0:012:33:310
16165993218,8cyclictest26590-21kworker/u8:212:50:420
1616599320,4cyclictest26789-21sshd14:55:390
242799310,3rtkit-daemon30749-21sshd13:27:513
242799310,3rtkit-daemon2426-21rtkit-daemon12:46:351
242799310,3rtkit-daemon2426-21rtkit-daemon12:35:373
242799310,3rtkit-daemon2426-21rtkit-daemon12:13:043
242799310,3rtkit-daemon2426-21rtkit-daemon12:05:063
242799310,3rtkit-daemon2426-21rtkit-daemon11:53:593
242799310,3rtkit-daemon2426-21rtkit-daemon11:53:593
242799310,3rtkit-daemon2426-21rtkit-daemon11:48:563
242799310,3rtkit-daemon2426-21rtkit-daemon10:57:400
242799310,3rtkit-daemon2426-21rtkit-daemon10:57:400
242799310,3rtkit-daemon2426-21rtkit-daemon10:44:292
242799310,3rtkit-daemon2426-21rtkit-daemon10:41:512
242799310,2rtkit-daemon2426-21rtkit-daemon15:48:141
242799310,2rtkit-daemon2426-21rtkit-daemon14:53:271
242799310,1rtkit-daemon2426-21rtkit-daemon15:25:381
242799310,1rtkit-daemon2426-21rtkit-daemon13:39:051
1619399318,18cyclictest0-21swapper/311:13:323
1619399315,22cyclictest0-21swapper/310:51:363
16193993122,6cyclictest1-21systemd14:57:023
1618399314,17cyclictest0-21swapper/211:50:182
16183993121,7cyclictest0-21swapper/212:28:102
1618399312,24cyclictest0-21swapper/214:09:582
16183993114,9cyclictest2645-21sshd15:11:162
1616599315,11cyclictest0-21swapper/015:15:410
16165993125,3cyclictest0-21swapper/014:16:010
16165993116,12cyclictest122750irq/25-em115:28:250
16165993111,17cyclictest0-21swapper/012:16:140
1616599311,27cyclictest0-21swapper/015:19:070
1616599311,27cyclictest0-21swapper/012:54:260
242799300,3rtkit-daemon2426-21rtkit-daemon15:18:011
242799300,3rtkit-daemon2426-21rtkit-daemon14:52:491
242799300,2rtkit-daemon2426-21rtkit-daemon15:43:461
242799300,2rtkit-daemon2426-21rtkit-daemon14:40:451
242799300,2rtkit-daemon2426-21rtkit-daemon14:19:511
242799300,2rtkit-daemon2426-21rtkit-daemon14:19:511
242799300,2rtkit-daemon2426-21rtkit-daemon14:13:321
242799300,2rtkit-daemon2426-21rtkit-daemon11:33:580
242799300,2rtkit-daemon2426-21rtkit-daemon11:05:410
242799300,2rtkit-daemon2426-21rtkit-daemon10:49:450
242799300,2rtkit-daemon10676-21sshd14:02:473
1619399306,15cyclictest0-21swapper/311:20:323
1619399302,25cyclictest0-21swapper/315:07:343
1619399302,25cyclictest0-21swapper/315:07:343
1619399302,18cyclictest0-21swapper/314:58:413
1619399301,25cyclictest0-21swapper/314:25:503
1618399304,22cyclictest0-21swapper/211:13:562
16183993016,6cyclictest26446-21modprobe13:31:472
16183993012,12cyclictest19902-21kworker/u8:213:24:022
1617599301,26cyclictest0-21swapper/111:10:291
1617599301,26cyclictest0-21swapper/110:31:511
16165993023,4cyclictest0-21swapper/014:05:080
16165993022,4cyclictest18872-21kworker/0:312:38:160
1616599302,24cyclictest0-21swapper/011:59:300
16165993018,8cyclictest24091-21kworker/u8:012:59:570
1616599301,26cyclictest0-21swapper/011:48:550
72542291,6sleep30-21swapper/311:03:503
242799290,3rtkit-daemon25771-21sshd13:53:463
242799290,3rtkit-daemon2426-21rtkit-daemon14:30:201
242799290,3rtkit-daemon2426-21rtkit-daemon13:07:021
222802291,6sleep30-21swapper/311:28:563
194832291,6sleep30-21swapper/311:26:233
1619399295,16cyclictest0-21swapper/313:49:013
1619399295,14cyclictest0-21swapper/310:32:313
1618399295,21cyclictest0-21swapper/212:45:572
1618399295,20cyclictest0-21swapper/211:43:272
1618399295,18cyclictest0-21swapper/214:45:472
1618399295,17cyclictest0-21swapper/211:33:102
1618399295,14cyclictest0-21swapper/211:21:562
1618399294,17cyclictest0-21swapper/210:33:162
16183992917,6cyclictest2457-21modprobe15:37:242
16183992914,9cyclictest8379-21systemd-cgroups15:04:312
16183992914,9cyclictest8379-21systemd-cgroups15:04:312
16183992914,9cyclictest17426-21modprobe15:00:462
1617599297,16cyclictest0-21swapper/113:58:161
16175992910,17cyclictest22941-21modprobe12:39:071
1617599291,25cyclictest1333-21sshd15:41:511
1616599299,17cyclictest122750irq/25-em115:40:360
16165992922,4cyclictest0-21swapper/015:04:380
16165992922,4cyclictest0-21swapper/015:04:380
16165992914,12cyclictest15543-21kworker/0:113:13:350
1616599291,4cyclictest122750irq/25-em115:11:530
1616599291,21cyclictest41ktimersoftd/013:18:510
1616599290,4cyclictest22938-21sshd13:53:380
248982281,6sleep10-21swapper/110:41:521
242799280,3rtkit-daemon6978-21bash15:26:373
242799280,3rtkit-daemon2426-21rtkit-daemon15:53:543
242799280,3rtkit-daemon2426-21rtkit-daemon13:53:381
242799280,3rtkit-daemon2426-21rtkit-daemon13:38:063
242799280,2rtkit-daemon2426-21rtkit-daemon15:09:073
242799280,2rtkit-daemon2426-21rtkit-daemon13:45:371
1619399283,21cyclictest0-21swapper/311:01:003
1618399285,19cyclictest0-21swapper/212:23:402
1618399285,17cyclictest0-21swapper/211:38:192
1618399284,20cyclictest0-21swapper/210:29:552
1618399284,15cyclictest0-21swapper/214:56:352
1618399284,13cyclictest0-21swapper/215:27:492
16183992813,7cyclictest1506-21nfsd15:19:392
16183992813,11cyclictest10414-21modprobe13:08:572
16183992810,14cyclictest281ktimersoftd/214:23:532
1617599281,25cyclictest0-21swapper/115:30:031
1616599287,17cyclictest122750irq/25-em115:50:150
1616599283,22cyclictest0-21swapper/014:41:530
16165992823,3cyclictest11983-21modprobe14:45:250
16165992821,4cyclictest8432-21sshd15:34:540
1616599281,24cyclictest0-21swapper/013:45:530
1616599281,23cyclictest0-21swapper/012:24:520
276652271,6sleep30-21swapper/310:44:313
242799270,2rtkit-daemon2426-21rtkit-daemon14:15:243
242799270,2rtkit-daemon2426-21rtkit-daemon14:11:561
242799270,2rtkit-daemon2426-21rtkit-daemon13:09:351
1619399271,23cyclictest0-21swapper/314:20:033
1619399271,23cyclictest0-21swapper/314:20:033
1619399271,23cyclictest0-21swapper/313:47:253
1618399279,14cyclictest0-21swapper/214:00:452
1618399275,17cyclictest0-21swapper/212:11:082
1618399275,16cyclictest0-21swapper/211:56:242
1618399275,16cyclictest0-21swapper/211:56:242
1618399275,15cyclictest0-21swapper/211:29:582
1618399272,22cyclictest0-21swapper/212:15:062
1618399272,22cyclictest0-21swapper/212:05:372
1618399272,22cyclictest0-21swapper/212:02:072
16183992711,10cyclictest18410-21sshd14:16:482
1618399271,5cyclictest27676-21sshd12:42:102
1617599272,14cyclictest0-21swapper/110:48:401
16175992710,9cyclictest26976-21sshd15:32:571
1617599271,23cyclictest0-21swapper/111:07:091
1617599271,23cyclictest0-21swapper/111:01:091
1616599279,8cyclictest3-21ksoftirqd/013:50:210
1616599272,22cyclictest0-21swapper/012:21:220
16165992710,15cyclictest0-21swapper/011:43:280
242799260,2rtkit-daemon2426-21rtkit-daemon14:46:463
242799260,2rtkit-daemon2426-21rtkit-daemon13:25:081
1619399265,17cyclictest0-21swapper/310:36:493
1619399265,16cyclictest0-21swapper/310:38:583
1619399265,15cyclictest0-21swapper/315:29:333
1619399261,22cyclictest0-21swapper/311:11:093
1618399265,18cyclictest0-21swapper/213:49:202
1618399262,20cyclictest0-21swapper/212:55:002
1618399261,22cyclictest0-21swapper/212:34:132
1617599262,21cyclictest0-21swapper/111:23:081
1617599261,22cyclictest0-21swapper/111:35:071
1617599261,22cyclictest0-21swapper/111:20:081
1617599261,22cyclictest0-21swapper/110:57:101
1617599261,22cyclictest0-21swapper/110:57:101
1617599261,14cyclictest0-21swapper/111:28:101
1616599268,15cyclictest0-21swapper/011:38:360
1616599266,10cyclictest0-21swapper/012:09:340
1616599265,18cyclictest0-21swapper/012:04:000
1616599263,12cyclictest4802-21kworker/0:114:33:580
1616599262,14cyclictest0-21swapper/013:34:100
1616599262,14cyclictest0-21swapper/013:34:100
16165992619,4cyclictest0-21swapper/015:23:520
16165992610,13cyclictest0-21swapper/013:40:260
1616599261,22cyclictest0-21swapper/011:54:460
1616599261,22cyclictest0-21swapper/011:54:460
1616599261,10cyclictest25889-21consoletype12:47:390
101732261,6sleep00-21swapper/013:10:210
242799250,2rtkit-daemon2426-21rtkit-daemon15:44:013
1619399258,15cyclictest0-21swapper/313:09:033
1619399254,18cyclictest0-21swapper/314:31:563
1618399255,12cyclictest0-21swapper/214:20:482
1618399255,12cyclictest0-21swapper/214:20:482
1618399252,20cyclictest0-21swapper/213:47:372
1618399252,19cyclictest0-21swapper/211:25:292
1618399251,21cyclictest0-21swapper/213:14:352
1617599252,19cyclictest0-21swapper/110:43:321
1617599251,21cyclictest0-21swapper/111:13:111
1616599254,18cyclictest499-21sshd12:30:070
1616599254,13cyclictest0-21swapper/014:27:510
1616599251,21cyclictest7443-21bash15:01:440
1619399246,12cyclictest0-21swapper/314:34:413
1619399245,16cyclictest0-21swapper/314:03:063
16193992416,5cyclictest5684-21sshd15:36:103
1618399244,18cyclictest0-21swapper/214:32:202
1618399243,18cyclictest0-21swapper/214:03:002
1618399242,19cyclictest0-21swapper/213:00:182
1618399242,18cyclictest0-21swapper/215:53:212
1618399242,18cyclictest0-21swapper/213:38:482
16183992413,8cyclictest1502-21nfsd14:40:482
1616599249,12cyclictest0-21swapper/015:43:070
1619399238,5cyclictest14151-21sshd14:40:023
1619399231,20cyclictest0-21swapper/315:21:473
1619399231,12cyclictest12981-21kworker/u8:112:55:193
1618399235,12cyclictest13097-21sshd15:29:352
1618399232,17cyclictest0-21swapper/212:52:442
1618399225,9cyclictest0-21swapper/214:48:172
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional