You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-12-04 - 19:13
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of all highest latencies:
System rackbslot6.osadl.org (updated Thu Dec 04, 2025 12:43:32)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
2501021710,5sleep11434099cyclictest09:49:401
1773911070,4ptp4l401ktimersoftd/308:22:173
132582831,21sleep013321-21/usr/sbin/munin08:19:330
137982690,6sleep113803-21unixbench_multi08:19:411
140672660,3sleep20-21swapper/210:30:402
177391620,1ptp4l401ktimersoftd/309:49:263
168802590,4sleep01433599cyclictest09:34:300
177391580,1ptp4l401ktimersoftd/311:53:243
177391570,1ptp4l401ktimersoftd/311:45:043
145302550,2sleep30-21swapper/313:07:513
14352995545,5cyclictest41-21ksoftirqd/310:19:263
14352995516,7cyclictest41-21ksoftirqd/308:29:113
1434799558,6cyclictest26050-21sed12:04:342
1434799543,12cyclictest25430-21awk11:24:432
1434799543,11cyclictest9996-21tune2fs12:24:322
1434799542,11cyclictest24658-21date08:44:102
1434799541,14cyclictest32662-21grep12:49:462
1434799537,7cyclictest13037-21sed11:09:432
1434799537,7cyclictest13037-21sed11:09:432
292022520,4sleep01433599cyclictest10:49:450
277512520,3sleep11434099cyclictest13:24:151
1434799529,7cyclictest15436-21irqrtprio08:24:282
1434799528,7cyclictest16419-21irqrtprio11:14:312
1434799516,7cyclictest18600-21sed08:29:312
1434799516,12cyclictest17679-21latency_hist12:34:152
1434799512,11cyclictest13321-21tail11:49:382
1434799511,11cyclictest23703-21cat13:19:172
114222510,2sleep20-21swapper/210:29:122
14352995021,3cyclictest41-21ksoftirqd/310:14:353
1434799507,7cyclictest32643-21cpuspeed_turbos13:29:312
1434799501,10cyclictest5442-21wc12:19:162
55932490,3sleep1231rcuc/112:19:271
177391490,1ptp4l401ktimersoftd/310:26:033
177391490,15ptp4l9608-21kworker/3:110:56:553
177391490,15ptp4l9608-21kworker/3:110:56:553
14352994927,10cyclictest41-21ksoftirqd/311:34:463
14352994919,4cyclictest41-21ksoftirqd/312:34:163
1434799498,7cyclictest17212-21sed09:34:322
1434799492,13cyclictest12240-21ssh13:42:582
14340994941,4cyclictest25-21ksoftirqd/113:09:281
141782494,34sleep20-21swapper/208:23:272
14352994842,3cyclictest41-21ksoftirqd/312:09:203
14352994834,4cyclictest41-21ksoftirqd/311:24:143
14352994817,4cyclictest41-21ksoftirqd/309:09:113
1434799487,7cyclictest761-21cat11:34:372
1434799487,7cyclictest28499-21sed08:49:402
1434799487,7cyclictest20878-21sed09:44:122
1434799487,6cyclictest5013-21latency_hist10:19:132
1434799480,20cyclictest30478-21irqrtprio08:54:312
14340994842,3cyclictest25-21ksoftirqd/111:19:271
14352994716,5cyclictest41-21ksoftirqd/312:24:503
1434799477,7cyclictest6631-21sed09:14:112
1434799477,7cyclictest25817-21awk09:54:272
1434799477,7cyclictest2448-21expr09:04:272
1434799477,7cyclictest20311-21df10:39:282
14352994619,4cyclictest41-21ksoftirqd/310:44:133
1434799467,7cyclictest30308-21cat10:04:132
1434799467,6cyclictest21143-21expr09:44:252
1434799465,7cyclictest11951-21gltestperf09:24:282
1434799465,7cyclictest0-21swapper/211:34:142
1434799465,6cyclictest17678-21/usr/sbin/munin13:49:372
1435299459,8cyclictest41-21ksoftirqd/312:39:303
14352994532,3cyclictest41-21ksoftirqd/312:39:163
14352994519,4cyclictest41-21ksoftirqd/309:59:343
14352994517,4cyclictest41-21ksoftirqd/311:59:283
14352994517,4cyclictest41-21ksoftirqd/309:44:323
14352994516,4cyclictest41-21ksoftirqd/313:49:353
14352994513,7cyclictest41-21ksoftirqd/309:24:303
14352994512,5cyclictest41-21ksoftirqd/311:34:143
14352994512,15cyclictest41-21ksoftirqd/311:09:373
14352994512,15cyclictest41-21ksoftirqd/311:09:373
1434799456,7cyclictest23706-21fschecks_time09:49:272
1434799455,7cyclictest3932-21acpi11:39:272
1434799455,7cyclictest19090-21cut12:34:372
1434799453,7cyclictest0-21swapper/212:19:452
14352994417,4cyclictest41-21ksoftirqd/312:44:363
14352994414,4cyclictest41-21ksoftirqd/312:49:393
1434799447,8cyclictest16228-21diskstats10:34:272
1434799445,7cyclictest2901-21expr12:54:302
1434799445,7cyclictest2901-21expr12:54:302
1434799442,6cyclictest29923-21ssh12:09:332
14352994327,6cyclictest41-21ksoftirqd/311:04:143
14352994316,4cyclictest41-21ksoftirqd/308:29:303
14352994314,5cyclictest41-21ksoftirqd/312:04:383
14352994310,8cyclictest41-21ksoftirqd/311:24:313
1434799436,6cyclictest6112-21sed13:34:462
1434799431,6cyclictest0-21swapper/213:09:342
1434799430,10cyclictest5621-21taskset11:00:192
1435299428,7cyclictest41-21ksoftirqd/313:34:363
14352994229,5cyclictest41-21ksoftirqd/309:29:273
14352994214,4cyclictest41-21ksoftirqd/312:59:353
14352994211,4cyclictest41-21ksoftirqd/311:04:353
1434799429,5cyclictest33-21ksoftirqd/213:20:312
1434799422,5cyclictest0-21swapper/211:54:322
1435299414,7cyclictest41-21ksoftirqd/310:34:263
1435299413,3cyclictest121rcu_preempt09:19:303
1435299413,3cyclictest121rcu_preempt09:19:303
14352994126,5cyclictest41-21ksoftirqd/309:39:323
14352994125,7cyclictest41-21ksoftirqd/310:29:293
14352994113,4cyclictest41-21ksoftirqd/313:24:383
1434799419,5cyclictest33-21ksoftirqd/213:46:102
1434799417,6cyclictest33-21ksoftirqd/211:22:242
1434799416,5cyclictest33-21ksoftirqd/211:06:472
1434799411,7cyclictest0-21swapper/210:47:492
1435299409,9cyclictest41-21ksoftirqd/308:54:113
14352994028,9cyclictest41-21ksoftirqd/312:54:403
14352994028,9cyclictest41-21ksoftirqd/312:54:403
14352994026,5cyclictest41-21ksoftirqd/310:47:243
14352994014,4cyclictest41-21ksoftirqd/309:09:323
1434799407,5cyclictest33-21ksoftirqd/212:59:522
1434799406,6cyclictest33-21ksoftirqd/213:07:412
1434799403,5cyclictest0-21swapper/210:19:322
1433599402,7cyclictest121rcu_preempt12:09:200
1435299398,4cyclictest41-21ksoftirqd/311:39:323
1435299398,4cyclictest41-21ksoftirqd/309:54:303
1435299396,7cyclictest41-21ksoftirqd/313:39:303
14352993934,3cyclictest41-21ksoftirqd/312:19:163
1435299392,3cyclictest121rcu_preempt13:29:343
1435299391,3cyclictest121rcu_preempt11:14:313
14352993912,4cyclictest41-21ksoftirqd/313:44:333
14352993912,4cyclictest41-21ksoftirqd/309:34:313
14352993911,4cyclictest41-21ksoftirqd/311:54:333
14352993911,4cyclictest41-21ksoftirqd/310:49:443
14352993910,4cyclictest41-21ksoftirqd/313:09:463
1434799397,5cyclictest33-21ksoftirqd/212:49:112
1434799397,5cyclictest33-21ksoftirqd/212:02:232
1434799397,5cyclictest33-21ksoftirqd/211:46:002
1434799392,6cyclictest0-21swapper/210:51:222
14340993933,3cyclictest25-21ksoftirqd/110:14:241
273082380,2sleep00-21swapper/010:49:130
1435299387,10cyclictest41-21ksoftirqd/310:04:353
14352993825,5cyclictest41-21ksoftirqd/309:14:233
14352993825,5cyclictest41-21ksoftirqd/309:14:233
14352993824,11cyclictest41-21ksoftirqd/313:19:343
14352993812,4cyclictest41-21ksoftirqd/312:19:303
14352993810,4cyclictest41-21ksoftirqd/310:09:343
1435299380,3cyclictest121rcu_preempt08:44:293
14340993833,3cyclictest25-21ksoftirqd/108:34:101
1435299379,4cyclictest41-21ksoftirqd/309:04:113
1435299373,3cyclictest121rcu_preempt13:14:473
14352993724,4cyclictest41-21ksoftirqd/308:39:273
14340993721,4cyclictest25-21ksoftirqd/108:29:111
14352993623,3cyclictest41-21ksoftirqd/308:54:403
1434799361,7cyclictest32097-21perl10:54:292
1434799361,7cyclictest32097-21perl10:54:292
14340993530,3cyclictest25-21ksoftirqd/111:14:251
14335993530,3cyclictest636-21dbus-daemon11:14:140
14335993530,3cyclictest636-21dbus-daemon11:14:140
1435299341,3cyclictest121rcu_preempt08:34:343
14340993429,3cyclictest25-21ksoftirqd/112:24:351
14340993428,3cyclictest25-21ksoftirqd/113:34:301
14340993428,3cyclictest25-21ksoftirqd/112:09:161
14340993427,4cyclictest25-21ksoftirqd/111:59:281
14335993429,3cyclictest9-21ksoftirqd/012:39:350
14340993328,3cyclictest25-21ksoftirqd/112:59:361
14340993326,4cyclictest25-21ksoftirqd/112:44:361
14340993326,4cyclictest25-21ksoftirqd/111:34:291
14340993326,4cyclictest25-21ksoftirqd/108:49:291
14335993328,3cyclictest9-21ksoftirqd/013:34:170
1434799327,6cyclictest22146-21sort08:39:102
1434799326,7cyclictest7348-21awk09:14:282
1434799326,7cyclictest7348-21awk09:14:282
14340993227,3cyclictest25-21ksoftirqd/111:39:391
14340993227,3cyclictest25-21ksoftirqd/110:09:451
14340993226,3cyclictest25-21ksoftirqd/110:44:131
14340993226,3cyclictest25-21ksoftirqd/110:34:131
1433599321,5cyclictest21102-21ssh11:59:310
1434799310,7cyclictest321ktimersoftd/212:41:362
1434799310,5cyclictest321ktimersoftd/213:25:212
14340993126,3cyclictest25-21ksoftirqd/113:29:301
14340993126,3cyclictest25-21ksoftirqd/113:14:301
14340993126,3cyclictest25-21ksoftirqd/111:29:331
14340993125,4cyclictest25-21ksoftirqd/110:54:321
14340993125,4cyclictest25-21ksoftirqd/110:54:321
14340993125,3cyclictest25-21ksoftirqd/112:54:361
14340993125,3cyclictest25-21ksoftirqd/112:54:361
14340993125,3cyclictest25-21ksoftirqd/112:39:301
14340993125,3cyclictest25-21ksoftirqd/108:54:311
14335993126,3cyclictest9-21ksoftirqd/012:14:290
14335993126,3cyclictest9-21ksoftirqd/008:29:110
14335993125,3cyclictest9-21ksoftirqd/010:19:320
14335993124,4cyclictest9-21ksoftirqd/012:05:250
1434799300,5cyclictest0-21swapper/208:59:292
14340993025,3cyclictest25-21ksoftirqd/113:39:421
14340993025,3cyclictest25-21ksoftirqd/111:54:151
14340993025,3cyclictest25-21ksoftirqd/109:39:241
14340993022,4cyclictest25-21ksoftirqd/112:49:281
14335993024,3cyclictest9-21ksoftirqd/013:39:330
14340992925,3cyclictest25-21ksoftirqd/112:34:151
14340992924,3cyclictest25-21ksoftirqd/113:54:181
14340992924,3cyclictest25-21ksoftirqd/113:29:171
14340992924,3cyclictest25-21ksoftirqd/112:14:161
14340992924,3cyclictest25-21ksoftirqd/111:44:271
14340992924,3cyclictest25-21ksoftirqd/110:44:341
14340992924,3cyclictest25-21ksoftirqd/110:04:321
14340992923,3cyclictest25-21ksoftirqd/110:37:281
14340992923,3cyclictest25-21ksoftirqd/108:59:231
14340992922,4cyclictest25-21ksoftirqd/111:59:151
14340992922,4cyclictest25-21ksoftirqd/111:08:431
14340992921,4cyclictest25-21ksoftirqd/108:39:241
14335992924,3cyclictest9-21ksoftirqd/010:34:430
14335992924,3cyclictest9-21ksoftirqd/008:54:240
14335992923,3cyclictest9-21ksoftirqd/010:09:290
14335992923,3cyclictest9-21ksoftirqd/008:51:280
1434799282,12cyclictest10801-21awk09:19:422
1434799282,12cyclictest10801-21awk09:19:422
14347992810,7cyclictest33-21ksoftirqd/210:07:202
14347992810,6cyclictest33-21ksoftirqd/209:34:122
14340992823,3cyclictest25-21ksoftirqd/113:09:171
14340992823,3cyclictest25-21ksoftirqd/110:49:391
14340992823,3cyclictest25-21ksoftirqd/109:49:121
14340992823,3cyclictest25-21ksoftirqd/109:04:301
14340992823,3cyclictest1624-21tr12:14:291
14340992822,4cyclictest25-21ksoftirqd/109:54:331
14340992822,3cyclictest25-21ksoftirqd/113:44:351
14340992822,3cyclictest22198-21latency_hist08:39:101
14340992821,4cyclictest25-21ksoftirqd/110:00:481
14340992821,4cyclictest25-21ksoftirqd/109:19:251
14340992821,4cyclictest25-21ksoftirqd/109:19:251
14335992824,3cyclictest9-21ksoftirqd/012:34:150
14335992823,3cyclictest9-21ksoftirqd/011:03:480
14335992822,3cyclictest9-21ksoftirqd/008:36:230
14335992821,5cyclictest9-21ksoftirqd/011:07:160
1433599281,4cyclictest7554-21gltestperf12:59:340
14340992722,3cyclictest25-21ksoftirqd/112:34:191
14340992722,3cyclictest25-21ksoftirqd/111:29:141
14340992722,3cyclictest25-21ksoftirqd/109:29:351
14340992722,3cyclictest25-21ksoftirqd/109:24:301
14340992722,3cyclictest25-21ksoftirqd/109:09:291
14340992721,3cyclictest25-21ksoftirqd/108:49:101
14335992722,3cyclictest9-21ksoftirqd/013:44:350
14335992722,3cyclictest9-21ksoftirqd/013:09:350
14335992722,3cyclictest9-21ksoftirqd/011:40:280
14335992722,3cyclictest9-21ksoftirqd/011:19:340
14335992722,3cyclictest9-21ksoftirqd/010:54:320
14335992722,3cyclictest9-21ksoftirqd/010:54:320
14335992720,5cyclictest9-21ksoftirqd/009:30:200
14340992619,4cyclictest25-21ksoftirqd/110:59:331
14335992621,3cyclictest9-21ksoftirqd/013:34:300
14335992621,3cyclictest9-21ksoftirqd/012:54:300
14335992621,3cyclictest9-21ksoftirqd/012:54:300
14335992620,3cyclictest9-21ksoftirqd/011:34:420
14335992620,3cyclictest9-21ksoftirqd/009:10:040
14335992619,5cyclictest9-21ksoftirqd/009:26:390
14335992619,4cyclictest9-21ksoftirqd/009:55:380
14335992619,4cyclictest9-21ksoftirqd/009:48:430
1434799259,6cyclictest33-21ksoftirqd/208:39:502
14340992520,3cyclictest25-21ksoftirqd/109:14:341
14340992520,3cyclictest25-21ksoftirqd/109:14:341
14340992519,3cyclictest25-21ksoftirqd/111:09:411
14340992519,3cyclictest25-21ksoftirqd/111:09:411
14340992519,3cyclictest25-21ksoftirqd/110:24:261
14340992517,5cyclictest16926-21grep09:34:301
14335992520,3cyclictest9-21ksoftirqd/013:54:180
14335992520,3cyclictest9-21ksoftirqd/011:24:280
14335992520,3cyclictest9-21ksoftirqd/010:24:270
14335992520,3cyclictest9-21ksoftirqd/009:54:120
14335992520,3cyclictest9-21ksoftirqd/009:39:270
14335992520,3cyclictest9-21ksoftirqd/009:19:250
14335992520,3cyclictest9-21ksoftirqd/009:19:250
14335992519,3cyclictest9-21ksoftirqd/012:44:360
14335992519,3cyclictest9-21ksoftirqd/008:45:280
1434799247,6cyclictest33-21ksoftirqd/210:11:552
14340992417,4cyclictest25-21ksoftirqd/110:21:321
14335992419,3cyclictest9-21ksoftirqd/012:24:110
14335992419,3cyclictest9-21ksoftirqd/011:33:310
14335992419,3cyclictest9-21ksoftirqd/009:59:310
14335992419,3cyclictest9-21ksoftirqd/008:43:230
14335992418,3cyclictest9-21ksoftirqd/008:59:440
180622231,18sleep07269-21diskmemload12:34:210
14335992319,3cyclictest9-21ksoftirqd/013:24:470
14335992318,3cyclictest11512-21kworker/u8:012:51:290
14335992317,3cyclictest9-21ksoftirqd/010:32:430
14335992317,3cyclictest9-21ksoftirqd/009:18:280
14335992317,3cyclictest9-21ksoftirqd/009:18:280
14335992317,3cyclictest9-21ksoftirqd/008:30:140
14335992316,4cyclictest9-21ksoftirqd/010:43:310
14335992217,3cyclictest9-21ksoftirqd/010:04:320
14335992217,3cyclictest9-21ksoftirqd/009:05:190
14335992216,4cyclictest9-21ksoftirqd/011:52:560
101882220,2sleep00-21swapper/011:45:390
14335992116,3cyclictest9-21ksoftirqd/012:24:590
14335992115,4cyclictest9-21ksoftirqd/011:58:270
14335992110,8cyclictest11321-21ssh13:04:290
1433599204,6cyclictest1760-21runrttasks13:16:190
1433599202,3cyclictest121rcu_preempt10:14:350
14335991914,3cyclictest9-21ksoftirqd/013:22:140
1433599191,15cyclictest15950-21grep11:14:280
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional