You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2025-12-15 - 09:38
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Characteristics of the highest latencies:
System rackdslot3.osadl.org (updated Mon Dec 15, 2025 00:45:49)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
298052217186,21sleep10-21swapper/119:06:311
279672215179,25sleep30-21swapper/319:05:203
299082212180,21sleep20-21swapper/219:07:432
279692212179,22sleep00-21swapper/019:05:200
3218721550,4sleep23037899cyclictest19:10:482
3037899643,21cyclictest370-21latency_hist23:44:592
3037899636,15cyclictest549-21in:imuxsock20:20:182
3037899615,15cyclictest449-21dbus-daemon22:20:022
3037899595,16cyclictest207-21systemd-journal23:05:522
3037899586,9cyclictest22818-21cat23:20:432
164862580,3sleep2311rcuc/220:55:302
3037899573,24cyclictest0-21swapper/221:40:002
299382560,3sleep029943-21hwlatdetect20:15:330
3037899545,11cyclictest24636-21phc2sys21:10:382
3037899544,10cyclictest28135-21latency_hist21:20:022
3037899535,16cyclictest22406-21/usr/sbin/munin22:15:342
165822530,2sleep00-21swapper/023:10:310
3037899525,16cyclictest15288-21/usr/sbin/munin20:50:402
3037899522,18cyclictest0-21swapper/200:00:432
3037899522,18cyclictest0-21swapper/200:00:432
3037899515,16cyclictest23991-21/usr/sbin/munin23:25:352
71582500,1sleep10-21swapper/123:55:451
3037899494,14cyclictest16009-21apt-get23:10:032
152362490,2sleep1231rcuc/100:15:311
3037899486,9cyclictest16684-21grep19:45:422
3037899484,16cyclictest10150-21ls22:55:362
30378994640,3cyclictest19728-21idleruntime-cro00:25:002
139391460,0ptp4l401ktimersoftd/322:20:463
3037899455,7cyclictest13161-21iostat_ios21:55:362
3037899454,7cyclictest18714-21apt-get21:00:282
30379994410,21cyclictest29044-21sshd20:13:493
139391440,0ptp4l401ktimersoftd/320:36:233
3037899436,7cyclictest12987-21diskstats19:40:312
139391430,0ptp4l401ktimersoftd/323:20:513
139391420,0ptp4l401ktimersoftd/322:35:333
3037899414,15cyclictest19692-21/usr/sbin/munin19:55:372
30376994135,4cyclictest9-21ksoftirqd/023:18:580
3037899404,7cyclictest11239-21meminfo19:35:372
139391400,0ptp4l401ktimersoftd/323:43:573
30377993934,3cyclictest369-21dump-pmu-power23:45:001
3037899373,15cyclictest14886-21/usr/sbin/munin22:00:442
57898360,2rtkit-daemon0-21swapper/123:05:531
30379993630,4cyclictest41-21ksoftirqd/321:39:133
30379993630,4cyclictest41-21ksoftirqd/321:25:203
30379993614,19cyclictest27127-21tr22:25:283
30376993631,2cyclictest9-21ksoftirqd/019:19:590
139391360,0ptp4l401ktimersoftd/319:27:473
57898350,1rtkit-daemon0-21swapper/100:21:521
57898350,1rtkit-daemon0-21swapper/022:32:120
3037999356,3cyclictest164882grep20:55:303
30379993530,3cyclictest41-21ksoftirqd/323:40:003
30379993529,4cyclictest41-21ksoftirqd/319:55:063
30379993528,4cyclictest41-21ksoftirqd/321:00:293
3037899358,12cyclictest4925-21vmstat23:50:472
3037899353,15cyclictest31706-21/usr/sbin/munin22:35:302
30377993529,4cyclictest25-21ksoftirqd/123:13:361
30377993529,4cyclictest25-21ksoftirqd/120:27:411
30376993530,3cyclictest9-21ksoftirqd/000:15:370
30376993529,4cyclictest9-21ksoftirqd/023:06:540
57898340,2rtkit-daemon0-21swapper/022:07:350
57898340,2rtkit-daemon0-21swapper/021:25:440
30379993428,4cyclictest41-21ksoftirqd/322:57:313
30379993428,4cyclictest41-21ksoftirqd/322:50:533
30379993428,4cyclictest41-21ksoftirqd/322:17:263
30379993428,4cyclictest41-21ksoftirqd/319:10:053
30378993428,4cyclictest33-21ksoftirqd/220:29:072
30378993428,4cyclictest33-21ksoftirqd/220:00:592
30377993428,4cyclictest25-21ksoftirqd/122:56:121
30377993428,4cyclictest25-21ksoftirqd/122:09:261
30377993428,4cyclictest25-21ksoftirqd/121:47:561
30377993428,4cyclictest25-21ksoftirqd/121:08:571
30377993428,4cyclictest25-21ksoftirqd/119:27:071
30376993429,3cyclictest9-21ksoftirqd/019:25:080
30376993428,4cyclictest9-21ksoftirqd/020:51:510
30376993428,4cyclictest9-21ksoftirqd/020:21:030
30376993428,4cyclictest9-21ksoftirqd/020:09:070
30376993428,3cyclictest9-21ksoftirqd/020:40:000
30376993427,5cyclictest9-21ksoftirqd/021:46:590
30376993427,4cyclictest9-21ksoftirqd/021:37:080
30376993427,4cyclictest9-21ksoftirqd/000:35:340
57898330,3rtkit-daemon4694-21hddtemp_smartct22:45:341
30379993328,3cyclictest41-21ksoftirqd/323:34:503
30379993328,3cyclictest41-21ksoftirqd/322:45:473
30379993328,3cyclictest41-21ksoftirqd/321:51:593
30379993328,3cyclictest41-21ksoftirqd/321:42:573
30379993328,3cyclictest41-21ksoftirqd/300:27:443
30379993327,4cyclictest41-21ksoftirqd/322:30:503
30379993327,4cyclictest41-21ksoftirqd/321:11:323
30379993327,4cyclictest41-21ksoftirqd/319:38:583
30379993326,4cyclictest41-21ksoftirqd/320:00:283
30379993326,4cyclictest41-21ksoftirqd/300:00:043
30379993326,4cyclictest41-21ksoftirqd/300:00:033
30379993313,17cyclictest17996-21ps19:50:353
30379993312,18cyclictest12675-21cat20:45:363
30379993310,20cyclictest13227-21sed21:55:353
3037899336,16cyclictest207-21systemd-journal22:46:402
3037899334,15cyclictest1712-21ls23:45:392
30378993327,4cyclictest33-21ksoftirqd/222:11:442
30378993327,4cyclictest33-21ksoftirqd/222:11:442
30378993327,4cyclictest33-21ksoftirqd/220:16:392
30378993327,4cyclictest33-21ksoftirqd/200:18:492
30378993326,4cyclictest33-21ksoftirqd/200:30:372
30378993326,4cyclictest33-21ksoftirqd/200:30:372
30377993328,3cyclictest25-21ksoftirqd/120:10:001
30377993327,4cyclictest25-21ksoftirqd/123:37:121
30377993327,4cyclictest25-21ksoftirqd/122:22:061
30377993327,4cyclictest25-21ksoftirqd/122:11:001
30377993327,4cyclictest25-21ksoftirqd/122:11:001
30377993327,4cyclictest25-21ksoftirqd/121:40:221
30377993327,4cyclictest25-21ksoftirqd/121:24:011
30377993327,4cyclictest25-21ksoftirqd/121:02:071
30377993327,4cyclictest25-21ksoftirqd/119:31:121
30377993327,4cyclictest25-21ksoftirqd/119:21:591
30377993327,4cyclictest25-21ksoftirqd/119:10:031
30377993327,4cyclictest25-21ksoftirqd/100:35:321
30377993327,4cyclictest25-21ksoftirqd/100:27:501
30377993326,4cyclictest25-21ksoftirqd/123:00:301
30376993328,3cyclictest9-21ksoftirqd/022:35:290
30376993328,3cyclictest9-21ksoftirqd/020:05:010
30376993328,3cyclictest9-21ksoftirqd/019:55:000
30379993227,3cyclictest41-21ksoftirqd/319:31:433
30379993211,18cyclictest26088-21expr21:15:313
30378993228,3cyclictest33-21ksoftirqd/222:09:502
30378993228,3cyclictest33-21ksoftirqd/221:20:502
30378993227,3cyclictest33-21ksoftirqd/222:25:232
30378993226,4cyclictest33-21ksoftirqd/220:50:002
30378993226,4cyclictest33-21ksoftirqd/220:07:292
30377993226,4cyclictest25-21ksoftirqd/123:34:511
30377993226,4cyclictest25-21ksoftirqd/123:27:091
30376993227,3cyclictest9-21ksoftirqd/019:55:290
30376993227,3cyclictest9-21ksoftirqd/000:05:110
30376993226,4cyclictest9-21ksoftirqd/023:32:140
30376993226,4cyclictest9-21ksoftirqd/023:29:010
30376993226,4cyclictest9-21ksoftirqd/021:06:510
30376993226,4cyclictest9-21ksoftirqd/020:47:500
30376993226,4cyclictest9-21ksoftirqd/020:42:490
3037999315,2cyclictest4113-21latency_hist22:45:013
30379993127,2cyclictest139391ptp4l19:45:533
30379993125,4cyclictest41-21ksoftirqd/322:00:543
30379993125,4cyclictest41-21ksoftirqd/320:41:033
3037999312,4cyclictest0-21swapper/322:10:313
3037999312,4cyclictest0-21swapper/322:10:313
3037899315,25cyclictest7078-21kworker/2:119:15:452
30378993126,3cyclictest33-21ksoftirqd/223:32:192
30378993126,3cyclictest33-21ksoftirqd/220:32:002
30378993125,4cyclictest33-21ksoftirqd/222:43:292
30378993125,4cyclictest33-21ksoftirqd/221:08:462
30378993125,4cyclictest33-21ksoftirqd/219:27:092
30377993126,3cyclictest25-21ksoftirqd/120:51:241
30377993126,3cyclictest25-21ksoftirqd/119:44:481
30377993125,4cyclictest25-21ksoftirqd/121:17:271
30377993125,4cyclictest25-21ksoftirqd/120:57:021
30377993125,4cyclictest25-21ksoftirqd/120:15:501
30377993125,4cyclictest25-21ksoftirqd/120:04:071
30376993127,3cyclictest9-21ksoftirqd/019:14:590
30376993126,3cyclictest9-21ksoftirqd/019:30:350
30376993125,4cyclictest9-21ksoftirqd/023:35:290
30376993125,4cyclictest9-21ksoftirqd/022:21:290
30376993125,4cyclictest9-21ksoftirqd/021:57:150
30376993125,4cyclictest9-21ksoftirqd/020:57:490
30376993125,4cyclictest9-21ksoftirqd/020:25:200
30376993125,3cyclictest9-21ksoftirqd/019:40:010
30379993025,3cyclictest41-21ksoftirqd/320:54:383
30379993025,3cyclictest41-21ksoftirqd/320:32:233
30379993025,3cyclictest41-21ksoftirqd/300:23:593
30379993024,4cyclictest41-21ksoftirqd/323:04:133
30379993024,4cyclictest41-21ksoftirqd/319:44:033
30379993024,4cyclictest41-21ksoftirqd/319:22:283
30379993024,4cyclictest41-21ksoftirqd/300:12:243
30379993023,5cyclictest41-21ksoftirqd/323:15:283
30379993013,14cyclictest41-21ksoftirqd/321:25:003
30379993013,14cyclictest17271-21/usr/sbin/munin22:05:543
30379993010,17cyclictest3155-21/usr/sbin/munin23:50:333
3037899308,20cyclictest23741-21kworker/2:200:35:332
3037899306,21cyclictest32507-21kworker/2:000:05:372
30378993025,3cyclictest33-21ksoftirqd/223:57:432
30378993025,3cyclictest33-21ksoftirqd/219:22:482
30378993024,4cyclictest33-21ksoftirqd/222:34:392
30378993024,4cyclictest33-21ksoftirqd/221:41:112
30377993025,3cyclictest25-21ksoftirqd/120:45:181
30377993024,4cyclictest25-21ksoftirqd/122:36:061
30377993024,4cyclictest25-21ksoftirqd/121:53:181
30377993024,4cyclictest25-21ksoftirqd/121:38:181
30377993024,4cyclictest25-21ksoftirqd/100:00:581
30377993024,4cyclictest25-21ksoftirqd/100:00:581
30377993024,3cyclictest25-21ksoftirqd/120:21:401
30377993023,5cyclictest25-21ksoftirqd/119:49:591
30376993025,3cyclictest9-21ksoftirqd/022:41:500
30376993025,3cyclictest9-21ksoftirqd/021:14:500
30376993025,3cyclictest9-21ksoftirqd/020:30:050
30376993025,2cyclictest9-21ksoftirqd/019:40:110
30376993024,4cyclictest9-21ksoftirqd/022:13:140
30376993024,4cyclictest9-21ksoftirqd/022:13:140
30376993024,4cyclictest9-21ksoftirqd/021:41:450
30376993024,4cyclictest9-21ksoftirqd/021:22:530
30376993024,4cyclictest9-21ksoftirqd/021:17:400
30376993024,4cyclictest9-21ksoftirqd/019:46:400
30376993024,4cyclictest9-21ksoftirqd/000:01:540
30376993024,4cyclictest9-21ksoftirqd/000:01:540
30379992924,3cyclictest41-21ksoftirqd/321:47:263
30379992923,4cyclictest41-21ksoftirqd/323:47:053
30379992923,4cyclictest41-21ksoftirqd/300:08:313
3037899297,19cyclictest9096-21kworker/2:123:35:312
30378992924,3cyclictest33-21ksoftirqd/223:01:432
30378992923,4cyclictest33-21ksoftirqd/222:51:552
30378992923,4cyclictest33-21ksoftirqd/220:37:172
30377992924,3cyclictest25-21ksoftirqd/123:17:451
30377992924,3cyclictest25-21ksoftirqd/121:57:571
30377992924,3cyclictest25-21ksoftirqd/100:10:201
30377992923,4cyclictest25-21ksoftirqd/122:30:081
30377992923,4cyclictest25-21ksoftirqd/122:27:071
30377992923,4cyclictest25-21ksoftirqd/121:25:501
30377992923,3cyclictest25-21ksoftirqd/121:30:291
30376992924,3cyclictest9-21ksoftirqd/023:52:590
30376992924,3cyclictest9-21ksoftirqd/022:29:510
30376992924,3cyclictest9-21ksoftirqd/019:20:070
30376992923,4cyclictest9-21ksoftirqd/022:50:210
30376992923,4cyclictest9-21ksoftirqd/022:19:160
30376992923,4cyclictest9-21ksoftirqd/020:13:440
30379992823,3cyclictest41-21ksoftirqd/323:56:563
30379992823,3cyclictest41-21ksoftirqd/323:05:513
30379992823,3cyclictest41-21ksoftirqd/320:25:013
30379992823,3cyclictest41-21ksoftirqd/320:05:143
30379992822,4cyclictest41-21ksoftirqd/323:12:583
30379992822,4cyclictest41-21ksoftirqd/321:33:183
3037899286,9cyclictest30567-21/usr/sbin/munin21:25:322
3037899286,20cyclictest26559-21kworker/2:021:45:332
30378992823,3cyclictest33-21ksoftirqd/220:14:072
30378992822,4cyclictest33-21ksoftirqd/223:17:112
30378992822,4cyclictest33-21ksoftirqd/220:43:112
30377992823,3cyclictest25-21ksoftirqd/123:54:381
30377992823,3cyclictest25-21ksoftirqd/122:43:361
30377992823,3cyclictest25-21ksoftirqd/120:36:241
30377992822,4cyclictest25-21ksoftirqd/120:43:261
30377992822,4cyclictest25-21ksoftirqd/100:30:461
30377992822,4cyclictest25-21ksoftirqd/100:30:461
30376992823,3cyclictest9-21ksoftirqd/000:12:370
30376992822,4cyclictest9-21ksoftirqd/022:56:020
30376992822,4cyclictest9-21ksoftirqd/021:51:160
3037999276,4cyclictest30125-21irqrtprio20:15:353
3037999272,3cyclictest0-21swapper/300:35:333
30379992722,3cyclictest41-21ksoftirqd/321:08:123
30379992721,4cyclictest41-21ksoftirqd/320:24:023
3037999270,10cyclictest638-21expr19:15:293
3037899277,18cyclictest26559-21kworker/2:021:50:172
30378992722,3cyclictest33-21ksoftirqd/221:32:152
30378992722,3cyclictest33-21ksoftirqd/200:25:012
3037899271,23cyclictest32507-21kworker/2:000:10:122
30377992722,3cyclictest25-21ksoftirqd/119:39:081
30377992722,3cyclictest25-21ksoftirqd/100:08:371
30377992721,4cyclictest25-21ksoftirqd/121:14:311
30377992720,5cyclictest25-21ksoftirqd/122:16:491
30376992722,3cyclictest9-21ksoftirqd/023:47:140
30376992722,3cyclictest9-21ksoftirqd/023:05:000
30376992721,4cyclictest9-21ksoftirqd/023:59:330
30376992721,4cyclictest9-21ksoftirqd/000:28:260
3037999263,4cyclictest22789-21fschecks_count00:30:343
3037999263,4cyclictest22789-21fschecks_count00:30:343
30379992620,4cyclictest41-21ksoftirqd/300:16:133
30378992621,3cyclictest33-21ksoftirqd/219:30:022
30377992621,3cyclictest25-21ksoftirqd/123:22:551
30377992621,3cyclictest25-21ksoftirqd/119:59:281
30377992620,4cyclictest25-21ksoftirqd/120:31:391
30376992621,3cyclictest9-21ksoftirqd/023:20:140
30376992621,3cyclictest9-21ksoftirqd/022:05:000
30376992621,3cyclictest9-21ksoftirqd/021:03:270
30376992621,3cyclictest9-21ksoftirqd/000:23:510
3037999252,3cyclictest0-21swapper/323:25:323
30377992520,3cyclictest25-21ksoftirqd/122:52:151
30376992520,3cyclictest9-21ksoftirqd/023:41:450
30376992519,3cyclictest9-21ksoftirqd/021:35:000
57898240,1rtkit-daemon0-21swapper/022:49:000
30377992419,3cyclictest25-21ksoftirqd/119:18:331
30376992419,3cyclictest9-21ksoftirqd/000:32:590
30376992419,3cyclictest9-21ksoftirqd/000:32:580
30377992318,3cyclictest25-21ksoftirqd/120:14:551
30377992317,4cyclictest25-21ksoftirqd/122:00:031
30377992217,3cyclictest25-21ksoftirqd/119:50:131
30377992116,3cyclictest25-21ksoftirqd/123:46:511
3037899200,17cyclictest19455-21latency_hist19:55:012
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional