You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-02 - 17:57

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Sun Nov 02, 2025 12:44:48)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1403817995825,6cyclictest0-21swapper/011:15:270
1403830995732,4cyclictest1431619-21unixbench_multi08:25:263
1403822995732,21cyclictest0-21swapper/111:10:191
1403825995337,12cyclictest311ktimers/207:40:152
1403825994841,4cyclictest1518204-21grep12:40:002
1403825994841,4cyclictest1487282-21cron11:10:002
1403830994436,5cyclictest1450858-21grep09:25:013
1403817994434,7cyclictest1473223-21idleruntime-cro10:30:010
1403822994131,6cyclictest0-21swapper/109:20:021
1403825994030,5cyclictest0-21swapper/208:50:002
1403830993826,8cyclictest0-21swapper/308:40:003
1403830993826,8cyclictest0-21swapper/308:40:003
1403817993829,5cyclictest1409476-21cron07:25:010
1403830993724,8cyclictest0-21swapper/308:35:003
1403822993727,7cyclictest1497531-21idleruntime-cro11:40:001
1403822993726,7cyclictest440-21cron08:50:001
1403817993730,4cyclictest1516496-21idleruntime-cro12:35:000
1403830993628,4cyclictest0-21swapper/312:05:143
1403825993629,5cyclictest1498935-21kworker/u8:1+events_unbound11:45:272
1403825993629,5cyclictest1498935-21kworker/u8:1+events_unbound11:45:272
1403825993623,10cyclictest311ktimers/207:55:152
1403825993617,7cyclictest131rcu_preempt07:45:122
1403817993627,4cyclictest0-21swapper/012:05:280
1403817993626,8cyclictest121ktimers/011:50:130
1403817993626,6cyclictest1434169-21fschecks_count08:35:170
1403817993626,6cyclictest1434169-21fschecks_count08:35:170
1403817993626,6cyclictest0-21swapper/010:05:010
1403817993626,6cyclictest0-21swapper/010:05:010
1403817993625,7cyclictest1412454-21grep07:30:260
1403825993527,4cyclictest0-21swapper/212:00:002
1403822993526,6cyclictest0-21swapper/108:20:011
1403830993426,5cyclictest0-21swapper/311:40:203
1403830993426,5cyclictest0-21swapper/311:20:003
1403830993426,4cyclictest0-21swapper/308:20:183
1403830993425,5cyclictest0-21swapper/312:30:263
1403830993423,7cyclictest0-21swapper/310:25:263
1403825993414,7cyclictest131rcu_preempt12:00:112
1403822993425,6cyclictest0-21swapper/110:35:011
1403830993326,4cyclictest0-21swapper/311:45:193
1403830993326,4cyclictest0-21swapper/311:45:193
1403830993323,6cyclictest0-21swapper/311:10:003
1403825993319,5cyclictest1405344-21kworker/u8:1+events_unbound07:23:282
1403825993315,11cyclictest1477210-21diskstats10:40:172
1403825993314,5cyclictest1450553-21kworker/u8:0+events_unbound09:27:042
1403822993323,6cyclictest1455946-21auditctl09:40:001
1403822993321,7cyclictest0-21swapper/108:05:261
1403817993326,4cyclictest0-21swapper/012:20:000
1403817993325,5cyclictest0-21swapper/010:00:000
1403817993325,4cyclictest0-21swapper/007:50:250
1403830993225,4cyclictest0-21swapper/309:10:253
1403825993225,5cyclictest1409462-21kworker/u8:0+events_unbound07:39:452
1403825993224,4cyclictest0-21swapper/210:05:272
1403825993223,4cyclictest0-21swapper/211:00:002
1403822993226,3cyclictest0-21swapper/107:40:011
1403822993224,4cyclictest0-21swapper/111:45:291
1403822993224,4cyclictest0-21swapper/111:45:291
1403822993223,6cyclictest0-21swapper/112:40:001
1403822993223,4cyclictest0-21swapper/110:00:001
1403830993124,3cyclictest0-21swapper/310:00:263
1403830993124,3cyclictest0-21swapper/310:00:263
1403830993123,4cyclictest0-21swapper/309:05:253
1403830993122,5cyclictest0-21swapper/310:40:003
1403825993123,4cyclictest0-21swapper/210:50:172
1403825993123,4cyclictest0-21swapper/208:50:242
1403825993121,4cyclictest1493939-21kworker/u8:2+events_unbound11:28:042
1403822993123,5cyclictest0-21swapper/111:55:001
1403822993123,4cyclictest0-21swapper/109:05:161
1403822993123,4cyclictest0-21swapper/109:00:011
1403822993122,4cyclictest0-21swapper/110:45:281
1403822993121,7cyclictest1471518-21apt10:25:011
1403822993121,6cyclictest0-21swapper/107:25:251
1403822993121,6cyclictest0-21swapper/107:25:251
1403817993125,3cyclictest0-21swapper/011:20:250
1403817993122,6cyclictest1421403-21sh08:00:000
1403830993022,4cyclictest0-21swapper/308:00:253
1403825993023,5cyclictest1469699-21kworker/u8:1+events_unbound10:30:262
1403825993023,4cyclictest1507318-21kworker/u8:3+events_unbound12:30:252
1403825993019,6cyclictest1418450-21fschecks_time07:50:162
140382599301,14cyclictest0-21swapper/208:40:132
1403822993024,3cyclictest0-21swapper/107:45:011
1403822993022,4cyclictest0-21swapper/109:00:251
1403822993021,6cyclictest0-21swapper/112:00:001
1403822993021,6cyclictest0-21swapper/110:25:171
1403817993023,3cyclictest0-21swapper/011:05:010
1403817993022,4cyclictest0-21swapper/010:40:220
1403817993021,6cyclictest0-21swapper/010:25:010
1403817993019,8cyclictest1459360-21idleruntime-cro09:50:000
1403817993017,8cyclictest215-21dbus-daemon08:19:400
1403830992922,4cyclictest0-21swapper/308:45:343
1403830992921,4cyclictest0-21swapper/311:20:253
1403830992914,11cyclictest391ktimers/307:10:123
1403825992923,4cyclictest1425396-21kworker/u8:3+events_unbound09:39:052
1403825992923,4cyclictest1425396-21kworker/u8:3+events_unbound09:09:532
1403825992922,4cyclictest1430767-21fschecks_count08:25:162
1403825992921,4cyclictest0-21swapper/209:30:162
1403825992920,7cyclictest1507318-21kworker/u8:3+events_unbound12:09:322
1403825992914,5cyclictest1454079-21kworker/u8:1+events_unbound09:44:112
140381799298,4cyclictest14952732sort11:30:250
1403817992922,4cyclictest1450859-21munin-plugin-st09:25:010
1403817992922,4cyclictest1405553-21munin-node07:15:010
1403817992922,3cyclictest0-21swapper/009:05:250
1403817992919,6cyclictest0-21swapper/011:10:000
1403830992819,6cyclictest1495807-21sh11:35:003
1403830992819,6cyclictest1459776-21grep09:50:153
1403830992819,6cyclictest1459776-21grep09:50:153
1403830992819,5cyclictest0-21swapper/307:55:013
1403830992818,6cyclictest0-21swapper/308:50:243
1403830992815,9cyclictest1442323-21tr09:00:013
1403825992820,4cyclictest0-21swapper/208:20:012
1403825992818,7cyclictest0-21swapper/210:00:002
1403825992818,6cyclictest1469322-21unixbench_multi10:15:252
1403825992818,6cyclictest0-21swapper/211:20:002
1403825992817,7cyclictest0-21swapper/212:10:292
140382599281,13cyclictest0-21swapper/211:43:542
140382599281,12cyclictest0-21swapper/210:48:422
1403822992822,3cyclictest0-21swapper/111:15:201
1403822992820,4cyclictest0-21swapper/112:30:261
1403822992820,4cyclictest0-21swapper/109:40:171
1403822992819,5cyclictest0-21swapper/109:45:191
1403822992818,7cyclictest1430405-21sed08:25:011
1403817992821,4cyclictest0-21swapper/012:35:260
1403817992821,3cyclictest0-21swapper/010:35:260
1403817992820,5cyclictest0-21swapper/010:50:260
1403817992819,6cyclictest0-21swapper/009:00:250
1403817992819,6cyclictest0-21swapper/008:25:010
1403817992810,15cyclictest1406293-21chrt07:15:150
1403830992721,4cyclictest1449151-21sendmail09:20:013
1403830992721,3cyclictest1424830-21kthreadd08:10:003
1403830992719,4cyclictest1483210-21tail10:55:383
1403830992719,4cyclictest0-21swapper/310:05:173
1403830992718,6cyclictest1444012-21sh09:05:013
1403830992718,5cyclictest0-21swapper/310:00:003
140382599277,10cyclictest32-21ksoftirqd/207:30:022
140382599277,10cyclictest32-21ksoftirqd/207:30:012
140382599274,7cyclictest299024-21kworker/2:1-events10:04:182
140382599274,7cyclictest299024-21kworker/2:1-events10:04:182
1403825992721,4cyclictest1485355-21kworker/u8:2+events_unbound11:10:142
1403825992721,4cyclictest1425396-21kworker/u8:3+events_unbound09:00:242
1403825992720,5cyclictest1507318-21kworker/u8:3+events_unbound12:20:122
1403825992720,5cyclictest1460716-21kworker/u8:2+events_unbound09:52:082
1403825992720,5cyclictest1460716-21kworker/u8:2+events_unbound09:52:082
1403825992719,5cyclictest1495658-21kworker/u8:1+events_unbound11:35:162
1403825992719,4cyclictest0-21swapper/211:50:272
1403825992714,9cyclictest1-21systemd10:25:082
1403825992714,5cyclictest1447105-21kworker/u8:0+events_unbound09:16:102
140382599270,17cyclictest1470178-21diskstats10:20:182
1403822992720,4cyclictest0-21swapper/112:20:261
1403822992719,5cyclictest0-21swapper/111:00:171
1403822992719,4cyclictest0-21swapper/107:45:251
1403822992717,6cyclictest1494293-21cat11:30:011
1403817992721,3cyclictest0-21swapper/008:30:200
1403817992720,4cyclictest1437192-21sh08:45:000
1403817992720,3cyclictest0-21swapper/011:10:190
1403817992720,3cyclictest0-21swapper/009:00:020
1403817992718,5cyclictest0-21swapper/012:00:010
1403817992716,8cyclictest1465473-21ntp_kernel_pll_10:05:220
1403817992714,10cyclictest1479544-21sensors_temp10:45:260
1403817992710,14cyclictest1454282-21latency_hist09:35:010
140381799270,25cyclictest0-21swapper/010:10:130
1403830992618,5cyclictest0-21swapper/307:55:273
1403830992618,4cyclictest0-21swapper/309:35:263
1403830992616,6cyclictest0-21swapper/312:40:003
1403825992620,4cyclictest1490426-21kworker/u8:2+events_unbound11:20:412
1403825992620,4cyclictest1450553-21kworker/u8:0+events_unbound09:47:042
1403825992620,3cyclictest1514384-21head12:25:262
1403825992619,5cyclictest1423349-21kworker/u8:2+events_unbound08:07:442
1403825992619,4cyclictest0-21swapper/209:00:012
1403825992618,6cyclictest1412496-21kworker/u8:1+events_unbound07:31:422
1403822992619,4cyclictest0-21swapper/110:50:261
1403822992618,4cyclictest0-21swapper/110:55:181
1403822992618,4cyclictest0-21swapper/108:00:021
1403822992618,4cyclictest0-21swapper/107:50:251
1403822992618,4cyclictest0-21swapper/107:20:011
1403822992617,6cyclictest0-21swapper/112:25:261
1403822992617,6cyclictest0-21swapper/110:00:261
1403822992617,6cyclictest0-21swapper/110:00:261
1403822992614,6cyclictest1486839-21grep11:05:251
1403817992618,5cyclictest0-21swapper/007:25:160
1403817992618,5cyclictest0-21swapper/007:25:160
140381799261,23cyclictest0-21swapper/007:45:120
1403830992518,4cyclictest0-21swapper/312:00:153
1403830992518,4cyclictest0-21swapper/310:10:253
1403830992518,3cyclictest0-21swapper/310:50:163
1403830992517,5cyclictest0-21swapper/307:40:193
1403830992517,4cyclictest0-21swapper/312:10:263
1403830992517,4cyclictest0-21swapper/311:05:013
140383099251,12cyclictest0-21swapper/308:15:153
140382599259,6cyclictest32-21ksoftirqd/212:15:282
140382599257,3cyclictest0-21swapper/209:15:012
140382599254,5cyclictest299024-21kworker/2:1-events08:12:472
1403825992518,5cyclictest1425396-21kworker/u8:3+events_unbound08:30:432
1403825992518,4cyclictest1425396-21kworker/u8:3+events_unbound09:24:022
1403825992516,5cyclictest1434184-21tune2fs08:35:172
1403825992516,5cyclictest1434184-21tune2fs08:35:172
1403825992513,8cyclictest301rcuc/207:10:132
1403822992519,3cyclictest0-21swapper/108:40:231
1403822992517,5cyclictest0-21swapper/111:20:251
1403822992517,4cyclictest0-21swapper/110:10:001
1403822992516,6cyclictest1435344-21seq08:38:391
1403822992516,6cyclictest1435344-21seq08:38:391
1403822992516,6cyclictest1409254-21seq07:22:301
1403822992515,8cyclictest1506199-21sed12:05:011
1403822992515,7cyclictest1511201-21seq12:18:011
1403822992515,7cyclictest1494336-21seq11:30:081
1403822992514,8cyclictest1476540-21seq10:39:061
1403817992519,3cyclictest0-21swapper/011:40:190
1403817992518,4cyclictest1469339-21unixbench_multi10:15:250
1403817992514,7cyclictest215-21dbus-daemon08:04:380
1403830992417,4cyclictest1471119-21grep10:20:303
1403830992417,3cyclictest0-21swapper/307:30:263
1403830992416,5cyclictest391ktimers/309:30:483
1403830992416,5cyclictest0-21swapper/311:50:173
1403830992416,5cyclictest0-21swapper/310:50:003
1403830992416,4cyclictest0-21swapper/307:30:003
1403830992416,4cyclictest0-21swapper/307:30:003
1403830992415,6cyclictest1493033-21grep11:25:223
140382599248,6cyclictest131rcu_preempt11:00:132
140382599243,5cyclictest32-21ksoftirqd/208:00:252
1403825992418,4cyclictest1493939-21kworker/u8:2+events_unbound11:34:032
1403825992418,4cyclictest1469699-21kworker/u8:1+events_unbound10:35:112
1403825992418,3cyclictest0-21swapper/207:17:012
1403825992417,5cyclictest1467963-21kworker/u8:0+events_unbound10:14:232
1403825992417,4cyclictest0-21swapper/208:25:012
1403822992415,6cyclictest1405216-21seq07:12:221
1403822992414,8cyclictest1431682-21users08:25:271
1403822992414,7cyclictest1509684-21basename12:15:001
1403822992414,7cyclictest1450588-21seq09:22:011
1403817992418,3cyclictest1512665-21unixbench_singl12:20:260
1403817992417,4cyclictest0-21swapper/008:25:260
1403817992415,6cyclictest1499608-21grep11:45:190
1403817992415,6cyclictest1499608-21grep11:45:190
1403817992414,7cyclictest215-21dbus-daemon09:14:510
140381799241,21cyclictest0-21swapper/010:55:120
140381799241,19cyclictest0-21swapper/008:52:220
1403817992410,12cyclictest1423132-21latency_hist08:05:010
140381799240,20cyclictest0-21swapper/012:29:030
140381799240,20cyclictest0-21swapper/012:10:440
1403830992317,3cyclictest0-21swapper/311:35:253
1403830992317,3cyclictest0-21swapper/309:50:013
1403830992316,3cyclictest0-21swapper/311:55:263
1403830992315,4cyclictest0-21swapper/310:40:113
1403830992314,6cyclictest0-21swapper/307:35:173
1403822992317,3cyclictest0-21swapper/111:40:261
1403822992317,3cyclictest0-21swapper/108:00:171
1403822992314,6cyclictest1507912-21seq12:09:251
1403822992314,6cyclictest1453557-21expr09:30:241
1403822992314,6cyclictest1447286-21seq09:13:341
1403822992313,7cyclictest1478535-21seq10:44:571
1403822992313,7cyclictest1467080-21memory10:10:201
1403822992313,6cyclictest0-21swapper/107:30:261
1403822992312,6cyclictest1451942-21cat09:25:281
1403817992317,3cyclictest0-21swapper/011:35:240
1403817992317,3cyclictest0-21swapper/010:30:180
1403817992317,3cyclictest0-21swapper/009:28:030
1403817992316,3cyclictest0-21swapper/012:00:200
1403817992316,3cyclictest0-21swapper/011:27:390
1403817992315,5cyclictest1414976-21grep07:40:190
1403817992310,4cyclictest131rcu_preempt09:37:240
1403830992216,3cyclictest0-21swapper/308:10:263
1403830992216,3cyclictest0-21swapper/307:50:013
1403830992216,3cyclictest0-21swapper/307:15:263
1403830992214,5cyclictest1452584-21cat09:30:023
1403830992214,4cyclictest0-21swapper/312:15:183
1403822992216,3cyclictest0-21swapper/110:15:261
1403822992212,6cyclictest1440110-21grep08:50:241
1403817992216,3cyclictest0-21swapper/009:15:270
1403817992213,6cyclictest1456693-21cat09:40:200
1403817992213,6cyclictest1425137-21readlink08:10:010
1403830992115,3cyclictest0-21swapper/311:10:273
1403830992115,3cyclictest0-21swapper/310:30:283
1403830992115,3cyclictest0-21swapper/308:40:143
1403822992112,6cyclictest0-21swapper/108:30:211
1403822992111,6cyclictest0-21swapper/108:10:271
140381799211,18cyclictest0-21swapper/007:35:280
1403830992013,5cyclictest391ktimers/312:20:223
1403822992014,4cyclictest1459760-21fschecks_count09:50:151
1403822992014,4cyclictest1459760-21fschecks_count09:50:151
1403830991711,3cyclictest0-21swapper/312:25:143
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional