You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-15 - 07:50

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #b, slot #5

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  Phytec
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.

Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the highest latencies:
System rackbslot5s.osadl.org (updated Sat Nov 15, 2025 00:44:47)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
1303553995342,7cyclictest1391467-21tail23:20:260
1303562995143,5cyclictest1402011-21kworker/u8:2+events_unbound00:13:282
1303567994937,8cyclictest391ktimers/320:00:143
1303567994937,8cyclictest391ktimers/320:00:133
1303558994835,8cyclictest1410697-21sh00:19:591
1303558994634,8cyclictest1314324-21sendmail19:40:001
1303562994532,9cyclictest311ktimers/220:00:142
1303562994532,9cyclictest311ktimers/220:00:142
1303567994231,7cyclictest1417534-21cron00:40:003
1303567994231,7cyclictest1417534-21cron00:39:593
1303553994030,7cyclictest1386605-21idleruntime-cro23:10:000
130356299390,13cyclictest0-21swapper/220:55:142
1303553993932,4cyclictest299-21systemd-logind20:01:460
1303553993932,4cyclictest299-21systemd-logind20:01:450
1303567993828,7cyclictest1391466-21unixbench_multi23:20:273
1303562993830,4cyclictest1397049-21cron23:40:002
1303562993830,4cyclictest0-21swapper/222:05:002
1303562993827,7cyclictest1339438-21grep20:50:262
130356299381,14cyclictest0-21swapper/223:55:122
1303553993830,4cyclictest0-21swapper/020:35:000
1303553993829,4cyclictest0-21swapper/000:08:340
1303567993727,6cyclictest1337743-21grep20:45:303
1303567993726,7cyclictest1324129-21grep20:05:283
1303567993726,6cyclictest1306155-21cut19:15:153
130356299371,13cyclictest0-21swapper/221:10:132
1303558993728,5cyclictest1356704-21unixbench_multi21:40:251
1303558993724,8cyclictest1401677-21grep23:50:251
130355399372,15cyclictest1390218-21date23:20:010
130356799368,5cyclictest381rcuc/323:20:013
1303567993628,4cyclictest0-21swapper/322:30:273
1303558993625,7cyclictest1370626-21grep22:20:251
1303558993625,7cyclictest1370626-21grep22:20:241
1303558993625,6cyclictest0-21swapper/120:30:261
1303553993629,3cyclictest0-21swapper/019:40:000
1303558993528,5cyclictest1303175-21kworker/u8:0+events_unbound19:11:391
1303558993523,8cyclictest1393232-21grep23:25:281
1303553993526,5cyclictest0-21swapper/022:40:000
1303553993525,6cyclictest0-21swapper/020:50:260
1303567993426,4cyclictest0-21swapper/321:30:283
1303567993426,4cyclictest0-21swapper/321:20:203
1303567993423,7cyclictest1330909-21grep20:25:263
1303562993427,4cyclictest1314311-21latency_hist19:40:012
1303562993426,4cyclictest0-21swapper/223:45:002
1303562993425,5cyclictest0-21swapper/219:15:172
1303558993426,4cyclictest0-21swapper/120:35:281
130355399349,13cyclictest11-21ksoftirqd/019:30:020
130355399347,5cyclictest11-21ksoftirqd/000:30:270
130355399347,5cyclictest11-21ksoftirqd/000:30:270
1303553993420,8cyclictest131rcu_preempt20:18:340
1303553993419,11cyclictest121ktimers/023:35:150
1303567993326,4cyclictest0-21swapper/319:25:173
1303567993324,6cyclictest1312152-21grep19:30:273
1303562993327,4cyclictest1407006-21kworker/u8:0+events_unbound00:33:462
1303562993327,4cyclictest1407006-21kworker/u8:0+events_unbound00:33:462
1303562993326,4cyclictest1352072-21munin-plugin-st21:30:012
1303562993326,3cyclictest0-21swapper/223:00:262
1303562993325,4cyclictest0-21swapper/221:20:212
1303562993322,8cyclictest1348655-21sendmail21:20:012
1303562993322,5cyclictest1368950-21kworker/u8:0+events_unbound22:47:162
1303558993323,5cyclictest0-21swapper/121:35:271
1303553993326,3cyclictest0-21swapper/022:30:000
1303553993319,7cyclictest131rcu_preempt22:43:100
1303567993225,4cyclictest0-21swapper/323:25:273
1303567993224,4cyclictest0-21swapper/322:25:273
1303567993222,4cyclictest131rcu_preempt20:20:053
1303567993218,10cyclictest391ktimers/300:25:133
1303567993214,8cyclictest0-21swapper/320:35:143
1303567993214,10cyclictest1395297-21kworker/u8:3-events_power_efficient23:44:363
1303562993226,4cyclictest1315644-21kworker/u8:3+events_unbound20:05:422
1303562993224,4cyclictest0-21swapper/222:30:282
1303562993222,7cyclictest1393641-21idleruntime-cro23:30:002
1303562993215,6cyclictest1360414-21kworker/u8:1+events_unbound22:05:142
130355399329,5cyclictest151rcuc/021:00:240
130355399321,7cyclictest1360790-21cron21:55:000
130356799316,13cyclictest40-21ksoftirqd/323:45:223
130356799315,14cyclictest40-21ksoftirqd/322:00:253
130356799315,14cyclictest40-21ksoftirqd/321:25:213
130356299318,12cyclictest0-21swapper/200:00:132
130356299317,5cyclictest131rcu_preempt00:10:002
1303562993125,4cyclictest1337973-21kworker/u8:0+events_unbound21:02:002
1303562993123,4cyclictest0-21swapper/221:50:262
1303562993120,7cyclictest0-21swapper/221:50:012
1303562993118,9cyclictest1410726-21basename00:20:012
1303562993115,5cyclictest1315644-21kworker/u8:3+events_unbound19:53:312
1303558993123,4cyclictest0-21swapper/120:00:261
1303558993123,4cyclictest0-21swapper/120:00:261
130355399319,6cyclictest0-21swapper/023:55:230
1303553993124,4cyclictest1351602-21unixbench_multi21:25:250
1303553993122,4cyclictest0-21swapper/020:46:560
1303553993121,6cyclictest1334354-21grep20:35:280
1303553993121,6cyclictest0-21swapper/019:55:010
1303553993120,7cyclictest0-21swapper/019:55:260
1303553993120,6cyclictest1367217-21grep22:10:250
1303553993117,4cyclictest131rcu_preempt22:02:330
1303553993117,10cyclictest121ktimers/022:50:130
130356799305,5cyclictest40-21ksoftirqd/319:55:013
130356799305,5cyclictest381rcuc/323:05:003
130356799305,15cyclictest40-21ksoftirqd/323:15:013
130356799305,15cyclictest40-21ksoftirqd/319:35:163
130356799304,6cyclictest1395356-21awk23:35:003
1303567993022,4cyclictest0-21swapper/321:50:013
1303567993021,4cyclictest0-21swapper/321:00:263
1303567993010,11cyclictest131rcu_preempt23:08:073
1303567993010,10cyclictest131rcu_preempt21:35:233
1303562993022,4cyclictest0-21swapper/222:25:272
1303562993018,8cyclictest1375949-21grep22:35:272
1303562993018,8cyclictest1-21systemd20:31:512
1303562993017,5cyclictest1395022-21kworker/u8:1+events_unbound23:31:482
1303562993015,6cyclictest1351712-21kworker/u8:1+events_unbound21:33:452
1303562993014,6cyclictest1397025-21kworker/u8:0+events_unbound23:45:062
1303558993023,4cyclictest1378084-21cron22:45:001
1303558993022,4cyclictest0-21swapper/121:30:011
1303558993022,4cyclictest0-21swapper/120:10:261
1303558993022,4cyclictest0-21swapper/119:20:011
1303558993021,4cyclictest1339896-21cron20:55:001
1303558993019,8cyclictest231ktimers/122:05:121
130355399308,5cyclictest11-21ksoftirqd/023:35:020
130355399308,4cyclictest11-21ksoftirqd/020:05:190
1303553993021,5cyclictest0-21swapper/022:15:280
1303553993021,5cyclictest0-21swapper/021:15:280
1303553993014,10cyclictest1315644-21kworker/u8:3-events_freezable_power_19:41:440
1303567992923,4cyclictest1321153-21sendmail20:00:013
1303567992922,4cyclictest0-21swapper/322:40:273
1303567992921,4cyclictest0-21swapper/320:30:253
1303567992918,4cyclictest131rcu_preempt22:15:103
1303562992923,4cyclictest1387707-21kworker/u8:2+events_unbound23:15:182
1303562992921,6cyclictest1308923-21kworker/u8:0+events_unbound19:45:192
1303562992920,5cyclictest0-21swapper/221:10:002
1303562992919,7cyclictest1316029-21auditctl19:45:012
1303562992919,6cyclictest1388313-21grep23:15:002
1303562992913,6cyclictest1324530-21kworker/u8:0+events_unbound20:10:022
1303558992922,5cyclictest1315644-21kworker/u8:3+events_unbound19:46:441
1303558992922,4cyclictest0-21swapper/121:00:001
1303558992921,5cyclictest0-21swapper/120:15:261
130355899291,10cyclictest1414139-21awk00:30:001
130355399299,12cyclictest131rcu_preempt00:11:460
130355399296,6cyclictest11-21ksoftirqd/023:30:000
130355399292,11cyclictest1362529-21sendmail-msp22:00:010
130355399291,6cyclictest1344210-21ls21:05:240
1303553992916,7cyclictest131rcu_preempt23:51:530
1303553992910,6cyclictest11-21ksoftirqd/023:00:000
130356799288,12cyclictest131rcu_preempt21:10:173
130356799287,14cyclictest1324530-21kworker/u8:0-events_freezable_power_20:10:483
130356799285,6cyclictest40-21ksoftirqd/323:40:013
130356799285,11cyclictest0-21swapper/319:45:473
130356799284,13cyclictest40-21ksoftirqd/300:31:223
130356799284,13cyclictest40-21ksoftirqd/300:31:223
130356799283,14cyclictest0-21swapper/319:20:143
1303567992819,7cyclictest391ktimers/321:05:283
1303567992819,5cyclictest0-21swapper/322:12:133
1303567992815,8cyclictest131rcu_preempt23:55:313
1303567992810,10cyclictest131rcu_preempt20:41:373
130356799280,7cyclictest40-21ksoftirqd/322:20:133
130356799280,7cyclictest40-21ksoftirqd/322:20:123
1303562992820,5cyclictest1307125-21kworker/u8:1+events_unbound19:20:302
1303562992819,6cyclictest1333474-21fschecks_count20:35:182
1303562992814,5cyclictest1363906-21kworker/u8:2+events_unbound22:13:362
1303562992810,6cyclictest1334465-21kworker/u8:2+events_unbound20:48:262
1303558992819,5cyclictest0-21swapper/100:05:011
130355399289,4cyclictest1355835-21df21:40:160
130355399289,12cyclictest131rcu_preempt19:22:150
130355399288,6cyclictest0-21swapper/021:10:130
130355399288,5cyclictest0-21swapper/023:45:280
130355399287,6cyclictest11-21ksoftirqd/019:15:140
130355399287,6cyclictest0-21swapper/022:45:250
130355399287,6cyclictest0-21swapper/021:30:270
1303553992813,4cyclictest1303548-21cyclictest00:00:100
130356799276,6cyclictest40-21ksoftirqd/322:50:153
130356799276,5cyclictest1356025-21if_eth121:40:183
130356799274,6cyclictest40-21ksoftirqd/319:45:003
130356799274,6cyclictest40-21ksoftirqd/300:00:243
130356799273,7cyclictest40-21ksoftirqd/323:53:143
1303567992721,3cyclictest0-21swapper/322:50:013
1303567992717,7cyclictest391ktimers/319:10:153
1303567992716,8cyclictest391ktimers/300:10:153
1303567992715,9cyclictest391ktimers/321:50:253
1303567992713,3cyclictest131rcu_preempt00:07:113
1303567992710,5cyclictest131rcu_preempt22:39:453
1303562992720,5cyclictest1401798-21kworker/u8:0+events_unbound23:51:152
1303562992719,5cyclictest1367239-21kworker/u8:1+events_unbound22:17:132
1303562992719,5cyclictest0-21swapper/220:20:252
1303562992718,5cyclictest0-21swapper/222:40:272
1303562992713,6cyclictest1329457-21kworker/u8:1+events_unbound20:40:152
130356299271,13cyclictest0-21swapper/219:25:112
1303558992720,4cyclictest0-21swapper/120:45:291
1303558992719,4cyclictest0-21swapper/123:35:281
1303558992719,4cyclictest0-21swapper/121:25:001
1303558992719,4cyclictest0-21swapper/100:30:271
1303558992719,4cyclictest0-21swapper/100:30:261
1303558992719,4cyclictest0-21swapper/100:05:271
1303558992718,4cyclictest0-21swapper/122:15:281
1303558992718,4cyclictest0-21swapper/120:40:271
1303558992717,6cyclictest0-21swapper/100:35:281
1303558992717,6cyclictest0-21swapper/100:35:271
1303558992716,6cyclictest0-21swapper/119:55:251
130355399277,5cyclictest0-21swapper/020:40:160
130355399277,12cyclictest131rcu_preempt00:35:210
130355399277,12cyclictest131rcu_preempt00:35:200
130355399276,6cyclictest0-21swapper/000:20:230
1303553992716,7cyclictest0-21swapper/019:30:270
1303553992713,6cyclictest1303175-21kworker/u8:0-events_unbound19:13:280
1303553992713,4cyclictest131rcu_preempt23:41:240
1303567992619,4cyclictest0-21swapper/300:20:253
1303567992617,6cyclictest391ktimers/321:15:143
130356799260,9cyclictest381rcuc/320:55:263
1303562992620,4cyclictest1355263-21kworker/u8:0+events_unbound21:38:502
1303562992620,4cyclictest1324530-21kworker/u8:0+events_unbound20:20:012
1303558992620,4cyclictest1407006-21kworker/u8:0+events_unbound00:13:361
1303558992619,4cyclictest0-21swapper/121:45:171
1303558992618,5cyclictest0-21swapper/121:55:161
1303558992618,4cyclictest0-21swapper/123:30:271
130355399268,11cyclictest131rcu_preempt22:21:560
130355399268,11cyclictest131rcu_preempt22:21:560
130355399268,11cyclictest131rcu_preempt20:27:330
130355399268,11cyclictest0-21swapper/020:20:210
130355399267,6cyclictest0-21swapper/000:15:180
130355399266,5cyclictest0-21swapper/023:00:220
1303553992618,4cyclictest1341622-21sendmail21:00:000
1303553992617,5cyclictest1412835-21grep00:25:180
1303553992615,8cyclictest1359088-21cron21:50:000
1303553992612,4cyclictest131rcu_preempt23:10:260
1303553992610,6cyclictest131rcu_preempt21:20:260
130356799258,4cyclictest131rcu_preempt20:50:173
1303567992516,6cyclictest0-21swapper/300:15:173
130356799250,8cyclictest40-21ksoftirqd/320:15:223
1303562992518,5cyclictest1362164-21kworker/u8:0+events_unbound22:00:002
1303562992518,4cyclictest1381442-21kworker/u8:0+events_unbound22:55:162
1303562992517,4cyclictest0-21swapper/219:55:162
1303562992516,6cyclictest0-21swapper/222:20:242
1303562992516,6cyclictest0-21swapper/222:20:242
1303562992514,8cyclictest1305191-21basename19:15:012
1303562992514,7cyclictest1391452-21grep23:20:272
1303558992518,5cyclictest299-21systemd-logind20:25:411
1303558992518,4cyclictest0-21swapper/121:15:271
1303558992518,4cyclictest0-21swapper/121:05:301
1303558992518,4cyclictest0-21swapper/121:00:271
1303558992517,4cyclictest1383973-21ntpq23:00:221
1303558992517,4cyclictest0-21swapper/123:45:261
1303558992515,7cyclictest0-21swapper/120:05:201
1303558992515,6cyclictest0-21swapper/122:55:261
130355399257,4cyclictest0-21swapper/022:30:250
130355399251,20cyclictest0-21swapper/022:05:110
130356799241,7cyclictest40-21ksoftirqd/321:55:213
130356299242,11cyclictest0-21swapper/223:07:102
1303562992415,6cyclictest0-21swapper/219:30:182
130355899242,17cyclictest1329688-21awk20:25:001
1303558992418,3cyclictest0-21swapper/100:20:261
1303558992417,5cyclictest165-21systemd-journal23:13:421
1303558992416,5cyclictest1388738-21tune2fs23:15:171
1303558992416,4cyclictest0-21swapper/123:55:261
130355399246,11cyclictest131rcu_preempt19:45:580
130356299233,9cyclictest131rcu_preempt00:35:252
130356299233,9cyclictest131rcu_preempt00:35:252
1303558992317,3cyclictest1353292-21grep21:30:291
1303558992316,3cyclictest0-21swapper/119:50:231
1303558992314,5cyclictest0-21swapper/122:32:141
1303558992312,8cyclictest1346039-21ntp_states21:10:231
130356299222,10cyclictest0-21swapper/222:50:482
1303562992216,4cyclictest1329457-21kworker/u8:1+events_unbound20:25:272
1303558992216,3cyclictest0-21swapper/122:45:231
1303558992215,5cyclictest165-21systemd-journal22:13:411
1303558992215,3cyclictest0-21swapper/123:05:251
1303558992215,3cyclictest0-21swapper/119:25:261
1303558992214,4cyclictest0-21swapper/123:40:271
1303558992210,9cyclictest1375439-21tr22:35:221
1303558992210,8cyclictest1372281-21grep22:25:261
1303558992115,3cyclictest0-21swapper/123:20:251
1303558992115,3cyclictest0-21swapper/122:50:161
1303558992113,6cyclictest0-21swapper/122:05:011
1303558992014,3cyclictest0-21swapper/119:20:301
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional