You are here: Home / Technical Services / OSADL QA Farm Real-time / 
2026-05-19 - 16:01

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #7, slot #4

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 376 highest latencies:
System rack7slot4s.osadl.org (updated Tue May 19, 2026 12:45:16)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
20743995116,20cyclictest35966irq/58-eth011:15:143
2072199503,37cyclictest16078-21sh10:45:141
2074399413,24cyclictest35966irq/58-eth009:55:133
2072199411,6cyclictest131rcu_preempt07:10:121
2072199402,30cyclictest19626-21ssh09:35:121
2072199401,34cyclictest28651-21ssh11:10:121
2074399392,24cyclictest35966irq/58-eth012:25:113
2072199391,28cyclictest28670-21rm09:40:121
2074399374,22cyclictest35966irq/58-eth009:35:123
20743993725,6cyclictest35966irq/58-eth011:10:123
2071299371,33cyclictest21427-21ssh12:00:130
2074399363,25cyclictest0-21swapper/312:15:143
2071299361,31cyclictest16018-21ssh12:15:140
2074399352,16cyclictest35966irq/58-eth009:45:133
2072199350,24cyclictest23301-21ssh09:55:141
20743993416,12cyclictest0-21swapper/311:41:593
2073399347,22cyclictest18046-1kworker/u9:011:03:592
2071299334,25cyclictest21416-21ssh10:30:120
2071299322,28cyclictest17849-21ssh11:40:140
2074399317,17cyclictest0-21swapper/312:09:003
20733993122,7cyclictest6886-21sh09:10:132
2071299312,23cyclictest6903-21ssh09:10:140
20712993117,11cyclictest12-21ksoftirqd/010:35:150
2074399303,17cyclictest35966irq/58-eth007:10:133
2071299306,18cyclictest6485-21diskmemload09:45:140
2071299305,22cyclictest25051-21ssh12:20:120
20712993023,4cyclictest12-21ksoftirqd/011:10:130
2071299301,24cyclictest10634-21sh12:30:140
2074399295,20cyclictest35966irq/58-eth010:05:123
2074399295,20cyclictest35966irq/58-eth010:05:113
2074399293,17cyclictest35966irq/58-eth011:05:153
20743992916,8cyclictest35966irq/58-eth011:25:133
2074399291,14cyclictest35966irq/58-eth007:35:123
2073399292,17cyclictest32287-21ssh10:00:132
2073399292,11cyclictest30325-21ssh12:20:592
2071299297,20cyclictest12-21ksoftirqd/008:20:120
2074399281,6cyclictest0-21swapper/310:15:143
2074399281,6cyclictest0-21swapper/310:15:143
2071299282,23cyclictest14320-21ssh11:00:260
2071299282,18cyclictest1633-21ssh12:25:140
2074399273,13cyclictest0-21swapper/312:35:153
2074399271,5cyclictest0-21swapper/311:35:193
2073399273,19cyclictest0-21swapper/211:46:592
20733992719,6cyclictest15881-21ssh09:15:142
2072199272,19cyclictest28228-21ssh11:09:591
2072199272,18cyclictest1236866ssh11:55:161
20721992712,10cyclictest11177-21diskmemload11:54:081
2071299271,22cyclictest31699-21ssh11:45:320
2074399261,6cyclictest0-21swapper/310:45:163
2074399261,5cyclictest0-21swapper/312:20:203
2074399261,3cyclictest0-21swapper/312:30:283
2073399262,9cyclictest14747-21ssh10:43:592
2073399262,9cyclictest14747-21ssh10:43:592
20733992622,2cyclictest27-21ksoftirqd/211:34:042
2073399261,9cyclictest21896-21sed11:40:282
20733992611,8cyclictest27-21ksoftirqd/210:15:122
20733992611,8cyclictest27-21ksoftirqd/210:15:122
2071299264,2cyclictest131rcu_preempt11:15:140
2074399256,5cyclictest0-21swapper/309:15:343
2074399252,17cyclictest0-21swapper/311:48:003
2074399251,7cyclictest0-21swapper/309:50:233
2074399251,6cyclictest0-21swapper/309:25:293
2074399251,6cyclictest0-21swapper/308:15:013
2074399251,4cyclictest0-21swapper/309:40:303
2073399251,9cyclictest10490-21fschecks_time08:40:162
2073399251,9cyclictest10490-21fschecks_time08:40:162
20733992513,10cyclictest6764-21latency11:50:202
2073399251,21cyclictest30436-21ssh10:35:132
2073399251,10cyclictest3062966ssh11:10:212
2071299251,6cyclictest131rcu_preempt11:35:590
2074399249,13cyclictest0-21swapper/311:34:173
2074399245,5cyclictest35966irq/58-eth010:30:303
2074399244,3cyclictest0-21swapper/310:20:293
2074399241,9cyclictest0-21swapper/309:30:193
2074399241,6cyclictest0-21swapper/310:00:243
2074399241,6cyclictest0-21swapper/309:00:213
2074399241,5cyclictest0-21swapper/308:45:263
2073399249,4cyclictest32431-21ps09:40:272
2073399246,9cyclictest20056-21sed12:35:192
2073399245,4cyclictest5195-21apt-get11:15:132
2073399244,9cyclictest17946-21ssh10:10:102
2073399240,16cyclictest12286-21ls11:35:212
2072199242,18cyclictest14156-21ssh11:20:131
2072199241,16cyclictest10653-21ssh09:30:151
2071299245,9cyclictest0-21swapper/010:15:150
2071299245,9cyclictest0-21swapper/010:15:140
2071299242,18cyclictest6485-21diskmemload11:34:580
2074399232,14cyclictest35966irq/58-eth010:35:143
2074399231,9cyclictest0-21swapper/310:10:143
2074399231,7cyclictest0-21swapper/307:50:223
2074399231,6cyclictest0-21swapper/311:50:173
2074399231,6cyclictest0-21swapper/311:20:273
2074399231,6cyclictest0-21swapper/311:00:173
2074399231,6cyclictest0-21swapper/310:55:243
2074399231,6cyclictest0-21swapper/310:40:193
2074399231,6cyclictest0-21swapper/310:40:193
2074399231,6cyclictest0-21swapper/308:50:283
2074399231,6cyclictest0-21swapper/308:35:173
2074399231,6cyclictest0-21swapper/307:45:183
2074399231,6cyclictest0-21swapper/307:40:193
2074399231,6cyclictest0-21swapper/307:20:263
2074399231,6cyclictest0-21swapper/307:15:303
2074399231,6cyclictest0-21swapper/307:15:293
2073399239,10cyclictest27-21ksoftirqd/209:45:132
20733992312,8cyclictest0-21swapper/212:30:152
20733992311,9cyclictest21710-21ssh11:23:432
20721992311,9cyclictest6565-21cron10:40:011
2072199231,18cyclictest16046-21cut09:15:161
2072199231,17cyclictest1294-21ls09:25:031
2071299235,14cyclictest3466-21ssh10:20:140
2071299232,16cyclictest14917-21ssh12:14:120
20712992318,3cyclictest0-21swapper/010:05:130
20712992318,3cyclictest0-21swapper/010:05:120
2074399226,4cyclictest35966irq/58-eth009:10:193
2074399222,5cyclictest0-21swapper/308:25:013
2074399221,8cyclictest0-21swapper/312:05:013
2074399221,6cyclictest0-21swapper/312:10:193
2074399221,6cyclictest0-21swapper/311:55:243
2074399221,6cyclictest0-21swapper/310:50:163
2074399221,6cyclictest0-21swapper/310:25:223
2074399221,6cyclictest0-21swapper/309:20:153
2074399221,6cyclictest0-21swapper/309:05:223
2074399221,6cyclictest0-21swapper/309:00:023
2074399221,6cyclictest0-21swapper/308:30:193
2074399221,6cyclictest0-21swapper/308:05:263
2074399221,6cyclictest0-21swapper/307:55:223
2074399221,6cyclictest0-21swapper/307:30:173
2074399221,6cyclictest0-21swapper/307:30:173
2074399221,5cyclictest0-21swapper/308:40:153
2074399221,5cyclictest0-21swapper/308:40:153
2074399221,5cyclictest0-21swapper/308:00:163
2073399224,10cyclictest9082-21cut12:10:212
2073399223,17cyclictest261rcuc/208:20:122
2073399222,17cyclictest23368-21ssh11:05:262
2073399222,15cyclictest0-21swapper/210:58:592
2073399222,15cyclictest0-21swapper/210:35:002
20733992211,9cyclictest22959-21ssh12:18:012
2073399221,12cyclictest1143-21rm09:25:012
2073399221,11cyclictest16086-21ssh10:45:132
2073399221,11cyclictest10915-21wc09:30:172
2072199222,14cyclictest25039-21ssh10:50:141
20721992212,7cyclictest26428-21cron11:45:021
2071299225,5cyclictest131rcu_preempt11:55:160
2071299222,10cyclictest6997-21ssh10:40:140
2071299222,10cyclictest6997-21ssh10:40:130
2074399211,6cyclictest0-21swapper/308:25:183
2074399211,6cyclictest0-21swapper/307:25:173
2073399219,9cyclictest26921-21ssh09:38:272
2073399219,5cyclictest11071-21ssh10:23:522
2073399216,12cyclictest27346irq/40-dwc2_hso07:25:142
2073399213,8cyclictest8940-21ssh10:05:122
2073399213,8cyclictest8940-21ssh10:05:122
2073399213,6cyclictest12427-21ssh10:25:122
2073399213,11cyclictest27346irq/40-dwc2_hso07:55:122
2073399212,13cyclictest6485-21diskmemload12:27:542
20733992115,4cyclictest3160-21ssh09:25:202
2073399211,17cyclictest30490-21find07:20:122
2073399211,17cyclictest21433-21ssh12:00:152
2073399211,15cyclictest30440-21ssh12:05:132
2073399211,11cyclictest28549-21grep08:55:302
2073399211,10cyclictest8363-21kthreadcore08:35:212
20733992110,9cyclictest0-21swapper/209:05:012
20733992110,4cyclictest20932-21latency_hist12:00:022
2073399210,18cyclictest29365-21ls07:15:302
2073399210,18cyclictest29365-21ls07:15:292
2071299217,4cyclictest131rcu_preempt09:20:230
20712992111,6cyclictest121ksoftirqd/010:25:120
2074399201,5cyclictest0-21swapper/308:15:163
2073399209,8cyclictest0-21swapper/207:40:182
2073399208,8cyclictest27-21ksoftirqd/207:35:132
2073399207,10cyclictest27-21ksoftirqd/207:10:192
2073399205,12cyclictest28802-21irqrtprio08:25:192
2073399205,11cyclictest27346irq/40-dwc2_hso07:50:142
2073399201,9cyclictest23658-21timerwakeupswit08:50:292
20733992014,4cyclictest27-21ksoftirqd/209:50:162
2073399201,16cyclictest8561-21kthreadcore07:30:192
2073399201,16cyclictest8561-21kthreadcore07:30:182
2073399201,15cyclictest23399-21fschecks_time11:25:162
2073399201,10cyclictest25674-21irqrtprio10:50:192
2073399200,6cyclictest6485-21diskmemload09:55:132
2073399200,16cyclictest1891-21find09:05:122
2072199208,6cyclictest0-21swapper/112:23:591
2072199203,11cyclictest16007-21apt-get12:15:121
20721992012,5cyclictest24626-21sh12:35:351
2072199201,15cyclictest30687-21cut07:20:161
2072199201,13cyclictest10858-21kthreadcore08:05:191
20721992010,7cyclictest6669-21cat07:25:281
2071299208,6cyclictest0-21swapper/007:50:130
2071299207,3cyclictest131rcu_preempt11:20:170
2071299206,6cyclictest29848-21ps09:00:190
2071299205,3cyclictest131rcu_preempt08:25:150
2071299202,6cyclictest131rcu_preempt10:45:120
2071299201,7cyclictest16300-21tr09:50:210
2071299201,16cyclictest15887-21ssh09:15:150
2071299201,14cyclictest23453-21fw_packets11:25:170
2073399191,9cyclictest22505-21ps07:45:172
2073399191,9cyclictest15329-21grep08:45:162
2073399191,8cyclictest14032-21hwlatdetect08:10:192
2073399191,15cyclictest1573-21kthreadcore08:30:182
2073399191,10cyclictest19343-21uname08:15:192
2072199198,9cyclictest8058-21tail07:30:181
2072199198,9cyclictest8058-21tail07:30:171
2072199194,11cyclictest3177-21wc10:20:031
2072199194,11cyclictest3177-21wc10:20:021
2072199192,9cyclictest0-21swapper/110:42:251
2072199192,9cyclictest0-21swapper/110:42:251
2072199191,9cyclictest23258-21missed_timers08:50:221
2072199191,6cyclictest15082-21cat11:00:311
20721991911,5cyclictest0-21swapper/108:15:021
2072199191,12cyclictest17775-21ls10:10:021
2072199191,12cyclictest17775-21ls10:10:011
2072199191,11cyclictest32262-21ssh10:00:121
2071299199,8cyclictest17460-21df_inode07:40:120
2071299197,3cyclictest131rcu_preempt10:00:200
2071299192,13cyclictest1538-21ssh09:25:140
20712991912,4cyclictest31506-21cut12:05:190
20712991912,4cyclictest19637-21cpu09:35:130
2071299191,15cyclictest22188-21apt-get07:45:120
2071299191,15cyclictest2186-21sed10:55:190
2071299191,14cyclictest6903-21ssh11:50:210
2071299190,16cyclictest30660-21cut07:20:160
2073399181,8cyclictest9309-21irqcore08:05:162
2073399180,9cyclictest4377-21fschecks_time08:00:172
2072199188,7cyclictest5006-21cut12:25:211
2072199185,5cyclictest4678-21grep08:00:181
2072199181,5cyclictest0-21swapper/108:25:141
20721991812,4cyclictest30439-21sh12:05:131
20721991811,5cyclictest9382-21sshd09:28:591
2072199181,14cyclictest29371-21cut11:45:201
20721991811,4cyclictest26724-21missed_timers11:25:221
2072199181,10cyclictest0-21swapper/109:49:111
20721991810,6cyclictest14868-21cron08:45:001
20721991810,6cyclictest14868-21cron08:45:001
20721991810,5cyclictest0-21swapper/110:20:181
2071299186,9cyclictest3029-21df07:25:160
2071299185,6cyclictest12-21ksoftirqd/009:05:130
2071299183,9cyclictest0-21swapper/010:10:120
2071299182,8cyclictest0-21swapper/008:35:130
2071299182,13cyclictest28277-21munin-plugin-st11:10:020
20712991812,4cyclictest0-21swapper/008:45:260
2071299181,14cyclictest32387-21ssh09:40:280
2071299181,14cyclictest13788-21/usr/sbin/munin08:10:170
2071299181,13cyclictest25025-21apt-get10:50:150
2071299181,13cyclictest19684-21ssh12:35:150
2071299181,12cyclictest23243-21sendmail08:20:000
2072199178,5cyclictest11382-21kthreadcore12:30:221
2072199178,2cyclictest21-21ksoftirqd/110:27:211
2072199172,13cyclictest27057-21mailstats08:20:261
2072199171,8cyclictest7157-21rm12:10:151
2072199171,8cyclictest0-21swapper/109:14:241
2072199171,4cyclictest0-21swapper/110:55:221
2072199171,13cyclictest17948-21apt-get10:10:121
2072199171,12cyclictest31804-21apt-get07:55:121
2072199171,12cyclictest23138-21kthreadcore12:00:211
2072199171,12cyclictest21395-21apt-get10:30:121
2072199171,10cyclictest5207-21ssh11:15:131
20721991710,5cyclictest21953-21cron07:45:011
20721991710,5cyclictest17119-21cron07:40:011
20721991710,5cyclictest0-21swapper/111:30:141
2072199170,3cyclictest0-21swapper/108:20:011
2072199170,15cyclictest25541-21ls07:45:231
2071299176,8cyclictest5870-21cut08:00:200
2071299176,8cyclictest11036-21sort09:30:180
2071299172,12cyclictest32035-21sort07:55:160
2071299172,12cyclictest13705-21ntp_192.168.11408:40:250
2071299172,12cyclictest13705-21ntp_192.168.11408:40:240
2071299172,10cyclictest0-21swapper/007:15:160
2071299172,10cyclictest0-21swapper/007:15:150
2071299171,14cyclictest3869-21kthreadcore08:30:210
2071299171,14cyclictest12236-21kthreadcore08:05:210
2071299171,11cyclictest28165-21users09:55:330
2072199168,6cyclictest30433-21ntpq07:50:241
2072199167,7cyclictest1906-21apt-get09:05:121
2072199163,10cyclictest4485-21unixbench_multi08:30:271
2072199162,9cyclictest0-21swapper/109:00:151
2072199161,6cyclictest27662-21kthreadcore08:55:231
20721991611,3cyclictest29517-21grep07:15:291
20721991611,3cyclictest29517-21grep07:15:291
2072199161,12cyclictest8861-21cpuspeed11:35:121
2072199161,11cyclictest17345-21kthreadcore09:50:221
20721991610,4cyclictest15223-21fschecks_count08:45:161
2071299166,7cyclictest28254-21cat08:55:290
2071299162,9cyclictest0-21swapper/008:50:120
2071299162,10cyclictest0-21swapper/007:35:130
2071299162,10cyclictest0-21swapper/007:30:130
2071299162,10cyclictest0-21swapper/007:30:130
20712991611,3cyclictest21206-21if_eth107:10:170
2072199152,10cyclictest7224-21kthreadcore08:35:201
2073399143,9cyclictest20748-21cut07:10:022
2072199147,5cyclictest20726-21latency_hist07:10:011
2071299141,10cyclictest20857-21latency_hist07:10:010
2074399101,6cyclictest0-21swapper/307:10:013
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional