You are here: Home / Projects / OSADL QA Farm Real-time / Latency plots / 
2025-11-17 - 20:25

OSADL QA Farm on Real-time of Mainline Linux

About - Hardware - CPUs - Benchmarks - Graphics - Benchmarks - Kernels - Boards/Distros - Latency monitoring - Latency plots - System data - Profiles - Compare - Awards

Default latency plot of shadow in rack #8, slot #6

Rack #0/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #1/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #2/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #3/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #4/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #5/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #6/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #7/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #8/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #9/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #a/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #b/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #c/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #d/#0 #1 #2 #3 #4 #5 #6 #7 #8 -
Rack #e/#0 #1 #2 #3 #4 #5 #6 #7 #8 - Rack #f/#0 #1 #2 #3 #4 #5 #6 #7 #8 
Special  All - All RT - Optimization - Ethernet - Thumbnails - Next
  
Click here to display the system's profile data or here to proceed to next system.
Click on a legend element to toggle display of that core, ctrl-click inverts display, shift-click enables all.

Data to construct the above plot have been generated using the RT test utility cyclictest.
Unexpectedly long latencies may be caused by SMIs
Total number of samples: 100 million
Resolution of latency scale: normal
Duration: 5 hours, 33 minutes, lowest P state: performance
Compare latency of primary with shadow system
Characteristics of the 792 highest latencies:
System rack8slot6s.osadl.org (updated Mon Nov 17, 2025 12:43:44)
Delayed (victim)Switcher (culprit)TimestampCPU
PIDPrioTotal
latency
(µs)
T*(,W**)
latency
(µs)
CmdPIDPrioCmd
23817992019,1cyclictest66850irq/125-lan11:33:083
23817991918,1cyclictest66850irq/125-lan10:32:223
23817991918,1cyclictest66850irq/125-lan10:29:353
23817991918,1cyclictest66850irq/125-lan09:50:023
23817991918,1cyclictest66850irq/125-lan09:09:323
23817991818,0cyclictest66850irq/125-lan12:28:553
23817991818,0cyclictest66850irq/125-lan11:55:573
23817991818,0cyclictest66850irq/125-lan11:29:533
23817991818,0cyclictest66850irq/125-lan11:11:053
23817991818,0cyclictest66850irq/125-lan10:12:543
23817991818,0cyclictest66850irq/125-lan10:00:373
23817991818,0cyclictest66850irq/125-lan08:09:083
23817991817,1cyclictest66850irq/125-lan12:20:033
23817991817,1cyclictest66850irq/125-lan11:51:143
23817991817,1cyclictest66850irq/125-lan11:22:243
23817991817,1cyclictest66850irq/125-lan10:52:193
23817991817,1cyclictest66850irq/125-lan10:42:473
23817991817,1cyclictest66850irq/125-lan10:35:173
23817991817,1cyclictest66850irq/125-lan10:05:173
23817991817,1cyclictest66850irq/125-lan09:45:183
23817991717,0cyclictest66850irq/125-lan12:16:133
23817991717,0cyclictest66850irq/125-lan11:45:093
23817991717,0cyclictest66850irq/125-lan11:38:313
23817991717,0cyclictest66850irq/125-lan11:17:493
23817991717,0cyclictest66850irq/125-lan10:55:533
23817991717,0cyclictest66850irq/125-lan10:45:233
23817991717,0cyclictest66850irq/125-lan09:10:223
23817991716,1cyclictest66850irq/125-lan12:30:393
23817991716,1cyclictest66850irq/125-lan12:12:583
23817991716,1cyclictest66850irq/125-lan12:05:293
23817991716,1cyclictest66850irq/125-lan12:02:493
23817991716,1cyclictest66850irq/125-lan11:41:583
23817991716,1cyclictest66850irq/125-lan11:00:213
23817991716,1cyclictest66850irq/125-lan10:20:203
23817991716,1cyclictest66850irq/125-lan10:15:323
23817991716,1cyclictest66850irq/125-lan09:42:453
23817991716,1cyclictest66850irq/125-lan09:35:153
23817991716,1cyclictest66850irq/125-lan09:30:133
23817991716,1cyclictest66850irq/125-lan09:15:223
23817991716,1cyclictest66850irq/125-lan08:55:193
23817991716,1cyclictest66850irq/125-lan08:50:193
23817991716,1cyclictest66850irq/125-lan08:30:013
23817991716,1cyclictest66850irq/125-lan07:41:393
23817991716,1cyclictest66850irq/125-lan07:30:123
23817991616,0cyclictest66850irq/125-lan09:21:123
23817991616,0cyclictest66850irq/125-lan07:55:173
23817991616,0cyclictest66850irq/125-lan07:25:153
23817991615,1cyclictest66850irq/125-lan12:35:183
23817991615,1cyclictest66850irq/125-lan09:55:243
23817991615,1cyclictest66850irq/125-lan09:25:493
23817991615,1cyclictest66850irq/125-lan08:45:233
23817991615,1cyclictest66850irq/125-lan08:40:133
23817991615,1cyclictest66850irq/125-lan08:20:163
23817991615,1cyclictest66850irq/125-lan07:50:583
23817991515,0cyclictest66850irq/125-lan11:06:293
23817991515,0cyclictest66850irq/125-lan08:25:213
23817991515,0cyclictest66850irq/125-lan07:36:363
23817991515,0cyclictest66850irq/125-lan07:20:013
23817991514,1cyclictest66850irq/125-lan08:10:193
23817991514,1cyclictest66850irq/125-lan07:15:193
23817991414,0cyclictest66850irq/125-lan07:10:193
23817991413,1cyclictest66850irq/125-lan08:00:223
23817991413,1cyclictest66850irq/125-lan07:45:243
23817991413,1cyclictest66850irq/125-lan07:45:233
23817991312,1cyclictest66850irq/125-lan09:00:153
23817991312,1cyclictest66850irq/125-lan08:15:013
23817991211,1cyclictest66850irq/125-lan08:35:143
238129998,1cyclictest771-21snmpd09:43:272
238129998,1cyclictest769-21lldpd08:15:112
238089998,1cyclictest771-21snmpd08:40:231
238089996,3cyclictest771-21snmpd09:50:471
238029998,1cyclictest771-21snmpd08:15:240
238029998,1cyclictest771-21snmpd07:39:230
238029998,1cyclictest255-20systemd-journal12:23:350
238129988,0cyclictest771-21snmpd12:17:062
238129988,0cyclictest771-21snmpd11:59:422
238129988,0cyclictest771-21snmpd11:52:152
238129988,0cyclictest771-21snmpd09:12:352
238129988,0cyclictest771-21snmpd08:04:432
238129988,0cyclictest769-21lldpd11:02:532
238129988,0cyclictest769-21lldpd09:26:412
238129988,0cyclictest769-21lldpd08:53:052
238129988,0cyclictest769-21lldpd07:52:562
238129988,0cyclictest769-21lldpd07:31:432
238129988,0cyclictest517-21systemd-resolve12:37:022
238129987,1cyclictest771-21snmpd08:27:012
238129987,1cyclictest771-21snmpd08:09:042
238129987,1cyclictest769-21lldpd10:23:132
238129987,1cyclictest584-21in:imuxsock11:42:352
238129987,1cyclictest524-21avahi-daemon12:06:212
238129987,1cyclictest524-21avahi-daemon11:06:042
238129987,1cyclictest524-21avahi-daemon09:07:232
238129987,1cyclictest517-21systemd-resolve11:36:212
238129987,1cyclictest287-21systemd-udevd09:30:212
238129986,2cyclictest771-21snmpd11:29:442
238129986,2cyclictest771-21snmpd10:17:332
238129986,2cyclictest771-21snmpd09:54:082
238129986,2cyclictest771-21snmpd07:39:512
238129986,2cyclictest749-21ntpd07:25:472
238129986,2cyclictest749-21ntpd07:20:572
238089988,0cyclictest771-21snmpd11:10:491
238089988,0cyclictest771-21snmpd10:24:061
238089988,0cyclictest771-21snmpd09:05:271
238089988,0cyclictest771-21snmpd09:00:301
238089988,0cyclictest769-21lldpd12:27:521
238089988,0cyclictest769-21lldpd09:31:501
238089987,1cyclictest524-21avahi-daemon11:25:151
238089987,1cyclictest524-21avahi-daemon10:56:321
238089987,1cyclictest517-21systemd-resolve11:52:491
238089986,2cyclictest31805-21cat11:20:141
238029988,0cyclictest771-21snmpd10:00:280
238029988,0cyclictest771-21snmpd09:12:480
238029988,0cyclictest771-21snmpd08:59:090
238029988,0cyclictest771-21snmpd07:15:550
238029988,0cyclictest769-21lldpd12:17:220
238029988,0cyclictest769-21lldpd11:21:350
238029988,0cyclictest769-21lldpd09:54:220
238029987,1cyclictest771-21snmpd12:26:370
238029987,1cyclictest771-21snmpd10:18:150
238029987,1cyclictest771-21snmpd07:11:530
238029987,1cyclictest524-21avahi-daemon08:20:200
238029987,1cyclictest524-21avahi-daemon07:45:150
238029987,1cyclictest524-21avahi-daemon07:45:140
238029986,2cyclictest771-21snmpd12:36:250
238029986,2cyclictest771-21snmpd11:33:310
238029986,2cyclictest771-21snmpd08:30:100
238129977,0cyclictest771-21snmpd12:00:392
238129977,0cyclictest771-21snmpd11:15:282
238129977,0cyclictest771-21snmpd09:23:432
238129977,0cyclictest771-21snmpd08:57:232
238129977,0cyclictest769-21lldpd11:31:042
238129977,0cyclictest769-21lldpd10:31:472
238129977,0cyclictest769-21lldpd09:59:532
238129977,0cyclictest769-21lldpd07:45:582
238129977,0cyclictest769-21lldpd07:45:572
238129977,0cyclictest524-21avahi-daemon09:02:162
238129976,1cyclictest769-21lldpd09:48:082
238129976,1cyclictest524-21avahi-daemon12:34:052
238129976,1cyclictest524-21avahi-daemon10:58:462
238129976,1cyclictest524-21avahi-daemon10:39:022
238129976,1cyclictest217-21jbd2/nvme0n1p2-809:36:472
238129975,2cyclictest771-21snmpd11:46:412
238129975,2cyclictest771-21snmpd11:11:372
238129975,2cyclictest771-21snmpd10:50:482
238129975,2cyclictest771-21snmpd10:03:532
238129975,2cyclictest771-21snmpd08:38:112
238129975,2cyclictest749-21ntpd07:41:132
238129974,2cyclictest586-21rs:main2
238129973,3cyclictest255-20systemd-journal10:46:282
238089977,0cyclictest771-21snmpd12:31:401
238089977,0cyclictest771-21snmpd11:03:101
238089977,0cyclictest771-21snmpd09:18:181
238089977,0cyclictest769-21lldpd11:40:141
238089977,0cyclictest769-21lldpd09:35:341
238089977,0cyclictest769-21lldpd08:45:031
238089977,0cyclictest769-21lldpd07:42:541
238089977,0cyclictest524-21avahi-daemon11:30:501
238089976,1cyclictest771-21snmpd08:15:391
238089976,1cyclictest771-21snmpd07:59:551
238089976,1cyclictest771-21snmpd07:33:201
238089976,1cyclictest524-21avahi-daemon10:07:531
238089976,1cyclictest524-21avahi-daemon09:48:031
238089976,1cyclictest524-21avahi-daemon09:28:351
238089976,1cyclictest524-21avahi-daemon08:21:481
238089976,1cyclictest517-21systemd-resolve08:51:401
238089975,2cyclictest771-21snmpd12:16:201
238089975,2cyclictest771-21snmpd10:47:421
238089975,2cyclictest771-21snmpd08:36:501
238089975,2cyclictest771-21snmpd07:15:191
238089974,3cyclictest5809-21apt-get07:45:151
238089974,3cyclictest5809-21apt-get07:45:151
238089973,3cyclictest5272-21ssh10:15:521
238089973,3cyclictest2911-21ssh11:57:021
238089973,3cyclictest22940-21memory08:25:171
238089972,4cyclictest24274-21sort07:10:141
238029977,0cyclictest771-21snmpd11:58:450
238029977,0cyclictest771-21snmpd11:45:230
238029977,0cyclictest771-21snmpd10:06:200
238029977,0cyclictest771-21snmpd09:06:180
238029977,0cyclictest771-21snmpd07:21:220
238029977,0cyclictest769-21lldpd10:10:100
238029977,0cyclictest769-21lldpd07:40:240
238029977,0cyclictest769-21lldpd07:31:340
238029976,1cyclictest771-21snmpd09:15:410
238029976,1cyclictest584-21in:imuxsock10:41:420
238029976,1cyclictest524-21avahi-daemon09:34:340
238029976,1cyclictest18136-21cat11:40:150
238029975,2cyclictest771-21snmpd10:56:190
238029975,2cyclictest771-21snmpd10:37:330
238029975,2cyclictest10264-21cat07:55:170
238029973,3cyclictest10094-21sed12:05:000
238129966,0cyclictest771-21snmpd12:14:362
238129966,0cyclictest769-21lldpd10:26:122
238129966,0cyclictest524-21avahi-daemon08:33:142
238129963,3cyclictest27556-21tr10:05:192
238129963,2cyclictest1331-21ssh10:11:472
238129962,3cyclictest4265-21ssh12:27:392
238129962,3cyclictest30023-21ssh12:21:302
238129962,2cyclictest22223-21cat08:25:012
238129961,4cyclictest11809-21cat08:00:002
238089966,0cyclictest771-21snmpd09:10:321
238089966,0cyclictest769-21lldpd09:41:081
238089965,1cyclictest771-21snmpd11:15:521
238089965,1cyclictest524-21avahi-daemon12:00:201
238089965,1cyclictest12785-21cpuspeed_turbos12:35:171
238089964,2cyclictest771-21snmpd08:32:281
238089964,2cyclictest550-21NetworkManager12:05:591
238089964,2cyclictest2503-21head08:55:141
238089963,3cyclictest550-21NetworkManager09:21:451
238089963,3cyclictest30691-21sed07:25:171
238089963,2cyclictest25648-21ssh10:38:331
238089963,2cyclictest23998-21ssh11:45:261
238089963,2cyclictest15965-21ssh10:27:101
238089962,3cyclictest31964-21ssh12:23:511
238089962,3cyclictest28742-21ssh10:40:501
238089962,3cyclictest14390-21ssh11:35:241
238089962,3cyclictest14338-21irqstats08:05:161
238029966,0cyclictest771-21snmpd10:54:130
238029966,0cyclictest771-21snmpd08:45:160
238029966,0cyclictest769-21lldpd09:00:490
238029966,0cyclictest16758-21dump-pmu-power11:05:000
238029965,1cyclictest771-21snmpd11:12:220
238029965,1cyclictest771-21snmpd09:24:250
238029964,2cyclictest771-21snmpd12:14:030
238029963,3cyclictest771-21snmpd08:13:130
238029963,2cyclictest9577-21ssh12:32:080
238029963,2cyclictest19881-21ssh10:31:060
238029963,2cyclictest13818-21ssh12:08:080
238029962,3cyclictest20903-21ssh11:09:010
238029962,3cyclictest1779-21ssh10:48:040
238029962,2cyclictest9744-21cat07:55:010
238129953,2cyclictest30457-21sed08:45:002
238129952,2cyclictest31871-21awk08:45:232
238129952,2cyclictest2822-21ssh11:24:112
238129952,2cyclictest27201-21sed07:15:202
238129951,3cyclictest16237-21grep08:10:142
238089954,1cyclictest18917-21ntpq10:30:191
238089953,2cyclictest550-21NetworkManager10:12:151
238089953,2cyclictest12676-21ntpq08:00:171
238089952,2cyclictest4592-21awk10:50:231
238089952,2cyclictest28572-21sed07:20:161
238089952,2cyclictest22863-21grep10:00:191
238089952,2cyclictest18381-21ssh12:11:501
238089952,2cyclictest17797-21date09:55:001
238089952,2cyclictest16370-21kernelversion08:10:161
238089951,3cyclictest17831-21cut11:05:161
238029954,1cyclictest524-21avahi-daemon09:35:130
238029954,1cyclictest13667-21fschecks_count10:25:150
238029953,2cyclictest8746-21apt-get09:45:140
238029953,2cyclictest771-21snmpd11:25:230
238029953,2cyclictest771-21snmpd08:02:210
238029953,2cyclictest22910-21needreboot09:25:170
238029953,0cyclictest30451-21ssh11:19:130
238029952,2cyclictest31701-21ssh11:54:100
238029952,2cyclictest29524-21tr08:40:190
238029952,2cyclictest28976-21kworker/u16:3+nfsiod09:41:340
238029952,2cyclictest22112-21sh08:25:010
238029951,3cyclictest20594-21ssh09:57:330
238029951,3cyclictest10131-21ssh10:20:320
238129942,1cyclictest24990-21ps07:10:202
238129941,2cyclictest28287-21cat10:40:202
238089943,1cyclictest0-21swapper/107:35:151
238089941,3cyclictest550-21NetworkManager07:52:491
238029944,0cyclictest888-21ntpq08:50:180
238029941,2cyclictest30609-21sed07:25:170
238029941,2cyclictest15134-21grep08:05:230
238029940,3cyclictest27146-21ntpq08:35:180
*Timer  **Wakeup  (latency=timer+wakeup+contextswitch)

 

Valid XHTML 1.0 Transitional