Пики LA

[pride]

Здравствуйте. После обновление WCS c 5.1.3375 на 5.1.3603 вырасли пики LA на сервере.
На сервере только WCS

На графике (правом) видно 08 го числа произошело обновление
Чем может быть это вызвано?

Spoiler: lscpulscpu

Architecture: x86_64
CPU op-mode(s): 32-bit, 64-bit
Byte Order: Little Endian
CPU(s): 48
On-line CPU(s) list: 0-47
Thread(s) per core: 2
Core(s) per socket: 24
Socket(s): 1
NUMA node(s): 4
Vendor ID: AuthenticAMD
CPU family: 23
Model: 1
Model name: AMD EPYC 7401P 24-Core Processor
Stepping: 2
CPU MHz: 1200.000
CPU max MHz: 2000,0000
CPU min MHz: 1200,0000
BogoMIPS: 3992.01
Virtualization: AMD-V
L1d cache: 32K
L1i cache: 64K
L2 cache: 512K
L3 cache: 8192K
NUMA node0 CPU(s): 0-5,24-29
NUMA node1 CPU(s): 6-11,30-35
NUMA node2 CPU(s): 12-17,36-41
NUMA node3 CPU(s): 18-23,42-47
Flags: fpu vme de pse tsc msr pae mce cx8 apic sep mtrr pge mca cmov pat pse36 clflush mmx fxsr sse sse2 ht syscall nx mmxext fxsr_opt pdpe1gb rdtscp lm constant_tsc art rep_good nopl nonstop_tsc extd_apicid amd_dcm aperfmperf eagerfpu pni pclmulqdq monitor ssse3 fma cx16 sse4_1 sse4_2 movbe popcnt aes xsave avx f16c rdrand lahf_lm cmp_legacy svm extapic cr8_legacy abm sse4a misalignsse 3dnowprefetch osvw skinit wdt tce topoext perfctr_core perfctr_nb bpext perfctr_l2 cpb hw_pstate avic fsgsbase bmi1 avx2 smep bmi2 rdseed adx smap clflushopt sha_ni xsaveopt xsavec xgetbv1 arat npt lbrv svm_lock nrip_save tsc_scale vmcb_clean flushbyasid decodeassists pausefilter pfthreshold overflow_recov succor smca

Spoiler: free

total used free shared buff/cache available
Mem: 128647 17799 531 2662 110316 107378
Swap: 4091 169 3922

 

[pride]

Данные сняты при 32 Публикующих и 10-ти принимающих.

Spoiler: conf

ip =***.***.***.***
ip_local =***.***.***.***
port_from =30000
port_to =31000
media_port_from =31001
media_port_to =32000
waiting_answer =60
user_agent =*****
balance_header =balance
cost_header =cost
video_enabled =true
domain =*********.com
outbound_proxy =
outbound_port =
log_level =5
enable_context_logs =false
rtp_activity_detecting =true,60
sip_msg_listener =com.flashphoner.sdk.sip.ChangeCallIdListener
call_record_listener =com.flashphoner.server.client.DefaultCallRecordListener
dtmf<--><------> =rfc2833
auto_login_url =/usr/local/FlashphonerWebCallServer/conf/account.xml
get_callee_url =/usr/local/FlashphonerWebCallServer/conf/callee.xml
codecs =opus,alaw,ulaw,g729,speex16,g722,mpeg4-generic,telephone-event,h264,vp8,flv,mpv
codecs_exclude_sip =mpeg4-generic,flv,mpv
codecs_exclude_streaming =flv,telephone-event
codecs_exclude_sip_rtmp =opus,g729,g722,mpeg4-generic,vp8,mpv
on_record_hook_script =on_record_hook.sh
rtmp_transponder_stream_name_prefix =
ws.port =8080
wss.port =8443
wss.keystore.password =password
wss.cert.password =password
rtmp.port =1935
rtmfp.port =1935
keep_alive.algorithm =HIGH_LEVEL
keep_alive.peer_interval =2000
keep_alive.server_interval =5000
keep_alive.probes =10
keep_alive.enabled=websocket,rtmfp
video_reliable =partial
audio_reliable =partial
audio_frames_per_packet =6
burst_avoidance_count =100
flush_audio_interval =80
flush_video_interval =0
hls_server_enabled =false
webrtc_cc2_bitrate_overuse_event = false
resample_video = false
webrtc_cc_max_bitrate=5000000
webrtc_cc_min_bitrate=1000000
webrtc_cc2_cc=false

 

[Max]

Добрый день.
1. Добавьте пожалуйста лог WCS_HOME/logs/gc-core..
2. График нагрузки на CPU всей системы.
В сборке 3633 были оптимизации по памяти. Должна работать гораздо лучше по ресурсам.
https://docs.flashphoner.com/display/WCS5EN/Release+notes

 

[pride]

Отправил support@flashphoner.com

 

[Max]

Добрый день.
У Вас на сервере CMS Final remark (один из этапов сборки мусора) работает длительное время (до полутора секунд). В таком случае, скорее всего, Вам поможет обновление до сборки 5.1.3633, где были оптимизации по памяти.

 

[pride]

При попытке обновиться пишет
>>> You have latest version: 5.1.3603-2dc5ba0110af15dc70478c3cd1c33fa2f3e09819

 

[Max]

Если не удается обновиться при помощи команды update, загрузите сборку 5.1.3633 c этой страницы, распакуйте архив и установите поверх уже установленной версии.

 

[Max]

Добрый день.
По умолчанию, при каждом запросе статистики http://wcs:8081/?action=stat собирается системная статистика (netstat и т.п.). Рекомендуем установить настройку

parse_system_stats=false

и проверить, снизится ли Load Average.

 

[Max]

В сборке 3665 убрали еще одни лишние вызовы netstat
https://docs.flashphoner.com/display/WCS5EN/Release+notes
Проверьте пожалуйста остались ли LA пики с этой сборкой.