MHWを遊びながらPS4のパーティーアプリを使ってボイチャをしていると深夜帯は自分だけパーティールームから抜けてしまう事が頻発しています…

モデムとPS4本体を有線で接続していてNATタイプは2で下り上り速度は概ね30〜50Mbps出ます
フレンドに確認を取ったところマルチプレイでこちらの動きにもラグも感じないみたいなのですがこれは何が原因でしょうか?