あとYAS-107の取説みた感じ機器連動さえ諦めてYAS-107側の設定で
HDMIコントロールをオフ・HDMI音声出力を「本機」にすれば
YAS-107に繋いでるXbox One Xの音声はテレビまで届かず
直接YAS-107からの出力になるんで映像とのズレが無くなりそうだけどそれは試してみた?
(Xbox One Xの映像は上記の設定オン/オフに関わらずテレビに届く)

まぁ連動をオフにしなきゃ出来ない事なんで都合悪いかもしれないけど