そういうことで悩むよりメガネを見直した方がいいよ
自分はヘッドホン着けるときはこういう形状記憶合金系のテンプルの細いメガネを使ってる
https://www.jins.com/jp/client_info/JINSJINS/itemimage/MTF-17A-048/MTF-17A-048_93_01.jpg