上の性能の件、調べてみたら(Skinned)MeshRendererはこういう理由で重くて当然だからBatchRendererGroupを使えば良い！みたいな記事があった
https://www.infiniteloop.co.jp/tech-blog/2023/06/unity_brg_06_2023/
理論的にはSkinnedMeshRendererやAnimatorの移行も可能らしいけど、まだ情報が少なくてわいには無理そうだ

これとは別に2023.2辺りでSkinnedMeshRendererにテコ入れされてパフォーマンスが上がってるらしいとの情報を得たので試してみる（購入したアセット対応してるかなぁ・・・