流れ豚切りして悪いけど、自分も相談させて欲しい

8年付き合った彼氏と別れたくて言うタイミングを伺ってるんだけど、どうにも間が悪くて別れたいと言い出せない
というのも、別れたいなーって思って今度こそ伝えよう!って行動を起こそうとすると
何故かいつも相手は家に不幸があったり、親族間のいざこざに巻き込まれたり、仕事に忙殺されて入院したり、大病が見つかって闘病生活始まったりとなんだか波乱万丈になる

波乱万丈で人生上手くいかないヤバい時は、いつも私を心の拠り所にしてなんとかバッキバキのメンタルを建て直し続けてる(本人談)とのこと
それを何年も前に聞いちゃったせいで、別れたいと思った時に向こうの人生荒れてるとなんだかさらに地獄に落とすようで申し訳なくて言い出せない

向こうは辛い時に「でも私子がいるから生きていけてる」って頻繁に口にするくらい自分に依存してるので、そんな辛い時に別れたいとか言い出したらどうなっちゃうんだろうって怖い
理不尽冷めしてしてから3年、上記の理由から別れたいと言えず付き合い続けてるので、当然態度は素っ気ないし、連絡はこっちからしないし、デートも目的が済んだり会話に飽きたら無理やり帰るって感じで明らかに気が無い状態なんだが、
彼氏は全くこっちの気持ちに気づかずいつまでも自分を好きでいると思ってる

相手を傷付けずに別れるのは無理だと分かってるけど、どうにか彼の辛い人生のさなかで少しでも影響のないように別れたい
どうすればいいと思う?