相談させていただきたいです。

結婚を考えて同棲中です。
自分35歳失業手当貰い中
相手41歳公務員

婚姻届の証人になって貰いに実家に数日帰って戻ってきたら
元カノが忘れられない
(相手は離婚歴あり子供3人、独り身、40代後半という年齢的に子供が産まないからと身を引いた。
遠方まで会いに言ったが着信拒否されてる)
君のことは好きだけど結婚するほど好きではない
別れたい
今繋ぎ止めてるのは双方の両親を悲しませること

と言われました。
周りには入籍すると言ってるし、双方の親にも証人になって貰っています。
子供産むのもはっきり言ってアウトな年齢ですし社会的にも今更ふざけんじゃねぇよ!無理だよ!という気持ちです。

好きだし相手に多少なりとも自分を思う気持ちがあるなら結婚をしたいと思っていますが
こんな状態でお互い幸せになれるのか…
個人的に子供さえできたら離婚しようが生きていけると思うのですが考えが甘いでしょうか
もっと若い時積極的に婚活しておけばこんな思いはしなかったのかな…

皆さんならどうお考えになるがお聞かせいただけませんか?