長年付き合った彼、婚約破棄するかどうか迷っています

はじめまして、長文での相談失礼します。
30代前半で同い年の彼がいて、婚約破棄するかどうか悩んでいます。

彼とは過去に7年間交際していて、昨年結婚前提で復縁、今年の春に挙式予定でした。しかし色々と不安が重なり、入籍を延期し、挙式もキャンセルしました。現在は同棲3ヶ月目です。

1番の不安は、悩みや問題があるとき彼と乗り越えていける自信がないことです。
彼に相談すると、何も言わないか、イライラした態度を出してきて、心が軽くなるどころか余計に不安になってしまいます。なにかあっても話合いが出来ず、私一人で答えを出してばかりです。

はじまりは、結婚準備中にお金や仕事など考え方の違いが多すぎて不安になり、引越しを延期したいと相談しました。彼からは話が違うお金が勿体ないと言われ、私の気持ちは聞いてくれませんでした。

挙式をこのままの気持ちでは挙げられないと相談しても、黙るか面倒くさいというばかりで、結局キャンセル料が上がることを説明して、キャンセルしました。

ふたつ目の理由はスキンシップがゼロなことです。半年以上ハグもキスもありません。最近では私からも触れたいと思わなくなってしまいました。
彼は私が引越しを延期したいと言ったことで少し冷めてしまったようです。
彼と結婚したら子供は無理かな、と思うとすごく寂しい気持ちになります。

以下のことは、気にしない方が良いのかなと思うのですが、やっぱり気になってしまいます。

・喧嘩しても絶対先に謝らない　
・名前を呼んでくれない
・仕事が嫌いで愚痴しか言わない
・お金に細かすぎる(婚約指輪も何時間もお店の方にクーポンが使えないか値切ってました...)

学生時代からの付き合いで、彼といると楽しいときも勿論あります。家事もご飯もひとりより彼との方が楽しいなとは思います。でも、一生一緒にいたいか？大好きか？と言われると、今は自信がありません。

全て理想通りな人はいないと自分に言い聞かせてきましたが、我慢できる程度のことなのか、彼との結婚は辞めた方がよいのか、半年以上考えているのに答えが出ません。
彼と頑張ろうと思ったり、もう別れようと思ったり、日によって意思がコロコロ変わってしまいます。

前向きに事を進めたいですが、考えすぎて疲れてしまいました。一体どう考えたら、答えが出るでしょうか？
なにかしらアドバイス頂けると嬉しいです。