初めまして。旦那について相談です。
よろしくお願いします。

私は3年前に母を亡くし、今実家で旦那と8ヶ月の息子、私の父と暮らしています。
結婚する前から旦那に結婚して父を1人にするのは心配と私が言っていたことや、旦那の給料もあまりよくなく、義実家のローンを旦那が払わなければならない、など金銭的な理由から実家に住むことになりました。

息子が昨年の12月中旬に産まれたのですが、出産して間もない大晦日の日に、旦那から、実際に生活してみて、自分の家ではないから父に気を遣うし インテリアなども自分の好きなようにできない、そもそも父と性格が合わない、職場から遠いため朝早く家を出るのが辛いなどの理由で早くて今年の夏に家を出てアパートを借りて住もうと思うと言われました。
産後間もなくの睡眠不足、慣れない育児に加えての旦那からの発言に私の心はボロボロで、日中息子と2人になると旦那とのこれからを考えてしまい泣けることが多かったです。

旦那は朝早くから夜遅くまで仕事のため、平日は息子や父と顔を合わせることはほぼありません。
息子のお風呂も父に入れてもらっています。
そのためか旦那は自分がいなくても父がいれば私と息子は困らずに生活できるし、父を1人にするのは私が心配するから自分1人で家を出るとも言ってきました。
何か話をする度に家を出ることを話してくる旦那に、私もイライラしてしまいしばらくぎくしゃくした日が続きました。
しかし家電などを揃えるお金がほとんどないことがわかると、最近はあまり話が出なくなりましたが、まだ諦めてはいないと思います。

義実家に行ったときや旦那の親戚の集まりに行ったときなどにも、旦那は「俺はお義父さんと合わないから家を出る！」「俺はお義父さんと合わない！！」「（私の実家は）俺の家じゃない！」とみんなの前で言ったり、義両親や親戚から少しでも父の話が出るとあからさまに嫌そうな顔をします。
その姿を見るのが私は苦痛だし、イライラしてケンカになるのも嫌だから、いっそのこと家を出た方が旦那も嫌な思いをしないし、ケンカもなくなるからいいのかなと考えたこともあります。

どうすることが一番いいのかわかりません…
私はこの先どうしたらいいのでしょうか？