結婚生活限界です

旦那と別居か離婚を考えているので、ご意見いただけると嬉しいです。
結婚生活３年半。３歳の娘がいます。旦那は同い年で、私の前に一度結婚しています。前妻の間に子どもはいません。旦那の猛プッシュで、出会って一年ほどで結婚しました。結婚前からいろいろあり、私の両親や友人の一部は反対していました。旦那がバツイチを付き合う直前まで隠していたこと、義母と前妻との新居で同居していたことを両家挨拶の直前まで黙っていたからです。私も本当にこのまま結婚して良いか悩んだのですが、年が３５歳だったこともあり、このままこの船に乗ってみようと思って結婚しました。
問題の一つに旦那の家族があります。旦那が再婚を機に義母に家を出て行ってほしいと遠回しに言ったところ、怒ってしまい家を出て行きました。それから、義母から生活費を請求され、毎月５万円払っています。義両親は別居していて、義母は私たちの家のそばで一人暮らしをしています。そして、お金も知らない間に１０万円に値上がっていました。毎月赤字です。
一番は旦那の私への態度の変化です。娘が生まれると旦那の態度が急変しました。「娘が好きすぎて、私への愛情はない」「ブス」など言われました。最近は、自分が優位に立ちたいようで、私がすることすべてケチをつけます。私の顔を馬鹿にしたり、私の性格ややっていることを否定します。寝室も別でもちろんレス状態です。最近は私のことを「結婚するときと思っていた人とは違っていた」と言います。私は何度も「娘のためにも夫婦仲良くしたい」と言っていますが、私への拒否反応がすごいです。私も愛情がなくなっていることに気が付きました。仕事も持っているので経済的にはやっていけます。娘のことを考えたときに冷めているけど両親がいることとお父さんはいないけど愛情のある優しい祖父母と暮らすのとどちらが良いかなど悩んでいます。旦那は娘はかわいがってくれています。