気軽に義実家へ遊びに行けますか？そうなるべきなんですか？

結婚したばかり・引っ越ししてきたばかりの専業主婦です。
家事とか余り経験がなくて…慣れたら仕事を探そうと思ってます。

とはいっても、毎日家のことをやるだけでは暇だったりしますよね？
友人もいない土地だし、車がないとあちこち行けない場所なんです。

先日、なにげなく夫に、「暇だなあ…(笑)」ってつぶやいたところ、
「家が近いんだから、行けばいいじゃん？」なんて気軽に言われました。
歩いて10分ほどの所に義実家があります。

「そんな、気軽に１人で遊びに行けるもんじゃないよ…」と返しましたが
夫は心底不思議そうな顔。「よそよそしい。距離を置きたいのか？」と言われてしまいました。

別に距離を置きたいわけじゃないですけど、やっぱり訪ねて行ったらお互い気を使いますよね。
実家だったら、例えば母親が洗濯しつつもおしゃべりしてくれるとか、ちょっと買い物行くけど家にいてね、とか。
私は私で、勝手にウロウロするとか、お互いが自由ですよね。
でも義実家だったら、義母が私にお付き合いして、ずっと一緒に居間でおしゃべりしてくれちゃうとか、
私は私で誰かとお話しする以外に何をしてたら良いか分からないし…そんな事態になりそうで。
やっぱり実家と義実家では違いますよね？
でも実家と同じように、そう近づくように努力しないといけないんでしょうか。

義実家の近くにお住いのみなさん、どんなお付き合いをされていますか？