彼の家族との付き合いについて

長くて読みにくいですが、皆さんのご意見を聞かせて下さい。

付き合って半年弱の彼(37) 私(27)
先日彼家族(お父さん、お母さん、彼の弟、妹さん、妹さんの長男)と私で丸一日出かける事がありました。皆さん元気でいい人で良くして下さり、私も精一杯失礼の無いように過ごしました。
最後には「また行きましょうね、今度は(私の)お母さんも一緒に」と言ってくれ、彼も嬉しそうで「馴染んでたし、皆家族として受け入れてた」と、言ってくれて、その晩結婚の話までしました。

しかし私は、もう皆で出かけるのはしんどいと思っています。もともと大人数でわいわいするのは得意でなく、彼の家族が全員集まれば10人以上の大所帯になります。
彼の事は好きで一緒にいたいですし、ご家族もいい人達なのに、私はそこに入りたいと思えませんでした。
初めてで疲れたのもあると思いますが、彼とは個人のお付き合いがしたいです。
正直に言えばいいのですが、彼の嬉しそうな顔と逆の立場なら傷つくだろうなと思いはっきり言えません。

私はどうしたらいいでしょうか、皆さんのご意見、ご指摘を聞かせて下さい。