既婚の異性との関わり方に悩んでいます

私は20代後半で大学に入学しました。 現在、医療系の学部に通っています。 同級生で、同世代の既婚の男性と仲良くなりました。 仲良くなった、とは言っても、 学部内ではお互い歳をとっているため、 勉強について行くのがお互いいっぱいいっぱいで 会話のほとんどが勉強の話です。 2人きりで出かけたりしたことはありませんし 私は女子の友達も普通にいて お昼休みは彼女たちとすごしています。 彼とは、短い休み時間のみ、会話をしています。 彼とは出席番号が連番のため 席がいつも前後、実習の班も同じことも多いです。 相手が既婚であるため、 私はかなり気を使っているつもりですが 授業の内容について議論したり 同じ熱量を持って勉強できるという点では いい友達だと思っています。 しかし、同じ学内の一部の人に あそこ仲いいよね、1人は既婚者なのにね…… と言われているようです。 彼氏、彼女がいても 異性と2人で出かけている人もいる中で こっちは真剣に勉強してるのになんで…… という思いもありますが 私の、既婚者の異性との接し方に問題があるのかな……とも悩んでいます。 もうすぐ夏休みが空け、授業が始まります。 これまでと変わらない距離感で接しても良いものか、 悩んでいます。 皆さんのご意見をお聞きしたいです。 回答よろしくお願いします。