何か気に障りること言った？の返しについて

はじめまして。 出会い系のアプリで知り合い、友達以上恋人未満の男性とのラインについてです。 その男性は、自分は空気が読めないことがある。友達にも言われた。と言っており、 大学にもあまり仲のいい友達はいないそうです。 ラインで話している時に、少しイラッとするような気に障るような発言があり、なんと返したら良いかわからず既読無視してしまいました。 毎週定時に電話をする約束をしているので、普通に電話には出たのですが、その時に「なにか気に障るようなこと言った？」と聞かれました。 しかし、私自身が彼になんと伝えたらいいかわからず、ごめん！返信するの忘れてた！大丈夫だよ！と言ってしまいました。 今まで、家族以外の人に「こういう言い方は傷つくからやめてほしい」などと言えたことがなく、自分から離れていってました。 ただ、その発言に悪気がなく、嫌だと言えば謝ってくれると思います。 彼は優しい人なので、これからも関係を続けていきたいと思っています。 みなさまは、友達や恋人、配偶者になにかやめてほしいことがある時、どのように伝えていますか？ はじめての出来事なので、動揺してうまくまとまらなくてすみません。 ご回答、よろしくお願いします。