美容師さんとコミュニケーションが上手くとれません…

会社員の♀です。

学生の頃からの悩みなのですが、女性の美容師さんとコミュニケーションが上手く取れません。

私はヘアスタイルなどにあまり関心がなく、｢おかしくなければ何でもいいや｣くらいにしか考えてません。
美容院に行ってもカタログを見てなんとなく気に入った髪型をお願いしているだけで、特にこだわりがありません。
なので、細かくどうしたいかを尋ねられても答えられません。

男性の美容師さんですと｢分からないのでお任せします｣と伝えるだけで笑顔で対応してくれますが、女性の美容師さんにそれを言うと困らせてしまうことが多いように感じます。
中には｢ちゃんと答えてください！｣と怒ってしまう美容師さんもいて、とても難しいなぁと感じます。

そこで相談なんですが、女性の美容師さんの気分を害さないように｢特に関心がないのでお任せします。後で怒ったりしません｣と伝えるにはどう言ったらいいでしょうか？
ずっと接客業をしていたので、笑顔で明るく伝えているのですが、却って良くないのでしょうか？
本当に困っているので教えてください。宜しくお願いします。