触ってくる上司が嫌でたまらない

40代主婦です。2カ月前から小売店でアルバイトをしています。 社員は店長と社員Aさんのみでバイト数名。 その社員Aさん(既婚40代男)が、ことあるごとに体に触れてきます。（1日2～3回） 例えば、 「期待してるよ」など言いながら肩をポンポン叩いたり 「なんでだよ！」とツッコミ風に軽く頭を叩いたり 仕事をこなせたら「えらいね」と頭をなでてきたり 呼ぶとき名前を呼べばいいのに腕を叩いたり 帰り際に「おつかれ」と肩にグーパンチしてきたり どれも痛くはないです。触り方がいやらしい、ということもないです。 ただ不快なんです。 悪意も恋愛感情も感じません。 触られたときは嫌そうな顔をするようにはしてます。 「Aさん気難しいでしょ？」と2人の女性先輩に言われたので、皆さん触られるか聞いてみました。 ・ベテランの主婦さん「こないだ1回あった。気持ち悪いね」と笑っていた。 　私ほどの頻度ではないようです。 ・学生さん「触られてるかもしれないけど気にしたことない」 とのことでした。 私が出勤して1～3時間で皆さん退勤するので、軽い雑談しかしていませんがAさんは気分屋でスタッフ皆から敬遠されているようです。 私は人員不足の時間帯を補う形で採用され、その時間がAさんと3～5時間二人勤務になることが多いです。 Aさん以外は店長含め皆さん良い方ばかりで、仕事内容・福利厚生など待遇は満足しているので、辞めたくないんです。 でもAさんと勤務時間がかぶる日はいつ触ってくるのかとストレスです。 直接嫌だと言っても店長から言ってもらうのも、気まずくなるのは目に見えてるし時間をズラすのも人員的にムリだと思います。 私が気にしすぎでしょうか？ 歳が近いのもあり親近感をもって接している、というのは感じるのですが。 触らせないようにする方法はないでしょうか。 小町の皆様の経験と知恵をお借りしたいです。