仕事を5日目で休んでしまいました…

初めて投稿させていただきます。 30代女です。 最近パートに就きましたが、5日目にして体調不良で休んでしまいました。 清掃業務で覚える事は沢山ありますが、内容体力的に苦にはならないかなと感じていました。 が、先輩方の言葉にキツイものがあります。 人手が足りなく、早く仕事を覚えて欲しいとのことで初日から多くのことを教えてもらい、その度にメモを取ったりしていました。 それでもやはり次の日にはこれで合っているのか不安になりますので、前日に教えていただいた事の確認も含め、これはこうでよかったですか？と聞いたところ、 これは昨日教えたよね？と嫌な顔をされてしまいました。 聞かずに間違っても迷惑がかかると思いその都度確認させていただくんですが、毎回呆れ顔をされてしまいます。 先月地方に越してきたばかりで、周囲の方々は方言や訛りが強いのですが、元々私にも訛りはありますので聞き取れないという事はありません。 ですが「言葉わかる？通じないの？」とまで言われてしまいとてもショックでした。 3日目にして「上司にも言ったけどあなたは周りを見ていない。仕事が雑。ダメそうなら早めに言って」 とかなり憤慨した様子で言われてしまいました。 後に上司は「まだ3日目ですから。大丈夫ですよ」 と言ってくださいましたが…。 本当に言葉がわからないと思われているのか、私のすぐ近くで「何で引っ越してきた？あの子大丈夫なの？」と先輩方が話していた時もありました。 それでもせっかく採用させていただいたので、ミスをしてはいけない、何とか頑張ろうと思っていたのですが、5日目の今日体調を崩し休んでしまいました。 また嫌な顔をされたり呆れられたらと思うと不安で不安で… これ以上迷惑を掛けたくないので辞める事も視野に入れていますが、こんな短期間で辞めてもいいのでしょうか…。 私のメンタルが弱いだけでしょうか。