転職すべきでしょうか？

以下の状況で転職すべきでしょうか？ 現職では適応障害のため管理職就任から3ヶ月ほどで降格を願い出て承認されました。仕事内容は特許調査で、１５０人位社員がいます。 １０年勤務して慣れ親しんだ環境ではあるという安心感はあるのですが、早期降格したことによる情けなさや周囲に迷惑かけることからの自責の念に耐えていけるかなど不安はあります。普段からネガティブな思考になりがちで、HSPの特性を有していて周囲の視線や会話、雰囲気に過敏なところがあります。 現在、小規模な特許事務所に内定を貰いました。特許調査専門という珍しい事務所で家からかなり近く２駅ほどのところにあります。面接や内定後面談をした感じだと所長も良い感じの人柄で指導熱心なように思います。年収は今の会社よりアップします。 懸念としては新しい環境、人間関係に馴染むのが苦手な傾向にあるところです。 今回の転職では所員4、５人で少人数だと転職者は目立ってしまうとも思うので不安は拭いきれません。46歳という年齢でもあり慎重になってなかなか腹を括れません。 ただ昨年7月に内定承諾してから今年の４月入社まで一年近く待って貰っている状況です。さらには今年の1月末には入社の意思を再確認されており今更内定辞退することは社会的なモラルに反すると感じてもいます。