仕事上の付き合いについて...

昨年、離婚をした為に実家のある田舎に戻り、今の会社に１年ほど勤務をしている２０代後半女性です。 会社は社長を含め８名ほどの小さな会社で、女性は事務員の私一人です。 私の家庭状況は、実家の母と小学生の息子と三人暮らしです。 会社の社長から、頻繁に飲みに誘われる事について悩んでいます..。仕事と称し会社の飲み会に誘われます。男性８人の中で女性一人は本当に辛いです。皆下ネタが好きな中年男性のなかで飲み会に誘われても拷問の様にしか思えません。忘新年会以外は出たことがなく、子供を理由に何とかかわし続け、断りつづけましたが、ツチノコさんの都合に合わせるから、いつなら出れるの！と強制の様に言われ、さすがに断り続けるのにも疲れ、退職するしかないかと考えています。 仕事上の付き合いはどこまで必要なのでしょうか？私は仕事とプライベートは一緒にしたくないタイプなので、無理な事は無理とはっきり言えるのですが、それでも必要以上に誘われれば仕事上の付き合いは必要なのでしょうか？ アドバイス頂ければ感謝いたします。