退勤時間に納得できない

私の職場は家族経営で 社長、事務（娘さん）、社員（元・奥さん）で私と同じ立場のパートさんが1人です。 出勤（9:00）時間と退勤（15:00）時間を出勤した時に出勤表にいつも手書きしてるんですが 私が早退して14時30分に帰った時は赤字で14:30で直されてたので もう1人も今月は2日間早く帰った時の分が直されてるか気になって見たら直されてなくて、事務の人に聞きました。 すると社長と話してくれて今までなぁなぁになってた（前に勤めてたパート1人の方が14:50で帰っても15:00退勤にしていたこと）ので、次からは帰った時間に訂正することになりました。 しかし作業場で14時に「お先に失礼します」と言った後に、事務所で高校生の娘さんの学校が終わるまでの迎えを待ってる間の時間も入って14:40退勤はあまり納得できません。 昨年の9月から働き始めて何も不満に感じることがなかったので、どうにかして気持ちを切り替えたいのですが、社長が決めたことなので割り切るしかないでしょうか？