20時が早いってのはそうだと思うけど仕事出るのが遅くなったのは自己責任でしょ
それは残業しないように計画して仕事すれば良いだけの話