Remove duplicate check of hyps.IsSameSize(done_hyps).
Remove duplicate check of hyps.IsSameSize(done_hyps).

PiperOrigin-RevId: 398867311

tensorflow/lingvo,tensorflow/lingvo,tensorflow/lingvo,tensorflow/lingvo