Como dizer "O árbitro engoliu o apito" em inglês

Geralmente no final do jogo, o árbitro não apita mais nada pra não se comprometer.
Ex.:
We hear the phrase "he (the ref) swallowed his whistle" when an official fails to make a call late in a game.

Also:
The ref left his whistle at home.
The ref forgot his whistle.
Or.
He left the cards at home.