打退堂鼓

原指封建官吏退堂時打鼓。現在比喻跟人共同做事中途退縮。