Pacovská synagoga byla postavena nejpozději v roce 1823. Za války zdejší židovská komunita vlivem nacistické vyvražďovací politiky zanikla. Židovská obec proto v roce 1952 synagogu prodala státním lihovarům.