V dobách husitských válek byla těžba přerušena a další pokusy o obnovu v 16.–18. století nebyly úspěšné. Při obléhání Přibyslavi zemřel 11. října 1424 u vesnice Schönfeld (dnes Žižkovo Pole) vojevůdce Jan Žižka. Jeho bojovníci pak město dobyli, hrad vypálili a používali jej jako vojenskou základnu pro výpady na Moravu.