Ørkild Slot blev brændt ned af byens borgere i 1534 under Grevens Fejde, og som hævn plyndrede Johan Rantzaus lejetropper byen, så den aldrig siden kom på fode. Der er en lokalitet vest for byen som hedder Rantzausminde - det er næppe byens borgere der har stået for navngivningen.